Pipeline流水線及流水線發布PHP項目

Jenkins的Pipeline流水線

主機名	IP地址	備注
Git	192.168.200.70	Git服務器
Jenkins	192.168.200.91	Jenkins服務器

cat /etc/redhat-release

uname -r

systemctl stop firewalld

systemctl disable firewalld

systemctl stop NetworkManager

systemctl disable NetworkManager

---

 

Pipeline流水線介紹

 

創建一個基於Pipeline流水線的項目

 

添加項目Git參數化構建

Git Parameter插件不支持流水線，版本過低

---

 

Pipeline腳本語法架構介紹

 

1. #Pipeline腳本語法架構
3. node （'slave節點名'） { #被操控的節點服務器
5. def 變量 #def可以進行變量聲明
7. stage（'階段名A'）{ #流水線階段一
8. 執行步驟A
9. 執行步驟B
10. 執行步驟C
11. }
13. stage（'階段名B'）{ #流水線階段二
14. 執行步驟A
15. 執行步驟B
16. 執行步驟C
17. }
19. stage（'階段名C'）{ #流水線階段三
20. 執行步驟A
21. 執行步驟B
22. 執行步驟C
23. }
24. }

圖片說明

 

流水線模板腳本

 

1. node {
2. def mvnHome
3. stage('Preparation') { // for display purposes
4. // Get some code from a GitHub repository
5. git 'https://github.com/jglick/simple-maven-project-with-tests.git'
6. // Get the Maven tool.
7. // ** NOTE: This 'M3' Maven tool must be configured
8. // ** in the global configuration.
9. mvnHome = tool 'M3'
10. }
11. stage('Build') {
12. // Run the maven build
13. if (isUnix()) {
14. sh "'${mvnHome}/bin/mvn' -Dmaven.test.failure.ignore clean package"
15. } else {
16. bat(/"${mvnHome}\bin\mvn" -Dmaven.test.failure.ignore clean package/)
17. }
18. }
19. stage('Results') {
20. junit '**/target/surefire-reports/TEST-*.xml'
21. archive 'target/*.jar'
22. }
23. }

 

1. node {
2. //def mvnHome
3. stage('checkout') { // for display purposes
4. checkout([$class: 'GitSCM', branches: [[name: '${branch}']],
5. doGenerateSubmoduleConfigurations: false,
6. extensions: [], submoduleCfg: [],
7. userRemoteConfigs: [[credentialsId: '9f98962f-1a82-4da1-8a0f-bc906e92d998',
8. url: 'git@192.168.200.70:/home/git/repos/app.git']]])
9. }
10. stage('maven Build') {
11. echo "maven build ..."
12. }
13. stage('deploy') {
14. echo "deploy..."
15. }
16. stage('test') {
17. echo "test..."
18. }
19. }

 

利用Pipeline Syntax，編寫Pipeline Script並構建

 

（1）進入Pipeline Syntax

 

1. node {
2. //def mvnHome
3. stage('checkout') { // for display purposes
5. }
6. stage('maven Build') {
7. echo "maven build ..."
8. }
9. stage('deploy') {
10. echo "deploy..."
11. }
12. stage('test') {
13. echo "test..."
14. }
15. }

圖片說明

 

（2）通過腳本代碼生成器，生成Pipeline腳本代碼

圖片說明

---

圖片說明

 

（3）將生成的代碼復制到流水線腳本相應步驟的stage函數里

 

1. checkout([$class: 'GitSCM', branches: [[name: '${branch}']], doGenerateSubmoduleConfigurations: false, extensions: [], submoduleCfg: [], userRemoteConfigs: [[credentialsId: '9f98962f-1a82-4da1-8a0f-bc906e92d998', url: 'git@192.168.200.70:/home/git/repos/app.git']]])

圖片說明

 

（4）開始構建Pipeline項目

---

---

圖片說明

 

（5）在Jenkins本地服務器查看拉取結果

cd /var/lib/jenkins/workspace

ls

 

從遠程倉庫下載Pipeline Script，並構建

 

（1）在Git服務器上創建一個存放Pipeline腳本的倉庫

su - git

cd /home/git/repos/

pwd

ls

mkdir jenkinsfile #創建存放Pipeline腳本的倉庫

cd jenkinsfile/

git --bare init #初始化倉庫

 

（2）在jenkins服務器上，往遠程倉庫提交一個Pipeline腳本。

mkdir /test

cd /test

git clone git@192.168.200.70:/home/git/repos/jenkinsfile

ls

cd jenkinsfile/

mkdir itemA

vim itemA/jenkinsfile

cat itemA/jenkinsfile

 

1. node {
2. //def mvnHome
3. stage('checkout') { // for display purposes
4. checkout([$class: 'GitSCM', branches: [[name: '${branch}']],
5. doGenerateSubmoduleConfigurations: false,
6. extensions: [], submoduleCfg: [],
7. userRemoteConfigs: [[credentialsId: '9f98962f-1a82-4da1-8a0f-bc906e92d998',
8. url: 'git@192.168.200.70:/home/git/repos/app.git']]])
9. }
10. stage('maven Build') {
11. echo "maven build ..."
12. }
13. stage('deploy') {
14. echo "deploy..."
15. }
16. stage('test') {
17. echo "test..."
18. }
19. }

 

將腳本推送到遠程倉庫的master分支

git add *

git commit -m "jenkinsfile"

git push -u origin master

 

（3）利用遠程倉庫里的Pipeline腳本，進行流水線的構建

圖片說明

---

---

 

（4）在jenkins服務器上查詢拉取代碼結果(之前清空過jenkins下的workspace工作目錄)

cd /var/lib/jenkins/workspace/

ls

cd A-PHP

 

項目案例一：Jenkins+Pipeline+Git+PHP博客項目流水線自動發布

---

主機名	IP地址	備注
Git	192.168.200.70	Git服務器
Jenkins	192.168.200.91	Jenkins服務器
Web	192.168.200.101	Web服務器

 

所有服務器進行如下操作

cat /etc/redhat-release

uname -r

systemctl stop firewalld

systemctl disable firewalld

systemctl stop NetworkManager

systemctl disable NetworkManager

 

創建一個Pipeline流水線項目並進行參數化構建

---

由於我們仍舊打算將pipeline腳本放在遠程Git倉庫里，因此我們需要從遠程Git倉庫拉取Pipeline腳本，所以，參數化構建不支持Git的參數化。我們只能使用字符結構的參數化構建。

---

圖片說明

 

下載用於自動化發布的PHP源碼wordpress源碼包，並上傳遠程git倉庫

 

在Git服務器上創建用於存放源碼的Git倉庫

hostname -I

cd /home/git/repos/

ls

mkdir wordpress

cd wordpress/

git --bare init

cd ..

ll

chown -R git.git wordpress

 

在jenkins服務器上，克隆創建好的遠程Git倉庫

mkdir /php-app

cd /php-app

git clone git@192.168.200.70:/home/git/repos/wordpress

ls

 

在jenkins服務器上，下載wordpres源代碼

鏈接：https://pan.baidu.com/s/1hGyd1xFuL0oPBsFeROuUYQ 
提取碼：tmgk --->wordpress百度雲下載地址

wget https://cn.wordpress.org/wordpress-4.9.4-zh_CN.tar.gz

cd /php-app/wordpress/

ls

tar xf wordpress-4.9.4-zh_CN.tar.gz

ls

mv wordpress-4.9.4-zh_CN.tar.gz /tmp/

ls

mv wordpress/* .

rm -rf wordpress/

ls

 

在jenkins上提交代碼到遠程Git倉庫

git add *

git commit -m "第一次提交"

git push -u origin master

 

設置分布式構建Web服務器的slave管理節點

我們計划利用分布式構建的方式，啟動pipeline的流水線項目發布 
slave管理節點就設置為需要用於發布項目的Web服務器

 

添加用於連接slave代理節點的SSH證書(上文已經設置過了)

 

添加並設置Web服務器的slave管理從節點

---

---

圖片說明

---

圖片說明

 

Web服務器slave從節點安裝java環境，並啟動jenkins的slave管理節點

鏈接：https://pan.baidu.com/s/1EXO2hSetnkapR29ojJIGTg 
提取碼：ixgn --->jdk百度雲下載地址

 

解壓安裝jdk

tar xf jdk-8u60-linux-x64.tar.gz -C /usr/local/

cd /usr/local

mv jdk1.8.0_60/ jdk

/usr/local/jdk/bin/java -version

 

配置java環境

sed -i.org '$a export JAVA_HOME=/usr/local/jdk/' /etc/profile

sed -i.org '$a export PATH=$PATH:$JAVA_HOME/bin' /etc/profile

sed -i.org '$a export CLASSPATH=.$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/lib/tools.jar' /etc/profile

tail -3 /etc/profile

source /etc/profile

java -version

 

重新啟動Slave從節點

圖片說明

 

Web服務器安裝LNMP環境，並手動拉取代碼模擬訪問

yum -y install epel-release

yum -y install nginx php-fpm php-mysql

---

 

修改nginx配置文件

cd /etc/nginx/

ls

cp nginx.conf{,.bak}

egrep -v "#|^$" nginx.conf.bak > nginx.conf

cat nginx.conf

 

1. user nginx;
2. worker_processes auto;
3. error_log /var/log/nginx/error.log;
4. pid /run/nginx.pid;
5. include /usr/share/nginx/modules/*.conf;
6. events {
7. worker_connections 1024;
8. }
9. http {
10. log_format main '$remote_addr - $remote_user [$time_local] "$request" '
11. '$status $body_bytes_sent "$http_referer" '
12. '"$http_user_agent" "$http_x_forwarded_for"';
13. access_log /var/log/nginx/access.log main;
14. sendfile on;
15. tcp_nopush on;
16. tcp_nodelay on;
17. keepalive_timeout 65;
18. types_hash_max_size 2048;
19. include /etc/nginx/mime.types;
20. default_type application/octet-stream;
21. include /etc/nginx/conf.d/*.conf; #include了一個配置文件目錄
22. server {
23. listen 80 default_server; #默認的server配置（如果用IP訪問就進入這個server）
24. listen [::]:80 default_server;
25. server_name _;
26. root /usr/share/nginx/html; #默認的網頁目錄
27. include /etc/nginx/default.d/*.conf;
28. location / {
29. }
30. error_page 404 /404.html;
31. location = /40x.html {
32. }
33. error_page 500 502 503 504 /50x.html;
34. location = /50x.html {
35. }
36. }
37. }

 

由於默認的配置文件include了/etc/nginx/conf.d/*.conf因此我們增加一個server配置文件即可

vim /etc/nginx/conf.d/wp.conf

cat /etc/nginx/conf.d/wp.conf

 

1. server {
2. listen 80;
3. server_name www.yunjisuan.com;
4. root /usr/share/nginx/html/www.yunjisuan.com;
5. location / {
6. index index.php index.html;
7. }
8. location ~\.php {
9. fastcgi_index index.php;
10. fastcgi_pass 127.0.0.1:9000;
11. include fastcgi.conf;
12. }
13. }

 

創建網頁目錄

cd /usr/share/nginx/html/

ls

mkdir www.yunjisuan.com

cd www.yunjisuan.com

ls

 

克隆Git倉庫代碼到本地網頁目錄

yum -y install git

git init

git clone git@192.168.200.70:/home/git/repos/wordpress

ls

mv wordpress/* .

ls

rm -rf wordpress/

---

 

將網頁目錄權限授權給apache程序用戶

cd ..

ll

id apache

chown -R apache.apache /usr/share/nginx/html/www.yunjisuan.com

 

啟動nginx服務和php-fpm服務

systemctl start nginx

systemctl start php-fpm

ss -antup | egrep "80|9000"

systemctl enable nginx

systemctl enable php-fpm

 

做好宿主機的域名映射后，瀏覽器訪問測試

 

在遠程Git倉庫中創建一個用於構建的Pipeline腳本

 

在jenkins服務器上進行如下操作

rm -rf /test

mkdir /test

cd /test

git clone git@192.168.200.70:/home/git/repos/jenkinsfile

ls

cd jenkinsfile/

ls

ls itemA/

 

通過流水線腳本生成器生成如下腳本內容

vim itemA/jenkinsfile-php-wp

cat itemA/jenkinsfile-php-wp

 

1. node ("PHP-slave1-192.168.200.101") {
2. stage('git checkout') {
3. checkout([$class: 'GitSCM',
4. branches: [[name: '${branch}']],
5. doGenerateSubmoduleConfigurations: false, extensions: [],
6. submoduleCfg: [], userRemoteConfigs: [[credentialsId: '9f98962f-1a82-4da1-8a0f-bc906e92d998',
7. url: 'git@192.168.200.70:/home/git/repos/wordpress']]])
8. }
9. stage('code copy') {
10. sh '''rm -rf ${WORKSPACE}/.git
11. [ -d /data/backup ] || mkdir -p /data/backup
12. mv /usr/share/nginx/html/www.yunjisuan.com /data/backup/www.yunjisuan.com-$(date +%F_%T)
13. cp -rf ${WORKSPACE} /usr/share/nginx/html/www.yunjisuan.com'''
14. }
15. stage('test') {
16. sh 'curl http://www.yunjisuan.com/status.html'
17. }
18. }

 

推送到Git遠程倉庫

git add *

git commit -m "xxx"

git push -u origin master

 

通過流水線腳本生成器生成的階段代碼示例（這里只生成了url部分，具體內容自定義）

---

---

---

---

 

在Web服務器上PHP項目代碼里增加Pipeline驗證用的測試頁面

 

在項目代碼里加入一個健康檢查測試頁面，並推送到遠程Git倉庫

cd /var/lib/jenkins

git clone git@192.168.200.192:/home/git/repos/wordpress

ls

cd wordpress/

ls

echo "OK-version V2.0" >> status.html

 

將測試用頁面提交到遠程Git倉庫

git add *

git commit -m "version V2.0"

git config --global user.email "112340"

git config --global user.name "Mr.sun"

git push -u origin master

 

在web服務器做域名映射（因為要進行curl驗證）

echo "`hostname -I` www.yunjisuan.com" >> /etc/hosts

cat /etc/hosts

 

瀏覽器訪問jenkins進行PHP項目流水線發布構建

---

---

圖片說明

 

流水線項目發布多節點需要注意的事項

所需要修改的部分如下

 

腳本需要在流水線腳本寫出多節點，比如

 

1. node ("PHP-slave1-192.168.200.101") {
2. stage('git checkout') {
3. checkout([$class: 'GitSCM',
4. branches: [[name: '${branch}']],
5. doGenerateSubmoduleConfigurations: false, extensions: [],
6. submoduleCfg: [], userRemoteConfigs: [[credentialsId: '9f98962f-1a82-4da1-8a0f-bc906e92d998',
7. url: 'git@192.168.200.70:/home/git/repos/wordpress']]])
8. }
9. stage('code copy') {
10. sh '''rm -rf ${WORKSPACE}/.git
11. [ -d /data/backup ] || mkdir -p /data/backup
12. mv /usr/share/nginx/html/www.yunjisuan.com /data/backup/www.yunjisuan.com-$(date +%F_%T)
13. cp -rf ${WORKSPACE} /usr/share/nginx/html/www.yunjisuan.com'''
14. }
15. stage('test 200.101-php') {
16. sh 'curl http://www.yunjisuan.com/status.html'
17. }
18. }
20. node ("PHP-slave1-192.168.200.xxx") {
21. stage('git checkout') {
22. checkout([$class: 'GitSCM',
23. branches: [[name: '${branch}']],
24. doGenerateSubmoduleConfigurations: false, extensions: [],
25. submoduleCfg: [], userRemoteConfigs: [[credentialsId: '9f98962f-1a82-4da1-8a0f-bc906e92d998',
26. url: 'git@192.168.200.70:/home/git/repos/wordpress']]])
27. }
28. stage('code copy') {
29. sh '''rm -rf ${WORKSPACE}/.git
30. [ -d /data/backup ] || mkdir -p /data/backup
31. mv /usr/share/nginx/html/www.yunjisuan.com /data/backup/www.yunjisuan.com-$(date +%F_%T)
32. cp -rf ${WORKSPACE} /usr/share/nginx/html/www.yunjisuan.com'''
33. }
34. stage('test' 200.xxx-php) {
35. sh 'curl http://www.yunjisuan.com/status.html'
36. }
37. }

 

假如是克隆的機器需要把hosts文件里的映射修改一下

 

在瀏覽器進入jenkins主用戶來添加新節點信息（有幾點節點就添加幾個）

 

所有的修改都完事以后，在進行構建測試就可以了

 

讓ssh支持流水線，需要安裝插件SSH Pipeline Steps

---

 

以ssh方式分發流水線腳本模板詳解

 

1. def remote = [:] #定義變量不需要改
2. remote.name = 'test' #遠程主機的名字
3. remote.host = 'test.domain.com' #遠程主機的IP
4. remote.user = 'root' #遠程主機的用戶
5. remote.password = 'password' #遠程主機的密碼
6. remote.allowAnyHosts = true #照着超就可以
7. stage('Remote SSH') { #階段名稱
8. writeFile file: 'abc.sh', text: 'ls -lrt' #把后面的命令,讓如abc.sh腳本里
9. sshScript remote: remote, script: "abc.sh" #把腳本分發自定義的主機
10. }

 

以ssh方式分發流水線腳本語法樣式

 

1. node ("PHP-slave1-192.168.200.101") {
2. def remote = [:]
3. remote.name = 'test'
4. remote.user = 'root'
5. remote.allowAnyHosts = true
6. stage('git checkout') {
7. sh `echo "`hostname -I`"`
8. checkout([$class: 'GitSCM',
9. branches: [[name: '${branch}']],
10. doGenerateSubmoduleConfigurations: false, extensions: [],
11. submoduleCfg: [], userRemoteConfigs: [[credentialsId: '9f98962f-1a82-4da1-8a0f-bc906e92d998',
12. url: 'git@192.168.200.70:/home/git/repos/wordpress']]])
13. }
14. stage('SSH 200.xxx') {
15. remote.host = '192.168.200.xxx'
16. remote.password = 'linyaonie'
17. writeFile file: 'ssh01.sh', text:'echo "`hostname -I`"'
18. sshScript remote:remote, script: "ssh01.sh"
19. }
20. stage('SSH 200.xxx') {
21. remote.host = '192.168.200.xxx'
22. remote.password = 'linyaonie'
23. writeFile file: 'ssh02.sh', text:```
24. echo "`hostname -I`"
25. echo "`hostname -I`"
26. echo "`hostname -I`"
27. ``` --->這里需要注意要定格寫
28. sshScript remote:remote, script: "ssh02.sh"
29. }
30. }

 

重新把新修過的內容添加到遠程倉庫並構建測試在查看logs日志的結果

git add *

git commit -m "測試SSH"

git push -u origin master

 

生產環境流水線自動項目發布思路