學習Jenkins(三)

  • 1、什麼是持續集成?

(1)Continuous integration(CI)php

持續集成是一種軟件開發實踐,即團隊開發成員常常集成他們的工做,一般每一個成員至少集成一次,也就意味着天天可能會發生屢次集成。每次集成都經過自動化的構建(包括編譯,發佈,自動化測試)來驗證,從而儘快地發現集成錯誤。許多團隊發現這個過程能夠大大減小集成的問題,讓團隊可以更快的開發內聚的軟件。html

(2)沒有持續集成java

項目作模塊集成的時候,發現不少藉口都不通==>浪費大量時間node

須要手動去編譯打包最新的代碼==>構建過程不透明mysql

發佈代碼,上線,基本靠手工==>腳本亂飛linux

 

(3)持續集成最佳實踐:nginx

維護一個單一的代碼庫git

使構建自動化程序員

執行測試是構建的一部分github

集成日誌及歷史記錄

使用統一的依賴包管理庫

天天至少集成一次

 

(4)jenkins介紹

Jenkins只是一個平臺,真正運做的都是插件。這就是jenkins流行的緣由,由於jenkins什麼插件都有 
Hudson是Jenkins的前身,是基於Java開發的一種持續集成工具,用於監控程序重複的工做,Hudson後來被收購,成爲商業版。後來創始人又寫了一個jenkins,jenkins在功能上遠遠超過hudson

Jenkins官網:https://jenkins.io/

 

(5)部署代碼上線流程:

1.代碼獲取(直接了拉取)

2.編譯 (可選)

3.配置文件放進去

4.打包

5.scp到目標服務器

6.將目標服務器移除集羣

7.解壓並放置到Webroot

8.Scp 差別文件

9.重啓 (可選)

10.測試

11.加入集羣

  • 2、jenkins部署

1)安裝JDK 
[root@linux-node2 ~]# yum instsall -y java-1.8.0-openjdk java-1.8.0-openjdk-devel
 
(2)下載jenkins的rpm包
[root@linux-node2 ~]# wget https://mirrors.tuna.tsinghua.edu.cn/jenkins/redhat-stable/jenkins-2.32.3-1.1.noarch.rpm
--2017-12-21 09:11:58--  https://mirrors.tuna.tsinghua.edu.cn/jenkins/redhat-stable/jenkins-2.32.3-1.1.noarch.rpm
正在解析主機 mirrors.tuna.tsinghua.edu.cn (mirrors.tuna.tsinghua.edu.cn)... 101.6.6.178, 2402:f000:1:416:101:6:6:177
正在鏈接 mirrors.tuna.tsinghua.edu.cn (mirrors.tuna.tsinghua.edu.cn)|101.6.6.178|:443... 已鏈接。
已發出 HTTP 請求,正在等待迴應... 200 OK
長度:69675984 (66M) [application/x-redhat-package-manager]
正在保存至: 「jenkins-2.32.3-1.1.noarch.rpm」
 
(3)安裝jenkins
[root@linux-node2 ~]# rpm -ivh jenkins-2.32.3-1.1.noarch.rpm 
警告:jenkins-2.32.3-1.1.noarch.rpm: 頭V4 DSA/SHA1 Signature, 密鑰 ID d50582e6: NOKEY
準備中...                          ################################# [100%]
正在升級/安裝...
   1:jenkins-2.32.3-1.1               ################################# [100%]
    
(4)啓動jenkins
[root@linux-node2 ~]# service jenkins start
Starting jenkins (via systemctl):                          [  肯定  ]
 
[root@linux-node2 ~]# netstat -tulnp|grep 8080
tcp6       0      0 :::8080                 :::*                    LISTEN      42160/java 
瀏覽器訪問:192.168.56.12:8080:如圖
[root@linux-node2 ~]# cat /var/lib/jenkins/secrets/initialAdminPassword
8addd06f53f6405da6133356af1ca3b0    #登錄界面有提示輸入密碼,初始密碼文件爲/var/lib/jenkins/secrets/initialAdminPassword
 
友情提示:jenkins若是跟gitlab在一臺服務器須要將jenkins的端口進行修改,須要將jenkins的8080修改成其餘端口

安裝全部插件:

安裝插件完成,設置用戶名:jenkins,密碼:jenkins

  • 3、jenkins的插件以及配置

Jenkins系統管理比較重要的就是插件管理了 ,由於jenkins的工做所有是由插件來完成。

在插件管理中,有可更新、可選插件、已安裝,平常的插件安裝都是在這個界面上完成的。好比爲了和gitlab協同,咱們須要安裝gitlab的插件。

在高級選項中,咱們能夠在jenkins官網下載插件,而後上傳插件 ,如圖:

 

由於不少插件須要×××才能夠繼續下載,jenkins還提供了代理的設置


仍是在服務器目錄下進行上傳插件

目錄路徑= /var/lib/jenkins/plugins/

這個目錄下是咱們安裝全部的插件

jenkins的目錄介紹:

[root@linux-node2 ~]# rpm -ql jenkins
/etc/init.d/jenkins                #jenkins的啓動文件
/etc/logrotate.d/jenkins
/etc/sysconfig/jenkins             #jenkins的配置文件
/usr/lib/jenkins                   
/usr/lib/jenkins/jenkins.war       #jenkins的程序war包
/usr/sbin/rcjenkins                #jenkins的爲二進制文件
/var/cache/jenkins                 #jenkins的程序文件,運行程序解壓出來的
/var/lib/jenkins                   #jenkins的主目錄
/var/log/jenkins                   #jenkins的日誌文件
 
jenkins的升級,只須要將war包解壓到/var/lib/jenkins目錄下,重啓jenkins便可。
 
友情提示:
卡啓動問題
jenkins在第一次安裝啓動時會向官網回傳信息,若是網絡離線能夠正常安裝。當網絡在線,可是
還有多是內存不足
 
備份:
tar zcvf jenkins.tar.gz /var/lib/jenkins

系統管理-->系統配置

執行者數量:配置併發數量,通常設置爲5,不超過10

用法:若是是主server,能夠不選,若是是從級別必須選擇「儘量的使用這個節點」

生成前等待時間:配置該時間,避免錯誤操做,有時間返回

  • 3、jenkins升級

1)查看war包所在的目錄
[root@linux-node2 ~]# rpm -ql jenkins
/etc/init.d/jenkins
/etc/logrotate.d/jenkins
/etc/sysconfig/jenkins
/usr/lib/jenkins
/usr/lib/jenkins/jenkins.war
/usr/sbin/rcjenkins
/var/cache/jenkins
/var/lib/jenkins
/var/log/jenkins
 
(2)下載最新穩定版的war包
[root@linux-node2 ~]# wget https://mirrors.tuna.tsinghua.edu.cn/jenkins/war/2.46/jenkins.war
--2017-12-21 14:56:10--  https://mirrors.tuna.tsinghua.edu.cn/jenkins/war/2.46/jenkins.war
Resolving mirrors.tuna.tsinghua.edu.cn (mirrors.tuna.tsinghua.edu.cn)... 101.6.6.178, 2402:f000:1:416:101:6:6:177
Connecting to mirrors.tuna.tsinghua.edu.cn (mirrors.tuna.tsinghua.edu.cn)|101.6.6.178|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: 68663046 (65M) [application/java-archive]
Saving to: ‘jenkins.war’
 
36% [====================================================>                                                                                               ] 24,829,614   707KB/s  eta 60s

當前jenkins版本爲2.32.2

3)中止jenkins服務
[root@linux-node2 ~]# service jenkins stop
Stopping jenkins (via systemctl):                          [  OK  ]
 
(4)備份原來的war包,並拷貝最新版本war包到/usr/lib/jenkins目錄下
[root@linux-node2 ~]# cd /usr/lib/jenkins/
[root@linux-node2 jenkins]# mv jenkins.war jenkins-2.32.2.war.bak
[root@linux-node2 jenkins]# mv /root/jenkins.war .
[root@linux-node2 jenkins]# service jenkins start
Starting jenkins (via systemctl):                          [  OK  ]
[root@linux-node2 jenkins]# netstat -tulnp |grep 8080
tcp6       0      0 :::8080                 :::*                    LISTEN      47298/java   
 
成功升級到jenkins 2.46版本

  • 4、jenkins備份

在jenkins界面建立一些項目,這裏使用rsync,主要是爲了保持備份的屬性,若是使用scp或cp有時會致使文件屬性的改變而致使jenkins異常。

1)建立備份目錄
[root@linux-node2 ~]# mkdir /data/backup/jenkins -p
 
(2)備份/var/lib/jenkins目錄
[root@linux-node2 ~]# rsync -raz --delete --progress /var/lib/jenkins /data/backup/jenkins/3)刪除/var/lib/jenkins/
[root@linux-node2 ~]# rm -rf /var/lib/jenkins/
 
[root@linux-node2 ~]# service jenkins restart
Restarting jenkins (via systemctl):  Job for jenkins.service failed because the control process exited with error code. See "systemctl status jenkins.service" and "journalctl -xe" for details.
                                                           [FAILED]
[root@linux-node2 ~]# service jenkins status
JENKINS_HOME directory does not exist: /var/lib/jenkins
 
(4)恢復備份
[root@linux-node2 ~]# rsync -raz --delete /data/backup/jenkins/jenkins /var/lib/
[root@linux-node2 ~]# service jenkins restart
Restarting jenkins (via systemctl):                        [  OK  ]

 #############################################################

  • 使用git+jenkins實現持續集成

Step1:構建一個自由風格的php-deploy

Step2:Gernal配置,丟棄舊的構建,防止jenkins構建較多以後變臃腫

 

Step3:源碼管理:這裏使用git插件,也可使用svn插件

 

將git路徑存在這裏還須要權限認證,不然會出現error 。
jenkins服務器上生成SSH-Key

[root@linux-node2 ~]# yum install -y git
[root@linux-node2 ~]# ssh-keygen 
Generating public/private rsa key pair.
Enter file in which to save the key (/root/.ssh/id_rsa): 
Created directory '/root/.ssh'.
Enter passphrase (empty for no passphrase): 
Enter same passphrase again: 
Your identification has been saved in /root/.ssh/id_rsa.
Your public key has been saved in /root/.ssh/id_rsa.pub.
The key fingerprint is:
SHA256:00FQjn5P6qAtok4BuE42TyfuNJnblzZ389XwKBhmHjY root@linux-node2
The key's randomart image is:
+---[RSA 2048]----+
|        .oo      |
|.        +       |
|o       . o      |
| o     . . .     |
|.+.o .  S E . .  |
|+ =.=    B O   +.|
| ..B    o + o ..o|
| .o = .B + o ..  |
| .o+ o+.+ o o.   |
+----[SHA256]-----+
[root@linux-node2 ~]# cat .ssh/id_rsa.pub 
ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQC+/XyUMNP5Wm63hhcACosVyRtmJxTSnT46HSKZ2PhduTHPIJcfhVTmeCk1zwO0fP8PmwXFf0+G9ki8CupE/+xcOy14TCqxNgvP8o514IjXOFV7SO1lnHKH3t0RfaFEloRZHnrgIcWiZrFvYRT/TFznWO86sfHPzlW6WF9elTqRURNR60bwv9C6iw4PpYjGVIST/SeGl75axtUjJr544jB5pEWtNZ09ktCKpPeFBvgCc9exdzOQuzaCXQrroNU0p6MB6KkoIOmpkN92cDPdg4EgBYDjwcl38FbXOq3N0QL8PT+IZpHBWFVEAZU2alI02H5NNUy9p2K/Br4NY3UvYZiP root@linux-node2

命令行測試添加ssh-key後可否正常拉取
[root@linux-node2 ~]# git clone git@192.168.56.11:java/app1.git
Cloning into 'app1'...
The authenticity of host '192.168.56.11 (192.168.56.11)' can't be established.
ECDSA key fingerprint is SHA256:p2lhKmsPQ6K+dWHHvbJg0GV+Ni9VM7vlViKrYsZLP1s.
ECDSA key fingerprint is MD5:22:14:1c:37:de:47:1c:4a:2f:88:b1:dc:e2:d0:02:17.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '192.168.56.11' (ECDSA) to the list of known hosts.
remote: Counting objects: 11, done.
remote: Compressing objects: 100% (7/7), done.
remote: Total 11 (delta 0), reused 11 (delta 0)
Receiving objects: 100% (11/11), done.
[root@linux-node2 ~]# ll
total 68048
-rw-------. 1 root root      948 Dec  3 01:26 anaconda-ks.cfg
drwxr-xr-x  3 root root       62 Dec 21 15:53 app1
-rw-r--r--  1 root root 69675984 Mar  2  2017 jenkins-2.32.3-1.1.noarch.rpm

而後保存,當即構建一次,會拉取master的代碼庫

點開能夠看到控制檯的輸出,如圖:

/var/lib/jenkins/workspace/php-deploy目錄用於存放代碼信息

[root@linux-node2 php-deploy]# ll
total 12
-rw-r--r-- 1 root root 28 Dec 21 16:11 index.html
-rw-r--r-- 1 root root 12 Dec 21 16:11 new.html
-rw-r--r-- 1 root root 19 Dec 21 16:11 readme
[root@linux-node2 php-deploy]# pwd
/var/lib/jenkins/workspace/php-deploy

這裏咱們拉取的代碼須要推送到遠程代碼目錄,須要以下操做:
架設linux-node1爲web服務,目錄爲/data/www/php-deploy 

[root@linux-node1 ~]# mkdir /data/www/php-deploy -p
添加node2的免祕鑰登錄
[root@linux-node1 ~]# vim .ssh/authorized_keys
[root@linux-node1 ~]# chmod 600 .ssh/authorized_keys 
[root@linux-node2 ~]# ssh 192.168.56.11
Last login: Mon Dec  4 17:41:56 2017 from 192.168.56.1
[root@linux-node1 ~]# 

修改項目設置,配置構建:Execute shell,至關於將代碼自動發佈到linux-node1的代碼目錄中。

接下來,咱們從新構建一次,並查看控制檯輸出:

在node1上查看目錄,也會有相應的代碼信息 

[root@linux-node1 ~]# ll /data/www/php-deploy/
total 12
-rw-r--r-- 1 root root 28 Dec 21 16:11 index.html
-rw-r--r-- 1 root root 12 Dec 21 16:11 new.html
-rw-r--r-- 1 root root 19 Dec 21 16:11 readme
[root@linux-node1 ~]# 

 #########################################################################

  • 1、什麼是Maven

maven是一個項目管理和綜合工具。Maven提供給開發人員構建一個完整的生命週期框架。

開發團隊能夠自動完成該項目的基礎設施建設,Maven使用標準的目錄結構和默認構建生命週期

maven是屬於Apache的開源項目

maven主要服務於java平臺的構建、依賴管理、項目管理。

  • 2、手動安裝MAVEN

1)下載maven
[root@linux-node2 ~]# wget http://mirrors.hust.edu.cn/apache/maven/maven-3/3.5.2/binaries/apache-maven-3.5.2-bin.tar.gz
2)解壓
[root@linux-node2 ~]# tar -zxvf apache-maven-3.5.2-bin.tar.gz #解壓便可使用
[root@linux-node2 ~]# mv apache-maven-3.5.2 /data/3)配置環境變量
[root@linux-node2 bin]# export PATH=$PATH:/data/apache-maven-3.5.2/bin
[root@linux-node2 bin]# vim /etc/profile
export PATH=$PATH:/data/apache-maven-3.5.2/bin

(4)測試
[root@linux-node2 ~]# mvn -v

Apache Maven 3.5.2 (138edd61fd100ec658bfa2d307c43b76940a5d7d; 2017-10-18T15:58:13+08:00)
Maven home: /data/apache-maven-3.5.2
Java version: 1.8.0_151, vendor: Oracle Corporation
Java home: /usr/lib/jvm/java-1.8.0-openjdk-1.8.0.151-1.b12.el7_4.x86_64/jre
Default locale: en_US, platform encoding: UTF-8
OS name: "linux", version: "3.10.0-693.5.2.el7.x86_64", arch: "amd64", family: "unix"
  • 3、POM文件解析

POM是研發給出的

Project Object Model,項目對象模型

經過xml格式保存的pom.xml文件

做用相似ant的build.xml文件,功能更強大

該文件用於管理:源代碼、配置文件、開發者的信息和角色、問題追蹤系統、組織信息、項目受權、項目的url、項目的依賴關係等等。

  • 4、配置系統MAVEN

系統管理-->Global Tool Configuration

新增maven

取消自動安裝

填寫maven實際安裝路徑/data/apache-maven-3.5.2

  • 4、新建maven項目

1)新建maven項目
(2)指定源碼文職(git或svn)
(3)指定build選項
clean install
clean install -Dmaven.test.skip=true4)指定execute shell
java -jar target/testweb-0.0.1-SNAPSHOT.jar

配置maven:

settings.xml是maven的主要配置文件
位置$home/.m2是maven下載的插件的存儲位置

(1)新建maven項目
新建一個項目,選擇構建一個maven項目。若是此處沒有「構建一個maven項目」的選項,須要安裝插件:Maven Integration Plugin

(2)指定源碼位置(git或svn)

(3)指定build選項
clean install
clean install -Dmaven.test.skip=true

(4)指定execute shell
java -jar target/testweb-0.0.1-SNAPSHOT.jar

 

(5)當即構建
這裏在構建的過程當中,可能會出現插件下載失敗,須要更改maven的插件源,編輯/data/apache-maven-3.5.2/conf/settings.xml

 

當即構建完成,能夠在/var/lib/jenkins/workspace/Java/下能夠看到拉取的代碼,咱們找到整個項目的的jar包並執行,能夠看到hello world

[root@linux-node2 target]# java -jar testweb-0.0.1-SNAPSHOT.jar 
Hello World! i am guo2
  • 5、將java的代碼發佈到linux-node1上

 (1)修改項目的Execte shell設置,再從新構建 

rsync -raz --delete --progress target/testweb-0.0.1-SNAPSHOT.jar 192.168.56.11:/opt/
ssh root@192.168.56.11 "java -jar /opt/testweb-0.0.1-SNAPSHOT.jar"

[root@linux-node1 ~]# ll /opt/
total 8
drwxr-xr-x 10 root root 4096 Dec  9 17:08 gitlab
-rw-r--r--  1 root root 2663 Dec 22 14:16 testweb-0.0.1-SNAPSHOT.jar

[root@linux-node1 ~]# java -jar /opt/testweb-0.0.1-SNAPSHOT.jar 
Hello World! i am guo2

到此一個maven項目就完成了!

  •  6、maven項目按版本發佈

1)安裝git parameter plugin插件

(2)任務配置中勾選<參數化構建>3)選擇git parameter

(4)建立變量名 release(自定義)

(5)選擇發佈類型:
tag:按標籤發佈
branch:按分支發佈
Revison:按修訂發佈

(1)安裝git parameter plugin插件

 

修改pom.xml中的版本改成v1.0

[root@linux-node2 testing]# vim pom.xml 

<version>v1.0</version>

[root@linux-node2 testing]# git status
# On branch master
# Changes not staged for commit:
#   (use "git add <file>..." to update what will be committed)
#   (use "git checkout -- <file>..." to discard changes in working directory)
#
#   modified:   pom.xml
#
no changes added to commit (use "git add" and/or "git commit -a")
[root@linux-node2 testing]# git add .
[root@linux-node2 testing]# git commit -m "v1.0"
[master eed5815] v1.0
 1 file changed, 1 insertion(+), 1 deletion(-)
[root@linux-node2 testing]# git push origin master
Counting objects: 5, done.
Compressing objects: 100% (3/3), done.
Writing objects: 100% (3/3), 281 bytes | 0 bytes/s, done.
Total 3 (delta 2), reused 0 (delta 0)
To git@192.168.56.11:java/Java.git
   37d2bd1..eed5815  master -> master

給Java項目中的版本修改後打上標籤

此時咱們再修改

[root@linux-node2 testing]# vim src/main/java/com/ghz/testweb/App.java 
package com.ghz.testweb;

/**
 * Hello world!
 *
 */
public class App
{
    public static void main( String[] args )
    {
        System.out.println( "Hello World! i am guo2 v1.0" );
    }
}
[root@linux-node2 testing]# git add .
[root@linux-node2 testing]# git commit -m "featrue1"
[master 6402300] featrue1
 1 file changed, 1 insertion(+), 1 deletion(-)
[root@linux-node2 testing]# git push origin master
Counting objects: 17, done.
Compressing objects: 100% (4/4), done.
Writing objects: 100% (9/9), 565 bytes | 0 bytes/s, done.
Total 9 (delta 2), reused 0 (delta 0)
To git@192.168.56.11:java/Java.git
   eed5815..6402300  master -> master

此時進行構建,因爲版本修改了,會報錯:

可是咱們每次進行版本的修改後若是都去修改excute shell就顯得太麻煩

(2)任務配置中勾選<參數化構建>

(3)選擇git parameter

(4)建立變量名 release(自定義)

 

修改源碼管理

 

(5)選擇發佈類型:
tag:按標籤發佈

(6)對代碼進行屢次修改,並提交

而後再代碼庫中對提交進行tag標記

再在jenkins中查看,便可按照不一樣的版本進行構建,如圖:

 

##############################################################3

  • 1、Jenkins的遠程管理

Jenkins的遠程管理方式包含:

Shell ssh

SSH Plugin

ansible、saltstack

(1)Shell ssh
在項目構建時,jenkins使用了Execute Shell直接對遠程主機操做,同步了代碼到主機192.168.56.11上,而且能夠增長對遠程機器進行操做。例如執行某個腳本:ssh root@192.168.53.11 "/bin/sh /data/scripts/****.sh "
如圖:

(2)SSH plugin
除了以上方法以外,還可使用SSH 的插件--SSH plugin
系統管理-->系統配置-->SSH remote hosts,配置好遠程主機

在項目中配置,如圖:

這樣就完成了對遠程主機的管理
此外,還可使用自動化工具,如ansible,saltstack,模式一致,只是用的是ansible或者是saltstack的命令行工具的不一樣。

  •  2、Jenkins集羣

當業務量變大時,單臺的jenkins進行自動化構建部署,就顯得沒那麼靈活,下面介紹jenkins的集羣功能。
jenkins的集羣並不是像web服務器,mysql集羣,jenkins的集羣無需在額外的主機安裝jenkins,可是用於java項目來講,要使用集羣功能,額外的主機就必需要安裝maven。

(1)在jenkins的web界面:系統管理-->Configure Global Security-->TCP port for JNLP agent配置端口30000

 

(2)系統管理-->管理節點-->新建節點

(3)分配任務到節點
在項目中配置:
General-->Restrict where this project can be run-->Label Expression:node-01

 

此時,在對項目進行構建,將會分配到node-01節點上進行構建,如圖:

############################################################################

  • 1、Jenkins按角色受權

當一個公司的開發分爲多個組別,或者是多個項目等等。用於公司內部測試,讓開發人員自行構建測試,此時不可能讓全部的開發都在公用一個構建,這樣變得很混亂,爲了解決這一問題,jenkins也提供了角色受權的機制。每一個開發有着對應的帳號和權限,能夠自行新建,構建,測試,發佈等。角色受權須要安裝的插件:Role-based Authorization Strategy

(1)系統配置
系統管理-->Configure Global Security-->訪問控制-->受權策略-->Role-Base Strategy

(2)新建用戶
系統管理-->管理用戶-->新建用戶
這裏建立一個java用戶和php用戶,用於區分php和java項目的構建

(3)用戶關聯本身相關job,沒法查看其餘的job

創建項目角色,並對該用戶進行項目的受權(包括Job的構建,取消,配置,建立,刪除等等)
注意此處的添加,一個是Role是隨意填寫,最好規範點。Pattern是正則匹配,好比此處匹配的是全部包含Java開頭的項目和php開頭的項目

系統管理-->Manage and Assign Roles --> Manage Roles-->Project roles

 

配置好項目的權限,使用java用戶或php用戶登陸是沒有新建項目的權限,如需新增這樣的權限,須要在Global roles中進行配置,新增一個角色(好比新增一個能夠建立新項目的權限角色:new job,可登陸查看的角色read):

 

 

 而後系統管理-->Manage and Assign Roles -->Assign Roles進行添加對應的權限

使用php登陸查看,能夠看到php用戶能夠看到對應php開頭的項目,可是沒有新建項目的權限:

  • 2、Jenkins的Pipeline(代碼流水線管理)

Pipeline(代碼流水線管理)

Pipeline名詞顧名思義就是流水線的意思,由於公司可能會有不少項目。若是使用jenkins構建完成後,開發構建項目須要一項一項點擊,比較麻煩。因此出現pipeline名詞。

(1)下載pipeline。這樣只須要構建一個項目,就會幫咱們完成全部相關項目

搜索插件pipeline 

等待安裝完成 

 

(2)新建一個pipeline的項目

 

配置pipeline項目,使用Pipeline script腳本: 

node {
    stage 'build php-deploy'
    build 'php-deploy'
    stage 'build java'
    build 'java'
}

爲了解決各個項目的依賴關係關係,使用pipeline的腳本進行控制。
第一步構建php項目,第二步構建java項目。Pipeline的腳本語法在Pipeline Syntax中有展現

Pipeline Syntax的使用,如圖:

 

當即構建p1的項目,如圖:

 

代碼流水線的功能就介紹到此!

###############################################################

思路圖:

  • 1、下載gitlab plugin

jenkins-->系統管理-->管理插件-->下載並安裝gitlab plugin

  • 2、配置gitlab認證

路徑:Jenkins-->Credentials-->System-->Global credentials(unrestricted)-->Add Credentials

一、Kind選擇Gitlab API token

二、其中API token填寫gitlab中有庫權限的帳號

三、ID填寫用戶帳號

gitlab生成Api token,將生成的token填入上面的證書內。

 

 

  • 3、選擇鏈接

路徑:系統管理-->系統設置

一、填寫鏈接名

二、填寫gitlab訪問URL

三、選擇gitlab認證

三、測試鏈接

  • 4、配置任務在job配置中選擇gitlab connection:gitlab

 

  • 5、任務配置

在job配置界面

一、勾選 Build when a change is pushed to GitLab. GitLab CI Service URL: http://192.168.56.12:8080/project/php-deploy

二、選擇push events 時間觸發構建

三、選擇分支過濾(此處能夠根據不一樣的需求來使用過濾功能)

四、secret token須要填入gitlab項目中的webhook

在gitlab中找到項目-->setting-->Integrations配置

填寫在上圖生成的連接:

URL:http://192.168.56.12:8080/project/php-deploy

Secret Token:3f199086a22c54957579966e34ad120a

點擊Add webhook

測試是否生效:點擊test-->選擇push event會跳轉到Hook excuted successfully:HTTP 200

 

  • 6、構建發佈PHP項目

在linux-node1上安裝nginx,初始同步了線上代碼,寫入一個index.html。如圖: 

[root@linux-node1 ~]# ll /data/www/php-deploy/
total 12
-rw-r--r-- 1 root root 28 Dec 23 15:45 index.html
-rw-r--r-- 1 root root 12 Dec 21 16:11 new.html
-rw-r--r-- 1 root root 19 Dec 21 16:11 readme
[root@linux-node1 ~]# cat /data/www/php-deploy/index.html 
<h1>welcome to beijing</h1>

模擬程序員在linux-node2上進行修改代碼,並提交到gitlab的master分支上

[root@linux-node2 app1]# pwd
/root/php/app1
[root@linux-node2 app1]# echo "Welcome to use Jenkins and Gitlab" > index.html 
[root@linux-node2 app1]# git status
# On branch master
# Changes not staged for commit:
#   (use "git add <file>..." to update what will be committed)
#   (use "git checkout -- <file>..." to discard changes in working directory)
#
#modified:   index.html
#
no changes added to commit (use "git add" and/or "git commit -a")
[root@linux-node2 app1]# git add .
[root@linux-node2 app1]# git commit -m "jenkins + gitlab"
[master 7313bdd] jenkins + gitlab
 1 file changed, 1 insertion(+), 1 deletion(-)
[root@linux-node2 app1]# git push origin master
Counting objects: 5, done.
Compressing objects: 100% (2/2), done.
Writing objects: 100% (3/3), 334 bytes | 0 bytes/s, done.
Total 3 (delta 0), reused 0 (delta 0)
To git@192.168.56.11:java/app1.git
   dd37af6..7313bdd  master -> master

到此,自動觸發和發佈就完成了!這只是一個簡單的構建發佈,做爲內部測試使用仍是能夠的!生產使用,有待優化!

######################################################################

  • 一、什麼是Nexus?

在前面進行maven項目的構建中,能夠看到在構建的過程當中須要安裝maven的依賴插件,如圖:image.png

而在maven的默認配置中是在官網的中央倉庫和第三方的maven倉庫進行下載,速度偏慢。這裏提供阿里雲的maven插件庫(http://maven.aliyun.com/nexus/#view-repositories),能夠在/data/apache-maven-3.5.2/conf/settings.xml 配置文件中進行修改。

 

在平常的開發構建中,咱們也能夠本身搭建一個私有的nexus。那麼什麼是nexus呢?

Nexus是maven的私有倉庫;

若是沒有nexus,項目的打包都須要在公網下載,不利於包的管理和共用;

若是沒有私有倉庫,咱們所須要的全部構件都須要經過maven的中央倉庫和第三方的maven倉庫下載到本地,而一個團隊的全部人都須要重複地從maven倉庫中下載構件。

  • 二、Nexus的安裝

1)下載Nexus
[root@linux-node2 ~]# wget https://sonatype-download.global.ssl.fastly.net/nexus/oss/nexus-2.14.5-02-bundle.tar.gz
--2017-12-25 10:45:42--  https://sonatype-download.global.ssl.fastly.net/nexus/oss/nexus-2.14.5-02-bundle.tar.gz
Resolving sonatype-download.global.ssl.fastly.net (sonatype-download.global.ssl.fastly.net)... 151.101.228.249
Connecting to sonatype-download.global.ssl.fastly.net (sonatype-download.global.ssl.fastly.net)|151.101.228.249|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: 73187012 (70M) [application/octet-stream]
Saving to: ‘nexus-2.14.5-02-bundle.tar.gz’
 5% [=======>                                                                                                                                            ] 4,375,805   76.4KB/s  eta 12m 59s
 
(2)解壓Nexus
[root@linux-node2 ~]# tar -zxvf nexus-2.14.5-02-bundle.tar.gz
[root@linux-node2 ~]# mv nexus-2.14.5-02 sonatype-work /data/3)啓動Nexus
[root@linux-node2 ~]# cd /data/nexus-2.14.5-02
[root@linux-node2 nexus-2.14.5-02]# ls
bin  conf  lib  LICENSE.txt  logs  nexus  NOTICE.txt  tmp
[root@linux-node2 nexus-2.14.5-02]# cd bin/
[root@linux-node2 bin]# ./nexus start
****************************************
WARNING - NOT RECOMMENDED TO RUN AS ROOT
****************************************
If you insist running as root, then set the environment variable RUN_AS_USER=root before running this script.
[root@linux-node2 bin]# export RUN_AS_USER=root
[root@linux-node2 bin]# ./nexus start
****************************************
WARNING - NOT RECOMMENDED TO RUN AS ROOT
****************************************
Starting Nexus OSS...
Started Nexus OSS.
[root@linux-node2 bin]# netstat -tulnp |grep 8081
tcp        0      0 0.0.0.0:8081            0.0.0.0:*               LISTEN      4773/java

(4)瀏覽器訪問倉庫
瀏覽器訪問:http://192.168.56.12:8081/nexus,如圖:

點擊右上角"login" 默認用戶名密碼:admin ,admin123

在倉庫中,默認會在本地去查找插件,當未發現有插件時,會經過第三方倉庫查到,這些倉庫的類型都是hosts類型,也就是在本機進行查詢。

當本地內未能查找到相應的插件,會經過代理(proxy)類型進行下載插件,配置就在Central——>Remote Storage    Location(回源地址),這裏咱們填寫阿里雲的maven遠程倉庫進行下載

http://maven.aliyun.com/nexus/content/groups/public/

配置完成nexus後,在修改maven的settings配置

[root@linux-node2 ~]# vim /data/apache-maven-3.5.2/conf/settings.xml 
將其中的倉庫連接地址修改成:
http://192.168.56.12:8081/nexus/content/groups/public/

這樣在構建時,首次會從阿里雲的maven倉庫中下載插件,後面再次從新下載插件時會從本地進行下載

#########################################################################

  • 1、新建一臺虛擬機安裝tomcat

1)安裝JDK
官網下載jdk:http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html
下載jdk8,放到/usr/local/src/目錄下
[root@linux-node3 ~]# tar -zxvf jdk-8u151-linux-x64.tar.gz
[root@linux-node3 ~]# mv jdk1.8.0_151 /usr/local/jdk1.8
[root@linux-node3 ~]# vim /etc/profile
增長以下內容:
JAVA_HOME=/usr/local/jdk1.8/
JAVA_BIN=/usr/local/jdk1.8/bin
JRE_HOME=/usr/local/jdk1.8/jre
PATH=$PATH:/usr/local/jdk1.8/bin:/usr/local/jdk1.8/jre/bin
CLASSPATH=/usr/local/jdk1.8/jre/lib:/usr/local/jdk1.8/lib:/usr/local/jdk1.8/jre/lib/charsets.jar
[root@linux-node3 ~]# source /etc/profile
[root@linux-node3 ~]# java -version
java version "1.8.0_151"
Java(TM) SE Runtime Environment (build 1.8.0_151-b12)
Java HotSpot(TM) 64-Bit Server VM (build 25.151-b12, mixed mode)
 
(2)安裝tomcat
[root@linux-node3 ~]# wget http://apache.fayea.com/tomcat/tomcat-8/v8.5.20/bin/apache-tomcat-8.5.20.tar.gz
[root@linux-node3 ~]# tar -zxvf apache-tomcat-8.5.24.tar.gz 
[root@linux-node3 ~]# mv apache-tomcat-8.5.24 /usr/local/tomcat
[root@linux-node3 ~]# /usr/local/tomcat/bin/startup.sh 
[root@linux-node3 ~]# netstat -tulnp |grep 8080
tcp6       0      0 :::8080                 :::*                    LISTEN      3765/java 
 
提示:三個端口8080爲提供web服務的端口,8005爲管理端口,8009端口爲第三方服務調用的端口,好比httpd和Tomcat結合時會用到
 
(3)配置tomcat
[root@linux-node3 ~]# vim /usr/local/tomcat/conf/tomcat-users.xml 
<tomcat-users>
<role rolename="admin"/>
<role rolename="admin-gui"/>
<role rolename="admin-script"/>
<role rolename="manager"/>
<role rolename="manager-gui"/>
<role rolename="manager-script"/>
<role rolename="manager-jmx"/>
<role rolename="manager-status"/>
<user name="admin" password="admin123456" roles="admin,manager,admin-gui,admin-script,manager-gui,manager-script,manager-jmx,manager-status" />
</tomcat-users>
[root@linux-node3 ~]# /usr/local/tomcat/bin/shutdown.sh 
[root@linux-node3 ~]# /usr/local/tomcat/bin/startup.sh 
 
在訪問tomcat時,點擊"manager webapp"會跳出一個驗證彈框,輸入用戶名密碼

會跳轉到如下界面,說明用戶名密碼無誤,如圖:

 

  • 2、下載zrlog的java代碼push到gitlab上 

1)下載zrlog的代碼
[root@linux-node2 home]# wget https://codeload.github.com/94fzb/zrlog/zip/master
--2017-12-25 11:02:45--  https://codeload.github.com/94fzb/zrlog/zip/master
Resolving codeload.github.com (codeload.github.com)... 192.30.255.121, 192.30.255.120
Connecting to codeload.github.com (codeload.github.com)|192.30.255.121|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: unspecified [application/zip]
Saving to: ‘master’
    [                                      <=>   ] 1,669,502    199KB/s   in 8.6s   
2017-12-25 11:02:56 (189 KB/s) - ‘master’ saved [1669502]
[root@linux-node2 home]# du -sh
1.7M.
[root@linux-node2 home]# du -sh master
1.6Mmaster
 
(2)解壓
[root@linux-node2 home]# yum install -y unzip
[root@linux-node2 home]# unzip master
 
(3)初始化倉庫,並將zrlog的代碼push到gitlab
[root@linux-node2 home]# mkdir Java
[root@linux-node2 Java]# mv zrlog-master/* Java/
[root@linux-node2 Java]# git remote add orgin git@192.168.56.11:java/zrlog.git
[root@linux-node2 Java]# git add .
[root@linux-node2 Java]# git commit -m "add origin"
# On branch master
nothing to commit, working directory clean
[root@linux-node2 Java]# ll
total 48
drwxr-xr-x 2 root root 55 Dec 25 17:45 bin
-rw-r--r-- 1 root root 6114 Dec 25 17:45 CHANGELOG.md
drwxr-xr-x 2 root root 42 Dec 25 17:45 doc
-rw-r--r-- 1 root root 11358 Dec 25 17:45 LICENSE
-rwxr-xr-x 1 root root 6468 Dec 25 17:45 mvnw
-rw-r--r-- 1 root root 4994 Dec 25 17:45 mvnw.cmd
-rw-r--r-- 1 root root 7664 Dec 25 17:45 pom.xml
-rw-r--r-- 1 root root 3574 Dec 25 17:45 README.md
drwxr-xr-x 4 root root 28 Dec 25 17:45 src
[root@linux-node2 Java]# git push origin master
Counting objects: 457, done.
Compressing objects: 100% (426/426), done.
Writing objects: 100% (457/457), 2.98 MiB | 1.72 MiB/s, done.
Total 457 (delta 51), reused 0 (delta 0)
remote: Resolving deltas: 100% (51/51), done.
To git@192.168.56.11:java/zrlog.git
* [new branch] master -> master
  • 3、新建一個maven項目zr_blog

(1)新建項目

登陸jenkins,點擊「新建」,任務名稱自定義(zr_blog)

選擇「構建一個maven項目」

點擊「肯定」

(2)配置項目

源碼管理

選擇 「git」, Repository URL填寫你的git地址,並配置對應的key,你們最好事前先在jenkins這臺機器上可以直接遠程git操做私有倉庫

 構建觸發器、構建環境、Pre Steps保持默認

 Build

「Root POM」爲pom.xml, Goals and options 填寫 clean install -D maven.test.skip=true

 Post Steps、構建設置保持默認

 構建後操做

 點擊「增長構建後操做步驟」選擇「Deploy war/ear to a container」,「WAR/EAR files」填寫「**/*.war」,Contex path留空,Containers選擇Tomcat 8.x,Tomcat URL填寫要把war包發佈到的那臺機器的url,如http://192.168.56.13:8080

 Credentials這裏須要點擊右側的Add,添加用戶名和密碼

 

點擊"當即構建"查看控制檯信息,如圖:

 

(3)查看發佈結果

查看linux-node3的webapps目錄,會有相對應的war包,並已經進行解壓,使用瀏覽器訪問

[root@linux-node3 ~]# ll /usr/local/tomcat/webapps/
total 7160
drwxr-x--- 14 root root    4096 Dec 25 03:08 docs
drwxr-x---  6 root root    4096 Dec 25 03:08 examples
drwxr-x---  5 root root    4096 Dec 25 03:08 host-manager
drwxr-x---  6 root root    4096 Dec 25 04:05 manager
drwxr-x---  3 root root    4096 Dec 25 03:08 ROOT
drwxr-x---  9 root root    4096 Dec 25 04:04 zrlog-1.8.0
-rw-r-----  1 root root 7306944 Dec 25 04:04 zrlog-1.8.0.war

 ###########################################################################

1、環境說明和準備

一、環境說明

主機名 IP地址 角色 系統
deploy-server 192.168.56.12 發佈 Centos 7.4
web 192.168.56.13 web服務器,nfs服務器 Centos 7.4

二、服務器準備工做

(1)發佈機前期準備

a.增長普通用戶並配置密碼
[root@deploy-server ~]# useradd www
[root@deploy-server ~]# id www
uid=1000(www) gid=1000(www) groups=1000(www)
[root@deploy-server ~]# passwd www
[root@deploy-server ~]# yum install -y git tree
b.建立部署須要的目錄並初始化git目錄
[root@deploy-server ~]# mkdir -pv /deploy/{code/{www,jxs,wap,gys,glzx,yyzx},config,tar,tmp}
[root@deploy-server ~]# chown -R www.www /deploy
[www@deploy-server ~]$ tree /deploy
/deploy
├── code
│   ├── glzx
│   ├── gys
│   ├── jxs
│   ├── wap
│   ├── www
│   └── yyzx
├── config
├── tar
└── tmp
[www@deploy-server ~]$ cd /deploy/code/www && git init
c.建立配置文件config.php
[www@deploy-server ~]$ vim /deploy/config/config.php 
this is config.php
[www@deploy-server ~]$ tree /deploy
/deploy
├── code
│   ├── glzx
│   ├── gys
│   ├── jxs
│   ├── wap
│   ├── www
│   └── yyzx
├── config
│   └── config.php
├── tar
└── tmp
d.配置發佈機和目標機的ssh通訊
[www@deploy-server deploy]$ cat /home/www/.ssh/id_rsa.pub 
ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQDzM3AW6/X+djvKJTsdFbY3ik+mlradxpD3COoTP5h6x509unksuCdduV7awPjEGHvK2GVjJmvckxdvLkMc23p7bsctHlturPN2VozJTrYwXMAbmxf97cKE/fpKhjPXG8HlWBLpEaTM8PITgvdcyaeAUaIN+/h5VrA8TZKFAgbxDLxtgwqPzYIG9nqCO7MMCgzhJxI6PDQ6KVU9rHal/p4XKTIy4Rq4FzZTav2tS4zNJ7kX9+e6EO0JTooPanJXBTltLOJJsKxnlA7tc20rq6+0XVqbUBKYahL/8ZzkxZozNrNq7wtIuuJo0WTDFzDdPcJyAGlRWLuwct7y4p4UApVz www@deploy-server

[www@deploy-server ~]$ ssh-copy-id www@192.168.56.13
/bin/ssh-copy-id: INFO: Source of key(s) to be installed: "/home/www/.ssh/id_rsa.pub"
The authenticity of host '192.168.56.13 (192.168.56.13)' can't be established.
ECDSA key fingerprint is SHA256:ahG6dBy/Z1nUIUWhQQrylsiwBlnDKC/jz8rnaPU2eF0.
ECDSA key fingerprint is MD5:6e:58:0b:02:1c:a4:41:51:e8:7d:33:4d:46:bb:a0:68.
Are you sure you want to continue connecting (yes/no)? yes
/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
www@192.168.56.13's password: 

Number of key(s) added: 1

Now try logging into the machine, with:   "ssh 'www@192.168.56.13'"
and check to make sure that only the key(s) you wanted were added.

[www@deploy-server ~]$ ssh 192.168.56.13
Last login: Fri Nov  2 18:01:02 2018
[www@web ~]$
e.將ssh公鑰複製到github或gitlab

(2)web服務器準備

a.部署NFS服務器
[root@web ~]# yum install -y nfs-utils rpcbind
[root@web ~]# vim /etc/exports
/nas/www 192.168.56.0/24(rw,sync,no_root_squash)
/nas/jxs 192.168.56.0/24(rw,sync,no_root_squash)
/nas/wap 192.168.56.0/24(rw,sync,no_root_squash)
/nas/glzx 192.168.56.0/24(rw,sync,no_root_squash)
/nas/yyzx 192.168.56.0/24(rw,sync,no_root_squash)
/nas/gys 192.168.56.0/24(rw,sync,no_root_squash)
[root@web ~]# systemctl start rpcbind
[root@web ~]# systemctl start nfs
[root@web ~]# showmount -e
Export list for web:
/nas/gys  192.168.56.0/24
/nas/yyzx 192.168.56.0/24
/nas/glzx 192.168.56.0/24
/nas/wap  192.168.56.0/24
/nas/jxs  192.168.56.0/24
/nas/www  192.168.56.0/24
b.掛載共享目錄
[root@web ~]# mkdir /webroot/{www,jxs,wap,gys,glzx,yyzx}
[root@web ~]# chown -R www.www /webroot
[root@web ~]# mount -f nfs 192.168.56.13:/nas/www /webroot/www
[root@web ~]# df -h
Filesystem               Size  Used Avail Use% Mounted on
/dev/mapper/centos-root 18G 1.7G 16G 10% /
devtmpfs                 482M     0  482M   0% /dev
tmpfs                    493M     0  493M   0% /dev/shm
tmpfs                    493M  6.8M  486M   2% /run
tmpfs                    493M     0  493M   0% /sys/fs/cgroup
/dev/sda1                497M  171M  326M  35% /boot
tmpfs                     99M     0   99M   0% /run/user/0
192.168.56.13:/nas/www    18G  1.7G   16G  10% /webroot/www
c.部署nginx+php
[root@web ~]# useradd www
[root@web ~]# passwd www
[root@web ~]# yum install -y nginx php php-fpm
[root@web ~]# vim /etc/nginx/nginx.conf
user www;
worker_processes auto;
error_log /var/log/nginx/error.log;
pid /run/nginx.pid;

# Load dynamic modules. See /usr/share/nginx/README.dynamic.
include /usr/share/nginx/modules/*.conf;

events {
    worker_connections 1024;
}

http {
    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';

    access_log  /var/log/nginx/access.log  main;

    sendfile            on;
    tcp_nopush          on;
    tcp_nodelay         on;
    keepalive_timeout   65;
    types_hash_max_size 2048;

    include             /etc/nginx/mime.types;
    default_type        application/octet-stream;

    # Load modular configuration files from the /etc/nginx/conf.d directory.
    # See http://nginx.org/en/docs/ngx_core_module.html#include
    # for more information.
    include /etc/nginx/conf.d/*.conf;


}
[root@web ~]# mkdir /data/web -pv && chown -R www.www /data
[root@web ~]# vim /etc/nginx/nginx.conf
server {
        listen 80;
        server_name  localhost;

        root /data/web/www;
        index index.php index.htm index.html;
        client_max_body_size 20m;
        location / {
                proxy_read_timeout 150;
                try_files $uri $uri/ /index.php; } location ~* .*\.php$ { #try_files $uri =404; include fastcgi_params; fastcgi_pass 127.0.0.1:9000; fastcgi_split_path_info ^(.+\.php)(/.+)$;
                fastcgi_param PATH_INFO       $fastcgi_path_info;
                fastcgi_index index.php;
                fastcgi_param SCRIPT_FILENAME $document_root$fastcgi_script_name;
        }
}
[root@web ~]# nginx -t
nginx: the configuration file /etc/nginx/nginx.conf syntax is ok
nginx: configuration file /etc/nginx/nginx.conf test is successful
[root@web ~]# systemctl start nginx
[root@web ~]# vim /etc/php-fpm.d/www.conf 
user www
group www
....
[root@web ~]# php-fpm -t
[03-Nov-2018 10:16:18] NOTICE: configuration file /etc/php-fpm.conf test is successful
[root@web ~]# systemctl start php-fpm
[root@web ~]# curl localhost -I
HTTP/1.1 200 OK
Server: nginx/1.12.2
Date: Sat, 03 Nov 2018 02:16:36 GMT
Content-Type: text/html
Content-Length: 35
Last-Modified: Sat, 03 Nov 2018 02:07:00 GMT
Connection: keep-alive
ETag: "5bdd02c4-23"
Accept-Ranges: bytes

2、發佈腳本編寫

一、自動化部署流程設計

  1. 發佈機獲取代碼(直接拉取),從svn或git倉庫進行拉取
  2. 發佈機編譯代碼(可選,java語言須要編譯,PHP無需編譯)
  3. 將配置文件拷貝到代碼文件(因爲配置文件有數據庫等機密信息,須要獨立處理)
  4. 代碼打包(將代碼進行壓縮打包)
  5. SCP到目標服務器目錄
  6. 將目標服務器移除集羣
  7. 在目標服務器上進行解壓傳過來的代碼
  8. 解壓後,對代碼根目錄進行軟連接到剛纔的目錄文件,實現版本連接
  9. 重啓(可選,tomcat須要重啓)
  10. 測試
  11. 加入集羣

二、自動化部署腳本編寫

#!/bin/bash 
#deploy-server create dir as root
#[ -d /deploy ] && mkdir -pv /deploy/{code/web-demo,config,tar,tmp} && chown -R www.www /deploy

#node-server create dir as root
#[ -d /data ] && mkdir -pv /data/web && chown -R www.www /data
#nfs dir /nas/www mount to /webroot

#Node List
NODE="192.168.56.13"

#Shell ENV
SHELL_NAME="deploy.sh"
SHELL_DIR="/home/www"
SHELL_LOG="${SHELL_DIR}/${SHELL_NAME}.log"

#Code ENV
PRO_NAME="www"
CODE_DIR="/deploy/code/www"
CONFIG_DIR="/deploy/config"
TMP_DIR="/deploy/tmp"
TAR_DIR="deploy/tar"
LOCK_FILE="/tmp/deploy.lock"

#Date/Time ENV
LOG_DATE='date "+%Y-%m-%d"'
LOG_TIME='date "+%H-%M-%S"'

CDATE=$(date "+%Y-%m-%d")
CTIME=$(date "+%H-%M-%S")

useage(){
    echo $"Useage: $0 { deploy |rollback [ list | version ] }"
}

url_test(){
    URL=$1
    curl -s --head $URL |grep '200 OK'
    if [ $? -ne 0 ];then
        shell_unlock;
        writelog "test error" && exit;
    fi
}

writelog(){
    LOGINFO=$1
    echo "${CDATE} ${CTIME}: ${SHELL_NAME} : ${LOGINFO} " >> ${SHELL_LOG}
}

code_get(){
    writelog "code_get";
    cd ${CODE_DIR} && git pull git@github.com:kin08200/learngit.git
    cp -r ${CODE_DIR} ${TMP_DIR}
    API_VERL=$(git show |grep commit |cut -d ' ' -f2 )
        API_VER=$(echo ${API_VERL:0:6})
    echo $API_VER
}

code_config(){
    writelog "code_config"
    /bin/cp -r ${CONFIG_DIR}/* ${TMP_DIR}/${PRO_NAME}
        PKG_NAME=${PRO_NAME}_"${API_VER}"_"${CDATE}-${CTIME}"
        cd ${TMP_DIR} && mv ${PRO_NAME} ${PKG_NAME}
}

code_tar(){
    writelog "code_tar"
    cd ${TMP_DIR} && tar -czf ${PKG_NAME}.tar.gz ${PKG_NAME}
        writelog "${PKG_NAME}.tar.gz"
}

code_scp(){
    writelog "code_scp"
    scp ${TMP_DIR}/${PKG_NAME}.tar.gz $NODE:/webroot/www
}

code_deploy(){
    writelog "code_deploy"
    ssh $NODE "cd /webroot/www && tar -zxf ${PKG_NAME}.tar.gz"
    ssh $NODE "rm -rf /data/web/www && ln -s /webroot/www/${PKG_NAME} /data/web/www"
}

code_test(){
    url_test "http://192.168.56.13"
}

rollback_fun(){
    ssh $NODE "rm -rf /data/web/www && ln -s /webroot/www/$1 /data/web/www"   
}

rollback(){
    if [ -z $1 ];then
        shell_unlock;
        echo "Please input rollback version." && exit;
        fi
        case $1 in 
            list)
            ls -l /deploy/tmp/*.tar.gz
            ;;
            *)
            rollback_fun $1
            ;;
        esac
}


shell_lock(){
    touch ${LOCK_FILE}
}

shell_unlock(){
    rm -f ${LOCK_FILE}
}

main(){
    if [ -f ${LOCK_FILE} ];then
        echo "Deploy is running" && exit
    fi
    DEPLOY_METHOD=$1
    ROLLBACK_VER=$2
    case $DEPLOY_METHOD in
        deploy)
            shell_lock;
        code_get;
        code_config;
        code_tar;
            code_scp;
        code_deploy;
        code_test;
        shell_unlock;
        ;;
    rollback)
        shell_lock;
        rollback $ROLLBACK_VER;
        shell_unlock;
        ;;
    *)
        useage;
        ;;
    esac
}

main $1 $2

3、發佈測試

一、開發機和github添加ssh信任

[www@localhost ~]$ cat .ssh/id_rsa.pub 
ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQC+ta7tkljnIgqvgEugQvIfVxH/a+geX250ZhOpe+14Q8EBQSI+qGyXCeihln+0aQpzIERvNBZ7JjWCg5XeQlgPBgCmqoQKNTWl/NUBT+uY/NY9fIGdRCVBvVcDC554Be48zB57mtapKQEkqm/8kmq7sPRQDv98l5wvFvYOPxocmjnioDZr3GeYmgdFPNJ5WGg6yY29IHXgh2v3eCXLwX2Z2eUdKCpV1LS42wdAN8TqHFCEmthREIq2r86ZKPOovD6Micq7wa2yJqtA/hkv+DvEhRzOIVznfW5EptOyKYcittGu63JGMSbCr1uCdW7PLUQ8aIWDDlip+/EcIt0KkuJJ www@localhost.localdomain

二、克隆項目到開發機進行開發測試

[www@localhost ~]$ mkdir dev && cd dev
[www@localhost dev]$ git clone git@github.com:kin08200/learngit.git
[www@localhost dev]$ ll
total 4
drwxrwxr-x 3 www www 4096 Nov  2 22:02 learngit
[www@localhost dev]$ cd learngit

三、修改index.html文件

[www@localhost learngit]$ ll
total 8
-rw-rw-r-- 1 www www  0 Nov  2 04:31 123
-rw-rw-r-- 1 www www 35 Nov  2 22:02 index.html
-rw-rw-r-- 1 www www 80 Nov  2 04:31 readme.txt
[www@localhost learngit]$ echo "<h1> welcome to Beijing </h1>" > index.html

四、提交代碼

[www@localhost learngit]$ git add .
[www@localhost learngit]$ git commit -m "modify index.html"
[www@localhost learngit]$ git push origin master

五、發佈代碼

[www@deploy-server ~]$ ./deploy.sh deploy
remote: Enumerating objects: 5, done.
remote: Counting objects: 100% (5/5), done.
remote: Compressing objects: 100% (2/2), done.
remote: Total 3 (delta 0), reused 3 (delta 0), pack-reused 0
Unpacking objects: 100% (3/3), done.
From github.com:kin08200/learngit
 * branch            HEAD       -> FETCH_HEAD
Updating 9a781b2..683a440
Fast-forward
 index.html | 5 +++--
 1 file changed, 3 insertions(+), 2 deletions(-)
683a44
www_683a44_2018-11-03-10-06-56.tar.gz                                                                                                                      100%   22KB   9.3MB/s   00:00    
HTTP/1.1 200 OK

六、測試訪問

[www@deploy-server ~]$ curl 192.168.56.13
<h1>
    welcome to Beijing!!!!
</h1>

七、回滾測試

[root@web ~]# ll /data/web/
total 0
lrwxrwxrwx 1 www www 43 Nov  3 10:46 www -> /webroot/www/www_683a44_2018-11-03-10-06-56

測試訪問以下,下面進行查看版本列表,並選擇回滾到www_9a781b_2018-11-03-09-59-44版本

[www@deploy-server ~]$ ./deploy.sh rollback list
-rw-rw-r-- 1 www www 22686 Nov 3 10:07 /deploy/tmp/www_683a44_2018-11-03-10-06-56.tar.gz
-rw-rw-r-- 1 www www 22685 Nov 3 10:44 /deploy/tmp/www_683a44_2018-11-03-10-43-55.tar.gz
-rw-rw-r-- 1 www www 22222 Nov 3 09:48 /deploy/tmp/www_9a781b_2018-11-03-09-48-36.tar.gz
-rw-rw-r-- 1 www www 22231 Nov 3 09:52 /deploy/tmp/www_9a781b_2018-11-03-09-52-32.tar.gz
-rw-rw-r-- 1 www www 22228 Nov 3 09:58 /deploy/tmp/www_9a781b_2018-11-03-09-58-15.tar.gz
-rw-rw-r-- 1 www www 22234 Nov 3 09:59 /deploy/tmp/www_9a781b_2018-11-03-09-59-44.tar.gz

[www@deploy-server ~]$ ./deploy.sh rollback www_9a781b_2018-11-03-09-59-44
[root@web ~]# ll /data/web/
total 0
lrwxrwxrwx 1 www www 43 Nov  3 10:48 www -> /webroot/www/www_9a781b_2018-11-03-09-59-44

再進行訪問測試:

相關文章
相關標籤/搜索