阿里雲Kubernetes服務上從零搭建GitLab+Jenkins+GitOps應用發佈模型的實踐全紀錄

關於GitOps的介紹，能夠參考 GitOps:Kubernetes多集羣環境下的高效CICD實踐

1. 在 容器服務控制檯 建立kubernetes集羣

1.1 新建Kubernetes集羣：

1.2 新建命名空間gitops

咱們將會把gitlab和jenkins所有部署到此命名空間下

2. 建立GitLab應用 （可選項，能夠對接已有GitLab環境）

容器服務控制檯上依次點擊 市場 -> 應用目錄 -> gitlab-ce :

在 參數 中設置externalUrl和gitlabRootPassword後選擇gitops命名空間並建立應用，本次實踐中 externalUrl 設置爲 http://ls-gitlab.example.com/, 若是沒有dns解析的話，能夠在建立成功後直接使用ip

容器服務控制檯上依次點擊 路由與負載均衡 -> 服務 查看gitlab應用的訪問地址，大約2分鐘後可訪問gitlab並登錄：

3. 設置GitLab並上傳示例源碼項目

3.1 新建private group application

建立private group application：

3.2 新建並上傳private project application-demo

建立private project application-demo， 示例源碼地址：

https://code.aliyun.com/haoshuwei/application-demo.git

從master新建一個分支latest：

設置master和latest分支只有管理員才能merge和push代碼的操做：

3.3 新建private group builds

3.4 新建並上傳private project preview-pipeline staging-pipeline production-pipeline

preview-pipeline示例源碼地址爲：

https://code.aliyun.com/haoshuwei/preview-pipeline.git

staging-pipeline示例源碼地址爲：

https://code.aliyun.com/haoshuwei/staging-pipeline.git

production-pipeline示例源碼地址爲：

https://code.aliyun.com/haoshuwei/production-pipeline.git

上傳3個構建項目以前須要替換如下字段：
IMAGE_REPO:  應用容器鏡像要上傳到哪一個鏡像倉庫，鏡像倉庫地址
dingTalkToken： 釘釘通知所使用的釘釘機器人accessToken
Fetch Git Repo -> credentialsId : 用於Jenkins拉取git項目的證書名稱，須要在Jenkins中建立名爲gitlab的證書
Fetch Git Repo -> url : Jenkins拉取git repo的url

preview-pipeline：

staging-pipeline

production-pipeline

3.5 註冊一個普通開發者用戶developer

管理員用戶登陸後將developer用戶添加爲application組的developer member：

此時developer用戶只有application組下projects的權限， 沒有builds組的權限：

3.6 生成一個apiToken用於Jenkins配置gitlabConnection

生成並複製保存apiToken：

4. 建立Jenkins應用

容器服務控制檯上依次點擊 市場 -> 應用目錄 -> jenkins:

在 參數 中設置Master.AdminPassword的值，並更改rbac.install的值爲true，選擇gitops命名空間後點擊建立：

容器服務控制檯上依次點擊 路由與負載均衡 -> 服務 查看jenkins應用的訪問地址，大約1分鐘後可訪問jenkins並登錄：

5. 配置Jenkins並建立構建任務

5.1 配置gitlabConnection

系統管理 -> 系統設置 -> Gitlab:

配置完畢後點擊 Save 保存。

5.2 新建構建任務preview-pipeline

5.2.1 新建任務，輸入名稱選擇流水線類型並點擊建立：

5.2.2 Build Triggers 區域勾選 GitLab 插件配置如圖所示：

點擊 Advanced 進行高級選項配置如圖所示：

複製並保存GitLab webhook URL和Secret token的值用於在Gitlab上配置webhook。

5.2.3 Pipeline區域配置preview-pipeline構建項目的git repo

完成配置後點擊 保存。

5.3 新建構建任務staging-pipeline

5.3.1 新建任務，輸入名稱選擇流水線類型並點擊建立：

5.3.2 Build Triggers 區域勾選 GitLab 插件配置如圖所示：

點擊 Advanced 進行高級選項配置如圖所示：

複製並保存GitLab webhook URL和Secret token的值用於在Gitlab上配置webhook。

5.3.3 Pipeline區域配置staging-pipeline構建項目的git repo

完成配置後點擊 保存。

5.4 新建構建任務production-pipeline

5.4.1 新建任務，輸入名稱選擇流水線類型並點擊建立：

5.4.2 Build Triggers 區域勾選 GitLab 插件配置如圖所示：

點擊 Advanced 進行高級選項配置如圖所示：

複製並保存GitLab webhook URL和Secret token的值用於在Gitlab上配置webhook。

5.4.3 Pipeline區域配置production-pipeline構建項目的git repo

完成配置後點擊 保存。

5.5 建立docker registry auth secret:

$ docker login registry.cn-hangzhou.aliyuncs.com
$ kubectl -n gitops create secret generic jenkins-docker-cfg  --from-file=/root/.docker/config.json

5.6 建立clusterrolebinding授予serviceaccount default對gitops命名空間的管理權限

clusterrolebinding.yaml:

apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata:
  name: gitops-cluster-admin
subjects:
  - kind: ServiceAccount
    name: default
    namespace: gitops
roleRef:
  kind: ClusterRole
  name: cluster-admin
  apiGroup: rbac.authorization.k8s.io

$ kubectl create -f clusterrolebinding.yaml

5.7 設置匿名用戶的可讀權限

系統管理 ->全局安全管理-> Authorization -> 勾選 Allow anonymous read access 並保存：

6. 配置GitLab webhook

進入application-demo項目的webhook配置頁面：

6.1 配置觸發jenkins job preview-pipeline的觸發器

所圖所示：

6.2 配置觸發jenkins job staging-pipeline的觸發器

所圖所示：

6.3 配置觸發jenkins job production-pipeline的觸發器

所圖所示：

7. GitOps模型發佈應用

7.1 developer用戶作如下操做

7.1.1 在application-demo項目上新建一個開發分支features/change-index-1

7.1.2 修改src/main/resources/static/index.html中的kubernetes.svg爲jenkins.svg並提交修改

7.1.3 建立請求合併到latest分支的Merge Request

Open MergeRequest的動做會觸發jenkins job preview-pipeline的自動構建，並完成如下stages：
（1）拉取http://xxx.xxx.xxx/builds/preview-pipeline.git項目並按照Jenkins定義的內容繼續執行如下內容
（2）Fetch Git Repo： 拉取應用源碼項目http://xxx.xxx.xxx.xxx/application/application-demo.git
（3）Maven Build： 打包
（4）Maven Test： 測試
（5）Docker Build And Publish： docker鏡像構建和推送
（6）Kubectl Deploy： 部署應用到Kubernetes集羣（本示例使用的是本集羣的一個動態建立的命名空間preview-xxx）
（7）Post Actions： 釘釘通知

developer能夠查看Merge Request頁面的內容

點擊可跳轉至jenkins構建日誌：

7.1.4 構建完成後能夠看到一個application-demo應用的預覽頁面

點擊預覽應用：

也能夠直接在釘釘羣裏查看應用訪問連接等信息：

7.1.5 應用預覽驗證後， developer能夠申請管理員接受此合併

7.2 管理員合併指向latest分支的MergeRequest

合併MR：

Accept MR的動做或觸發staging-pipeline的構建，拉取application-demo項目的latest分支代碼並構建和部署到staging命名空間下

查看釘釘通知並訪問staging環境中的application-demo應用：

7.3 管理員建立latest到master分支的Merge Request併合並此指向master的Merge Request

Accept MR的動做或觸發production-pipeline的構建，拉取application-demo項目的master分支代碼並構建和部署到production命名空間下

查看釘釘通知並訪問production環境中的application-demo應用：

---

本文做者：流生

閱讀原文

本文爲雲棲社區原創內容，未經容許不得轉載。