docker+gitlab+gitlab-runner部署

環境

服務端：centos7

客戶端：window

在centos7上部署docker+gitlab+gitlab-runner，win10利用ssh鏈接，開發人員只需提交代碼，就能夠進行項目文件上傳，打包鏡像，發佈運行測試

1、centos7上安裝docker和docker-compose

安裝docker：

一、Docker 要求 CentOS 系統的內核版本高於 3.10 ，查看本頁面的前提條件來驗證你的CentOS 版本是否支持 Docker 。

經過 uname -r 命令查看你當前的內核版本

 $ uname -r

二、使用 root 權限登陸 Centos。確保 yum 包更新到最新。

$ sudo yum update

三、卸載舊版本(若是安裝過舊版本的話)

$ sudo yum remove docker  docker-common docker-selinux docker-engine

四、安裝須要的軟件包， yum-util 提供yum-config-manager功能，另外兩個是devicemapper驅動依賴的

$ sudo yum install -y yum-utils device-mapper-persistent-data lvm2

五、設置yum源

$ sudo yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo

 

六、能夠查看全部倉庫中全部docker版本，並選擇特定版本安裝

$ yum list docker-ce --showduplicates | sort -r

七、安裝docker

$ sudo yum install docker-ce  #因爲repo中默認只開啓stable倉庫，故這裏安裝的是最新穩定版17.12.0
$ sudo yum install <FQPN>  # 例如：sudo yum install docker-ce-17.12.0.ce

 

八、啓動並加入開機啓動

$ sudo systemctl start docker
$ sudo systemctl enable docker

九、驗證安裝是否成功(有client和service兩部分表示docker安裝啓動都成功了)

$ docker version

十、建議更換docker的鏡像源：

 

1.修改或建立daemon.json文件：vi /etc/docker/daemon.json
 
將如下配置寫入到文件中，保存並退出（不會操做的百度下vi命令吧）：
 
{
 
　　"registry-mirrors": ["http://hub-mirror.c.163.com"]
 
}
 
2.重啓docker：systemctl restart docker

 安裝docker-compose：

參考官網：https://docs.docker.com/compose/install/#install-compose

一、Run this command to download the latest version of Docker Compose:

sudo curl -L "https://github.com/docker/compose/releases/download/1.23.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose

二、Apply executable permissions to the binary:

sudo chmod +x /usr/local/bin/docker-compose

2、拉取gitlab中文版鏡像

 地址：https://hub.docker.com/r/twang2218/gitlab-ce-zh

一、利用xshell+xftp在centos7中建立存儲日誌、配置、數據的文件夾

　　文件夾結構以下：

gitlab
    -config
    -logs
    -data
docker-compose.yml

 

二、利用docker-compose.yml啓動

version: '3'
services:
    gitlab:
      image: 'twang2218/gitlab-ce-zh:11.1.4'
      restart: unless-stopped
      hostname: 'gitlab.domain.com'
      container_name: gitlab
      environment:
        TZ: 'Asia/Shanghai'
        GITLAB_OMNIBUS_CONFIG: |
          external_url 'http://gitlab.domain.com/'
          registry_external_url 'https://gitlab.domain.com'
          gitlab_rails['gitlab_shell_ssh_port'] = 1022
          gitlab_rails['time_zone'] = 'Asia/Shanghai'
          # gitlab_rails['smtp_enable'] = true
          # gitlab_rails['smtp_address'] = "smtp.exmail.qq.com"
          # gitlab_rails['smtp_port'] = 465
          # gitlab_rails['smtp_user_name'] = "xxxx@xx.com"
          # gitlab_rails['smtp_password'] = "password"
          # gitlab_rails['smtp_authentication'] = "login"
          # gitlab_rails['smtp_enable_starttls_auto'] = true
          # gitlab_rails['smtp_tls'] = true
          # gitlab_rails['gitlab_email_from'] = 'xxxx@xx.com'
      ports:
        - '80:80'
        - '443:443'
        - '1022:22'
      volumes:
        - ./data:/var/opt/gitlab
        - ./config:/etc/gitlab
        - ./logs:/var/log/gitlab

 

若是你的服務器有域名，將上面的 gitlab.domain.com 替換爲實際域名。

實驗時，也能夠直接修改 /etc/hosts 方便測試。好比：

127.0.0.1   gitlab.example.com

三、cd到gitlab目錄下執行docker-compose up -d啓動，稍做等待。。

四、啓動完畢後打開瀏覽器訪問gitlab.domain.com

 

五、SSH 鏈接GitLab

首先咱們須要獲得一個SSH Key，輸入

cat ~/.ssh/id_rsa.pub

若是出現 ssh-rsa打頭的字符，說明本地已經有了SSH Key那咱們能夠直接拿來用，若是沒有則須要咱們本身建立一個SSH Key。

 

六、建立SSH Key

輸入如下命令建立一個SSH Key。

ssh-keygen -t rsa -C "your.email@example.com" -b 4096

完成以後能夠再輸入 上面的cat命令 或者pbcopy直接複製生成的ssh key。

pbcopy < ~/.ssh/id_rsa.pub

在GitLab中帳號-》設置中找到 SSH Keys中添加這個Key便可。

 

七、SSH 鏈接 1022 端口

正常狀況下你已經能夠經過git命令來鏈接咱們部署的gitlab，但這裏不同的是咱們把容器的 22端口映射到了 host的 1022上，咱們須要指定端口來進鏈接。

ssh -p 1022 git@gitlab.domain.com

同時還須要更改GitLab的配置文件中的 ssh端口（若是上面配置過就不用了），不然GitLab中爲咱們生成的項目鏈接地址會鏈接不上。/gitlab/config/gitlab.rb

gitlab_rails['gitlab_shell_ssh_port'] = 1022

更改完ssh端口以後重啓gitlab容器，以後咱們的項目 ssh鏈接址會變爲：

ssh://git@gitlab.domain.com:1022/test/projectname.git

到這裏咱們已經完成了GitLab的部署。

3、拉取gitlab-runner鏡像

地址：https://hub.docker.com/r/gitlab/gitlab-runner

一、利用xshell+xftp在centos7中建立存儲日誌、配置、數據的文件夾

　　文件夾結構以下：

gitlab-runner
    -config docker-compose.yml

 

二、利用docker-compose.yml啓動

 1 version: '3'
 2 services:
 3     runner:
 4       image: 'gitlab/gitlab-runner:v11.4.2'
 5       container_name: gitlab-runner
 6       restart: always 
 7       networks:
 8         - gitlab_default
 9       volumes: 
10         - ./config:/etc/gitlab-runner
11         - /var/run/docker.sock:/var/run/docker.sock
12 networks:
13   gitlab_default:
14     external: true

其中gitlab_default爲上面gitlab的網絡

注意：gitlab-runner的版本要和gitlab儘可能對應否則會出現連不上gitlab

三、cd到gitlab目錄下執行docker-compose up -d啓動

4、配置gitlab-runner連上gitlab

一、註冊gitlab-runner

docker exec -it gitlab-runner gitlab-runner register

2. 咱們會輸入 http://gitlab.domain.com或http://ip:port 也就是咱們安裝在本地的GitLab

3. Please enter the gitlab-ci token for this runner 要求輸入 gitlab-ci token

在項目的 管理區域->runners中能夠找到(這裏註冊的是share類型runner)

 

4. 輸入描述,如：test

5. 輸入tag（留空也能夠，以後能夠進行編輯 ）

6. 選擇當遇到沒有打標籤的提交時是否會執行，咱們選 true

7. 是否鎖定此runner 到當前項目， 咱們選 false

8. 選一個執行者 executor

這一步比較重要 (ssh, docker+machine, docker-ssh+machine, kubernetes, docker, parallels, virtualbox, docker-ssh, shell)

咱們選docker

9. 選擇默認使用的鏡像： docker:stable

在註冊完以後，咱們能夠在GitLab獲取gitlab-ci token 的頁面看到咱們剛剛註冊的這個 runner

同時能夠在gitlab-runner/config下能夠看到生成一個config.toml的文件，文件內容以下：

concurrent = 1
check_interval = 0

[[runners]]
  name = "test"
  url = "http://192.168.1.157/"
  token = "69c0ff735a76c0bb3cce977a361661"#這個token是gitlab-runner根據第三步驟的token生成的
  executor = "docker"
  [runners.docker]
    extra_hosts = ["gitlab.domain.com:192.168.1.157"] #若是在執行上面步驟中碰到鏈接不上gitlab，是由於gitlab-runner在docker內部解析不了gitlab.domain.com,經過添加配置這個能夠解決問題
    tls_verify = false
    image = "docker:stable" #這裏之因此這樣是由於基於這個鏡像它包含了docker等工具，能夠在gitlab-runner執行的.gitlab-ci.yml中有docker指令時而無需再安裝docker 參考地址：https://docs.gitlab.com/ee/ci/docker/using_docker_build.html
    privileged = false #使用docker-in-docker時一般爲true
    disable_cache = false
    volumes = ["/var/run/docker.sock:/var/run/docker.sock", "/cache"]
    shm_size = 0
   [runners.cache]

或者直接先配置好，gitlab-runner運行時會自動加載該配置文件

參考地址：https://docs.gitlab.com/ee/ci/docker/using_docker_build.html

 

5、提交項目代碼完成CI/CD

一、在項目根目錄下添加.gitlab-ci.yml，提交項目代碼後會自動運行該文件打包項目

image: docker:stable

image:
  name: docker/compose:1.23.2 # update tag to whatever version you want to use. 這個是由於我下面腳本用到docker-compose
  entrypoint: ["/bin/sh", "-c"]

before_script:
  - docker version
  - docker-compose version
  
build:
  script: #下面腳本根據本身狀況寫
    - COMPOSE_HTTP_TIMEOUT=200 docker-compose -f docker-compose-efk.yml up -d   #這是由於個人項目已經用docker-compose編排好了
    - COMPOSE_HTTP_TIMEOUT=200 docker-compose up -d --build --force-recreate

 

二、在win10上經過git提交代碼

cd到項目根目錄，若是有安裝git的話能夠直接在根目錄下打開git bash 執行，若是沒有安裝打開powershell也行

git init #若是尚未初始化
git add . #把項目都添加進去
git commit -m "init" 提交到git
git remote add origin git@gitlab.domain.com:1022/root/test.git #注意端口爲1022 這個是上面運行gitlab是指定的，執行一次就好了
git push -u origin master #推送到服務器gitlab上