ubuntu18.04搭建 kubernetes（k8s）集羣

♦♦♦這裏介紹使用kubeadm安裝k8s集羣，由於這種搭建方式須要訪問grc.io(https://cloud.google.com/container-registry/)（國內被牆了）下載對應的image，因此須要確保本身能訪問該網站♦♦♦

♦♦♦即便網絡不能訪問，也有折中的解決辦法，具體請看詳細安裝步驟♦♦♦

安裝前準備：

• 關閉iptables/ufw:  service ufw disable
• 關閉swap：  swapoff  -a
• Centos還須要關閉SELinux/firewalld

下面使用kubeadm來建立k8s cluster
1. 全部主機節點上都須要安裝docker

# sudo apt-get update
# sudo apt-get install \
    apt-transport-https \
    ca-certificates \
    curl \
    gnupg-agent \
    software-properties-common
# curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo apt-key add -
# sudo apt-key fingerprint 0EBFCD88
output:
pub   rsa4096 2017-02-22 [SCEA]
      9DC8 5822 9FC7 DD38 854A  E2D8 8D81 803C 0EBF CD88
uid           [ unknown] Docker Release (CE deb) <docker@docker.com>
sub   rsa4096 2017-02-22 [S]

# sudo add-apt-repository \
   "deb [arch=amd64] https://download.docker.com/linux/ubuntu \
   $(lsb_release -cs) \
   stable"
# sudo apt-get update
# sudo apt-get install docker-ce docker-ce-cli containerd.io

 

其餘操做系統參考官方文檔： https://docs.docker.com/install/linux/docker-ce/ubuntu/

2. config /etc/hostname,config every node and hostname

修改主機名，規劃好master和node

修改/etc/hostname文件來永久修改hostname

$ sudo hostnamectl set-hostname  k8s-nodex

3. (獨立安裝 kubectl，能夠跳過本部選擇在步驟4中一塊兒安裝)在全部節點上安裝 kubectl

# curl -LO https://storage.googleapis.com/kubernetes-release/release/$(curl -s https://storage.googleapis.com/kubernetes-release/release/stable.txt)/bin/linux/amd64/kubectl
# curl -s https://storage.googleapis.com/kubernetes-release/release/stable.txt  #獲取當前穩定版本
# curl -LO https://storage.googleapis.com/kubernetes-release/release/v1.14.1/bin/linux/amd64/kubectl  #版本號根據須要可自行修改
# chmod +x ./kubectl
# sudo mv ./kubectl /usr/local/bin/kubectl
# source <(kubectl completion bash)

###ubuntu版本若是支持快捷安裝能夠執行如下命令來安裝###
# sudo snap install kubectl --classi

 
4. 在全部節點上安裝  kubectl kubelet kubeadm

# apt-get update && apt-get install -y apt-transport-https
# curl -s https://packages.cloud.google.com/apt/doc/apt-key.gpg | apt-key add -
# cat <<EOF >/etc/apt/sources.list.d/kubernetes.list
deb http://apt.kubernetes.io/ kubernetes-xenial main
EOF
# apt-get update
# apt-get install -y kubectl kubelet kubeadm

國內請使用aliyun源:

# sudo apt-get update && apt-get install -y apt-transport-https # sudo curl https://mirrors.aliyun.com/kubernetes/apt/doc/apt-key.gpg | apt-key add - # sudo cat <<EOF >/etc/apt/sources.list.d/kubernetes.list deb https://mirrors.aliyun.com/kubernetes/apt/ kubernetes-xenial main EOF # sudo apt-get update
# apt-get install -y kubectl kubelet kubeadm 

 

5. 初始化master節點

♦♦♦

Kubenetes默認Registries地址是k8s.gcr.io，很明顯，在國內並不能訪問gcr.io，所以在kubeadm v1.13以前的版本，安裝起來很是麻煩，可是在1.13版本中終於解決了國內的痛點，其增長了一個--image-repository參數，默認值是k8s.gcr.io，咱們將其指定爲國內鏡像地址：registry.aliyuncs.com/google_containers，其它的就能夠徹底按照官方文檔來操做。

咱們還須要指定--kubernetes-version參數，由於它的默認值是stable-1，會致使從https://dl.k8s.io/release/stable-1.txt下載最新的版本號，咱們能夠將其指定爲固定版本（最新版：v1.14.2）來跳過網絡請求。

♦♦♦

pod網絡插件是必要安裝，以便pod能夠相互通訊. 請提早確認本身須要使用的pod網絡插件，以Flannel爲例，爲了使Flannel正常工做，執行kubeadm init命令時須要增長--pod-network-cidr=10.244.0.0/16參數

# kubeadm init --pod-network-cidr=10.244.0.0/16     # k8s.gcr.io能夠訪問的狀況下能夠直接執行init

# kubeadm init --image-repository registry.aliyuncs.com/google_containers --kubernetes-version v1.14.2 --pod-network-cidr=10.244.0.0/16  # 經過跳轉registry的方式安裝

以上兩種init的方式本身根據狀況選擇執行

 

use tocken: qjm4v2.8mqfbjrtjpf2xmq2
output:
Your Kubernetes control-plane has initialized successfully!

To start using your cluster, you need to run the following as a regular user:

# mkdir -p $HOME/.kube
# sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config
# sudo chown $(id -u):$(id -g) $HOME/.kube/config

 

You should now deploy a pod network to the cluster.
Run "kubectl apply -f [podnetwork].yaml" with one of the options listed at:
https://kubernetes.io/docs/concepts/cluster-administration/addons/

Then you can join any number of worker nodes by running the following on each as root:

kubeadm join 10.100.0.128:6443 --token qjm4v2.8mqfbjrtjpf2xmq2 \
--discovery-token-ca-cert-hash sha256:65131ae78527130dfd6ccf0b6be6e86d2089c4d07856d7f318cede1ce84fb0ef

6. 安裝pod網絡插件flannel

# kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/a70459be0084506e4ec919aa1c114638878db11b/Documentation/kube-flannel.yml

這裏因爲國內牆的緣由，kubelet可能沒法拉取flannel鏡像，須要手動執行命令拉取：

flannel 鏡像詳細的版本號能夠執行如下命令查詢：
# kubectl get pod -n kube-system
# kubectl describe pod kube-flannel-ds-amd64-xxx -n kube-system  # kube-flannel-ds-amd64-xxx 爲上一條命令查詢出來的flannel pod

拉取鏡像：
# docker pull quay.io/coreos/flannel:v0.11.0-amd64  # 若是不能直接鏈接gcr.io，在node節點上也要手動拉取這個鏡像
§§特別說明一下，因爲我家裏是長城寬帶，執行命令拉取的時候仍是報錯，因而我用手機共享了手機聯通網絡作熱點，結果還真的下載成功了！§§ 

　再次安裝flannel插件便可：

  # kubectl apply -f https://raw.githubusercontent.com/coreos/flannel/a70459be0084506e4ec919aa1c114638878db11b/Documentation/kube-flannel.yml

  而後再查詢集羣狀態，能夠看到kube-flannel-ds-xxx Pod狀態爲running，master節點狀態也變爲Ready，代表master節點初始化成功了。happy！！！

  

　

 flannel支持多種模型

• VxLAN #vxLAN有如下兩種模式
  • vxlan #疊加網絡或者隧道網絡，經過封裝網絡報文的方式使不一樣網段的pod之間能夠通信
  • Directrouting #直接使用主機的IP地做爲網關，經過主機路由的方式與目標pod進行通信，當目標pod與當前pod不在同一三層網絡內，會自動降級爲VxLAN模式
• host-gw: Host GateWay #與VxLAN的Directrouting模式相同，當目標pod與當前pod不在同一三層網絡內時，pod之間沒法通信
• UDP: #早期因爲Linux內核不支持VxLAN，host-gw又有很是高的入門門檻，udp是flannel最先期使用的模式，因爲使用普通的udp報文通信，性能很是差，在可使用前面兩種模式的狀況下請勿使用該模式
• 默認flannel的模式爲vxlan，能夠修改成性能更好的directrouting模式，修改見下圖

　　　　

 

 

7. 添加node工做節點

• SSH到node節點
• 切換到root用戶
• 執行添加node命令：

# kubeadm join --token <token> <master-ip>:<master-port>
這裏能夠直接copy master節點init過程末尾的kubeadm join 命令行直接執行

默認狀況下，token的有效期是24小時，若是咱們的token已通過期的話，可使用如下命令從新生成：

# kubeadm token create

　若是咱們也沒有--discovery-token-ca-cert-hash的值，可使用如下命令生成：

# openssl x509 -pubkey -in /etc/kubernetes/pki/ca.crt | openssl rsa -pubin -outform der 2>/dev/null | openssl dgst -sha256 -hex | sed 's/^.* //'

 8. 全部node節點加入到master節點以後，能夠執行如下命令查看集羣信息

# kubectl get nodes

[root@maple-master opt]# kubectl get nodes
NAME           STATUS     ROLES    AGE   VERSION
maple-master   Ready      master   30m   v1.14.2
k8s-node1      Ready      node     2m   v1.14.2
k8s-node2      Ready      node     2m   v1.14.2

 

Note： kubeadm reset 能夠重置'kubeadm init' or 'kubeadm join'的操做。  同時須要刪除家目錄下的.kube 目錄。才能恢復到初始化以前的狀態

 

參考文檔：http://docs.kubernetes.org.cn/459.html

　　　　　https://kubernetes.io/zh/docs/setup/independent/install-kubeadm/

　　　　　https://www.cnblogs.com/yitianyouyitian/p/10143217.html  解決了國內沒法下載相關image的問題，成功init