2021年已經到來，讓咱們有一個新的開始。git
Kubernetes 1.20.2已經正式發佈，高可用集羣也能夠直接升級(hub.docker.com已經停更，使用registry.cn-hangzhou.aliyuncs.com/google_containers)。快速升級（含國內鏡像快速下載連接）包括升級kubeadm/kubectl/kubelet版本、拉取鏡像、升級Kubernetes集羣三個主要步驟。參考《Ubuntu上軟件鎖定版本不更新》安裝特定DockerCE版本。github
提早將鏡像傳送到相應節點上，而後在任何一個master節點運行下面的命令便可完成升級。docker
kubeadm upgrade apply v1.20.2
在當前的集羣中新增節點：shell
- 第一步，從新建立certificate key和token：
sudo kubeadm init phase upload-certs --upload-certs ### Got: # [upload-certs] Using certificate key: # 2ffe5bbf7d2e670d5bcfb03dac194e2f21eb9715f2099c5f8574e4ba7679ff78 # Add certificate-key for Multi Master Node. kubeadm token create --print-join-command --certificate-key 2ffe5bbf7d2e670d5bcfb03dac194e2f21eb9715f2099c5f8574e4ba7679ff78
- 第二步，增長Worker節點：
kubeadm join 192.168.199.173:6443 --token rlxvkn.2ine1loolri50tzt --discovery-token-ca-cert-hash sha256:86e68de8febb844ab8f015f6af4526d78a980d9cdcf7863eebb05b17c24b9383
- 第三步，增長master節點：
kubeadm join 192.168.199.173:6443 --token rlxvkn.2ine1loolri50tzt --discovery-token-ca-cert-hash sha256:86e68de8febb844ab8f015f6af4526d78a980d9cdcf7863eebb05b17c24b9383 --control-plane --certificate-key 440a880086e7e9cbbcebbd7924e6a9562d77ee8de7e0ec63511436f2467f7dde
在arm上部署kubernetes參考：api
升級時出現一些小錯誤，後來解決了：網絡
一、升級kubeadm/kubectl/kubelet版本
sudo apt install kubeadm=1.20.2-00 kubectl=1.20.2-00 kubelet=1.20.2-00
- 設置中國區的軟件源，參考： kubernetes for china
查看該版本的容器鏡像版本：app
kubeadm config images list
輸出以下：測試
~# kubeadm config images list k8s.gcr.io/kube-apiserver:v1.20.2 k8s.gcr.io/kube-controller-manager:v1.20.2 k8s.gcr.io/kube-scheduler:v1.20.2 k8s.gcr.io/kube-proxy:v1.20.2 k8s.gcr.io/pause:3.2 k8s.gcr.io/etcd:3.4.13-0 k8s.gcr.io/coredns:1.7.0
二、拉取容器鏡像
原始的kubernetes鏡像文件在gcr上，不能直接下載。我原來是把鏡像到了阿里雲的杭州機房的容器倉庫裏，拉取仍是比較快的。如今hub.docker.com的訪問沒有問題了，有同窗把鏡像放到料裏面，並且更新還挺及時，能夠直接用。google
registry.cn-hangzhou.aliyuncs.com/google_containers#mirrorgcrio已經沒有更新了... #MY_REGISTRY=mirrorgcrio MY_REGISTRY=K8S_VERSION="1.20.2" echo "" echo "==========================================================" echo "Pull Kubernetes for x64 v$K8S_VERSION Images from docker.io ......" echo "==========================================================" echo "" ## 拉取鏡像 docker pull ${MY_REGISTRY}/kube-apiserver:v$K8S_VERSION docker pull ${MY_REGISTRY}/kube-controller-manager:v$K8S_VERSION docker pull ${MY_REGISTRY}/kube-scheduler:v$K8S_VERSION docker pull ${MY_REGISTRY}/kube-proxy:v$K8S_VERSION docker pull ${MY_REGISTRY}/etcd:3.4.13-0 docker pull ${MY_REGISTRY}/pause:3.2 #docker pull ${MY_REGISTRY}/coredns-arm64:1.7.0 docker pull coredns/coredns:1.7.0 ## 添加Tag docker tag ${MY_REGISTRY}/kube-apiserver:v$K8S_VERSION k8s.gcr.io/kube-apiserver:v$K8S_VERSION docker tag ${MY_REGISTRY}/kube-scheduler:v$K8S_VERSION k8s.gcr.io/kube-scheduler:v$K8S_VERSION docker tag ${MY_REGISTRY}/kube-controller-manager:v$K8S_VERSION k8s.gcr.io/kube-controller-manager:v$K8S_VERSION docker tag ${MY_REGISTRY}/kube-proxy:v$K8S_VERSION k8s.gcr.io/kube-proxy:v$K8S_VERSION docker tag ${MY_REGISTRY}/etcd:3.4.13-0 k8s.gcr.io/etcd:3.4.13-0 docker tag ${MY_REGISTRY}/pause:3.2 k8s.gcr.io/pause:3.2 #docker tag ${MY_REGISTRY}/coredns-arm64:1.7.0 k8s.gcr.io/coredns:1.7.0 docker tag coredns/coredns:1.7.0 k8s.gcr.io/coredns:1.7.0 echo "" echo "==========================================================" echo "Pull Kubernetes for x64 v$K8S_VERSION Images FINISHED." echo "into docker.io/mirrorgcrio, " echo " by openthings@https://my.oschina.net/u/2306127." echo "==========================================================" echo ""
保存爲shell腳本，而後執行。阿里雲
三、升級Kubernetes集羣
全新安裝：
#指定IP地址，1.20.2版本： sudo kubeadm init --kubernetes-version=v1.20.2 --apiserver-advertise-address=10.1.1.199 --pod-network-cidr=10.244.0.0/16
高可用安裝（多master節點）：
sudo kubeadm init --kubernetes-version=v1.20.2 --apiserver-advertise-address=192.168.199.173 --control-plane-endpoint=192.168.199.173:6443 --pod-network-cidr=10.244.0.0/16 --upload-certs
先查看一下須要升級的各個組件的版本。
使用kubeadm upgrade plan ，輸出的版本升級信息以下：
Components that must be upgraded manually after you have upgraded the control plane with 'kubeadm upgrade apply': COMPONENT CURRENT AVAILABLE Kubelet 1 x v1.20.0 v1.20.2 8 x v1.20.0 v1.20.2 Upgrade to the latest version in the v1.20 series: COMPONENT CURRENT AVAILABLE API Server v1.20.0 v1.20.2 Controller Manager v1.20.0 v1.20.2 Scheduler v1.20.0 v1.20.2 Kube Proxy v1.20.0 v1.20.2 CoreDNS 1.7.0 1.7.0 Etcd 3.4.13-0 3.4.13-0 You can now apply the upgrade by executing the following command: kubeadm upgrade apply v1.20.2
確保上面的容器鏡像已經下載（若是沒有提早下載，可能被網絡阻隔致使掛起），而後執行升級：
kubeadm upgrade apply v1.20.2
看到下面信息，就OK了。
[upgrade/successful] SUCCESS! Your cluster was upgraded to "v1.20.2". Enjoy!
而後，配置當前用戶環境：
mkdir -p $HOME/.kube sudo cp -i /etc/kubernetes/admin.conf $HOME/.kube/config sudo chown $(id -u):$(id -g) $HOME/.kube/config
就能夠使用 kubectl version 來查看狀態和 kubectl cluster-info 查看服務地址。
- 若是服務沒有起來，測試一下：
- 查看服務版本，kubectl version
- 查看集羣信息，kubectl cluster-info
- 查看服務狀態，sudo systemctl status kubelet
- 查看服務日誌，journalctl -xefu kubelet
四、工做節點的升級
每一個工做節點須要拉取上面對應版本的鏡像，以及安裝kubelet的對應版本。
檢查版本：
~$ kubectl version
查看Pod信息：
kubectl get pod --all-namespaces
完成。
⚠️注意：1.17後版本，若是使用kubeadm安裝爲高可用模式，全部master節點均可以被升爲最新版本（須要提早把k8s的容器鏡像放到節點上去）。
更多參考：
- Kubernetes 1.17.4快速升級
- Kubernetes 1.17.2快速升級
- Kubernetes 1.17.1快速升級
- Kubernetes 1.17.0 已發佈
- 使用kubeadm部署高可用Kubernetes 1.17.0
- Kubernetes 1.17.0管理界面Dashboard 2
- 設置Kubernetes的Master節點運行應用pod
- Kubernetes pod中systemctl狀態探針失敗問題
- 運用Jupyter Notebook進行系統管理
- 將Jupyter/JupyterHub/JupyterLab運行爲系統服務
- 快速設置JupyterHub for K8s
- 在JupyterHub for K8s使用GlusterFS存儲