kubernetes 指標採集組件 metrics-server 的部署

metrics-server 是一個採集集羣中指標的組件，相似於 cadvisor，在 v1.8 版本中引入，官方將其做爲 heapster 的替代者，metric-server 屬於 core metrics(核心指標)，提供 API metrics.k8s.io，僅能夠查看 node、pod 當前 CPU/Memory/Storage 的資源使用狀況，也支持經過 Metrics API 的形式獲取，以此數據提供給 Dashboard、HPA、scheduler 等使用。node

1、開啓 API Aggregation

因爲 metrics-server 須要暴露 API，但 k8s 的 API 要統一管理，如何將 apiserver 的請求轉發給 metrics-server ，解決方案就是使用 kube-aggregator ，因此在部署 metrics-server 以前，須要在 kube-apiserver 中開啓 API Aggregation，即增長如下配置：nginx

--proxy-client-cert-file=/etc/kubernetes/certs/proxy.crt
--proxy-client-key-file=/etc/kubernetes/certs/proxy.key
--requestheader-client-ca-file=/etc/kubernetes/certs/proxy-ca.crt
--requestheader-allowed-names=aggregator
--requestheader-extra-headers-prefix=X-Remote-Extra-
--requestheader-group-headers=X-Remote-Group
--requestheader-username-headers=X-Remote-User

若是kube-proxy沒有在Master上面運行，還須要配置git

--enable-aggregator-routing=true

kube-aggregator 的詳細設計文檔請參考：configure-aggregation-layergithub

2、部署 metrics-server

一、獲取配置文件

$ git clone  https://github.com/kubernetes/kubernetes
$ cd  kubernetes/cluster/addons/metrics-server/

二、修改 metrics-server 配置參數

修改 resource-reader.yaml 文件：sql

rules:
- apiGroups:
  - ""
  resources:
  - pods
  - nodes
  - nodes/stats    #新增這一行
  - namespaces
  verbs:
  - get
  - list
  - watch

修改 metrics-server-deployment.yaml文件:shell

      ......
      # metrics-server containers 啓動參數做以下修改：
      containers:
      - name: metrics-server
        image: k8s.gcr.io/metrics-server-amd64:v0.3.1
        command:
        - /metrics-server
        - --metric-resolution=30s
        - --kubelet-insecure-tls
        - --kubelet-preferred-address-types=InternalIP,Hostname,InternalDNS,ExternalDNS,ExternalIP
        # These are needed for GKE, which doesn't support secure communication yet.
        # Remove these lines for non-GKE clusters, and when GKE supports token-based auth.
        #- --kubelet-port=10255
        #- --deprecated-kubelet-completely-insecure=true

    ......           
    # 修改啓動參數：
        command:
          - /pod_nanny
          - --config-dir=/etc/config
          - --cpu=80m
          - --extra-cpu=0.5m
          - --memory=80Mi
          - --extra-memory=8Mi
          - --threshold=5
          - --deployment=metrics-server-v0.3.1
          - --container=metrics-server
          - --poll-period=300000
          - --estimator=exponential
          # Specifies the smallest cluster (defined in number of nodes)
          # resources will be scaled to.
          #- --minClusterSize={{ metrics_server_min_cluster_size }}

三、部署

kubectl apply -f .

metrics-server 的資源佔用量會隨着集羣中的 Pod 數量的不斷增加而不斷上升，所以須要 addon-resizer 垂直擴縮 metrics-server。addon-resizer 依據集羣中節點的數量線性地擴展 metrics-server，以保證其可以有能力提供完整的metrics API 服務，具體參考：addon-resizer。api

所須要的鏡像能夠在 k8s-system-images 中下載。ruby

檢查是否部署成功：bash

$ kubectl get apiservices | grep metrics
v1beta1.metrics.k8s.io     kube-system/metrics-server   True        2m

$ kubectl get pod -n kube-system
metrics-server-v0.3.1-65b6db6945-rpqwf   2/2     Running   0          20h

3、metrics-server 的使用

因爲採集數據間隔爲1分鐘，等待數分鐘後查看數據：微信

Metrics-server 可用 API 列表以下：

http://127.0.0.1:8001/apis/metrics.k8s.io/v1beta1/nodes
http://127.0.0.1:8001/apis/metrics.k8s.io/v1beta1/nodes/
http://127.0.0.1:8001/apis/metrics.k8s.io/v1beta1/pods
http://127.0.0.1:8001/apis/metrics.k8s.io/v1beta1/namespace/ /pods/

因爲 k8s 在 v1.10 後廢棄了 8080 端口，能夠經過代理或者使用認證的方式訪問這些 API：

$ kubectl proxy
$ curl http://127.0.0.1:8001/apis/metrics.k8s.io/v1beta1/nodes

也能夠直接經過 kubectl 命令來訪問這些 API，好比：

$ kubectl get --raw /apis/metrics.k8s.io/v1beta1/nodes
$ kubectl get --raw /apis/metrics.k8s.io/v1beta1/pods
$ kubectl get --raw /apis/metrics.k8s.io/v1beta1/nodes/<node-name>
$ kubectl get --raw /apis/metrics.k8s.io/v1beta1/namespace/<namespace-name>/pods/<pod-name>

本文分享自微信公衆號 - 田飛雨（kubeConChina）。
若有侵權，請聯繫 support@oschina.cn 刪除。
本文參與「OSC源創計劃」，歡迎正在閱讀的你也加入，一塊兒分享。