ceph監控管理平臺calamari

更新時間：20170803 (以前網盤連接被吞了)

前言

各類搜索無果，官方文檔是基於Ubuntu，沒有找到一篇清晰明朗的適合新手安裝的centos7文檔，以前測試環境倒騰過2次均不了了之，當集羣正式跑出起來時，某天晚上發瘋堅持搞了出來，大神忽略~

環境

已有： CentOS 7.3(基礎設施服務器) Ceph 10.2.7（jewel）

後部署：Calamari 1.3.3

介紹

注：介紹和rpm包借鑑磨大神博客http://www.zphj1987.com

Calamari包含的組件主要有calamari-server；romana；salt-minion；salt-master；diamond。

這些模塊各自的做用：

• calamari-server 這個是提供一個與集羣進行交互，而且本身封裝了一個本身的API，作集中管理的地方，這個只須要在集羣當中的某一臺機器上安裝，也能夠獨立安裝

• romana 就是原來的calamari-client，這個叫client,實際上是一個web的界面，這個叫calamari-web更好，如今已經改名爲romana，這個也是隻須要在集羣當中的某一臺機器上安裝，也能夠獨立安裝，這個須要跟calamari-server安裝在一臺機器上

• salt-master 是一個管理的工具，能夠批量的管理其餘的機器，能夠對安裝了salt-minion的機器進行管理，在集羣當中，這個也是跟calamari-server安裝在一塊兒的

• salt-minion 是安裝在集羣的全部節點上的，這個是接收salt-master的指令對集羣的機器進行操做，而且反饋一些信息到salt-master上

• diamond 這個是系統的監控信息的收集控件，提供集羣的硬件信息的監控和集羣的信息的監控，數據是發送到romana的機器上的，是由romana上的carbon來收取數據並存儲到機器當中的數據庫當中的

安裝

說明(必看！！！)

節點狀況	須要安裝軟件
Calamari服務端	calamri-server romana  salt-master
集羣節點	salt-minion diamond

1. 若是在某集羣節點安裝calamari，則以上都須要安裝

2. 如下涉及的admin均爲calamari 和salt-master服務端的hostname

3. 本文不採用ceph-deploy calamari connect node 方式安裝。

這一步經過本身觀察發現是安裝salt-minion和diamond軟件並建立對應目錄文件。

【由於採用的手工安裝固定版本，所以能夠捨棄。目錄文件手動建立便可,見下文】

                            

==============================calamari端=================================

1、軟件包解壓

下載並上傳     連接：http://pan.baidu.com/s/1kVGCE5h   密碼：3tjb

# mkdir calamari && cd calamari

# unzip centosjewel.zip

# cd centosjewel/

2、添加saltstack 的repo文件

# mv saltstack-rhel7.repo /etc/yum.repos.d/

# yum clean all; yum repolist

3、本地安裝calamari romana

# yum localinstall calamari-server-1.3.3-jewel.el7.centos.x86_64.rpm romana-1.2.2-36_gc62bb5b.el7.centos.x86_64.rpm

4、調整目錄權限

# chmod 777 -R /var/log/calamari/

# chmod 777 -R /opt/calamari/

5、salt的卸載與安裝（已更新 2015.8.1版本的repo文件，故不用麻煩了）

卸載存在bug的salt版本並安裝契合的salt版本（calamari依賴）

# rpm -e --nodeps salt-minion salt-master salt

# yum localinstall salt-2015.8.1-1.el7.noarch.rpm

# yum localinstall salt-master-2015.8.1-1.el7.noarch.rpm

# yum localinstall salt-minion-2015.8.1-1.el7.noarch.rpm

須要先配置被監控端再繼續calamari的相關操做！

 

===========================被監控端(集羣節點)==============================

1、安裝salt-minion diamond

1.1、添加saltstack 的repo文件

# mv saltstack-rhel7.repo /etc/yum.repos.d/

# yum clean all; yum repolist

1.2、安裝

# yum localinstall salt salt-minion

2、配置salt-minion

2.一、修改minion文件（admin均爲calamari的hostname）

# sed -i 's/#master: salt/master: admin/' /etc/salt/minion

 

2.二、添加minion.d附加目錄及calamari.conf文件

# mkdir /etc/salt/minion.d/

# echo 'master: admin'> /etc/salt/minion.d/calamari.conf

# systemctl restart salt-minion

# systemctl enable salt-minion

3、配置diamond

將host指向calamari服務端hostname

# cd /etc/diamond/ && cp diamond.conf.example diamond.conf

# sed -i '/^host/s/graphite/admin/' /etc/diamond/diamond.conf

# systemctl restart diamond

# systemctl enable diamond

 

注：某些機子上面出現了systemctl沒法識別diamond服務，在確保已經安裝後添加便可

chkconfig --add diamond

============================calamari端（續）===============================

6、salt-master相關

！！！被監控端（集羣節點）部署完成後再執行如下命令！！！

6.1重啓

# systemctl restart salt-master

6.2 管理salt-minion節點

# salt-key -L               列出已發現的節點

# salt-key -A                容許全部節點加入

成功後由Unaccepted Keys 轉爲 Accepted keys下

6.3 檢測節點

# salt '*' test.ping           檢測連接性

 

若是出現以下報錯，檢查client端/etc/salt/minion.d/calamari.conf裏的master項是否爲calamari端的hostname

 

# salt '*' ceph.get_heartbeats      輸出ceph集羣信息(過多不貼了)

7、初始化calamari配置

# calamari-ctl initialize

管理界面的用戶名和密碼

# chmod 777 -R /var/log/calamari/

# chmod 777 -R /opt/calamari/

8、web訪問及問題

以上步驟均成功後在瀏覽器地址欄輸入calamari server端IP登陸(默認80端口)便可

錯誤1（500）

解決辦法：清理配置再初始化一次

# calamari-ctl clear --yes-i-am-sure

# calamari-ctl initialize （無交互）

 

錯誤2：

解決辦法：

重啓     被監控端的salt-minion和 diamond

以及    server 端的salt-master

注：salt-minion 必須有一個mon節點,不然也會報這個錯。

效果圖

主頁

PG和Osd狀態

集羣graph

節點監控

OSD管理

只有堅持才能享受成功後的喜悅！