ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案

時間  2019-11-06
標籤 zabbix4.0.2 zabbix 監控 歷史 數據 存放 elasticsearch 集羣 可用 方案 欄目 Zabbix 简体版
原文   原文鏈接

ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案

1、概述

Zabbix 4.0.2是一個長期支持版本(LTS)，至少提供 5 年的技術支持；
下面簡單看一下Zabbix 4.0.2 新特徵
更具時效的監控項值檢查(Checking item value immediately)
新的 HTTP 監控項類型(New HTTP item type)
監控項原型能夠依賴於常規的監控項(Item prototypes can depend on regular items)
更靈活的主動式 Agent 自動註冊(More flexible active agent auto-registration)
支持 MySQL 8.0(MySQL 8.0 supported)
Elasticsearch 配置基於日期的索引(Date-based indices setup for Elasticsearch)php

一、環境準備

172.16.8.76 qas-zabbix-node01
172.16.8.77 vip地址
172.16.8.78 qas-zabbix-node02 html

二、OS及軟件版本

CentOS Linux release 7.5.1804 (Core)
zabbix-4.0.2.tar.gz
mysql-5.7.24-linux-glibc2.12-x86_64.tar.gz
jdk-8u181-linux-x64.tar.gz
elasticsearch-6.5.1.tar.gz
kibana-6.5.1-linux-x86_64.tar.gz

三、架構圖

2、mysql數據安裝（分別在node一、node2安裝）

mysql安裝請參考相關連接：
Centos7.5安裝mysql5.7.24二進制包方式部署前端

3、Zabbix安裝及配置（分別在node一、node2安裝）

一、下載源碼包

相關連接
zabbix官網：https://www.zabbix.com/
zabbix下載：https://sourceforge.net/projects/zabbix/files/ZABBIX%20Latest%20Stable/4.0.2/zabbix-4.0.2.tar.gz/download

二、 YUM安裝PHP環境及所須要依賴包

yum -y install gcc* make php php-gd php-mysql php-bcmath \
php-mbstring php-xml curl curl-devel net-snmp net-snmp-devel  \
perl-DBI httpd mysql-devel libxml2-devel curl-devel unixODBC-devel \
net-snmp-devel OpenIPMI-devel openldap openldap-devel php-ldap libevent-devel

三、建立zabbix用戶及安裝目錄

groupadd zabbix
useradd -g zabbix zabbix
mkdir -pv /app/zabbix4

四、zabbix軟件解壓及安裝

tar -xvf zabbix-4.0.2.tar.gz 
cd zabbix-4.0.2
./configure --prefix=/app/zabbix4 --enable-server --with-mysql --with-net-snmp --with-libcurl --with-libxml2 --with-openipmi --with-unixodbc
make && make install

五、Mysql數據庫建立及導入基礎數據

create database zabbix character set utf8 collate utf8_bin;
grant all privileges on zabbix.* to zabbix@localhost identified by 'zabbix2018';
grant all privileges on zabbix.* to zabbix@"172.16.8.%" identified by 'zabbix2018';
FLUSH PRIVILEGES;
導入數據庫
cd /app/tools/zabbix-4.0.2/database/mysql/
mysql -uzabbix -pzabbix2018 zabbix < schema.sql
mysql -uzabbix -pzabbix2018 zabbix < images.sql
mysql -uzabbix -pzabbix2018 zabbix < data.sql

六、修改PHP的配置參數

vim /etc/php.ini
date.timezone= Asia/Shanghai
max_execution_time = 300
post_max_size = 32M
memory_limit = 128M
mbstring.func_overload = 1
max_input_time = 300

七、拷貝zabbix數據到httpd目錄並受權

cd /app/tools/zabbix-4.0.2/
cp -r frontends/php/ /var/www/html/zabbix
ll /var/www/html/
chown -R apache.apache /var/www/html/zabbix/

八、修改配置文件zabbix_server.conf

建立相關目錄
mkdir /app/zabbix4/{tmp,logs,alertscripts,externalscripts} -p
chown -R zabbix.zabbix /app/zabbix4
修配置文件以下：
# grep -n ^[a-Z] /app/zabbix4/etc/zabbix_server.conf
38:LogFile=/app/zabbix4/logs/zabbix_server.log
68:PidFile=/app/zabbix4/tmp/zabbix_server.pid
94:DBName=zabbix
110:DBUser=zabbix
118:DBPassword=zabbix2018
125:DBSocket=/tmp/mysql.sock
465:Timeout=4
506:AlertScriptsPath=/app/zabbix4/alertscripts
515:ExternalScripts=/app/zabbix4/externalscripts
551:LogSlowQueries=3000

九、拷貝zabbix服務啓動腳本

cd /app/tools/zabbix-4.0.2/
cp misc/init.d/fedora/core/zabbix_server /etc/init.d/
vim /etc/init.d/zabbix_server
BASEDIR=/app/zabbix4

十、啓動服務及設置開機啓動

chkconfig --add zabbix_server
chkconfig zabbix_server on
systemctl enable httpd.service
systemctl start httpd.service
/etc/init.d/zabbix_server restart

十一、web服務初始化

http://172.16.8.76/zabbix/java

ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案
登錄默認用戶名:Admin，密碼:zabbix
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案node

3、Elasticsearch集羣安裝及配置

一、安裝java

tar -xvf  jdk-8u181-linux-x64.tar.gz -C ../
cd /app/
mv jdk1.8.0_181/ jdk
chown -R root.root jdk

編輯profile文件，添加jdk環境變量
vim /etc/profile
JAVA_HOME=//app/jdk/jdk1.8.0_181
CLASSPATH=$JAVA_HOME/lib/
PATH=$PATH:$JAVA_HOME/bin
export PATH JAVA_HOME CLASSPATH

二、elasticsearch解壓及安裝

tar -xvf elasticsearch-6.5.1.tar.gz -C ../ 
cd /app/
mv elasticsearch-6.5.1 elasticsearch6.5
chown -R zabbix.zabbix elasticsearch6.5
su - zabbix
mkdir -p /app/elasticsearch6.5/data

三、修改elasticsearch集羣配置文件

su - zabbix
node01
mkdir -p /app/elasticsearch6.5/data
grep -n ^[a-Z] /app/elasticsearch6.5/config/elasticsearch.yml 
17:cluster.name: app-zabbix
23:node.name: 172.16.8.76
33:path.data: /app/elasticsearch6.5/data
37:path.logs: /app/elasticsearch6.5/logs
43:bootstrap.memory_lock: true
55:network.host: 0.0.0.0
59:http.port: 9200
60:transport.tcp.port: 9300
69:discovery.zen.ping.unicast.hosts: ["172.16.8.76:9300", "172.16.8.78:9300"]
73:discovery.zen.minimum_master_nodes: 1
90:bootstrap.system_call_filter: false
91:http.cors.enabled: true
92:http.cors.allow-origin: "*"
node02
grep -n ^[a-Z] /app/elasticsearch6.5/config/elasticsearch.yml 
17:cluster.name: app-zabbix
23:node.name: 172.16.8.78
33:path.data: /app/elasticsearch6.5/data
37:path.logs: /app/elasticsearch6.5/logs
43:bootstrap.memory_lock: true
55:network.host: 0.0.0.0
59:http.port: 9200
60:transport.tcp.port: 9300
69:discovery.zen.ping.unicast.hosts: ["172.16.8.76:9300", "172.16.8.78:9300"]
73:discovery.zen.minimum_master_nodes: 1
90:bootstrap.system_call_filter: false
91:http.cors.enabled: true
92:http.cors.allow-origin: "*"

四、編輯limits.conf配置文件

vim /etc/security/limits.conf 
*          soft    nofile  65536
*          hard    nofile  131072
zabbix     soft    memlock unlimited
zabbix     hard    memlock unlimited
zabbix     hard    nproc   4096
zabbix     soft    nproc   4096

五、內核參數優化

vim /etc/sysctl.conf 
vm.max_map_count=262144
vm.swappiness=1

用命令sysctl -p 生效 
sysctl vm.max_map_count 查看值是否修改， 也能夠經過sysctl -w vm.max_map_count=262144 臨時設置值

六、啓動elasticsearch 服務

./elasticsearch -d

http://172.16.8.76:9200/
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案mysql

http://172.16.8.78:9200/
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案linux

七、安裝elasticsearch-head插件

由於head是一個用於管理Elasticsearch的web前端插件，該插件在es5版本之後採用獨立服務的形式進行安裝使用（以前的版本能夠直接在es安裝目錄中直接安裝），由於須要安裝nodejs、npm　
yum -y install nodejs npm
git clone https://github.com/mobz/elasticsearch-head.git
cd elasticsearch-head/
npm install

修改Gruntfile.js文件，修改服務監聽地址（增長hostname屬性，將其值設置爲*）
vim Gruntfile.js
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案git

修改head/_site/app.js，修改head鏈接es的地址（修改localhost爲本機的IP地址）
vim _site/app.js
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案github

啓動插件（後臺啓動方式)
cd /app/elasticsearch-head/node_modules/grunt/bin
nohup ./grunt server & exit
啓動成功後，可在瀏覽器訪問插件與ES進行交互
http://172.16.8.76:9100/

ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案

八、Kibana安裝及配置

tar -xvf kibana-6.5.1-linux-x86_64.tar.gz -C ../
mv kibana-6.5.1-linux-x86_64/ kibana6.5
chown -R zabbix.zabbix kibana6.5
grep -n ^[a-Z] /app/kibana6.5/config/kibana.yml 
2:server.port: 5601
7:server.host: "0.0.0.0"
28:elasticsearch.url: "http://172.16.8.78:9200"

直接訪問URLhttp://172.16.8.78:5601
ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案web

4、Zabbix_server配置支持Elasticsearch

一、Zabbix_server配置文件

vim /app/zabbix4/etc/zabbix_server.conf
HistoryStorageURL=http://172.16.8.76:9200
HistoryStorageTypes=uint,dbl,str,log,text

/etc/init.d/zabbix_server restart

二、修改配置文件vim conf/zabbix.conf.php

  1. 若是不一樣類型使用不一樣的ES集羣，能夠按以下進行配置
    $HISTORY['url'] = [
    'uint' => 'http://localhost1:9200',
    'text' => 'http://localhost2:9200'
    ];
    $HISTORY['types'] = ['uint', 'text'];
  2. 全部類型使用相同ES集羣
    $HISTORY['url'] = 'http://172.16.8.76:9200';
    $HISTORY['types'] = ['str', 'text', 'log', 'uint', 'dbl'];

ZABBIX4.0.2監控歷史數據存放Elasticsearch及集羣高可用方案

相關文章
相關標籤/搜索
每日一句
    每一个你不满意的现在，都有一个你没有努力的曾经。
本站公眾號
   歡迎關注本站公眾號,獲取更多信息
聯繫我們 最近搜索 最新文章 沪ICP备13005482号-10 MyBatis教程 SQL 教程 MySQL教程 Java 教程 Thymeleaf 教程 Hibernate教程 Spring教程 Redis教程