Centos7_ELK5.4.1配置部署

Centos7_ELK5.4.1配置部署

1、概念

1、核心組成

ELK由Elasticsearch、Logstash和Kibana三部分組件組成；

Elasticsearch是個開源分佈式搜索引擎，它的特色有：分佈式，零配置，自動發現，索引自動分片，索引副本機制，restful風格接口，多數據源，自動搜索負載等。

Logstash是一個徹底開源的工具，它能夠對你的日誌進行收集、分析，並將其存儲供之後使用

kibana 是一個開源和免費的工具，它能夠爲 Logstash 和 ElasticSearch 提供的日誌分析友好的 Web 界面，能夠幫助您彙總、分析和搜索重要數據日誌

2.下載

官網下載地址：https://www.elastic.co/downloads

從中獲取最新版軟件包軟件包列表：

https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.4.1.tar.gz

https://artifacts.elastic.co/downloads/kibana/kibana-5.4.1-linux-x86_64.tar.gz

https://artifacts.elastic.co/downloads/logstash/logstash-5.4.1.tar.gz

https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-5.4.1-linux-x86_64.tar.gz

3.注意事項

  a、全部節點操做系統版本最好保持一致，centos6.5測試最新版本內核不支持，儘量使用目前centos7.3穩定版本。Elk服務器配置須要，若是條件運行使用爲2C4G，

  b、本文檔爲單機版，即將Elasticsearch、Logstash和Kibana安裝在一臺服務器上，生產環境建議將其在docker中分開安裝，以便快速遷移至物理服務器。

  c、關閉selinux，關閉firewalld或添加端口例外.修改主機名稱。

2、安裝部署

1.安裝jdk

yum install -y java-1.8.0-openjdk
hostnamectl set-hostname elk-1            #修改主機名systemctl stop firewalld                  #關閉firewalldsetenforce 0

2.下載軟件包

3.安裝elasticsearch

cd /usr/local/toolstar zxf elasticsearch-5.4.1.tar.gzmv elasticsearch-5.4.1 /usr/local/elasticsearchcd /usr/local/elasticsearch/config/

編輯elasticsearch.yml

mkdir -p /usr/local/elasticsearch/data /usr/local/elasticsearch/logsuseradd elasticsearchchown -R elasticsearch:elasticsearch /usr/local/elasticsearchecho "vm.max_map_count = 655360" >>/etc/sysctl.conf && sysctl -p

elasticsearch不可用root用戶啓動，新建elasticsearch運行用戶

編輯/etc/security/limits.conf文件，新增如下內容

* soft nofile 65536 
* hard nofile 65536 
* soft nproc 65536 
* hard nproc 65536

啓動elasticsearch

su - elasticsearch 
cd /usr/local/elasticsearch 
bin/elasticsearch &

查看端口監聽信息

curl測試

4.安裝logstash

cd /usr/local/toolstar -zxvf logstash-5.4.1.tar.gzmv logstash-5.4.1 /usr/local/logstashcd /usr/local/logstash/config
vim 01-syslog.conf

安裝filebeat

cd /usr/local/tools/tar -zxvf filebeat-5.4.1-linux-x86_64.tar.gzmv filebeat-5.4.1-linux-x86_64 /usr/local/filebeat
vim /usr/local/filebeat/filebeat.yml

啓動filebeat

/usr/local/filebeat
./filebeat &

啓動logstash（加載配置文件啓動）

cd /usr/local/logstash/
bin/logstash -f config/01-syslog.conf &

查看監聽端口

稍等之後屏幕會輸出返回的結果

能夠用名稱測試：curl http://172.17.10.198:9200/_search?pretty

咱們想以web形式展示數據，就須要安裝kibana

5.安裝kibana

cd /usr/local/tools/tar -zxf kibana-5.4.1-linux-x86_64.tar.gzmv kibana-5.4.1-linux-x86_64 /usr/local/kibanacd /usr/local/kibana/config
vim /usr/local/kibana/config/kibana.yml

啓動

/bin/kibana &

查看端口監聽狀況

3、測試

經過web界面訪問，建立index patterns

查看建立對應的日誌

本文爲我的測試ELK最新版本最基礎的搭建，能夠將其在docker中各應用拆分開部署，後期學習elk的高級用法。

©著做權歸做者全部：來自51CTO博客做者KaliArch的原創做品，如需轉載，請註明出處，不然將追究法律責任