kafka-2安裝實戰篇

瞭解好kafka的基礎概念以後，能夠開始動手，

環境：centos7,

官方教程

http://kafka.apache.org/quickstart#quickstart_download

安裝java環境,安裝jdk(推薦，也省事）

Centos ：

yum -y update

yum -y install java

Ubuntu ：

sudo apt-get update

sudo apt-get install java

或者也能夠經過源碼手動安裝（若是上面的執行了，這一步到重啓環境變量，能夠直接跳過了）

http://download.oracle.com/otn-pub/java/jdk/8u131-b11/d54c1d3a095b4ff2b6607d096fa80163/jdk-8u131-linux-x64.tar.gz

tar zxvf jdk-8u65-linux-x64.tar.gz

mv jdk1.8.0_65 java

mv java /java

#設置環境變量，生效

vi .bash_profile

JAVA_HOME=/java

PATH=$PATH:$JAVA_HOME/bin

export JAVA_HOME PATH

#從新啓動環境變量，使配置生效

source .bash_profile 

下載kafka

https://www.apache.org/dyn/closer.cgi?path=/kafka/0.10.2.0/kafka_2.11-0.10.2.0.tgz

> tar -xzf kafka_2.11-0.10.2.0.tgz

> cd kafka_2.11-0.10.2.0

啓動zookeeper服務

bin/zookeeper-server-start.sh -daemon config/zookeeper.properties

#能夠經過ps aux | grep zookeeper

查看起來沒有

#編輯kafka配置變量，幾個重要的設置

 

vim config/server.properties
num.partitions = 10   #設置partitions數量，在客戶端消費時指定多少個線程併發
listeners=PLAINTEXT://192.168.1.200:9092     #設置本機的監聽ip及端口，若是爲127.0.0.1那從其餘機器上將鏈接不了，須要把192.168.1.200(個人ip)設置成你本身本機的真實ip
#設置日誌的保存時間，是按byt保存仍是按照時間，超過的會自動刪除
log.retention.bytes=1073741824
log.retention.hours=168
zookeeper.connect=localhost:2181#本地監聽的zookeeper端口，默認便可

啓動kafka

bin/kafka-server-start.sh config/server.properties

vim /etc/iptables.startup

#增長

-A KAFKA -p tcp -m tcp --dport 10050 -j ACCEPT

#重啓，生效

iptables-restore < /etc/iptables.startup

#查看list

iptables -L

#設置完成後在本地telnet下本機的10050通麼，通的話再從其餘機器telnet測試下

#若是須要重啓kafka或者zookeeper，執行下面kill命令，再從新執行上面啓動命令就能夠了

ps -ef | grep kafka |awk '{print $2}'|xargs kill -9