本地windows下新建kafka生產消費數據

Kafka的運行依賴於Zookeeper,因此在運行Kafka以前咱們須要安裝並運行Zookeeper html

1.安裝zookeepershell

1.1 下載安裝文件: http://mirror.bit.edu.cn/apache/zookeeper/
1.2 解壓文件(本文解壓到 D:\zookeeper-3.4.8)
1.3 打開D:\zookeeper-3.4.8\conf,把zoo_sample.cfg重命名成zoo.cfg
1.4 從文本編輯器裏打開zoo.cfg
1.5 修改dataDir和dataLogDir保存路徑
dataDir=D:\logs\zookeeper
dataLogDir=D:\data\logs\zookeeper
1.6 添加以下系統變量:ZOOKEEPER_HOME: D:\zookeeper-3.4.8
Path: 在現有的值後面添加 ;%ZOOKEEPER_HOME%\bin;
2.cmd運行zookeeper
apache

運行Zookeeper: 打開cmd而後執行zkserver 命令。若是打印如下信息則表示zookeeper已經安裝成功並運行在2181端口。bootstrap

截圖好像報錯了·~~windows

2.安裝並運行Kafka
2.1 下載安裝文件: http://kafka.apache.org/downloads.html
2.2 解壓文件(本文解壓到 D:\kafka_2.11-0.10.2.0)
2.3 打開D:\kafka_2.11-0.10.2.0\config\ server.properties
2.4 把 log.dirs的值改爲 log.dirs=D:\data\logs\kafka
2.5 D:\kafka_2.11-0.10.2.0\bin文件夾下的.sh命令腳本是在shell下運行的,此文件夾下還有個 windows文件夾,裏面是windows下運行的.bat命令腳本
2.6 在D:\kafka_2.11-0.10.2.0文件夾中」Shift+鼠標右鍵」點擊空白處打開命令提示窗口
2.7 輸入並執行一下命令以打開kafka:(根據實際狀況能夠進行適當的路徑修改)
.\bin\windows\kafka-server-start.bat .\config\server.properties編輯器

3.建立topics
3.1在D:\kafka_2.11-0.10.2.0\bin\windows文件夾中」Shift+鼠標右鍵」點擊空白處打開命令提示窗口spa

kafka-topics.bat --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test1029
4.打開一個Producer
4.1在D:\kafka_2.11-0.10.2.0\bin\windows文件夾中」Shift+鼠標右鍵」點擊空白處打開命令提示窗口code

kafka-console-producer.bat --broker-list localhost:9092 --topic test1029
5.打開一個Consumer
5.1在D:\kafka_2.11-0.10.2.0\bin\windows文件夾中」Shift+鼠標右鍵」點擊空白處打開命令提示窗口server

關於最後消費者啓動的方法,目前已通過時,0.90版本以後啓動消費者的方法:,kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test0811 --from-beginning

注意:以上打開的窗口不要關閉
而後就能夠在Producer控制檯窗口輸入消息了。在消息輸入事後,很快Consumer窗口就會顯示出Producer發送的消息htm

相關文章
相關標籤/搜索