Kafka是一種高吞吐量的分佈式發佈訂閱消息系統,從本章開始咱們先極速體驗,再實戰docker下搭建kafka環境,最後開發一個java web應用來體驗kafka服務。java
咱們一塊兒用最快的速度體驗kafka的消息發佈訂閱功能:程序員
新建一個docker-compose.yml文件,內容以下:web
version: '2' services: zk_server: image: daocloud.io/library/zookeeper:3.3.6 restart: always kafka_server: image: bolingcavalry/kafka:0.0.1 links: - zk_server:zkhost command: /bin/sh -c '/usr/local/work/start_server.sh' restart: always message_producer: image: bolingcavalry/kafka:0.0.1 links: - zk_server:zkhost - kafka_server:kafkahost restart: always message_consumer: image: bolingcavalry/kafka:0.0.1 links: - zk_server:zkhost restart: always
打開終端,在docker-compose.yml所在目錄下執行<font color="red">docker-compose up -d</font>,因爲須要從hub.docker.com下載鏡像,因此須要等待幾分鐘,下載結束後會自動啓動四個容器,以下圖:docker
爲了更好的觀察效果,咱們要打開三個終端對不一樣的容器作操做,在後面咱們用編號來表達不一樣的終端,編號對應以下:shell
1號 : kafka server 2號 : 消息生產者(producer) 3號 : 消息消費者(consumer)bash
1號終端中輸入如下命令,便可看到kafka server的實時輸出信息:分佈式
docker logs -f dockerkafka_kafka_server_1
輸入命令後看到的信息以下圖,與zookeeper鏈接成功,啓動成功:測試
2號終端中輸入如下命令,進入消息生產者容器:3d
docker exec -it dockerkafka_message_producer_1 /bin/bash
再執行如下命令建立一個主題:rest
$WORK_PATH/$KAFKA_PACKAGE_NAME/bin/kafka-topics.sh --create --zookeeper zkhost:2181 --replication-factor 1 --partitions 1 --topic test001
3號終端中輸入如下命令,進入消息消費者容器:
docker exec -it dockerkafka_message_consumer_1 /bin/bash
執行如下命令能夠查看當前kafka sever上的全部主題:
$WORK_PATH/$KAFKA_PACKAGE_NAME/bin/kafka-topics.sh --list --zookeeper zkhost:2181
能夠看到剛纔在2號終端建立的主題,以下圖:
繼續在3號終端上執行如下命令,便可訂閱主題爲test001的消息:
$WORK_PATH/$KAFKA_PACKAGE_NAME/bin/kafka-console-consumer.sh --zookeeper zkhost:2181 --topic test001 --from-beginning
此時回到1號終端,能夠看到消息訂閱者容器的鏈接信息,以下圖:
如今主題也建立了,訂閱也添加了,能夠測試消息的發送和接收了:
在2號終端,執行如下命令,就能夠進入發送消息的交互模式:
$WORK_PATH/$KAFKA_PACKAGE_NAME/bin/kafka-console-producer.sh --broker-list kafkahost:9092 --topic test001
此時已經進入了交互模式,繼續輸入一個字符串,例如<font color="red">hello world!</font>,再輸入回車鍵,便可發送內容爲"hello world!"的消息,以下圖:
如今回到3號終端,能夠看到已經接收到了最新的消息,內容被打印出來了,以下圖:
最後咱們回到1號終端,能看到消息生產者的鏈接信息,以下圖:
至此,咱們快速體驗了kafka的消息發佈訂閱功能,下一章咱們再細說docker下kafka環境的搭建過程。