【kafka-部署】docker快速构建kafka测试环境（单机）

1、下载kafka和zookeeper镜像

docker pull wurstmeister/zookeeper
docker pull wurstmeister/kafka

2、启动容器

这里zk对应宿主机的端口不设置，默认随机分配。若想查看zookeeper映射的宿主机端口可用docker ps -a查看。

docker run -d --name zookeeper -p 2181 --volume /etc/localtime:/etc/localtime -t wurstmeister/zookeeper
docker run -d --name kafka --publish 9092:9092 --link zookeeper --env KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 --env KAFKA_ADVERTISED_HOST_NAME=[宿主机IP] --env KAFKA_ADVERTISED_PORT=9092 --volume /etc/localtime:/etc/localtime wurstmeister/kafka

进入容器操作

docker exec -it [容器ID] /bin/bash

3、修改配置

kafka默认安装路径 /opt/kafka_2.11-2.0.1

注意：
WARN [Producer clientId=console-producer] Error while fetching metadata with correlation id 1 : {test=LEADER_NOT_AVAILABLE} (org.apache.kafka.clients.NetworkClient)
需要修改config/server.properties如下两项设置，然后重启docker才生效。

listeners=PLAINTEXT://localhost:9092
advertised.listeners=PLAINTEXT://localhost:9092

4、测试

#创建topic
bin/kafka-topics.sh --create --zookeeper zookeeper:2181 --replication-factor 1 --partitions 1 --topic test
#查看
bin/kafka-topics.sh --list --zookeeper zookeeper:2181
#生产者
bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test
#消费者
bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning

image.png

至此简单的测试环境构建完成。

附录

$ docker ps // 查看所有正在运行容器
$ docker stop containerId // containerId 是容器的ID

$ docker ps -a // 查看所有容器
$ docker ps -a -q // 查看所有容器ID

$ docker stop $(docker ps -a -q) //  stop停止所有容器
$ docker rm $(docker ps -a -q) //   remove删除所有容器