Kafka集群部署与结构

1、部署zookeeper集群。

可参考之前文档

2、修改配置

sudo vim /path/to/kafka_home/config/server.properties

broker.id=0 listeners=PLAINTEXT://192.168.233.128:9092 zookeeper.connect=192.168.233.128:2181,192.168.233.129:2181,192.168.233.130:2181

主要修改上面三个配置

3、启动kafka server

sudo /path/to/kafka_home/bin/kafka-server-start.sh -daemon /path/to/kafka_home/config/server.properties

4、查看服务是否启动成功

/path/to/kafka_home/bin/kafka-cluster.sh cluster-id --bootstrap-server 192.168.233.128:9092

正常应该输出

Cluster ID: xxxxx

5、往集群添加broker

添加一台机器，配置一个不同broker.id和相同的zookeeper.connect并重复上述步骤

总结：

可见kafka的broker是可以随时自由拓展的，只需要找个新机器，配置一个不同的broker.id，配置相同的zookeeper.connect启动就会自动加入kafka集群。