kafka 初学搭建

用于记录学习部署过程，仅供参考，如有问题，希望指点。

一：准备

1，准备虚拟机

2，配置java环境变量（晚上有好多，可以执行搜索）

3，下载kafka_2.11-0.10.1.0.tgz（https://www.apache.org/dyn/closer.cgi?path=/kafka/0.10.1.0/kafka_2.11-0.10.1.0.tgz）

4，zookeeper（本次使用kafka自带的zookeeper），也可以使用自己安装的zookeeper。

二：环境搭建

1，上传kafka_2.11-0.10.1.0.tgz到linux环境的  /tmp目录（上传方式可以自己随意选择）。

2，解压kafka_2.10-0.10.1.0.tgz，执行：  tar -zxvf kafka_2.10-0.10.1.0.tgz -C /usr/local/

3，进入kafka解压目录   /usr/local/kafka_2.10-0.10.1.0， 执行：  cd /usr/local/kafka_2.10-0.10.1.0

4，启动kafka自带的zookeeper服务  

1），创建zookeeper数据路径：    mkdir /usr/local/kafka_2.10-0.10.1.0/zookeeper_data

2），修改zookeeper配置文件： vi config/zookeeper.properties ,将  dataDir修改成    /usr/local/kafka_2.10-0.10.1.0/zookeeper_data

3），启动zookeeper：  nohup ./bin/zookeeper-server-start.sh config/zookeeper.properties  &

5，启动kafka服务

1），修改server.properties配置文件（由于是初学阶段，暂时修改一些简单内容，后去会针对优化配置进行学习）：vi config/server.properties

修改   log.dirs=/usr/local/kafka_2.10-0.10.1.0/logs/kafka-logs

如果是自己部署的zookeeper的话，还需要修改   zookeeper.connect 为相应地址。

2），启动kafka服务： nohup ./bin/kafka-server-start.sh config/server.properties &

   

6，创建topic：  ./bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

查看topic：./bin/kafka-topics.sh --list --zookeeper localhost 2181

7，发送消息： kafka-console-producer.sh --broker-list localhost:9092 --topic test

8，接收消息：kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning

到此，单节点的已经部署成功，之后会继续学习集群部署。