5_Linux下kafka安装及配置

一、安装Kafka：

• 1、解压

tar -zxvf kafka_2.12-2.0.0.tgz -C ~/softwares/

• 2、建软连接 进入softwares下面

 ln -s kafka_2.12-2.0.0  kafka

• 3、配置环境变量

vi ~/.bashrc

export KAFKA_HOME=/home/yss/softwares/kafka
export PATH=$PATH:$KAFKA_HOME/bin

source ~/.bashr

成功显示：（命令行输入ka，双击Tab）

• 4、配置Kafka：

进入kafka的配置目录

cd /softwares/kafka/config

修改文件server.properties:

vi server.properties

broker.id=1 # 唯一ID同一集群下broker.id不能重复
listeners=PLAINTEXT://localhost:9092 # 监听地址
log.dirs=/data/kafka/data # 数据目录
log.retention.hours=168 # kafka数据保留时间单位为hour 默认 168小时即 7天
log.retention.bytes=1073741824 #(kafka数据量最大值，超出范围自动清理，和log.retention.hours配合使用，注意其最大值设定不可超磁盘大小）
zookeeper.connect=localhost:2181 #(zookeeper连接ip及port,多个以逗号分隔)

以下图片为配置信息所在的大概位置：

注意：
log.dirs=/data/kafka/data
命令
cd /data
建目录
sudo mkdir -p kafka/data
赋权
sudo chmod -R 777 kafka

进入softwares下的kafka目录建立日志文件
mkdir logs

chmod 777 logs

进入logs目录建立文件（可建可不建）
sudo touch log-cleaner.log

• 5、启动和停止：

先启动zookeeper集群

启动Kafka

./bin/kafka-server-start.sh config/server.properties

停止命令如下：

./bin/kafka-server-stop.sh

• 6、测试

localhost为自己的IP地址

创建topic:
		
	kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test

展示topic:
		
	kafka-topics.sh --list --zookeeper localhost:2181	

生产者：
		
	kafka-console-producer.sh --broker-list localhost:9092 --topic test

消费者：
		
	kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning