kafka-1--linux-环境单机部署

kafka 安装包下载

• jdk安装包下载
• zookeeper安装包下载
• kafka安装包下载
• 上传安装包到 你要安装的目录下（/usr）

安装java环境

1-1.解压java安装包

tar -zxvf /usr/jdk-8u231-linux-x64.tar.gz

1-2.配置环境变量

vi /etc/profile

#编辑profile文件将下面java环境变量配置到文档末尾中
#set java environment
JAVA_HOME=/usr/jdk1.8.0_231
PATH=$PATH:$JAVA_HOME/bin
CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export JAVA_HOME CLASSPATH PATH

1-3.让配置文件生效

source /etc/profile

1-4.校验java是否安装成功

java -version
#若显示已下内容则安装成功
[root@root usr]# java -version
java version "1.8.0_231"
Java(TM) SE Runtime Environment (build 1.8.0_231-b11)
Java HotSpot(TM) 64-Bit Server VM (build 25.231-b11, mixed mode)

安装zookeeper

2-1.解压zookeeper安装包

tar -zxvf /usr/zookeeper-3.6.1-bin.tar.gz

2-2.更改配置文件名称（conf目录下提供了配置的样例zoo_sample.cfg，要将zk运行起来，需要将其名称修改为zoo.cfg）

 cd /usr/apache-zookeeper-3.6.1-bin/conf/

2-3.启动zookeeper

[root@root /]# cd /usr/apache-zookeeper-3.6.1-bin/bin/
##启动zookeeper
[root@root bin]# ./zkServer.sh start zoo.cfg
##查看zookeeper状态
[root@root bin]# ./zkServer.sh status zoo.cfg
ZooKeeper JMX enabled by default
Using config: /usr/apache-zookeeper-3.6.1-bin/bin/../conf/zoo.cfg
Client port found: 2181. Client address: localhost.
Mode: standalone

安装kafka

3-1.解压kafka安装包

tar -zxvf /usr/kafka_2.12-2.5.0.tgz

3-2.配置 kafka配置文件

[root@root /]# cd /usr/kafka_2.12-2.5.0/
  oot@root kafka_2.12-2.5.0]# ls
bin  config  libs  LICENSE  logs  NOTICE  site-docs
[root@root kafka_2.12-2.5.0]# cd config/
[root@root config]# ls
1                                connect-console-source.properties  connect-file-sink.properties    connect-log4j.properties         connect-standalone.properties  log4j.properties     server.properties       trogdor.conf
connect-console-sink.properties  connect-distributed.properties     connect-file-source.properties  connect-mirror-maker.properties  consumer.properties            producer.properties  tools-log4j.properties  zookeeper.properties
[root@root config]# vim server.propertie

3-3.kafka需要修改的配置

配置参数	解释
broker.id=0	这个主要配置集群的时候设定不同borker 单机这里不用管
listeners=PLAINTEXT://ip 或者 your.host.name:9092	注意这里 配置你当前hostName:9092；hostname是你主机的名称（可以直接配置localhost） 9092是kafka的端口号
advertised.listeners=PLAINTEXT://外网ip:9092	如果你是在阿里云等服务器上部署的，就需要把kafka的访问地址配置在这里，将上面的配置注释掉，并且访问你的外网ip
log.dirs=/usr/kafka-logs	配置kafka日志的输出地址，根据自己的需要配置，我是配置在了/usr下面
zookeeper.connect=ip 或者 your.host.name:2181	配置kafka连接的zookeeper地址 2181是zookeeper的默认端口号

3-4.kafka启动及查看命令

##进到kafka bin目录下
[root@root bin]# cd /usr/kafka_2.12-2.5.0/bin/
##启动kafka -daemon -- 后台启动
[root@root bin]# ./kafka-server-start.sh -daemon ../config/server.properties
##查看topic
[root@root bin]# ./kafka-topics.sh --list --zookeeper localhost:2181    
__consumer_offsets
__transaction_state
topic01
topic02
topic03
##创建生产者
[root@root bin]# ./bin/kafka-console-producer.sh --broker-list localhost:9092 --topic topic01
##创建消费者
[root@root bin]# ./bin/kafka-console-consumer.sh  --bootstrap-server localhost:9092 --from-beginning --topic topic01
##创建topic
[root@root bin]# ./kafka-topics.sh --create --zookeeper localhost:2181 -replication-factor 1 --partitions 1 --topic fufu