liunx服务器安装kafka

liunx服务器安装kafka

  • 1. 初始化安装环境
    • 1.1 安装jdk
      • 1.1.1 找到对应的jdk版本
      • 1.1.2 下载并安装
        • 1.1.2.1 配置jdk环境变量
    • 1.2 安装 zookeeper
      • 1.2.1 查找kafka对应zookeeper版本
        • 启动
  • 2. 下载kafka 安装包

kafka 3.0.0 之前 (包括3.0.0版本)支持jdk 8 ,3.0.0之后版本不再支持jdk8版本 ,
安装官网安装kafka ,出现了各种各样的问题。

总结:kafka和zookeeper和jdk版本对应,
kafka启动报错 根据提示改正后 需要删除某些临时文件内容 。

下面整理了kafka安装的完整步骤,适合所有kafka安装版本

1. 初始化安装环境

1.1 安装jdk

1.1.1 找到对应的jdk版本

找到kafka 版本的 kafka_2.13-2.6.1/bin/kafka-run-class.sh 文件

找关键字 java version 查看kafka 支持的最低jdk版本

# GC options
GC_FILE_SUFFIX='-gc.log'
GC_LOG_FILE_NAME=''
if [ "x$GC_LOG_ENABLED" = "xtrue" ]; then
  GC_LOG_FILE_NAME=$DAEMON_NAME$GC_FILE_SUFFIX

  # The first segment of the version number, which is '1' for releases before Java 9
  # it then becomes '9', '10', ...
  # Some examples of the first line of `java --version`:
  # 8 -> java version "1.8.0_152"
  # 9.0.4 -> java version "9.0.4"
  # 10 -> java version "10" 2018-03-20
  # 10.0.1 -> java version "10.0.1" 2018-04-17
  # We need to match to the end of the line to prevent sed from printing the characters that do not match
  JAVA_MAJOR_VERSION=$("$JAVA" -version 2>&1 | sed -E -n 's/.* version "([0-9]*).*$/\1/p')
  if [[ "$JAVA_MAJOR_VERSION" -ge "9" ]] ; then
    KAFKA_GC_LOG_OPTS="-Xlog:gc*:file=$LOG_DIR/$GC_LOG_FILE_NAME:time,tags:filecount=10,filesize=102400"
  else
    KAFKA_GC_LOG_OPTS="-Xloggc:$LOG_DIR/$GC_LOG_FILE_NAME -verbose:gc -XX:+PrintGCDetails -XX:+PrintGCDateStamps -XX:+PrintGCTimeStamps -XX:+UseGCLogFileRotation -XX:NumberOfGCLogFiles=10 -XX:GCLogFileSize=100M"
  fi
fi

1.1.2 下载并安装

具体的jdk版本 看kafka
liunx服务器安装kafka_第1张图片

1.1.2.1 配置jdk环境变量

// 配置jdk环境变量
vim  /etc/profile

文末加:


export JAVA_HOME=/opt/jdk1.8.0_24  # 自己的jdk安装路径 ,根据情况修改
export PATH=$JAVA_HOME/bin:$PATH
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

保存后

// 配置文件生效
source /etc/ profile

测试

[root@localhost opt]# java -version
java version "1.8.0_241"
Java(TM) SE Runtime Environment (build 1.8.0_241-b07)
Java HotSpot(TM) 64-Bit Server VM (build 25.241-b07, mixed mode)

1.2 安装 zookeeper

1.2.1 查找kafka对应zookeeper版本

下载对应 的zookeeper 版本,查找办法 :下载kafka src 源文件 kafka-2.6.0-src.tgz (asc, sha512) ,解压打开相对路径的 kafka-2.6.0-src\gradledependencies.gradle文件,搜索关键字zookeeper关键字

 zookeeper: "3.5.8",

到zookeeper官网下载zookeeper 3.5.8
liunx服务器安装kafka_第2张图片

下载文件名含bin的压缩包,要不然启动报错

liunx服务器安装kafka_第3张图片

要启动 ZooKeeper,您需要一个配置文件。这是一个示例,在conf/zoo.cfg中创建它:

tickTime=2000
dataDir=/var/lib/zookeeper
clientPort=2181

启动

liunx服务器安装kafka_第4张图片

2. 下载kafka 安装包

下载地址 ,官网包下载地址,具体命令操作参考官网

你可能感兴趣的:(服务器,kafka,java)