CDH集成kafka组件

文章目录

  • CDH集成kafka组件
    • 下载相关文件
    • 上传文件(主节点)
    • 激活parcel
    • 添加kafka服务和配置角色节点

参考网站:https://blog.csdn.net/qq_40887813/article/details/80512434

CDH集成kafka组件

下载相关文件

Csd下载地址:http://archive.cloudera.com/csds/kafka/
parcel下载地址: http://archive.cloudera.com/kafka/parcels/latest/
KAFKA-1.2.0.jar
KAFKA-2.1.1-1.2.1.1.p0.18-el7.parcel
KAFKA-2.1.1-1.2.1.1.p0.18-el7.parcel.sha1
manifest.json

上传文件(主节点)

csd包放到cm安装节点下的 /opt/cloudera/csd目录下。
在这里插入图片描述
将parcel包放到cm安装主节点下的/opt/cloudera/parcel-repo目录下。如果有相同的文件名,如已存在manifest.json文件,将原先的删除或修改名称。
注意:将*.sha1文件中的1去掉。
CDH集成kafka组件_第1张图片

激活parcel

进入WEB页面,点击主机选择Parcel,点击右上角的“检查更新parcel”,分配并激活percel包,注意此处一定要激活才能使用。

添加kafka服务和配置角色节点

如果遇到启动异常则删除kafka的data目录连同kafka目录一块删除,再重新安装。一般重复安装时会出现启动失败的情况,因为首先安装时有图下所示的目录存在,所以第二次安装时需要先删除kafka这个目录。如图中的data目录。
在这里插入图片描述
至此集成kafka完成。

你可能感兴趣的:(CDH)