Kafka配置问题总结

1、CDH5.11.0、Kafka 2.2.0环境

当使用/opt/cloudera/parcels/KAFKA/bin/kafka-console-producer --broker-list DD01:9092,DD02:9092,DD03:9092 --topic test测试时，报错信息如下：

ERROR Error when sending message to topic test with key: null, value: 5 bytes with error: (org.apache.kafka.clients.producer.internals.ErrorLoggingCallback)

org.apache.kafka.common.errors.TimeoutException: Failed to update metadata after 60000 ms.

查看cm中kafka配置发现broker tcp port为9096

应改为：/opt/cloudera/parcels/KAFKA/bin/kafka-console-producer --broker-list DD01:9096,DD02:9096,DD03:9096 --topic test

注意：使用组件时，确认端口号是否与cm中组件配置的一致。