Docker安装Kafka及可视化界面详细教程【简单粗暴】

文章目录

  • 前言
    • 1. 安装zookeeper
    • 2. 安装kafka
    • 3. 可视化界面安装
    • 4. 消息生产和消费演示


前言

安装要求:

  • docker已安,最好配置阿里等镜像加速,提高镜像下载速度
    没安装的可参考Ubuntu快速安装Docker及管理界面portainer

安装介绍:

  • 安装zookpeeper,Kafka的运行依赖ZooKeeper
    ZooKeeper是一个分布式协调服务,它的主要作用是为分布式系统提供一致性服务,提供的功能包括:配置维护、命名服务、分布式同步、组服务等。
  • 安装kafka
    Kafka是一款性能非常好的并且支持分布式的消息队列中间件。由于它的高吞吐特性,Kafka通常使用在大数据领域,如日志收集平台。其实Kafka是一个流处理平台,这个概念不太好理解,之所以叫做流,是因为它在工作中就像是一个可以支撑高吞吐量的管道,数据像水一样流进去,然后另外一端再去读取这些数据。我们就可以把Kafka看作是一种特殊的消息队列中间件。

1. 安装zookeeper

docker run -d --name zookeeper -p 2181:2181 -v  /etc/localtime:/etc/localtime wurstmeister/zookeeper
  • /etc/localtime:/etc/localtime让docker容器使用主机系统时间(挂入/etc/localtime)
  • -p 2181:2181 前面的2181表示容器外宿主机的监听端口,后面的2181表示zookeeper 自身在容器中运行的端口。

2. 安装kafka

  • 命令行中192.168.41.128,改为你实际ip
docker run  -d --name kafka -p 9092:9092 -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=192.168.41.128:2181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.41.128:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 -t wurstmeister/kafka
  • -e KAFKA_BROKER_ID=0 在kafka集群中,每个kafka都有一个BROKER_ID来区分自己

  • -e KAFKA_ZOOKEEPER_CONNECT=192.168.41.128:2181/kafka 配置zookeeper管理kafka的路径,192.168.41.128改为你zookeeper部署的实际ip

  • -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.41.128:9092 把kafka的地址端口注册给zookeeper
    ,192.168.41.128改为你kafka部署的实际ip

  • -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 配置kafka的监听端口

  • -v /etc/localtime:/etc/localtime 容器时间同步虚拟机的时间

3. 可视化界面安装

  • kafkaUI-lite是一个轻便好用的kafka ui界面客户端工具,可以在生产消息、消费消息、管理topic、管理group;可以支持管理多个kafka集群
  • docker一键安装
docker run -d -p 8889:8889 freakchicken/kafka-ui-lite
  • 访问 http://ip:8889

4. 消息生产和消费演示

  • 浏览器输入http://ip:8889 访问管理界面
    Docker安装Kafka及可视化界面详细教程【简单粗暴】_第1张图片

  • 添加kafka地址
    Docker安装Kafka及可视化界面详细教程【简单粗暴】_第2张图片

  • 查看kafka订阅情况
    Docker安装Kafka及可视化界面详细教程【简单粗暴】_第3张图片

  • 生产消息
    Docker安装Kafka及可视化界面详细教程【简单粗暴】_第4张图片
    Docker安装Kafka及可视化界面详细教程【简单粗暴】_第5张图片

  • 消费消息
    Docker安装Kafka及可视化界面详细教程【简单粗暴】_第6张图片

你可能感兴趣的:(linux运维,kafka,docker,分布式,UI可视化,linux)