Flume系列之:flume集成GooseFS的详细步骤

Flume系列之:flume集成GooseFS的详细步骤

  • 一、需求背景
  • 二、深入了解GooseFS
  • 三、flume集成GooseFS详细步骤
  • 四、核心参数详解
  • 五、完整配置
  • 六、topic写入数据
  • 七、查看flume日志和生成的文件
  • 八、使用命令查询GooseFS上的文件
  • 九、总结和延展

一、需求背景

  • debezium采集数据库数据发送到Kafka Topic,flume消费Kafka Topic的数据落到GooseFS上

flume生产应用可以参考博主以下几篇博客,更多flume技术请移步博主flume专栏:

  • flume系列之:flume消费数据量较大kafka Topic的source、channel、sink等参数通用设置
  • flume系列之:flume配置写入zookeeper节点,根据zookeeper中flume配置启动f

你可能感兴趣的:(flume,Flume系列,flume集成,GooseFS)