【chunjun-bugfix】【flink sql元数据解析原理】多任务同时输出到同一数据源(HDFS、HIVE)时出现数据丢失的问题处理 与flink sql元数据解析原理
文章目录一.问题描述二.问题分析1.flink-sql任务运行主要逻辑分析1.1.jobmanager构建作业的行为1.2.taskmanager执行作业行为2.chunjun中hdfs连接器运行时关于.data文件夹的行为2.1.jobmanager预操作2.2.taskmanager操作2.3.jobmanager后置操作2.3.小结三.解决方案1.具体代码思路1.1.新增with参数1.2.