review

Flink

1 Flink任务提交使用的资源?

  一般JobManager给2-5G,TaskManager给4-8G,平均并行度为3-8,普遍为4。

2 Flink实时数仓为何分层建模?

  避免重复计算

3 Flink怎么优化内存?flink内存模型 1.10做的最大的改动?

  0.10版本之后重点

4 Flink任务挂了怎么办?有什么保证机制?重启大概要多久?

  任务重启策略(固定延迟重启、故障率重启)

  CheckPoint机制,从最近一次CK时间恢复任务

  状态大小时间不一样,正常重启都在几秒钟时间

5 checkpoint机制和barrier,对齐和不对齐的区别

  JobManager周期性的从Source生成barrier数据,从上游往下游传递,当多并行度时下游需要等待上游barrier到达一致时才触发计算。

6 flink容错机制

  CheckPoint

7 flink checkpoint和state的区别

   Checkpoint是Flink实现容错机制最核心的功能,它能够根据配置周期性地基于Stream中各个Operator/task的状态来生成快照,从而将这些状态数据定期持久化存储下来,当Fli

你可能感兴趣的:(Resume,大数据)