flink实战--CheckpointedFunction 自定义带有状态的算子

简介

• CheckpointedFunction是stateful transformation functions的核心接口，用于跨stream维护state
• snapshotState在checkpoint的时候会被调用，用于snapshot state，通常用于flush、commit、synchronize外部系统
• initializeState在parallel function初始化的时候(第一次初始化或者从前一次checkpoint recover的时候)被调用，通常用来初始化state，以及处理state recovery的逻辑

注意事项：initializeState先于open方法执行

案例

public class BufferingSink
        implements SinkFunction>,
                   CheckpointedFunction {
    private final int threshold;
    private transient ListState> checkpointedState;
    private List> bufferedElements;
    public BufferingSink(int threshold) {
        this.threshold = threshold;
        this.bufferedElements = new ArrayList<>();
    }
    @Override
    public void invoke(Tuple2