FlinkKafka

【Flink】 Flink与Kafka版本对应关系

1.概述转载：Flink与Kafka版本对应关系转载这个主要是上次做flinkkafka版本升级，忘记记录了。

九师兄·2024-02-12 01:17

Flink的并行度和Kafka的partition的结合

flinkkafka实现反序列化：packageFlink_Kafka;importcom.alibaba.fastjson.JSON;importorg.apache.flink.api.common.serialization.DeserializationSchema

月疯·2023-11-09 11:37

Flink的基于两阶段提交协议的事务数据汇实现

背景在flink中可以通过使用事务性数据汇实现精准一次的保证，本文基于Kakfa的事务处理来看一下在Flink内部如何实现基于两阶段提交协议的事务性数据汇.flinkkafka事务性数据汇的实现1。

lixia0417mul2·2023-10-16 05:51

flinkkafka的参数

earliest-offset:从topic的最开始读latest-offset:从当前启动消费者传过来最新的数据读group-offsets:从消费者组上次记录的偏移量那里开始读timestamp:指定一个时间戳，以毫秒为单位，从这个时间开始读，这个时间必须必当前时间小scan.startup.timestamp-millis:1601186100000specific-offsets:指定各个

神呐_宽恕我把·2023-08-11 02:19

kafka marking the coordinator (id rack null) dead for group

问题flinkkafka设置自动offset提交kafka-client0.11.0.2kafka-broker1.1.1隔一段时间老报错如下markingthecoordinator(idracknull

邵红晓·2023-02-07 02:12

Flink作业开发清单(3)——Checkpoint

CheckpointCheckpoint功能可以保证作业失败重启或升级重启后，从上次"离开"的位置继续运行；比如FlinkKafka就是通过Checkpoint记录消费的Offset记录的；如果没有开启

TRX1024·2022-12-18 16:02

flink kafka自定义反序列化

flinkkafka实时流计算时，通常会有将多个topic数据接入计算，而这时通常需要区分消息属于哪个topic进行针对处理。

kevin_wf·2020-09-16 00:19

Flink反序列化之JsonDeserializationSchema和JSONKeyValueDeserializationSchema

1、引言FlinkKafka的使用者需要知道如何将Kafka中的二进制数据转换为Java/Scala对象，大多数的程序员都会使用newSimpleStringSchema()来反序列化Kafka中的数据

代码编制世界·2020-09-15 23:54

Flink Kafka 端到端 Exactly-Once 分析

摘要：本文基于Flink1.9.0和Kafka2.3版本，对Flinkkafka端到端Exactly-Once进行分析及notifyCheckpointComplete顺序，主要内容分为以下两部分：1.

Ververica·2020-08-02 14:38

95-130-340-源码-source-kafka相关-FlinkKafkaConsumer分析

上图是FlinkKafka

九师兄·2020-07-03 19:49

Flink Kafka 实时日志处理

FlinkKafka实时日志处理一、环境准备kafka安装flink安装二、spring集成pom配置flinkjobtest三、参考文献一、环境准备kafka安装参考Macspringboot集成kafkaflink

csdn_xpw·2020-07-01 02:49

FlinkKafkaConsumer官网文档翻译

FlinkKafka消费者与Flink的检查点机制集成可以保证下游的exactly-once语义。

香山上的麻雀·2020-03-24 23:13

推荐频道