白话Flink基础理论

Flink+Paimon/Hudi+Doris湖仓架构在各大公司落地的一些总结

记录一下各大公司落地湖仓项目的主要解决的问题和收益，从这些已经有的实践中吸收一些经验。参考的分享文档在文章末尾。一些背景阿里妈妈：实时广告决策驱动淘天集团商业数智营销中台，阿里妈妈日均处理千亿级广告请求，传统Lambda架构导致实时与离线数据割裂，无法满足分钟级预算调控需求。广告归因分析需跨时段行为关联，要求数据更新延迟低于50ms，同时需支持700GB/h的高并发写入。腾讯视频：指标治理与时效压
王知无(import_bigdata)·2025-03-26 20:07

Flink CDC 在阿里云实时计算Flink版的云上实践

摘要：本文整理自阿里云高级开发工程师，ApacheFlinkCommitter阮航老师在FlinkForwardAsia2024生产实践（三）专场中的分享，主要分为以下四个方面：一、FlinkCDC&实时计算
·2025-03-26 03:19

C#编程实现串口通信与Modbus协议及CRC校验

首先介绍了串口通信的基础理论，包括常用接口标准和参数设置。随后，提供了C#中使用SerialPort类读取串口数据的实例代码，展示了如何配置串口参数和监听数据接收事件。
Compass宁·2025-03-25 22:59

从零到一学习c++（基础篇--筑基期十一-类）

温馨提示2：本篇会尽量用更加通俗的语言介绍c++的基础，用通俗的语言去解释术语，但不会再大白话了哦。常见，常看，常想，渐渐的就会发现术语也是很简单滴。
愚戏师·2025-03-25 12:43

AI一键草图生成3D模型：设计师的“3D草图本”来了！

一、大白话解释：设计师的“3D草图本”想象一下，你只需要在纸上（或者屏幕
花生糖@·2025-03-25 09:18

FlinkCDC实战：将 MySQL 数据同步至 ES

当前需要处理的业务场景:将订单表和相关联的表(比如:商品表、子订单表、物流信息表)组织成宽表,放入到ES中,加速订单数据的查询.同步数据到es.概述1.什么是CDC2.什么是FlinkCDC3.FlinkCDCConnectors
java15655057970·2025-03-25 00:41

基于Flink SQL的实时指标多维分析模型

FlinkSQL逻辑SETtable.exec.s
PONY LEE·2025-03-24 22:57

Flink sql-clinet 查询报错

Flinksql-clinet查询报错运行后进行select'helloworld’报以下错误，couldnotexecutesqlstatementjava.net.NoRouteToHostException
lhfmqc·2025-03-23 23:10

SpringBoot集成Flink-CDC，实现对数据库数据的监听

二、Flink-CDC是什么？CDCConnectorsforApacheFlink是一组用于ApacheFlink的源连接器，使用变更数据捕获(CDC)从
rkmhr_sef·2025-03-23 16:07

深入解析Flink Kafka Connector的分布式流数据采集架构与底层实现

目录1.FlinkKafka连接器的分布式流采集架构1.1架构组成1.2分布式流模型2.数据分区分配策略3.为什么重写序列化和偏移量管理3.1与Flink分布式架构集成3.2与Flink检查点机制集成同时承接多级并行架构
数据与算法架构提升之路·2025-03-23 16:04

Apache大数据旭哥优选大数据选题

，这样才能避免不必要的麻烦python、flask、Django、mapreduce、mysqljava、springboot、vue、echarts、hadoop、spark、hive、hbase、flink
Apache大数据旭·2025-03-23 13:12

Java面试宝典，kafka优先级队列

用大白话来说就是数据库快扛不住了。数据库出现性能瓶颈，对外表现有几个方面：大量请求阻塞在高并发场景下，大量请求都需要操作数据库，导致连接数不够了，请求处于阻塞状态。
m0_57081324·2025-03-23 07:02

flink作业访问zk出现acl报错问题分析

#问题现象向yarn集群提交flink作业的时候会出现zkacl的异常经确认：1.zk相关acl密码没有更改过2.重新部署客户端配置后提交任务同样报错3.修改flink的zk目录，重启后可以正常运行任务
spring208208·2025-03-23 03:47

Flink Cdc TiDB详解

1.什么是FlinkTiDBCDC？简单说就是用Flink实时抓取TiDB数据库的数据变化（比如新增、修改、删除），并将这些变化数据以流的形式处理，用于实时分析、同步到其他系统等场景。
24k小善·2025-03-23 03:44

Flink CDC 与 SeaTunnel CDC 简单对比

FlinkCDC与SeaTunnelCDC简单对比CDC技术概述变更数据捕获（ChangeDataCapture，简称CDC）是一种用于捕获数据库中数据变更的技术，能够实时识别、捕获并输出数据库中的插入
窝窝和牛牛·2025-03-23 03:13

鸿蒙 5 开发工具 Ark-TS UI 到底有多好用？一篇文章讲明白

下面咱们用大白话讲讲它的厉害之处。一、不用纠结怎么盖房子，只需要画图纸以前写代码做界面，就像盖房子要一块砖一块砖垒——得告诉程序“先建墙，再安门，最后刷漆”。但Ark-TSUI不一样，它用的是“声明
·2025-03-23 02:28

Flink相关面试题

以下是150道ApacheFlink面试题及其详细回答，涵盖了Flink的基础知识、核心架构、API使用、性能调优等多个方面，每道题目都尽量详细且简单易懂：Flink基础概念类1.什么是ApacheFlink
努力的搬砖人.·2025-03-22 18:15

React 中 Context 的作用是什么，在什么场景下使用它？

大白话React中Context的作用是什么，在什么场景下使用它？React中Context的作用在React里，组件之间常常需要共享数据。通常情况下，数据是通过props从父组件传递到子组件。
前端大白话·2025-03-22 00:32

Ark-TS 语言：鸿蒙生态的高效开发利器，让我们用大白话说一说

Ark-TS（华为专门为鸿蒙系统——就是华为自己的手机、平板、智能设备操作系统——设计的编程语言，基于TypeScript，一种比普通JavaScript更严格、能减少错误的语言）是鸿蒙应用开发的主力工具。它就像给开发者配备了一套趁手的工具包，让写代码又快又稳。简单来说，Ark-TS有几个厉害的地方：静态类型检查（写代码时必须给变量指定类型，比如数字、文字，这样电脑能在运行前就发现类型错误，避免程
·2025-03-21 21:57

如何在 Vue 项目中实现动态组件加载，有什么应用场景？

大白话如何在Vue项目中实现动态组件加载，有什么应用场景？什么是动态组件加载在Vue项目里，动态组件加载就是能够在程序运行时动态地决定要渲染哪个组件。
前端大白话·2025-03-21 20:59

如何在 React 项目中优化列表渲染性能，避免不必要的重绘？

大白话如何在React项目中优化列表渲染性能，避免不必要的重绘？在React项目里，要是列表数据量很大，每次数据变化都重新渲染列表，会严重影响性能。
前端大白话·2025-03-21 20:59

如何在 HTML 中创建一个有序列表和无序列表，它们的语义有何不同？

大白话如何在HTML中创建一个有序列表和无序列表，它们的语义有何不同？1.HTML中有序列表和无序列表的基本概念在HTML里，列表是一种用来组织信息的方式。
前端大白话·2025-03-21 15:46

Flink命令行启动Job任务

Flink非交互式运行Job任务Flink命令行启动Job任务具体命令flink参数说明-c,--class-d,--detached后台运行-p,--parallelism并行度[test@xxx~]
平凡的运维之路·2025-03-21 13:30

快速启动flink项目

idea-----File----new---Project------Maven----Createfromarchetype----AddArchetype弹出框：GroupId填org.apache.flinkArtifactId
for your wish·2025-03-21 13:58

【Flink】flink启动任务，taskmanager.out 文件增涨非常快

1.概述flink启动任务，taskmanager.out文件增涨非常快，这个文件大小怎么限定？
九师兄·2025-03-21 13:55

IDEA本地启动flink 任务

1pom中添加org.apache.flinkflink-clients_${scala.binary.version}${flink.version}org.apache.flinkflink-runtime-web
Direction_Wind·2025-03-21 13:22

Flink启动任务

Flink以本地运行作为解读例如：第一章Python机器学习入门之pandas的使用提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录Flink前言StreamExecutionEnvironmentLocalExecutorMiniClusterStreamGraph
swg321321·2025-03-21 12:18

FlinkCDC实战：将 MySQL 数据同步至 ES

当前需要处理的业务场景:将订单表和相关联的表(比如:商品表、子订单表、物流信息表)组织成宽表,放入到ES中,加速订单数据的查询.同步数据到es.概述1.什么是CDC2.什么是FlinkCDC3.FlinkCDCConnectors
小DuDu·2025-03-21 04:08

Flink 通过 Chunjun Oracle LogMiner 实时读取 Oracle 变更日志并写入 Doris 的方案

本方案基于Flink+Chunjun，通过OracleLogMiner解析Re
roman_日积跬步-终至千里·2025-03-20 18:12

数据中台（二）数据中台相关技术栈

1.平台搭建1.1.Amabari+HDP1.2.CM+CDH2.相关的技术栈数据存储：HDFS，HBase，Kudu等数据计算：MapReduce,Spark,Flink交互式查询：Impala,Presto
Yuan_CSDF·2025-03-20 05:25

Apache Doris整合Iceberg + Flink CDC构建实时湖仓体的联邦查询分析架构

在这篇文章中，我们将探讨如何利用ApacheDoris整合Iceberg和FlinkCDC来构建这样一个架构，并提供相应的源代码示例。
MfvShell·2025-03-20 00:10

flink从kafka读取数据写入clickhouse本地表的实现

实现功能因为直接写clickhouse的分布式表在数据量比较大的时候会有各种问题，所以做了一个flink读取kafka数据然后路由写入到相应的本地表节点，并且关于不同的表的配置信息可以随时更改并设置生效时间
Breatrice_li·2025-03-19 22:29

demo flink写入kafka_Flink 写入数据到 Kafka

Flink写入数据到Kafka前言通过Flink官网可以看到Flink里面就默认支持了不少sink，比如也支持Kafkasinkconnector(FlinkKafkaProducer)，那么这篇文章我们就来看看如何将数据写入到
ONES Piece·2025-03-19 22:59

Flink读取kafka数据并写入HDFS

硬刚大数据系列文章链接：2021年从零到大数据专家的学习指南(全面升级版)2021年从零到大数据专家面试篇之Hadoop/HDFS/Yarn篇2021年从零到大数据专家面试篇之SparkSQL篇2021年从零到大数据专家面试篇之消息队列篇2021年从零到大数据专家面试篇之Spark篇2021年从零到大数据专家面试篇之Hbase篇
王知无(import_bigdata)·2025-03-19 22:59

中电金信25/3/18面前笔试（需求分析岗+数据开发岗）

MapReduceSparkStormFlink解析：Hadoop的核心组件是HDFS（分布式文件系统）和MapReduce（分布式计算框架）。
苍曦·2025-03-19 12:43

Flink实践：通过Flink SQL进行SFTP文件的读写操作

在大数据处理领域，ApacheFlink出类拔萃，它是一个高性能、易扩展、用于处理有界和无界数据流的分布式处理引擎。
kkk1622245·2025-03-19 12:41

HTML 中如何设置页面的语言，这对 SEO 和无障碍访问有什么影响？

大白话HTML中如何设置页面的语言，这对SEO和无障碍访问有什么影响？1.HTML中设置页面语言的方法在HTML里，你可以借助标签的lang属性来设定页面的语言。
前端大白话·2025-03-18 21:34

＜link＞标签在网页中的常见用途及与＜script＞标签引入资源方式的区别

大白话标签在网页中的常见用途及与标签的常见用途标签主要用于在HTML页面中引入外部资源，最常见的就是引入样式表（CSS文件），让网页能够按照我们定义的样式来展示内容。
前端大白话·2025-03-18 21:04

Flink流式计算系统

本文将以这些概念为基础，逐一介绍Flink的发展背景、核心概念、时间推理与正确性工具、安装部署、客户端操作、编程API等内容，让开发人员对Flink有较为全面的认识并拥有一些基础操作与编程能力。
xyzkenan·2025-03-18 07:13

Flink 初体验：从 Hello World 到实时数据流处理

在大数据处理领域，ApacheFlink以其卓越的流批一体化处理能力脱颖而出，成为众多企业构建实时数据应用的首选框架。
小诸葛IT课堂·2025-03-18 07:12

时间语义与窗口操作：Flink 流式计算的核心逻辑

Flink通过灵活的时间语义和丰富的窗口类型，为开发者提供了强大的时间窗口分析能力。本文将深入解析Flink的时间语义机制，并通过实战案例演示如何利用窗口操作实现实时数据聚合。
小诸葛IT课堂·2025-03-18 06:33

RPC远程调用框架Dubbo

大白话理解就是：RPC让你用别人家的东西就像自己家的一样。RPC两个作用：屏蔽远程调用跟本地调用的区别，让我们感觉就是调用项目内的方法隐藏底层网络通信的复杂性，让我们更加专注业务逻辑。
Czi橙·2025-03-18 04:10

白话设计模式之（95）：状态模式——优化代码状态管理的利器

白话设计模式之（95）：状态模式——优化代码状态管理的利器大家好！在软件开发的学习过程中，我们都在不断探索如何让代码更加高效、灵活且易于维护。
一杯年华@编程空间·2025-03-18 03:30

大白话讲解MIPI DPHY、C PHY与M PHY的不同应用与优势

1.MIPIDPHY：高速公路上的小跑车想象一下你在高速公路上开着一辆小跑车，这辆车虽然不如跑车那样极速，但它能在城市和乡村之间快速穿梭，满足大多数日常需求。MIPIDPHY就像这辆小跑车，适合那些需要高速、高效，但不要求极限速率的场景，比如手机显示屏和摄像头之间的连接。在这个“跑车”里，时钟信号和数据信号分别通过两条“车道”——一条是时钟车道（CLK），另一条是数据车道（Data）。这两条车道的
空间机器人·2025-03-16 07:06

HarmonyNext实战：基于ArkTS的跨设备分布式数据同步应用开发

我们将从分布式数据管理的基础理论出发，逐步构建一个完整的应用，涵盖数
·2025-03-15 14:31

Dinky × Jiron：打造高效智能的数据处理平台

JironGitHub地址https://github.com/642933588/jiron-cloudhttps://gitee.com/642933588/jiron-cloud将基于ApacheFlink
jiron开源·2025-03-15 09:26

cv君独家视角 | AI内幕系列七：EfficientViT模型：基于多尺度线性注意力模块，实现高效的高分辨率密集预测

通过一系列精心策划的文章，我们将带您深入了解AI的各个领域，从计算机视觉到文本语音等多模态领域，从基础理论到前沿技术，从行业应用到未来趋势。
cv君·2025-03-15 09:19

数据分析大数据面试题大杂烩01

银行统计营收和针对用户的个人画像:处理大量非实时数据政府:健康码,扫码之后确诊,找出与确诊对象有关联的人订单订单表(除商品以外所有信息),商品详情表,通过搜集用户title进行定制化推荐点击流数据通过埋点进行用户点击行为分析FLINK
爱学习的菜鸟罢了·2025-03-15 09:19

Different number of columns

org.apache.flink.client.program.ProgramInvocationException:Themainmethodcausedanerror:Columntypesofqueryresultandsinkforregisteredtable
sunyaox·2025-03-15 06:23

白话设计模式之（53）：迭代器模式——数据遍历的“百变魔方”

白话设计模式之（53）：迭代器模式——数据遍历的“百变魔方”大家好！在软件开发的学习过程中，我们都在不断探索如何让代码更加高效、灵活且易于维护。
一杯年华@编程空间·2025-03-15 01:32
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他