E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Flink实战经验
2025年项目管理软件TOP10:选对工具,效率翻倍!
作为从业十年的项目管理顾问,我将结合
实战经验
,为你拆解2025年工具选择的底层逻辑,并推荐10款国内外优秀软件,助你避开90%的常见误区。
·
2025-02-19 15:39
2025高效项目管理指南:10款顶级软件工具系统解析与实战技巧
作为拥有多年项目管理
实战经验
的从业者,我深知一款优秀的工具对项目成败的影响。2025年,随着远程协作和敏捷开发的普及,项目管理软件的功能和适用场景更加细分。
·
2025-02-19 15:29
2025年项目管理软件TOP10:选对工具,效率翻倍!
作为从业十年的项目管理顾问,我将结合
实战经验
,为你拆解2025年工具选择的底层逻辑,并推荐10款国内外优秀软件,助你避开90%的常见误区。
·
2025-02-19 15:29
Flink
源码笔记03—StreamGraph到JobGraph
文章目录简介入口函数traverseStreamGraphAndGenerateHashesgenerateDeterministicHashgenerateUserSpecifiedHashsetChainingisChainable简介JobGraph可以认为是StreamGraph的优化图,它将一些符合特定条件的operators合并成一个operatorchain,以减少数据在节点之间序列
董嘻嘻
·
2025-02-19 07:29
Flink源码笔记
flink
java
big
data
flink
核心特性
Apache
Flink
核心特性详解一、流处理与批处理的统一
Flink
的核心设计理念之一是将流处理和批处理统一在一个框架中。这种统一性使得
Flink
在处理实时数据和批量数据时具有高度的灵活性和一致性。
24k小善
·
2025-02-19 06:55
flink
大数据
java
架构
flink
反压详解
Flink
背压/反压(Backpressure)详解在Apache
Flink
中,背压(Backpressure)是一个常见的性能问题,通常表现为数据流在某些节点处积压,导致整体处理速度下降甚至停滞。
24k小善
·
2025-02-19 06:55
flink
架构
大数据
AI编程
十四、
Flink
源码阅读--JobGraph生成过程
publicJobSubmissionResultrun(
Flink
Plancompil
灰二和杉菜
·
2025-02-19 06:54
Apache
Flink
Flink
JobGraph生成源码分析
最新Apache Hudi 1.0.1源码编译详细教程以及常见问题处理
1.最新ApacheHudi1.0.1源码编译2.
Flink
、Spark、Hive集成Hudi1.0.13.
flink
streaming写入hudi目录1.版本介绍2.安装maven2.1.下载maven2.2
Toroidals
·
2025-02-19 06:51
大数据组件安装部署教程
hudi1.0.1
源码编译
教程
最新
整车排程系统的约束设计:从理论到实践的全面解析
以下是基于多年
实战经验
总结的五大核心约束体系:1.时间约束1.1生产周期约束设计要点:定义生产周期(从焊装到总装的完整流程)设置关键节点时间窗(如焊装≤3天,涂装≤2天,总装≤4天)一般制造型企业都是执行
架构默片
·
2025-02-19 01:39
软件设计
开发语言
java
系统架构
从零开始学习代理AI:2025全面指南
如果你是从零开始学习代理AI,本文将为你提供一份全面的学习指南,帮助你掌握代理AI的基础知识、关键技术和
实战经验
。首先,你需要理解代理AI的基本概念。
zxzy_org
·
2025-02-18 14:05
学习
人工智能
ai
HarmonyOS开发宝典震撼来袭,卓越应用开发之旅一触即发,轻松启程!
我们倾心打造了一个涵盖高频场景的最佳实践案例库,汇聚丰富
实战经验
,旨在大幅提升开发效率。此外,我们还提供场景化的开箱即用代码示例,让应用开发触手可及,轻松高效。
·
2025-02-17 20:26
harmonyos
Flink
提交py
flink
任务
1.官方文档:
flink
1.14:https://nightlies.apache.org/
flink
/
flink
-docs-release-1.14/docs/deployment/cli/#submitting-py
flink
-jobs
flink
1.18
Leo_Hu666
·
2025-02-17 18:59
flink
大数据
python
pyflink
Flink
在指定时间窗口内统计均值,超过阈值后报警
2、思路使用
flink
的双流join,配置数据使用广播流,设备数据使用普通流。3、实现代码packagecu.
小的~~
·
2025-02-17 17:49
flink
均值算法
大数据
义父们,支持我兄弟参加CSDN博客之星2024!他是一名优秀的运维工程师!
Kubernetes(K8s)领域的深度实践者在K8s领域有着丰富的
实战经验
。他的
qq_42856429
·
2025-02-17 15:02
运维
java
开发语言
AI创业公司的竞争策略
通过成功案例分析,提供
实战经验
和策略建议,旨在帮助AI创业公司更好地应对挑战,实现可持续发展。《AI创业公司的竞争策略》目录大纲第一部分:行业背景与概
AI天才研究院
·
2025-02-17 05:09
DeepSeek
R1
&
大数据AI人工智能大模型
AI大模型企业级应用开发实战
大厂Offer收割机
面试题
简历
程序员读书
硅基计算
碳基计算
认知计算
生物计算
深度学习
神经网络
大数据
AIGC
AGI
LLM
Java
Python
架构设计
Agent
程序员实现财富自由
Flink
SQL 优化实战 - 维表 JOIN 优化
作者:龙逸尘,腾讯CSIG高级工程师背景介绍维表(DimensionTable)是来自数仓建模的概念。在数仓模型中,事实表(FactTable)是指存储有事实记录的表,如系统日志、销售记录等,而维表是与事实表相对应的一种表,它保存了事实表中指定属性的相关详细信息,可以跟事实表做关联;相当于将事实表上经常重复出现的属性抽取、规范出来用一张表进行管理。在实际生产中,我们经常会有这样的需求,以原始数据流
腾讯云大数据
·
2025-02-17 04:01
大数据
数据库
flink
sql
阿里云RDS到亚马逊云RDS的实时数据同步方案详解
KDA基于Apache
Flink
,支持使用SQL或J
ivwdcwso
·
2025-02-17 00:33
运维
阿里云
云计算
aws
kda
数据同步
Flink
安装阿里云docker compose部署及相关组件
Flink
安装脚本文件version:"2.2"services:jobmanager:image:
flink
:1.15.2-java11expose:-"6123"ports:-"8081:8081"
vellerzheng
·
2025-02-16 21:08
部署运维
flink
docker
大数据
使用Docker搭建
Flink
集群
目录使用Docker搭建
Flink
集群docker-compose一键搭建步骤附录参考资料使用Docker搭建
Flink
集群在学习大数据框架的时候,需要一个真实的环境。
O_1CxH
·
2025-02-16 20:34
Flink大数据
Kafka大数据
docker
flink
容器
2025超全整理!H3C路由交换核心命令宝典,助你轻松玩转网络配置
本文结合2025年最新技术文档与
实战经验
,系统梳理基础配置、VLAN管理、路由协议、IRF堆叠、安全加固等场景的核心命令,助你从“小白”进阶为“大神”!文末还附赠高频踩坑指南,速速收藏⭐!
wljslmz
·
2025-02-16 20:30
网络技术
H3C
路由器
交换机
命令大全
Spring——Spring开发
实战经验
(1)
摘要文章主要介绍了Swagger作为API文档生成和测试工具的功能,包括自动生成API文档、提供可视化调试界面、促进前后端协作、支持OpenAPI规范等。同时,还提及了SpringBoot与Swagger3的实战应用,以及Spring开发中其他相关技术内容,如@Resource与@Autowired的区别、Druid监控配置、切面日志示例等。1.Swagger-API文档生成和测试工具Swagge
庄小焱
·
2025-02-16 15:01
Spring框架
后端
spring
系统实战
Spark 和
Flink
Spark和
Flink
都是目前流行的大数据处理引擎,但它们在架构设计、应用场景、性能和生态方面有较大区别。
信徒_
·
2025-02-16 12:04
spark
flink
大数据
内容综合官方文档与
实战经验
,覆盖开发全流程
内容综合官方文档与
实战经验
,覆盖开发全流程。
繁若华尘
·
2025-02-16 12:03
vue
前端开发
vue.js
ai
前端
javascript
Flink
-k8s弹性扩缩容原理和部署步骤
背景和现状目前行内提交
flink
作业采用Nativekubernetes模式,提交作业时会指定并行度和taskmanager使用的内存及cpu数量。
spring208208
·
2025-02-16 07:21
flink
kubernetes
贪心算法
20250124
Flink
增量聚合 vs 全量聚合
1.增量聚合vs全量聚合(1)增量聚合(ReduceFunction/AggregateFunction)工作方式:逐步计算:每一条数据到达窗口时,立即与当前聚合结果结合,生成新的中间结果。仅保存中间状态:内存中只保留当前的聚合值(如累加和、最大值等),不保存原始数据。触发窗口计算时:直接输出最终的聚合结果,无需遍历所有数据。示例:计算窗口内数字的和DataStreamnumbers=...;nu
靈臺清明
·
2025-02-15 07:18
Flink
flink
Flink
CDC 在阿里云 DataWorks 数据集成入湖场景的应用实践
摘要:本文整理自
Flink
ForwardAsia2024大会中阿里云DataWorks数据集成团队陈吉通的分享,主要分享
Flink
CDC在阿里云DataWorks数据集成入湖场景的应用实践。
·
2025-02-14 13:18
大数据flink阿里云数据分析
Flink
-提交job
目录一、
Flink
流处理扩展及说明二、
Flink
部署三、Standalone模式四、在命令行提交job:五、在网页中提交
flink
job一、
Flink
流处理扩展及说明涉及:自定义线程优先级=socket
笨鸟先-森
·
2025-02-14 07:51
大数据
flink
Flink
实践教程-入门(10):Python作业的使用
作者:腾讯云流计算Oceanus团队流计算Oceanus简介流计算Oceanus是大数据产品生态体系的实时化分析利器,是基于Apache
Flink
构建的具备一站开发、无缝连接、亚秒延时、低廉成本、安全稳定等特点的企业级实时大数据分析平台
腾讯云大数据
·
2025-02-14 07:17
数据库
大数据
java
python
数据分析
py
flink
作业提交的踩坑过程,看完少走两个星期弯路
flink
在努力地将Python生态和大数据生态融合,但目前的版本还不够成熟,尤其是在官方对python现有资料有限的情况下,用户想要使用python完成一个
flink
job并提交到
flink
平台上,还是有很多雷需要踩的
Li_yi_chao
·
2025-02-14 07:16
大数据
Paimon实战 -- paimon原理解析
一.简介ApachePaimon原名
Flink
TableStore,2022年1月在Apache
Flink
社区从零开始研发,
Flink
社区希望能够将
Flink
的Streaming实时计算能力和Lakehouse
阿华田512
·
2025-02-13 14:06
Paimon学习必读系列
paimon
数据湖
paimon介绍
flink写入
paimon实战 --核心原理和
Flink
应用进阶
简介
Flink
社区希望能够将
Flink
的Streaming实时计算能力和Lakehouse新架构优势进一步结合,推出新一代的StreamingLakehouse技术,促进数据在数据湖上真正实时流动起来,
阿华田512
·
2025-02-13 14:36
Paimon学习必读系列
Flink学习必读系列
flink
大数据
flink读写
paimon
数据湖
Linux网络服务器架设笔记
因为以前只是纸上谈兵,并没多少
实战经验
,现在空机器上一大堆的服务需要配置,满篇的代码需要一行一行的看,怎一个苦字了得。
Chendy
·
2025-02-13 14:03
服务器
linux
网络
module
server
apache
【Apache Paimon】-- 16 -- 利用 paimon-
flink
-action 同步 kafka 数据到 hive paimon 表中
目录引言CDC技术概述2.1什么是CDC2.2CDC的应用场景Kafka作为CDC数据源的原理与优势3.1Kafka的基本架构3.2Kafka在CDC中的角色
oo寻梦in记
·
2025-02-13 14:02
Apache
Paimon
apache
flink
kafka
apache
paimon
paimon
flink
实时集成利器 - apache seatunnel - 核心架构详解
它支持多种数据源和数据目标,并可以与Apache
Flink
、Spark等计算引擎集成。
24k小善
·
2025-02-12 23:38
flink
apache
架构
Flink
怎么保证Exactly - Once 语义
Exactly-Once语义是消息处理领域中的一种严格数据处理语义,指每条数据都只会被精确消费和处理一次,既不会丢失,也不会重复。以下从消息传递语义对比、实现方式、应用场景等方面详细介绍:与其他消息传递语义对比在消息传递中,常见三种语义:最多一次(at-most-once):消息可能丢失,但绝不会重复。至少一次(at-least-once):消息不会丢失,但可能重复。精确一次(exactly-on
我明天再来学Web渗透
·
2025-02-12 23:07
后端技术总结
flink
大数据
开源
开发语言
Flink
内存配置和优化
在Apache
Flink
1.18的Standalone集群中,内存设置是一个关键配置,它直接影响集群的性能和稳定性。
Flink
的内存配置主要包括JobManager和TaskManager的内存分配。
Leo_Hu666
·
2025-02-12 22:02
flink
大数据
Flink
入门-通过DataStream Api实现消费欺诈检测
1信用卡消费欺诈信用卡消费欺诈是指在信用卡的使用过程中,通过不正当手段获取或使用信用卡资金,侵犯他人或银行的财产权益的行为。这种行为可能包括但不限于盗刷、伪造信用卡、冒用他人信用卡、恶意透支等2模拟场景我们模拟不同账户的信用卡消费记录,通过分析实时的消费记录,针对常见的消费欺诈进行检测,检测出来的欺诈行为进行告警。3核心流程与代码1)通过TransactionSource构建消费记录,主要包含ac
似水_逆行
·
2025-02-12 22:56
Flink
flink
大数据
Flink
-DataStream快速上手
文章目录1.安装部署安装2.执行任务Standalone模式启动/停止执行任务Yarn模式Session-cluster模式启动yarn-session执行任务Per-Job-Cluster模式3.执行环境EnvironmentgetExecutionEnvironment(常用)createLocalEnvironmentcreateRemoteEnvironmentSource、SinkTra
code@fzk
·
2025-02-12 22:56
大数据
flink
大数据
java
Flink
之DataStream API 概述
DataStream程序主要包含3部分:1、StreamExecutionEnvironment初始化:该部分主要创建和初始化StreamExecutionEnvironment,提供通过DataStreamAPI构建
Flink
小虎牙_43437171
·
2025-02-12 21:23
flink
flink
大数据
java
Flink
KafkaConsumer offset是如何提交的
请参阅下面的动态分区检查一节register.consumer.metrics指定是否在
Flink
中注册KafkaConsumer的指标commit.offsets.on.chec
红烛暗盗梦
·
2025-02-12 21:23
flink
大数据
60秒看懂GIS开发高薪真相!!!
是否因为缺乏
实战经验
而错失心仪offer?学校教ArcMap,企业却要WebGIS全栈开发跟着B站教程做项目,结果连坐标系转换都踩坑!
新中地GIS开发老师
·
2025-02-11 18:08
javascript
arcgis
webgis
GIS开发
地信
地理信息科学
大学生
Java分布式流处理,
flink
+kafka实现电商网站个性化商品推荐系统
文章目录戳底部名片,一起变现技术栈选择设计实现思路实现步骤及示例代码1.数据采集2.数据预处理3.特征工程4.模型训练5.结果输出6.前端展示戳底部名片,一起变现在现代电商环境中,用户每天都会浏览大量商品页面,而这些行为数据中蕴藏着丰富的信息。通过分析用户的浏览历史、购买记录以及对特定商品的兴趣程度,我们可以为用户提供更加个性化的商品推荐,从而提升用户体验和转化率。为了实现实时的个性化推荐,我们需
图苑
·
2025-02-11 16:24
分布式
java
flink
Web自动化测试的持续集成实战
本文将带你了解Web自动化测试与持续集成的
实战经验
,帮助你在项目中实现高效的自动化测试流程。一、什么是Web自动化测试?Web自动化测试是使用自动化工具对Web应用进行测试的过程。
霍格沃兹-慕漓
·
2025-02-11 16:50
前端
ci/cd
职场和发展
霍格沃兹测试开发学社
测试开发
人工智能
python
Flink
内存模型各部分大小计算公式
Flink
的运行平台如果
Flink
是运行在yarn或者standalone模式的话,其实都是运行在JVM的基础上的,所以首先
Flink
组件运行所需要给JVM本身要耗费的内存大小。
bluedraam_pp
·
2025-02-11 13:33
flink
大数据
5
Flink
的时间和窗口操作
1
Flink
的时间语义和Wartermark介绍1.1时间语义
Flink
中窗口划分的时候是以时间作为划分标志,在
Flink
中对于时间有三种不同的语义,分别如下event-time:事件产生时间,也就是数据本身带的时间
抛砖者
·
2025-02-11 12:30
fink相关
flink
服务器
window操作
Flink时间语义
Kotlin
实战经验
:将接口回调转换成suspend挂起函数
在Kotlin协程中,suspendCoroutine和suspendCancellableCoroutine是用于将回调或基于future的异步操作转换成挂起函数。suspendCoroutine用途:将回调式异步操作转换为可挂起函数行为:启动一个新的协程来处理基于回调的操作挂起当前协程,直到调用回调回调负责使用结果或异常恢复协程取消:需要在回调或启动的协程中手动取消逻辑,从而正确清理资源sus
折翅鵬
·
2025-02-11 08:23
Kotlin
kotlin
[实时计算
flink
]复杂事件处理(CEP)语句
本文为您介绍实时计算
Flink
全托管的复杂事件处理(CEP)语句的详情。背景信息相较于Apache
Flink
的CEPSQL,实时计算
Flink
版在其基础上进行了增强。
soso1968
·
2025-02-11 06:40
flink
大数据
【
Flink
源码分析】6.
Flink
1.19源码分析-
Flink
底层的异步通信
6.1PekkoInvocationHandler类仅摘取了
Flink
RPC进行通信的时候一段代码,也是异步通信的典型代码。
ayt007
·
2025-02-11 06:35
Flink源码分析
Flink
flink
大数据
flink
判断两个事件之间有没有超时(不使用CEP)
代码如下:importcom.alibaba.fastjson.JSONObject;importlombok.extern.slf4j.Slf4j;importorg.apache.
flink
.api.common.state.ValueState
单线程的Daniel
·
2025-02-11 05:03
flink
大数据
初识
Flink
Flink
是什么
Flink
是Apache基金会旗下的一个开源大数据处理框架。
四维大脑
·
2025-02-11 01:03
Flink
flink
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他