E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Flink源码解析
【java】java 定时任务线程池 ScheduledThreadPoolExecutor 源码阅读
文章目录1.概述1.1问题1.2简介1.2数据结构2.
源码解析
2.1接口和类2.1.1Delayed接口2.1.2ScheduledFuture接口2.1.3DelayedWorkQueue2.1.3.1take2.1.3.2offer2.1
九师兄
·
2025-02-07 18:10
java
开发语言
大数据-267 实时数仓 - ODS Lambda架构 Kappa架构 核心思想
已更完)MapReduce(已更完)Hive(已更完)Flume(已更完)Sqoop(已更完)Zookeeper(已更完)HBase(已更完)Redis(已更完)Kafka(已更完)Spark(已更完)
Flink
m0_74823336
·
2025-02-07 16:57
面试
学习路线
阿里巴巴
大数据
架构
如何处理大规模数据集中的数据处理:Spark和Apache
Flink
文章目录1.简介2.基本概念术语说明数据处理(DataProcessing)任务调度(TaskScheduling)HadoopApacheSparkApache
Flink
3.核心算法原理和具体操作步骤以及数学公式讲解
AI天才研究院
·
2025-02-07 01:43
DeepSeek
R1
&
大数据AI人工智能大模型
自然语言处理
人工智能
语言模型
编程实践
开发语言
架构设计
【axios】尚硅谷Web前端axios入门与
源码解析
视频地址:【尚硅谷Web前端axios入门与
源码解析
】https://www.bilibili.com/video/BV1wr4y1K7tq/?
abigale03
·
2025-02-06 18:30
JavaScript
前端
1024程序员节
2天的
Flink
Forward Asia 有什么值得关注的点
11月29号和30号,
Flink
ForwardAsia在上海举行。这篇文章给大家搞个省流版,聊聊有什么值得关注的点。
·
2025-02-06 13:05
Flink
&& Spark SQL提效神器双双更新
大家新年好,在这里先祝大家开工大吉,今年少bug少加班多赚钱!本次SparkSQLHelper主要更新了对于Hints的补全支持,Release版本为2025.2.0。插件地址:https://plugins.jetbrains.com/plugin/26079-spark-sql-helper或者直接在Jetbrains插件市场搜索SparkSQLHelepr。用户QQ群:782150013。而
·
2025-02-06 13:32
flinkspark大数据
30、
Flink
中操作已经配置好的远程文件系统
背景:
flink
作业中既配置了obs作为chk的远程文件系统,又在作业中读取obs文件内容时,使用obsclient会导致任务无法创建chk目录而启动失败。
梦想养猫开书店
·
2025-02-06 08:50
胡思乱想
flink
华为云
6
Flink
状态管理
6
Flink
状态管理1.State-KeyedState2.State-OperatorState3.BroadcastState我们前面写的wordcount的例子,没有包含状态管理。
TTXS123456789ABC
·
2025-02-06 07:48
#
Flink
flink
python
大数据
Flink
报错Caused by: java.io.FileNotFoundException: /home/wc.txt
当在提交一个
flink
任务报如下的错误时:Causedby:java.io.FileNotFoundException:/home/wc.txt(没有那个文件或目录)atjava.io.FileInputStream.open0
songqq27
·
2025-02-06 07:47
flink
大数据
线上
Flink
执行失败,Heartbeat Timeout异常分析
1.问题现象程序执行不稳当,时而正常,时而异常。对应的异常信息如下:执行过程中出现java.util.concurrent.TimeoutException:HeartbeatofTaskManagerwithidtimedoutjava.util.concurrent.TimeoutException:HeartbeatofTaskManagerwithidcontainer_e05_15788
spring208208
·
2025-02-06 04:19
大数据组件线上问题分析
flink
大数据
Wayland
源码解析
之代码结构
获取、编译Wayland及其依赖库可参考Wayland官方网站的Build指南:http://wayland.freedesktop.org/building.html。Wayland实现的代码组成可以分成以下四部分:1.Wayland库Wayland中最核心的部分,Wayland协议的大部分实现位于这里。1)工具程序(wayland-scanner)分析Wayland协议文件,并生成相应的头文件
basilc
·
2025-02-05 17:56
terminal
单元测试
工具
扩展
build
server
TensorFlow 示例项目实战与
源码解析
.zip
本文还有配套的精品资源,点击获取简介:TensorFlow是谷歌大脑团队开发的开源机器学习库,广泛应用于深度学习、人工智能等领域。该压缩包提供了一个TensorFlow示例项目的源代码,涵盖了从基础操作到复杂模型的各种主题。文章将详细介绍TensorFlow的核心概念,如张量、图计算、会话、变量、梯度下降与优化器、损失函数、数据集、模型评估、模型保存与恢复以及KerasAPI。读者可通过实践这些示
ELSON麦香包
·
2025-02-05 01:34
开源游戏服务器引擎goworld
源码解析
14_aoi
aoipkg\mod\github.com\xiaonanln\go-aoi@v0.2.0\aoi.go这段代码定义了一个名为aoi的包,其中包含了一些用于处理游戏中区域(AOI)相关逻辑的类型和接口。以下是对代码的详细解释:Coord类型:Coord是一个自定义的浮点型,用于表示坐标轴上的值。AOI结构体:x和y:表示AOI在二维空间中的位置。dist:表示AOI的半径或范围。Data:一个接口
lao geng
·
2025-02-05 00:26
游戏
服务器
第12章
Flink
Flink
是一种具有代表性的开源流处理架构,它实现了GoogleDataflow流计算模型,是一种兼具高吞吐、低延迟和高性能的实时流计算框架,并且同时支持批处理和流处理。
wyz191
·
2025-02-04 23:17
大数据技术原理与应用
-
概念
存储
处理
分析与应用
big
data
hadoop
数据仓库
flink
大数据
Flink
:基于事件驱动的滚动窗口使用
org.apache.
flink
flink
-java1.7.2org.apache.
flink
flink
-streaming-java_2.121.7.2provided发送netcat下载:https
程序员无羡
·
2025-02-04 23:46
Java
Flink
flink
java
maven
8.
Flink
事件驱动应用、处理函数(Process Functions),KeyedProcessFunction、ProcessFunction,旁路输出(Side Outputs)
目录
Flink
专栏目录(点击进入…)事件驱动应用、处理函数(ProcessFunctions),KeyedProcessFunction、ProcessFunction,旁路输出(SideOutputs
未禾
·
2025-02-04 23:45
Flink
java
服务器
大数据
flink
Flink
从入门到放弃(十二)-企业实战之事件循环驱动型场景(二)
上文
Flink
从入门到放弃(十二)-企业实战之事件驱动型场景踩坑(一)为大家介绍了
Flink
基于事件驱动场景下的渠道流量分析实时需求以及遇到的坑。
进击吧大数据
·
2025-02-04 23:45
大数据
Flink
flink
kafka
big
data
小白转
flink
技术栈心得之混编java和scala报错:error: java.lang.NoClassDefFoundError: javax/tools/ToolProvider
今天刚接手了一个
flink
项目,代码里有java也有scala写的部分,小白第一次遇到要java和scala都需编译的项目,于是乎先进行scala的编译:mvncleanscala:compilecompilepackage-Pfat-DskipTests
阿烦大64
·
2025-02-04 22:39
java
java
maven
scala
flink
大数据
实时计算
Flink
提交任务命令执行错误NoSuchMethodError
#
Flink
常见故障#大数据#生产环境真实案例#
Flink
#流式计算#流批一体#整理#经验总结说明:此篇总结
Flink
常见故障案例处理方案结合自身经历总结不易+关注+收藏欢迎留言更多
Flink
案例汇总方案解决方案
500佰
·
2025-02-04 12:28
Flink线上问题处理方案
flink
大数据
云计算
运维
VSCode源码分析参考资料
VSCodeArchitectureAnalysis-ElectronProjectCross-PlatformBestPractices中文版VSCode架构分析-Electron项目跨平台最佳实践SihanLi博客上的vscode源码分析系列:分析了微服务架构、事件体系、资源管理、配置系统等文召博客上的vscode
源码解析
系列文章
AI时代的程序员
·
2025-02-04 10:05
vscode
ide
编辑器
Flink
SQL将时间戳转为日期
FLOOR(TO_TIMESTAMP(FROM_UNIXTIME(CAST(`table_time`ASBIGINT)/1000,'yyyy-MM-ddHH:mm:ss'))TOminute),
MARSERERER
·
2025-02-04 07:47
sql
org.apache.
flink
.runtime.client.JobInitializationException: Could not start the JobMaster.
IDEA执行
Flink
的类的main方法时,遇到如下错误,还以为是啥大错误,没想到只是路径错了,txt的文件格式没有拼全,加上txt就好了。
ForwardSummer
·
2025-02-04 04:19
Error集锦
大数据
JVM
java
jvm
flink
Flink
执行jar报错:java.io.IOException: Error opening the Input Split file 或者 java.io.FileNotFoundExceptio
一、报错内容
Flink
执行jar时,报如下错误:org.apache.
flink
.client.program.ProgramInvocationException:Jobfailed.
故明所以
·
2025-02-04 04:18
Flink
jar
flink
大数据
Flink
Standalone集群模式安装部署全攻略
Flink
Standalone集群模式安装部署全攻略一、引言
Flink
作为一款强大的分布式流处理和批处理框架,在大数据领域有着广泛的应用。
自节码
·
2025-02-04 04:17
java
面试
开发语言
flink
大数据
Caused by: java.io.NotSerializableException: org.apache.parquet.schema.MessageType
scala任务代码Headdefault%
flink
.conf
flink
.execution.packagesorg.apache.
flink
:
flink
-connector-kafka_2.11:1.11.2
黄瓜炖啤酒鸭
·
2025-02-04 04:17
Flink
依赖冲突
Flink
报错:java.io.IOException: Insufficient number of network buffers
1.美图2.概述
Flink
的master与worker进程有不同的内存需求。
九师兄
·
2025-02-04 04:47
Caused by: java.lang.ClassNotFoundExceptionorg/apache/
flink
/shaded/jackson2/com/fasterxml/jackson/co
Exceptioninthread"main"java.lang.NoClassDefFoundError:org/apache/
flink
/shaded/jackson2/com/fasterxml/
木生火18624
·
2025-02-04 04:17
大数据实战
异常错误
【
Flink
】集群环境下的搭建(Standalone 模式)
前言
Flink
是目前开源社区中唯一一套集高吞吐、低延迟、高性能三者于一身的分布式流式数据处理框架,支持多种安装部署模式。
つ 情绪
·
2025-02-04 03:46
flink
大数据
Flink
cdc3
flink
环境准备
Flink
Standalone集群,下载最新版本
Flink
1.18.0,解压后得到
flink
-1.18.0目录。并且设置
FLINK
_HOME为
flink
-1.18.0所在目录。
2401_84167086
·
2025-02-04 03:46
程序员
flink
大数据
Spark基础【RDD依赖关系--
源码解析
】
文章目录一RDD依赖关系1RDD血缘关系2RDD依赖关系3RDD阶段划分4RDD任务划分一RDD依赖关系1RDD血缘关系相邻两个RDD之间的关系,称之为依赖关系,多个连续的依赖关系称之为血缘关系RDD只支持粗粒度转换,即在大量记录上执行的单个操作。将创建RDD的一系列Lineage(血统)记录下来,以便恢复丢失的分区。RDD的Lineage会记录RDD的元数据信息和转换行为,当该RDD的部分分区数
OneTenTwo76
·
2025-02-03 21:52
Spark
spark
scala
大数据
nginx
源码解析
-ngx_strerror()/ngx_strerror_init()
nginx
源码解析
-ngx_strerror()/ngx_strerror_init()将所有的错误码errno以及错误描述strerror(errno)提前存储到ngx_sys_errlist中,用于解决异步信号安全的问题
wenpeng_lu
·
2025-02-03 18:26
nginx
nginx
Java 集合框架:HashMap 的介绍、使用、原理与
源码解析
一、HashMap介绍HashMap是Java集合框架中最常用的数据结构之一。它实现了Map接口,允许我们以键值对的形式存储数据。HashMap的主要特点是通过哈希表(HashTable)来实现对数据的高效查找、插入和删除操作。1.特性无序存储:HashMap并不保证元素的顺序,元素的顺序可能会随着插入的顺序和哈希冲突的解决方式而变化。允许null键和null值:HashMap允许一个null键和
NicoleGus
·
2025-02-03 15:01
哈希算法
散列表
算法
STM32(hal库)通过MQTT协议连接onenet
本程序参考超级大洋葱806的STM32CubeMXESP8266AT指令实现MQTT协议并接入阿里云IOT平台
源码解析
【附Github源码地址】一、esp8266驱动我将esp8266设置为station
sea1216
·
2025-02-03 09:42
ESP8266
STM32cubemx
onenet
物联网
stm32
hal
onenet
mqtt
量化交易系统中+如何实现实时数据分析和决策支持?
microPythonPython最小内核
源码解析
NI-motion运动控制c语言示例代码解析python编程示例系列python编程示例系列二python的Web神器Streamlit如何应聘高薪职位在量化交易系统中
openwin_top
·
2025-02-03 02:17
量化交易系统开发
数据分析
数据挖掘
数据库架构
量化交易
机器学习
人工智能
Java 中 List
源码解析
:深度剖析与实现
List是Java中最常用的数据结构之一,广泛用于存储有序的元素集合。它是Java集合框架中的一个接口,提供了多种常见的实现,如ArrayList、LinkedList、Vector等。通过对List接口及其常见实现类的源码分析,开发者可以深入理解其内部机制和实现方式,进而优化应用程序的性能,做出更合适的选择。本文将通过深入解析List接口及其常见实现(特别是ArrayList和LinkedLis
HelloZheQ
·
2025-02-03 00:34
java
list
windows
Flink
中定时器的使用_
flink
定时器 ontimerf()方法获取 事件
事件时间——调用Context.timerService().registerEventTimeTimer()注册;onTimer()在
Flink
内部水印达到或超过Timer设定的时间戳时触发。
字节全栈_vBr
·
2025-02-02 09:10
flink
java
大数据
CompletableFuture#getNow
源码解析
&最佳实践
一、源码/***Returnstheresultvalue(orthrowsanyencounteredexception)*ifcompleted,elsereturnsthegivenvalueIfAbsent.**@paramvalueIfAbsentthevaluetoreturnifnotcompleted*@returntheresultvalue,ifcompleted,elseth
秋夫人
·
2025-02-02 08:33
并发
开发语言
java
CompletableFuture#allOf
源码解析
&最佳实践
一、源码/***ReturnsanewCompletableFuturethatiscompletedwhenallof*thegivenCompletableFuturescomplete.Ifanyofthegiven*CompletableFuturescompleteexceptionally,thenthereturned*CompletableFuturealsodoesso,with
秋夫人
·
2025-02-02 08:32
并发
开发语言
java
Android应用开发详解:核心章节
源码解析
这些章节构成了高效Android应用开发的基础,通过
源码解析
,开发者将能够掌握如何创建功能丰富的应用,并为深入探索高级主题打下坚实基础。1.Android开发入门1.1Android平台
丹力
·
2025-02-02 07:25
Caused by: java.io.NotSerializableException: org.apache.kafka.common.metrics.MetricConfig
flink
自定义数据源的开发过程中遇到这样一个错误。错误原因:在于KafkaConsumer的初始化放在了定义处。解决:应该放在open方法内初始化。
Slient-猿
·
2025-02-02 02:58
flink
flink
kafka
Flink
的DataSource三部曲之一:直接API
mvn\archetype:generate\-DarchetypeGroupId=org.apache.
flink
\-DarchetypeArtifactId=
flink
-quickstart-java
字节全栈_rJF
·
2025-02-02 02:57
flink
大数据
centos7搭建
flink
1.18并以 standalone模式启动
版本组件版本scala2.12.20java1.8.0_181
flink
1.18.1关于scala和Java的安装参考:scala和java安装
flink
下载地址:
flink
下载链接集群规划bigdata01bigdata02bigdata03masterworkerworkerworker
咸鱼c君
·
2025-02-01 20:50
flink
大数据
大数据
Flink
Connector 写入 Iceberg 流程
源码解析
_confluent icebergsinkconnector
//添加Writer算子,有并行度SingleOutputStreamOperatorwriterStream=appendWriter(distributeStream,
flink
RowType,equalityFieldIds
字节全栈_mMD
·
2025-02-01 20:16
flink
java
大数据
《大数据时代“快刀”:
Flink
实时数据处理框架优势全解析》
Flink
作为一款开源的分布式流处理框架,在这一领域崭露头角,备受瞩目。一、真正实时,毫秒级响应与部分将流处理模拟为微批处理的框架不同,
Flink
是专为实时流处理打造的“原生”引擎。
程序猿阿伟
·
2025-02-01 20:15
大数据
flink
Flink
CDC的安装配置
Flink
CDC是基于Apache
Flink
构建的,用于捕获数据库表中数据的变更情况,包括数据的插入、更新和删除操作,并能将这些变更数据以流的形式实时传输到其他系统中进行处理和分析。
我的K8409
·
2025-02-01 17:23
Flink
flink
大数据
Flink
整合Hudi及使用
1、jar包上传上传jar包即可完成整合#1、将hudi-
flink
1.15-bundle-0.15.0.jar包上传到
flink
的lib目录下/usr/local/soft/
flink
-1.15.3/
我的K8409
·
2025-02-01 17:23
Flink
flink
服务器
linux
大数据笔记之
Flink
1.17 算子
文章目录前言一、Partition分区(物理分区)1.1随机分区shuffle1.2轮询分区rebalance1.3重缩放分区rescale1.4广播分区broadcast1.5全局分区global1.6keyby1.7自定义分区Custom二、transform2.1flatMap2.2filter2.3RichFunction2.4map三、Aggregate聚合3.1keyBy()3.2ma
凡许真
·
2025-02-01 17:20
大数据
flink1.17
算子
TDengine 做为
FLINK
数据源技术参考手册
Apache
Flink
是一款由Apache软件基金会支持的开源分布式流批一体化处理框架,可用于流处理、批处理、复杂事件处理、实时数据仓库构建及为机器学习提供实时数据支持等诸多大数据处理场景。
TDengine (老段)
·
2025-02-01 11:02
tdengine
flink
大数据
涛思数据
时序数据库
数据库
FreeRTOS深入教程(任务创建的深入和任务调度机制分析)
文章目录前言一、深入理解任务的创建二、任务的调度机制1.FreeRTOS中任务调度的策略2.FreeRTOS任务调度策略实现的核心3.FreeRTOS内部链表
源码解析
4.如何通过就绪链表管理任务的执行顺序三
花落已飘
·
2025-02-01 08:38
FreeRTOS全系列教程
嵌入式
FreeRTOS
ARM
入门
STM32
Apache
Flink
流处理框架
Apache
Flink
是一个分布式流处理框架和数据处理引擎,专注于以低延迟和高吞吐量处理无界和有界的数据流。它可以同时处理流式数据和批处理数据,并且提供强大的容错机制和状态管理功能。
weixin_44594317
·
2025-01-30 19:27
apache
flink
大数据
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他