E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
apacheflink
Flink流计算引擎
时下,谈及大数据,不得不提到热门的下一代大数据计算引擎
ApacheFlink
(以下简称Flink)。
Joker_Chou
·
2020-06-21 23:03
Flink 状态管理与容错机制
参考
ApacheFlink
零基础入门系列文章。状态管理的基本概念什么是状态在批处理过程中,数据是划分为块分片去完成的,然后每一个Task去处理一个分片。当分片执行完成后,把输出聚合起来就是最终的结果。
Fenggms
·
2020-06-21 20:37
flink
Apache Flink 任意Jar包上传漏洞复现
目录漏洞背景漏洞描述影响版本漏洞复现环境搭建漏洞利用修复建议参考链接漏洞背景近日,有研究员公开了
ApacheFlink
未授权上传jar包的安全风险,攻击者利用该隐患可在未经授权的情况下,上传包含恶意代码的
Circle_xx
·
2020-06-21 13:27
web安全
CDH6.3.2 集成flink的部署配置
CDH6.3.2集成flink的部署配置标签(空格分隔):大数据平台构建一:flink的简介二:cdh6.3.2集成flink一:flink的简介
ApacheFlink
是由Apache软件基金会开发的开源流处理框架
flyfish225
·
2020-06-21 07:36
flink
cdh6.3.2
大数据技术
Apache Flink 零基础入门(九):Flink SQL 编程实践
WindowAggregateWindowAggregate与GroupAggregate的区别实例4:将Append流写入Kafka实例5:将Update流写入ElasticSearch总结本文内容出自
ApacheFlink
进击的Z同学
·
2020-06-21 04:00
大数据
flink
Apache Flink 零基础入门(八):Table API 编程
WordCount举例2.如何获取一个Table3.如何输出一个Table4.如何操作一个Table4.1Table操作总览4.2提升易用性相关操作4.3增强功能相关操作三、TableAPI动态本文内容出自
ApacheFlink
进击的Z同学
·
2020-06-21 04:00
大数据
flink
Apache Flink 进阶教程(一):Runtime 核心机制剖析
文章目录1.综述2.FlinkRuntime整体架构3.资源管理与作业调度4.错误恢复5.未来展望本文内容出自
ApacheFlink
公开课系列作者:高赟(云骞)1.综述本文主要介绍FlinkRuntime
进击的Z同学
·
2020-06-21 04:00
大数据
flink
Apache Flink 零基础入门(六):Flink Time & Window 解析
Window&Time介绍二、WindowAPI使用2.1WindowAssigner,Evictor以及Trigger2.2Time&Watermark2.3迟到的数据3Window内部实现本文内容出自
ApacheFlink
进击的Z同学
·
2020-06-21 04:29
大数据
flink
Flink:把状态State全都扒光,远走他乡:State初始,广播状态
所以
ApacheFlink
中的State就是与时间相关的,
ApacheFlink
任务的内部数据(计算数据和元
python引路人
·
2020-06-21 04:39
flink
数据库
程序员
数仓系列 | 深入解读 Flink 资源管理机制
作者:宋辛童(五藏)整理:王文杰(Flink社区志愿者)摘要:本文根据
ApacheFlink
系列直播整理而成,由阿里巴巴高级开发工程师宋辛童分享。
ApacheFlink
·
2020-06-21 03:10
flink
大数据
大数据处理
实时计算
流计算-storm
Apache Flink 误用之痛
摘要:本文根据FlinkForward全球在线会议·中文精华版整理而成,围绕着项目的开始、需求分析、开发,以及测试、上线、运维整个生命周期展开,介绍了
ApacheFlink
实践中的一些典型误用情况,并给出了相应的更优实践方案
ApacheFlink
·
2020-06-21 03:09
flink
大数据
实时计算
流计算-storm
大数据处理
【Flink】flink的stateful应该如何理解?
State|状态概述算子状态(operatorstate)概述键控状态(keyedstate)概述代码案例State|状态概述相信有浏览过Flink官网的朋友一定发现了,一进入官网的顶端,就有加粗的标题:
ApacheFlink
sqlBoy_
·
2020-06-20 22:40
Flink
Flink 1.10 Container 环境实战
作者|唐云(茶干),阿里巴巴高级开发工程师整理|张壮壮(Flink社区志愿者)摘要:本文根据
ApacheFlink
系列直播整理而成,由阿里巴巴高级开发工程师唐云(茶干)分享。
ApacheFlink
·
2020-06-20 20:52
flink
大数据处理
实时计算
流计算-storm
记录一次Flink作业异常的排查过程
本文来自:PerfMa技术社区PerfMa(笨马网络)官网最近2周开始接手
apacheflink
全链路监控数据的作业,包括指标统计,业务规则匹配等逻辑,计算结果实时写入elasticsearch.昨天遇到生产环境有作业无法正常重启的问题
PerfMa
·
2020-06-20 20:51
flink
java
记录一次Flink作业异常的排查过程
最近2周开始接手
apacheflink
全链路监控数据的作业,包括指标统计,业务规则匹配等逻辑,计算结果实时写入elasticsearch.昨天遇到生产环境有作业无法正常重启的问题,我负责对这个问题进行排查跟进
PerfMa
·
2020-06-17 16:00
Apache Spark有哪些局限性
但工业正在转移朝向
apacheflink
。ApacheSpark简介ApacheSpark是为快速计算而设计的开源,闪电般快速的集群计算框架。
zsfz_053
·
2020-06-11 19:39
Apache
Spark
Apache Spark有哪些局限性
但工业正在转移朝向
apacheflink
。ApacheSpark简介ApacheSpark是为快速计算而设计的开源,闪电般快速的集群计算框架。
zsfz_053
·
2020-06-11 19:25
Apache
Spark
Apache Spark有哪些局限性
但工业正在转移朝向
apacheflink
。ApacheSpark简介ApacheSpark是为快速计算而设计的开源,闪电般快速的集群计算框架。
wx5ed7558ca4c5c
·
2020-06-11 19:36
Apache
Spark
通过Flink+NBI可视化构建实时大数据分析系统
Flink:
ApacheFlink
是一个计算框架和分布式处理引擎,用于对***和有界数据流进行有状态计算。其针对数据流的分布式计算提供了数据分布、数据通信以及容错机制等功能。
wx5d37d5fd4aa62
·
2020-06-11 14:36
Kafka
Flink
流式计算
Apache Flink 误用之痛
整理:lyee(Flink社区志愿者)摘要:本文根据FlinkForward全球在线会议·中文精华版整理而成,围绕着项目的开始、需求分析、开发,以及测试、上线、运维整个生命周期展开,介绍了
ApacheFlink
Ververica
·
2020-06-03 22:44
Apache Flink和Kafka入门
介绍
ApacheFlink
是用于分布式流和批处理数据处理的开源平台。Flink是具有多个API的流数据流引擎,用于创建面向数据流的应用程序。
dnc8371
·
2020-06-03 15:03
java
python
kafka
大数据
flink
Flink状态管理和容错机制
ApacheFlink
®—StatefulComputationsoverDataStreams(数据流上的有状态计算)一、有状态的流数据处理1、有状态的计算?
少校1222
·
2020-05-19 15:15
Flink 入门
ApacheFlink
是一个框架和分布式处理引擎,用于在无界和有界数据流上进行有状态的计算。Flink被设计为在所有常见的集群环境中运行,以内存中的速度和任何规模执行计算。
废物大师兄
·
2020-05-17 17:00
实时流式计算系统中的几个陷阱
随着诸如
ApacheFlink
,ApacheSpark,ApacheStorm之类的开源框架以及诸如GoogleDataflow之类的云框架的增多,创建实时数据处理作业变得非常容易。
xiangwang2206
·
2020-05-08 09:44
flink
kafka
实时流式计算系统中的几个陷阱
随着诸如
ApacheFlink
,ApacheSpark,ApacheStorm之类的开源框架以及诸如GoogleDataflow之类的云框架的增多,创建实时数据处理作业变得非常容易。
独孤风
·
2020-05-08 09:00
Apache Flink OLAP引擎性能优化及应用
导读:本次分享的主题为
ApacheFlink
新场景——OLAP引擎,主要内容包括:背景介绍ApacheFlinkOLAP引擎案例介绍未来计划1.OLAP及其分类OLAP是一种让用户可以用从不同视角方便快捷的分析数据的计算方法
DataFunTalk
·
2020-04-25 10:00
apache
flink
olap
祝贺!两位 Apache Flink PMC 喜提 Apache Member
目前,国内(华人)近30位ApacheMember中,有3位是
ApacheFlink
的核心贡献者。
Ververica
·
2020-04-13 15:56
开源大数据生态下的 Flink 应用实践
ApacheFlink
(以下简称Flink)以其快速、准确的算力备受关注,如何将Flink更好的与大数据生态技术相结合,充分挖掘数据的潜力,真正发挥数据的价值,是大多数企业面临的难题。
阿里云官网
·
2020-04-12 02:56
仅1年GitHub Star数翻倍,Flink 做了什么?
阿里妹导读:
ApacheFlink
是公认的新一代开源大数据计算引擎,其流水线运行系统既可以执行批处理程序也可以执行流处理程序。
阿里云云栖号
·
2020-04-10 20:21
Apache Flink 为什么能够成为新一代大数据计算引擎?
众所周知,
ApacheFlink
(以下简称Flink)最早诞生于欧洲,2014年由其创始团队捐赠给Apache基金会。
阿里云官网
·
2020-04-10 12:41
Kuiper与EdgeX Foundry集成实践
Kuiper设计的一个主要目标就是将在云端运行的实时流式计算框架(比如ApacheSpark,ApacheStorm和
ApacheFlink
等)迁移到边缘端。
sjyu_eadd
·
2020-04-10 10:15
Flink学习笔记(1):Word Count
本文是学习
ApacheFlink
的开始,记录了FlinkLocal模式的部署,并运行了WordCount例子。1.下载和部署。
郭寻抚
·
2020-04-09 03:46
Flink相关文章索引(1)
Flink运行时之统一的数据交换对象算法架构Flink原理与实现:内存管理Flink运行时之TaskManager执行Task环境部署FlinkOnYarnResourceIsolation可靠保证【译】
ApacheFlink
司小幽
·
2020-04-07 21:20
Apache Flink 进阶(十二):深度探索 Flink SQL
作者:贺小令(晓令)整理:郑仲尼本文根据
ApacheFlink
进阶篇系列直播整理而成,由阿里巴巴技术专家贺小令分享,文章将从用户的角度来讲解Flink1.9版本中SQL相关原理及部分功能变更,希望加深大家对
ApacheFlink
·
2020-04-06 19:54
flink
大数据
大数据处理
实时计算
流计算-storm
干货来了!阿里发布近300页Flink实战电子书
《
ApacheFlink
电子书合辑》收录来自bilibili、美团点评、小米、OPPO、快手、Lyft、Netflix等一线大厂实时计算平台及实时数仓实践案例,更有来自阿里巴巴及
ApacheFlink
核心贡献者们一线实战经验总结
实时计算
·
2020-04-06 19:26
flink
大数据
Hive 终于等来了 Flink
那
ApacheFlink
什么时候支持与Hive的集成呢?读者可能有些疑惑,还没有支持吧,没用过?或者说最近版本才支持,但是功能还比较弱。
ApacheFlink
·
2020-04-06 18:37
flink
大数据
大数据处理
流计算-storm
实时计算
如何在 Flink 中规划 RocksDB 内存容量?
作者:StefanRichter翻译:毛家琦校对:胡争本文描述了一些配置选项,这些选项将帮助您有效地管理规划
ApacheFlink
中RocksDBstatebackend的内存大小。
ApacheFlink
·
2020-04-06 18:36
flink
大数据
大数据处理
实时计算
流计算-storm
OPPO基于Apache Flink的实时数仓实践
OPPO基于
ApacheFlink
构建实时数仓,在数据规模上单日总数据处理量超10万亿,峰值大概超过每秒3亿。
OPPO互联网技术
·
2020-04-06 18:15
flink
apache
数据仓库
如何通过 JavaCSV 类库来优雅地(偷懒)读写 CSV 文件?
平台在最终的的技术选型中,其中主要依赖的技术栈是
ApacheFlink
,一款Apache基金会开源的
犬小哈
·
2020-04-04 17:00
2016年度大数据精华文章集锦
展望回顾2016年终盘点大数据篇:跨越巅峰,迈向成熟淘宝大数据之路:回顾这些年淘宝大数据所经历过的故事双11前、中、后三阶段大数据计算平台全揭秘ApacheBeam|下一代的大数据处理标准大数据分析引擎
ApacheFlink
司小幽
·
2020-04-03 01:43
干货来了!阿里发布近300页Flink实战电子书
《
ApacheFlink
电子书合辑》收录来自bilibili、美团点评、小米、OPPO、快手、Lyft、Netflix等一线大厂实时计算平台及实时数仓实践案例,更有来自阿里巴巴及
ApacheFlink
核心贡献者们一线实战经验总结
独孤风
·
2020-03-31 10:00
《从0到1学习Flink》—— Flink Data transformation(转换)
image前言在第一篇介绍Flink的文章《《从0到1学习Flink》——
ApacheFlink
介绍》中就说过Flink程序的结构imageFlink应用程序结构就是如上图所示:1、Source:数据源
zhisheng_blog
·
2020-03-28 21:46
Apache Flink:特性、概念、组件栈、架构及原理分析
ApacheFlink
是一个面向分布式数据流处理和批量数据处理的开源计算平台,它能够基于同一个Flink运行时(FlinkRuntime),提供支持流处理和批处理两种类型应用的功能。
LeiLv
·
2020-03-24 23:28
《编程狂人》第五十九期,程序员必看的技术周刊
查看周刊详细内容,请移步:编程狂人-第五十九期+++++++++++++++++++++++++++++++++业界新闻大数据分析引擎
ApacheFlink
升级成为Apache顶级项目Google公布实现
推酷
·
2020-03-22 14:55
Apache Flink任意Jar包上传导致远程代码执行
本文作者:重生信安-清水Samny前言记一次
ApacheFlink
任意Jar包上传导致远程代码执行复现漏洞过程。作者一直致力于小白都能看懂的漏洞复现过程,感谢大家们一路以来的支持!
重生信息安全
·
2020-03-22 12:48
你必须要了解的九个大数据技术
1.
ApacheFlink
是一个高效、分布式、基于Java实现的通用大数据分析引擎,它具有分布式MapReduce一类平台的高效性、灵活性和扩展性以及并行数据库查询优化方案,它支持批量和基于流的数据分析
金光闪闪耶
·
2020-03-15 04:49
Flink 源码解析 —— 如何获取 ExecutionGraph ?
https://t.zsxq.com/UnA2jIi博客1、Flink从0到1学习——
ApacheFlink
介绍2、Flink从0到1学习——Mac上搭建Flink1.6.0环境并构建运行简单程序入门3
zhisheng_blog
·
2020-03-13 11:45
原理解析 | Apache Flink 结合 Kafka 构建端到端的 Exactly-Once 处理
文章目录:
ApacheFlink
应用程序中的Exactly-Once语义Flink应用程序端到端的Exactly-Once语义示例Flink应用程序启动预提交阶段在Flink中实现两阶段提交Operator
Flink中文社区
·
2020-03-11 15:47
Apache Flink 结合 Kafka 构建端到端的 Exactly-Once 处理
文章目录:
ApacheFlink
应用程序中的Exactly-Once语义Flink应用程序端到端的Exactly-Once语义示例Flink应用程序启动预提交阶段在Flink中实现两阶段提交Operator
阿里云云栖号
·
2020-03-06 02:23
Flink 源码解析 —— Flink JobManager 有什么作用?
JobManager的作用https://t.zsxq.com/2VRrbuf博客1、Flink从0到1学习——
ApacheFlink
介绍2、Flink从0到1学习——Mac上搭建Flink1.6.0环境并构建运行简单程序入门
zhisheng_blog
·
2020-03-05 16:06
上一页
17
18
19
20
21
22
23
24
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他