E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
流计算
T2-13 短路电流与热稳定性
GB50217-2018电力工程电缆设计标准中关于电缆设计的相关章节image.pngimage.png短路电
流计算
建哥读书
·
2019-06-24 17:35
Java8中 Stream创建流的四种方式、流的基本操作(
流计算
)
Streamapi**Streamapi是java8中提供的对集合处理的api,对数据进行一系列的中间操作,元数据不会发生改变集合讲的是数据,流讲的是计算(用于操作数据源,集合,数组)所生成的元素序列。**StreamAPI位于java.util.stream.*包下。1Stream自己不会存储元素2Stream不会改变源对象。相反,他们会返回一个持有结果的性Sstream。3Stream操作是延
喊我小王吧
·
2019-06-24 09:24
Apache Flink 结合 Kafka 构建端到端的 Exactly-Once 处理
Flink应用程序端到端的Exactly-Once语义示例Flink应用程序启动预提交阶段在Flink中实现两阶段提交Operator总结ApacheFlink自2017年12月发布的1.4.0版本开始,为
流计算
引入了一个重要的里程碑特性
阿里云云栖社区
·
2019-06-21 00:00
实时计算
分布式
apache
云计算
大数据
DataStream API介绍与使用(一)
详细API参考官网DataStream编程模型在Flink整个系统架构中,对
流计算
的支持是其最重要的功能之一,Flink基于Google提出的DataFlow模型,实现了支持原生数据流处理的计算引擎。
SunnyRivers
·
2019-06-14 17:37
Flink
如何从小白进化成 Apache Flink 技术专家?9节基础课程免费公开!
随着数据量的爆发,AI走上风口,典型的大数据业务场景下数据业务最通用的做法是:选用批计算的技术处理全量数据,采用
流计算
的技术处理实时增量数据。
Ververica
·
2019-06-14 14:05
Apache
Flink
流计算
大数据
Apache
Flink
如何从小白进化成 Apache Flink 技术专家?9节基础课程免费公开!
随着数据量的爆发,AI走上风口,典型的大数据业务场景下数据业务最通用的做法是:选用批计算的技术处理全量数据,采用
流计算
的技术处理实时增量数据。
ApacheFlink
·
2019-06-14 00:00
数据处理
实时计算
大数据
flink
java8实战:使用流收集数据之toList、joining、groupBy(多字段分组)
java8专栏目录:java8实战读书笔记:Lambda表达式语法与函数式编程接口java8实战读书笔记:复合Lambda表达式java8实战读书笔记:初识Stream、流的基本操作(
流计算
)java8
唯有坚持不懈
·
2019-06-09 17:15
java8
java8实战读书笔记:初识Stream、流的基本操作(
流计算
)
本文是博主在学习《java8实战》的一些学习笔记。从本节开始,将进入到java8Stream(流)的学习中来。本文中的部分示例基于如下场景:餐厅点菜,Dish为餐厅中可提供的菜品,Dish的定义如下:1public class Dish {2 /** 菜品名称 */3 private final String name;4 /** 是否是素食 */5 private fin
JAVA葵花宝典
·
2019-06-08 09:26
JAVA RSA非对称加密详解
目前各种主
流计算
机语言都支持RSA算法的实现2.java6支持RSA算法3.RSA算法可以用于数据加密和数字签名4.RSA算法相对于DES/AES等对称加密算法,他的速度要慢的多5.总原则:公钥加密,私钥解密
nnsword
·
2019-06-05 09:10
Java学习笔记
大数据技术学习笔记
大数据计算模式及代表产品大数据计算模式|解决的问题|代表产品批处理计算|针对大规模数据的批量处理|MapReduce、Spark
流计算
|针对流数据的实时计算|Storm、S4、Streams图计算|针对大规模图
weixin_33947521
·
2019-06-04 09:00
大数据
数据库
嵌入式
hex2bin / bin2hex / pack / unpack 的理解及应用
文本文件/二进制文件/二进制bit
流计算
机在存储或传输数据时都是以bit流的形式(二进制),文本文件和二进制文件的主要区别就是在于文本文件是有字符集的,ascii/utf8/utf16等,读取时会将二进制流解码成对应的字符集字符
big_cat
·
2019-06-04 00:00
粘包
打包
pack
谈谈
流计算
中的『Exactly Once』特性
作者:宝牛本文翻译自streaml.io网站上的一篇博文:“ExactlyonceisNOTexactlythesame”,分析了
流计算
系统中常说的『ExactlyOnce』特性,主要观点是:『精确一次
Ververica
·
2019-05-31 17:37
实时计算
Apache
Flink
Apache
Flink
流计算
框架 Flink 与 Storm 的性能对比
作者:孙梦瑶概述:将分布式实时计算框架Flink与Storm进行性能对比,为实时计算平台和业务提供数据参考。1.背景ApacheFlink和ApacheStorm是当前业界广泛使用的两个分布式实时计算框架。其中ApacheStorm(以下简称“Storm”)在美团点评实时计算业务中已有较为成熟的运用(可参考Storm的可靠性保证测试),有管理平台、常用API和相应的文档,大量实时作业基于Storm
Ververica
·
2019-05-31 13:42
Apache
Flink
Flink
流计算
Apache
Flink
谈谈
流计算
中的『Exactly Once』特性
作者:宝牛本文翻译自streaml.io网站上的一篇博文:“ExactlyonceisNOTexactlythesame”,分析了
流计算
系统中常说的『ExactlyOnce』特性,主要观点是:『精确一次
ApacheFlink
·
2019-05-31 00:00
flink
原理解析 | Apache Flink 结合 Kafka 构建端到端的 Exactly-Once 处理
Flink应用程序端到端的Exactly-Once语义示例Flink应用程序启动预提交阶段在Flink中实现两阶段提交Operator总结ApacheFlink自2017年12月发布的1.4.0版本开始,为
流计算
引入了一个重要的里程碑特性
ApacheFlink
·
2019-05-29 00:00
大数据处理
大数据
实时计算
如何从小白进化成 Apache Flink 技术专家?9节基础课程免费公开!
随着数据量的爆发,AI走上风口,典型的大数据业务场景下数据业务最通用的做法是:选用批计算的技术处理全量数据,采用
流计算
的技术处理实时增量数据。
阿里技术_
·
2019-05-29 00:00
Apache Flink 结合 Kafka 构建端到端的 Exactly-Once 处理
应用程序端到端的Exactly-Once语义3.示例Flink应用程序启动预提交阶段4.在Flink中实现两阶段提交Operator5.总结ApacheFlink自2017年12月发布的1.4.0版本开始,为
流计算
引入了一个重要的里程碑特性
兴趣e族
·
2019-05-28 14:01
flink
kafka
Exactly-Once
flink
OGG For Bigdata 12按操作类型同步Oracle数据到kafka不同topic
OGGforBigdata将Oracle数据库数据实时增量同步至hadoop平台(kafka,hdfs等)进行消费,笔者搭建这个环境的目的是将Oracle数据库表通过OGG同步到kafka来提供给flink做
流计算
赵延东的一亩三分地
·
2019-05-21 16:09
Hadoop
Oracle
GoldenGate
python问答。。
可移植性强:绝大多数python程序可以不做改变在所有主
流计算
机平台运行。标准库的支持:内置许多预编译并可移植的功能模块(称作:标准库),
lxm_001
·
2019-05-21 00:00
基于flink的流数据统计
一、统计流程 image.png所有
流计算
统计的流程都是:1、接入数据源2、进行多次数据转换操作(过滤、拆分、聚合计算等)3、计算结果的存储其中数据源可以是多个、数据转换的节点处理完数据可以发送到一个和多个下一个节点继续处理数据
aa1215018028
·
2019-05-20 00:00
数据库
物联网
大數據
手把手教你满速下载百度网盘文件
百度网盘,曾用名百度云(BaiduCloud),是百度推出的一项个人云存储服务,覆盖中国大陆各大主
流计算
机和手机操作系统,包含Web版、Windows版、Mac版、Android版和iPhone版。
pangtong
·
2019-05-18 12:33
实时数据库:一夜之间,我感受到了时序数据库的威胁
牵头
流计算
、时序数据库等多项行业标准及研究报告的编写工作。
�Horde�
·
2019-05-10 10:54
实时数据库:一夜之间,我感受到了时序数据库的威胁
牵头
流计算
、时序数据库等多项行业标准及研究报告的编写工作。
�Horde�
·
2019-05-10 10:54
深度剖析阿里巴巴对Apache Flink的优化与改进
在
流计算
领域,近年来也不断有流表二象性、流是表的C
ApacheFlink
·
2019-04-30 00:00
flink
流计算
框架 Flink 与 Storm 的性能对比
(备注:原文链接https://mp.weixin.qq.com/s/b8...)作者:孙梦瑶概述:将分布式实时计算框架Flink与Storm进行性能对比,为实时计算平台和业务提供数据参考。1.背景ApacheFlink和ApacheStorm是当前业界广泛使用的两个分布式实时计算框架。其中ApacheStorm(以下简称“Storm”)在美团点评实时计算业务中已有较为成熟的运用(可参考Storm
ApacheFlink
·
2019-04-29 00:00
flink
【4.分布式计算】flink
flink有批处理和流处理的计算功能,其中批处理是用
流计算
来模拟,更多数据处理见:https://segmentfault.com/a/11...
梦想家
·
2019-04-29 00:00
flink
上:Spark VS Flink – 下一代大数据计算引擎之争,谁主沉浮?
导读:做大数据绝对躲不过的一个热门话题就是实时
流计算
,而提到实时
流计算
,就不得不提Spark和Flink。Spark从2014年左右开始迅速流行,刚推出时除了在某些场景比Ha
ApacheFlink
·
2019-04-28 00:00
flink
Flink大数据计算的机遇与挑战
本文内容如下:
流计算
核心技术Flink是德国dataArtisans创造的,早期Flink主要是做偏批计算的,但是Spark在批处理上已经有一定优势,正面竞争没
ApacheFlink
·
2019-04-25 00:00
flink
Apache Storm(Low Level)
作者:jiangzz电话:15652034180微信:jiangzz_wx微信公众账号:jiangzz_wy百知教育背景介绍
流计算
:将大规模流动数据在不断变化的运动过程中实现数据的实时分析,捕捉到可能有用的信息
麦田里的守望者_e392
·
2019-04-17 16:02
Apache Flink 介绍
流计算
在介绍Flink之前首先说一下
流计算
的概念,
流计算
是针对流式数据的实时计算。流式数据
chaojianok
·
2019-04-12 13:00
Flink学习笔记:异步I/O访问外部数据
场景:
流计算
系统中经常需
大数据研习社
·
2019-04-10 15:00
Flink生成Hfile
提出需求:团队为了统一技术栈,一致同意用Flink来进行对批和
流计算
统一处理。问题来了:Flink似乎相对spark来说还是很不完善,spark分分钟搞定的事情,在Flink里就需要动动脑子了。
风远陌
·
2019-04-08 17:37
大数据
demo
storm实时分布式
流计算
系统——介绍
介绍storm是一款实时分布式
流计算
开源框架,在一个多节点集群上,每秒可以轻松处理上百万条消息。扩展性好,容错性好,稳定性好,可以支持很多编程语言。
讲不出 再见
·
2019-03-28 15:02
storm
Flink watermark+window 处理数据乱序、迟到问题
在
流计算
中,我们一般会选择Storm、Spark、Flink等计算框架,而对消息队列的选则一般是Rabbitmq、Kafka等,本片文章我们主要介绍Kafka+Flink框架在
流计算
中所遇到的问题及解决方案
Seniscz
·
2019-03-20 20:28
flink
开源的Blink和Spark3.0,谁将称霸大数据领域?
2018和2019年是大数据领域蓬勃发展的两年,自2019年伊始,实时
流计算
技术开始步入普通开发者视线,各大公司都在不遗余力地试用新的
流计算
框架,实时
流计算
引擎SparkStreaming、KafkaStreami
AI科技大本营
·
2019-03-14 20:23
大数据舞台中的Flink
大数据项目实战》学习笔记,想通过视频系统学习Flink这个最火爆的大数据计算框架的同学,推荐学习CSDN官网课程:Flink大数据项目实战:http://t.cn/ExrHPl92014年Flink作为主攻
流计算
的大数据引擎开始在开源大数据行业内崭露头角
大数据研习社
·
2019-03-13 15:36
Hadoop
Spark
Storm
开发工具
Flink 原理与实现:Aysnc I/O
流计算
系统中经常需要与外部系统进行交互,比如需要查询外部数据库以关联上用户的额外信息。通常,我们的实现方式是向数据库发送用户a
Lynn_Yuan
·
2019-03-12 09:35
flink
异步I/O
flink
Flink 原理与实现:Table & SQL API
wuchong.me/blog/2017/03/30/flink-internals-table-and-sql-api/Flink已经拥有了强大的DataStream/DataSetAPI,可以基本满足
流计算
和批计算中的所有需求
Lynn_Yuan
·
2019-03-12 09:10
flink
table
sql
api
flink
flink简单应用: scala编写wordcount
api1,flink:DataStreamapplicationsa,配置pom.xmlorg.apache.flinkflink-streaming-scala_2.111.7.2b,调用flink
流计算
根哥的博客
·
2019-03-11 16:20
flink
利用blink+MQ实现
流计算
中的超时统计问题
原因在于:
流计算
是基于消息触发计算的,若没有消息到达到则
阿里云云栖社区
·
2019-03-06 00:00
varchar
string
流计算-storm
mq
blinker
利用blink CEP实现
流计算
中的超时统计问题
案例与解决方案汇总页:阿里云实时计算产品案例&解决方案汇总一.背景介绍如一文中所描述的场景,我们将其简化为以下案例:实时流的数据源结构如下:物流订单号支付时间仓接单时间仓出库时间LP12018-08-0108:00LP12018-08-0108:002018-08-0109:00LP22018-08-0109:10LP22018-08-0109:102018-08-0109:50LP22018-0
阿里云云栖社区
·
2019-03-06 00:00
varchar
流计算-storm
blinker
createjs
Flink DataStream转换(翻译官方文档)
以下就是我翻译的flink
流计算
DataStreamTransforma
jyj019
·
2019-03-02 08:56
Flink
Flink 原理与实现:Table & SQL API
1.前言Flink已经拥有了强大的DataStream/DataSetAPI,可以基本满足
流计算
和批计算中的所有需求。为什么还需要Table&SQLAPI呢?
李京京
·
2019-02-27 14:00
Flink
大数据
Storm精华问答 | task与executor有什么关系?
而目前已是分布式技术领域最新爆发点,Storm更是
流计算
技术中的佼佼者和主流。今天我们就一起来看看Storm的精华问答!1Q:task与executor有什么关系?
csdn业界要闻
·
2019-02-20 10:46
初识Flink(1)-- 关于Flink的架构
PS:我是半吊子Storm从业者,Storm是我司
流计算
平台很早就在使用的技术,一直没有深入了解,当时Flink已经出具规模,但是鉴于一个Storm还没搞好,再弄个Flink进来会搞不定,大家还是坚持在
关耳山石
·
2019-02-18 00:00
大数据
Storm精华问答 | 为什么这么多人用Spark而不用Storm?
随着越来越多的场景对Hadoop的MapReduce高延迟无法容忍,以及大数据实时处理解决方案的应用日趋广泛,目前已是分布式技术领域最新爆发点,而Storm更是
流计算
技术中的佼佼者和主流。
CSDN云计算
·
2019-01-30 10:45
Storm精华问答 | 为什么这么多人用Spark而不用Storm?
随着越来越多的场景对Hadoop的MapReduce高延迟无法容忍,以及大数据实时处理解决方案的应用日趋广泛,目前已是分布式技术领域最新爆发点,而Storm更是
流计算
技术中的佼佼者和主流。
CSDN云计算
·
2019-01-30 10:45
Storm精华问答 | 为什么这么多人用Spark而不用Storm?
随着越来越多的场景对Hadoop的MapReduce高延迟无法容忍,以及大数据实时处理解决方案的应用日趋广泛,目前已是分布式技术领域最新爆发点,而Storm更是
流计算
技术中的佼佼者和主流。
csdn业界要闻
·
2019-01-30 10:45
漫谈加持Blink的Flink和Spark
在实际的场景这种优势已经超过Spark三倍,在
流计算
性能上我们也取得了类似的提升。我们线上的很多典型作业,性能是原来的3到5倍。在有数据倾斜的场景,以及若干比较有挑战的TPC-Hquery
祝威廉
·
2019-01-28 18:19
StructuredStreaming编程指南
您可以用在静态数据上表示批处理计算的方式来表示
流计算
。SparkSQL引擎将负责递增和连续地运行它,并在流数据继续到达时更新最终结果。
撸码小丑
·
2019-01-23 15:10
上一页
21
22
23
24
25
26
27
28
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他