E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
流计算
电子元件-三极管/MOS/IGBT
目录:一、三极管1、三极管驱动继电器计算1)三极管导通、截至的条件2)电路正常工作的前提条件与计算2、超β三极管1)几种超β三极管电路形式2)超β三极管的电
流计算
3、数字三极管4、三极管组成的电流源二、
liht_1634
·
2023-04-13 02:01
电子
电气元件
硬件电路
工艺文件
硬件工程
io流 java每次读一行,Java复习之IO流(下)
什么是字符流上一篇文章中我们说过字符流一般只能操作的是存文本数据,而字节流可以操作很多类型数据(文本,图片,音频,视频等)字符流是可以直接读写字符的IO
流计算
机中存储的是字节数据,字符流读取字符,就要先读取到字节数据
方祯
·
2023-04-11 22:50
io流
java每次读一行
【大数据-实时
流计算
】图文详解 Apache Flink 架构原理
目录ApacheFlink架构介绍一、Flink组件栈二、Flink运行时架构ApacheFlink架构介绍一、Flink组件栈在Flink的整个
禅与计算机程序设计艺术
·
2023-04-11 08:56
大数据AI人工智能
Flink
大数据
apache
flink
kafka入门篇
目录1、kafka基本介绍1.1、kafka发展历史1.2、编程语言1.3、kafka应用场景1.3.1、messagequeue消息传递1.3.2、流式应用程序(数据集成+
流计算
)2、kafka安装和服务端操作
fanger8848
·
2023-04-10 06:44
kafka
kafka
数据分析实践 | flink | window窗口篇
flink
流计算
--window窗口window是处理数据的核心。按需选择你需要的窗口类型后,它会将传入的
Sevsea
·
2023-04-10 04:14
淘宝双11实时数据分析项目报告
文章目录环境部署项目主要架构具体步骤
流计算
步骤python连接kafkaspark-streaming集成kafka编写并运行spark-streaming程序(实时词频统计)编写并运行spark-streaming
阿坨
·
2023-04-10 00:28
数据分析
kafka
spark
hive
socketio
太平洋电信加入OCP社区,加速开源计算的应用创新
加入OCP社区对于太平洋电信(Telstra PBS)来说具有重要意义,我们将会持续优化数据中心建设布局,提高从边缘到云侧的数据
流计算
效率,促进互联互通,为企业强化数据安全保驾护航。
太平洋电信
·
2023-04-09 20:31
云cloud
开闭原则
云计算
big
data
实时计算Flink
实时计算Flink三种实时计算框架storm、sparkstreaming和flink的对比storm延迟低但吞吐量小sparkstreaming吞吐量大,但延迟高flink是一种兼具低延迟和高吞吐量特点的
流计算
技术
code__online
·
2023-04-08 23:55
大数据分布式平台
flink
【电力系统】基于Matlab实现风电光伏概率潮
流计算
更多Matlab仿真内容点击智能优化算法神经网络预测雷达通信无线传感器信号处理图像处理路径规划元胞自动机无人机电力系统⛄内容介绍潮
流计算
是电力系统的一项重要分析功能,是进行故障计算,继电保护整定,安全分析的必要工具
matlab科研助手
·
2023-04-07 19:50
电力系统
matlab
开发语言
互联网摸鱼日报(2023-03-23)
互联网摸鱼日报(2023-03-23)InfoQ热门话题迎战ChatGPT,谷歌聊天机器人Bard正式开放测试第二届“鼎新杯”数字化转型应用征集大赛在京启动八年“老网红”Flink:揭秘实时
流计算
引擎全球化落地的演进历程降本为根
每日摸鱼大王
·
2023-04-07 10:35
每日摸鱼新闻
业界资讯
Flink初探
storm是基于
流计算
的,但是也可以模拟批处理,sparkstreaming也可以进行微批处理,虽说在性能延迟上处于亚秒级别,但也不足以说明Flink崛起如此迅速(毕竟从spa
活长擅运动
·
2023-04-06 19:46
"主
流计算
-智能语音识别"技术支持
如果有什么问题可以留言或者发送邮件;我们会在第一时间为您解答。邮箱地址:
[email protected]
谢谢
fylq
·
2023-04-06 13:03
RocketMQ 应用场景
1、异步解耦场景描述作为淘宝/天猫主站最核心的交易系统,每笔交易订单数据的产生会引起几百个下游业务系统的关注,包括物流、购物车、积分、阿里妈妈、
流计算
分析等等,整体业务系统庞大而且复杂,架构设计稍有不合理
anthony4515
·
2023-04-06 10:43
java
DolphinDB StreamEngineParser 解析原理介绍
StreamEngineParser的主要功能是自动构建计算流水线,以及在流批一体计算场景中,将批计算因子翻译成
流计算
解决
DolphinDB智臾科技
·
2023-04-05 20:39
数据库
DolphinDB
流计算
因子挖掘
因子分析
OLAP系统林林总总
实时数据计算,需要实时进行数据ETL过程,实时
流计算
,来计算出结果,这类计算复杂性不会太高但是对数据处理的吞吐量要求很高,比如典型的计算一个APP的实时在线人数,当天实时新增
TechingOn
·
2023-04-05 15:33
大数据
大数据
数据仓库
OLAP
Flink--基于官网对窗口Window的理解
概述Windows是Flink
流计算
的核心,重点在于窗口的理解和应用;建议详细阅读官网的window介绍,链接地址:https://ci.apache.org/projects/flink/flink-docs-master
李小李的路
·
2023-04-05 02:26
Flink任务问题分析与性能调优
首先要明白,Flink是分布式
流计算
框架,可简单理解为多个相互通讯的有状态java进程,其调优本质跟普通的java程序大同小异。
_Janick
·
2023-04-05 01:30
flink
flink
java
运维
配电网前推后带法求电力系统潮流(Python&Matlab实现)
目录1概述2数学模型3节点分层前推回代潮
流计算
及步骤3.1计算方法3.2计算步骤4算例及数据5Matlab&Python代码实现1概述配电网通常是单电源全网连接、开环运行,即呈树状。
我爱Matlab编程
·
2023-04-04 19:44
电力系统
matlab
python
开发语言
MATLAB代码:基于二阶锥松弛的主动配电网故障重构及可视化
MATLAB代码:基于二阶锥松弛的主动配电网故障重构及可视化关键词:配电网故障重构二阶锥松弛可视化参考文档:《基于禁忌克隆遗传算法的配电网故障恢复重构_张利民》参考故障重构部分模型;《二阶锥松弛在配电网最优潮
流计算
中的应用
「已注销」
·
2023-04-04 14:50
matlab
重构
开发语言
大数据框架:Spark生态实时
流计算
在Spark框架当中,提起
流计算
,那么主要就是SparkStreaming组件来负责。
成都加米谷大数据
·
2023-04-03 21:24
大数据最佳实践-spark structstreaming
您可以像对静态数据进行批处理计算一样,来表示
流计算
。当流数据继续到达时,SparkSQL引擎将负责递增地,连续地运行它并更新最终结果。您可以在Scala,Java,Py
猿与禅
·
2023-04-03 06:02
大数据
spark
structstreaming
调优
最佳实践
大数据学习之Hadoop
大数据的关键技术:批处理技术、
流计算
、图计算、查询分析计算大数据处理架构Hadoop1.Hadoop简介apache软件基金会的开源软件,使用Java开发,但是Hadoop支持多种编程语言,有两大核心HDFS
@从心
·
2023-04-02 20:27
大数据
hadoop
mapreduce
big
data
架构对比(CPU、GPU、FPGA、ASIC、DSA……)
ASIC等AI芯片特性及对比最近,新名词DSA(DomainSpecificArchitecture,特定领域架构),可参考以下文章:预见·第四代算力革命(一):算力综述预见·第四代算力革命(二):三大主
流计算
平台
stella_loveK
·
2023-04-01 21:35
AI探索
fpga开发
人工智能
大数据原理-关键技术
价值密度低使得出现了大数据时代关键核心技术:分布式存储(HDFS、HBase、NoSql、NewSql)分布式处理(MapReduce)计算模式:批处理:大规模数据的批量处理(MapReduce、Spark等等)
流计算
monster++
·
2023-04-01 08:19
大数据原理
大数据
hadoop
hive
spark
java
【前推回代法】含有分布式电源的三相不平衡配电网潮
流计算
【IEEE33节点】(Matlab代码实现)
本文目录如下:目录1概述2运行结果3参考文献4Matlab代码实现1概述配电网潮
流计算
是智能配电网实施中的基本要求,由于配电网三相参数不平衡,通常配网潮
流计算
采用三相不对称模型。
科研社
·
2023-03-31 16:30
电气期刊论文
分布式
Flink中subTask,并行度,slot你分得清吗?
无边界的数据流就是真正意义上的流数据,所以Flink是支持
流计算
的。有边界的数据流就是批数据,所以也支持批处理,目前flink在各大互联网公司应用广泛,是最为流行的大数据实时计算引擎之一。
wind_huise
·
2023-03-31 13:27
flink
flink
kafka
subTask
并行度
slot
sharing
《计算机构造与解释》读书笔记(5)
文章目录1.写在最前面2.流2.1流作为延时的表2.1.1流实现的行为方式2.1.2delay和force的实现2.2无穷流2.2.1隐式地定义流2.3
流计算
模式的使用2.3.1系统地将迭代操作方式表示为流过程
phantom_111
·
2023-03-31 04:54
后端
Flink(四十)—— Apache Flink 管理大型状态之增量 Checkpoint 详解
ApacheFlink是一个有状态的
流计算
框架,状态是作业算子中已经处理过的内存状态,供后续处理时使用。
weixin_42073629
·
2023-03-31 00:49
Flink
大数据
Flink 基于Log 的增量Checkpoint
Flink,作为流式计算的标杆,其端到端延迟包括容错的快慢主要取决于检查点机制(Checkpointing),所以如何将Checkpoint做得高效稳定是Flink
流计算
的首要任务。
pucheung
·
2023-03-31 00:14
分布式
大数据
数据库
python
java
Flink 1.15 新功能架构解析:高效稳定的通用增量 Checkpoint
Flink,作为流式计算的标杆,其端到端延迟包括容错的快慢主要取决于检查点机制(Checkpointing),所以如何将Checkpoint做得高效稳定是Flink
流计算
的首要任务。
Apache Flink
·
2023-03-30 23:50
分布式
大数据
数据库
人工智能
Flink
实现了统一消息中心的微服务基础框架 JVS,快点赞收藏
二、基础框架实现功能支持数据管理支持分布式定时任务支持分布式日志采集支持系统监控支持动态配置中心支持模板消息支持链路跟踪支持邮件渠道接入支持注解式打印日志支持接入实时
流计算
平台三、消息中心说明四、扩展的商用项目
jonyleek
·
2023-03-30 13:53
低代码开发系列
大数据
服务器
JVS
java
前端
【Spark分布式内存计算框架——Structured Streaming】1. Structured Streaming 概述
前言ApacheSpark在2016年的时候启动了StructuredStreaming项目,一个基于SparkSQL的全新
流计算
引擎StructuredStreaming,让用户像编写批处理程序一样简单地编写高性能的流处理程序
csdnGuoYuying
·
2023-03-30 00:18
spark
分布式
大数据
kafka
数据库
Flink笔记--深度全面总结
.Flink特性流式计算是大数据计算的痛点,第1代实时计算引擎Storm对ExactlyOnce语义和窗口支持较弱,使用的场景有限且无法支持高吞吐计算;SparkStreaming采用“微批处理”模拟
流计算
☞空白页
·
2023-03-29 19:54
Flink
Flink
Spark生态系统和运行架构
1.Spark生态系统Spark生态圈Spark设计遵循”一个软件栈满足不同应用场景“的理念,逐渐形成了一整套完整的生态系统,既能够提供内存计算框架,也可以支持SQL即时查询(SparkSQL)、
流计算
Aurora1217
·
2023-03-29 18:21
spark
spark
大数据
大数据理论篇 No.1-浅谈Flink中的数据传输
TaskManager之间会不断的进行数据交换,而TaskManager进程里是以Slot为单位执行任务的,一个TaskManager里可以有多个Slot,每个Slot之间都可能进行连接,并且传输数据,而在
流计算
的场景中
pezynd
·
2023-03-29 16:29
从0到1的大数据探索
flink
大数据
缓存
网络
经验分享
1024程序员节
大数据算法_阿里十年大数据专家实践经验分享:离线和实时大数据分析和算法...
对Hadoop离线数据开发技术、
流计算
实时开发技术、大数据开发优化以及大数据建模等有较为深入的研究。阿里巴巴大数据开发专家撰写,源于十余年工作实践,只讲实用有效的“招式”;庖丁解牛式讲解离线和实
weixin_39962758
·
2023-03-29 15:50
大数据算法
大数据之路—— 实时技术
5.2.1数据采集5.2.2数据处理5.2.3数据存储5.2.4数据服务5.3流式数据模型5.3.1数据分层5.3.2多流关联5.3.3维表使用@5.4大促挑战5.4.1大促特征5.4.2大促保障@5.1简介
流计算
jialun0116
·
2023-03-29 15:26
大数据之路总结
大数据
big
data
数据库
中间件
【前推回代法】含有分布式电源的三相不平衡配电网潮
流计算
【IEEE33节点】(Matlab代码实现)
本文目录如下:目录1概述2运行结果3参考文献4Matlab代码实现1概述配电网潮
流计算
是智能配电网实施中的基本要求,由于配电网三相参数不平衡,通常配网潮
流计算
采用三相不对称模型。
数学建模与科研
·
2023-03-29 13:09
电气期刊论文
分布式
大数据中台架构
大数据中台架构1.数据采集传输1.1Flume和Logstash1.2日志采集如何工作1.3数据传输Kafka2.数据存储HDFSHBaseHive和PigMapReduce3.数据计算&查询3.1批计算和
流计算
嗷嗷的特Man
·
2023-03-29 05:07
big
data
架构
专家带你吃透 Flink 架构:一个新版 Connector 的实现
前言Flink可以说已经是
流计算
领域的事实标准,其开源社区发展迅速,提出了很多改进计划(FlinkImprovementProposals,简称FLIP[1])并不断迭代,几乎每个新的版本在功能、性能和使用便捷性上都有所提高
Java小果
·
2023-03-28 19:44
java
开发语言
程序人生
架构
后端
用4+1架构视图说说Flink架构
在实时
流计算
的江湖里,Flink大有一统江湖的味道,其正处于如日中天的高光时刻。
zxhyxwwu
·
2023-03-28 18:22
大数据
架构设计
架构
flink
big
data
2021-01-01
考完去千岛湖玩~2月份:回家过年修整期间外加增长知识,了解CFD热
流计算
领域,争取再写一篇文章。去体检一次。练习面试话术。继续专升本授课。
孙猴子爱跳舞
·
2023-03-28 13:13
DolphinDB
流计算
应用:引擎级联监测门禁异常状态
物联网的发展为智能安防和自动化监控带来了更多便利,与此同时,新型城镇建设、智慧城市与智慧社区的发展也为门禁管理等安防问题智能化提出了更高的要求。在智能化发展的背景下,门禁不仅仅是门禁,更是一套集成了访客、考勤、消费、巡更、梯控等更多功能的全面便捷的系统安全应用。目前门禁系统主要用于出入口管理,在我国加速推动智慧城市、智慧工地、智慧社区等智慧化建设发展的前提下,门禁系统智能化升级的趋势成为必然,其普
DolphinDB智臾科技
·
2023-03-27 08:14
DolphinDB
数据库
流计算
时序数据库
门禁监控
流批一体随想
这种架构的出现是历史必然,因为那时的
流计算
引擎以Storm为代表,而它们都无法提供Exactly-Once语义,所以任何一点小的扰动(延迟、网络问题、系统异常
LittleMagic
·
2023-03-26 11:45
基于binblog的数据监听
调研背景前段时间在调研实时计算的时候就在思考一个问题,目前的
流计算
是基于一个数据流的概念,而我们目前报名系统数据的同步是由集团将数据直接更新到数据库的,如果我们后期要集成这部分数据做实时报表分析,那么怎么监听这一部分数据呢
yschen
·
2023-03-25 11:54
日志平台的核心需求
简单总结下日志平台的核心需求,至少有以下2点:1、数据分析数据分析又分成2类,一类是预先定义好的分析逻辑,另一类是即时的,突发奇想的分析adhoc预先定义好的分析逻辑,可以在
流计算
系统就对日志流进行解析
hongshen
·
2023-03-24 02:29
Apache Flink on Kubernetes:四种运行模式,我该选择哪种?
通过支持事件时间(event-time)、计算状态(state)以及恰好一次(exactly-once)的容错保证,Flink迅速被很多公司采纳,成为了新一代的
流计算
处理引擎。
Docker_
·
2023-03-23 01:58
大数据
分布式
hadoop
kubernetes
java
风控系统实践之感: drools 和 redis
3.需要支持滑动窗口,滚动窗口,长度窗口等遇到的问题主要有以下几点:1.redis做
流计算
太过勉强,一是根据业务上的需求,需要统计的key至少有几亿个,最多也有几十亿个,另外redis中需要存储少量的交易的信息
Double_winter
·
2023-03-20 07:20
流计算
开发平台StreamPark安装
一、StreamPark简介StreamPark(原StreamX)是一个流处理应用程序开发管理框架。初衷是让流处理更简单,旨在轻松构建和管理流处理应用程序,提供使用ApacheFlink和ApacheSpark编写流处理应用程序的开发框架,未来将支持更多其他引擎。同时,StreamPark提供了一个流处理应用管理平台,核心能力包括但不限于应用开发、调试、交互查询、部署、运维、实时数仓等。官方网站
CodePhage
·
2023-03-19 11:40
大数据工具安装指南
Docker
docker
apache
大数据
flink
centos
Flink的可靠性保证 - 状态存储
一为什么需要State存储与批计算相比,State是
流计算
特有的,批计算的failover机制,是失败后重新计算;
流计算
在大多数场景下是增量计算,数据逐条处理,每次计算是在上一次计算结果之上进行处理的,
flywind800
·
2023-03-17 09:24
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他