hadoopflink流计算

1.文章复现《热电联产系统在区域综合能源系统中的定容选址研究》（附matlab程序）

代码链接文章复现《热电联产系统在区域综合能源系统中的定容选址研究》（matlab程序）-Matlab文档类资源-CSDN文库1.简述本文采用遗传算法的方式进行了下述文章的复现并采用电-热节点的方式进行了潮流计算以降低电网的网络损耗分析了电网的基本数学模型
素馨堂·2023-08-23 08:58

Apache Paimon 实时数据湖 Streaming Lakehouse 的存储底座

内容主要分为四个部分：流计算邂逅数据湖PaimonCDC实时入湖Paimon不止CDC入湖总结与生态点击查看原文视频&演讲PPT一、流计算邂逅数据湖流计算1.0实时预处理流计算1.0架构截止到现在也是非常主流的实时数仓中的一个实时预处理的功能
Apache Flink·2023-08-23 07:58

Kafka实战:企业级消息队列应用架构及最佳实践

随着互联网、移动互联网、物联网、金融、电信等行业的蓬勃发展，越来越多的企业开始采用Kafka作为分布式消息系统，并将其应用到各个领域，如电商、支付、地图导航、日志收集、流计算等多个场景。
禅与计算机程序设计艺术·2023-08-22 22:50

R语言机器学习方法在生态经济学领域

R语言是用于统计建模的主流计算机语言，用于机器学习十分方便，且学习曲线
xiao5kou4chang6kai4·2023-08-22 10:31

Apache Paimon 实时数据湖 Streaming Lakehouse 的存储底座

内容主要分为四个部分：流计算邂逅数据湖PaimonCDC实时入湖Paimon不止CDC入湖总结与生态点击查看原文视频&演讲PPT一、流计算邂逅数据湖流计算1.0实时预处理流计算1.0架构截止到现在也是非常主流的实时数仓中的一个实时预处理的功能
·2023-08-22 10:14

Apache Flink 常见问题定位指南

一、问题分析概览流计算作业通常运行时间长，数据吞吐量大，且对时延较为敏感。
程序员的隐秘角落·2023-08-21 21:04

揭开神秘面纱，会stream流就会大数据

本文以javastream流计算为例，讲解一些基础的spark操作。另一个流行的大数据框架flink同理。准备工作测试数据,以下列分别表示姓名，年龄，部门，职位。张三,20,研发部,普通员
2301_76429513·2023-08-20 15:44

基于遗传算法和粒子群算法的潮流计算比较（Matlab代码实现）

目录1概述2粒子群算法3遗传算法4潮流计算运行结果5参考文献6Matlab代码实现1概述电力系统潮流是指系统中的所有运行参数总体,其中包括各个发电机与负荷的功率及其电流、各母线电压的大小与相位、各个线路与变压器等元件所通过的电流
@橘柑橙柠桔柚·2023-08-19 12:39

Kafka基础及常见面试题

1.用途1.流量削峰2.流计算2.Kafka的核心组件在Kafka中，Producer、Broker和Consumer是三个关键的角色，它们在整个消息传递过程中扮演不同的角色和功能：1.
马丁•路德•王·2023-08-16 17:01

flink状态

什么是状态State是指流计算过程中计算节点的中间计算结果或元数据属性，比如在aggregation过程中要在
todd5167·2023-08-14 11:21

【大数据】Flink 详解（二）：核心篇 Ⅱ

对于流计算而言，事件持续产生，如果每次计算相互独立，不依赖上下游的事件，则相同输入，可以得到相同输出，是无状态计算。如果计算需要依赖于之前或者后续事件，则被称为有状态计算。有状态
G皮T·2023-08-10 05:54

电力系统潮流计算c加加语言指南,第三章简单电力系统的潮流计算汇总

1、第一章简单电力系统的分析和计算一、基本要求掌握电力线路中的电压降落和功率损耗的计算、变压器中的电压降落和功率损耗的计算；掌握辐射形网络的潮流分布计算；掌握简单环形网络的潮流分布计算；了解电力网络的简化。二、重点内容1、电力线路中的电压降落和功率损耗图3-1中，设线路末端电压为、末端功率为，则(1)计算电力线路中的功率损耗线路末端导纳支路的功率损耗：(3-1)则阻抗支路末端的功率为：线路阻抗支路
工程师李涛·2023-08-09 12:19

潮流计算中，已知末端功率和首端电压，手算方法

首先，这种情况的潮流是要迭代求解的，但是由于P和U显然不是一个节点，所以我们假设所有节点的电压为。注意：是把所有节点的电压都看作额定电压，而不是说，最末端的电压看作额定电压，其他节点的电压通过最后的电压算出来。不要这样！！！！！这个方法是一个完整的来回才能算出一次迭代下系统的潮流分布。
+7————·2023-08-09 12:17

flink时间概念和watermark详解

一、flink支持的时间概念类型1.1、流计算与时间属性密不可分相比较于离线计算，流计算往往离不开讨论时间这个概念，因为离线计算是有界数据，用户输入一个固定的数据集，离线计算引擎会输出一个固定的结果，这中间涉及的中间状态
愤怒的谜团·2023-08-08 01:37

3.核心抽象

3.1环境对象StreamExecutionEnvironment是Flink应用开发时的概念，表示流计算作业的执行环境，是作业开发的入口、数据源接口、生成和转换DataStream的接口、数据Sink
StephenYYYou·2023-08-07 23:19

Spark RDD详解

它旨在执行批处理(类似于MapReduce)和提供新的工作特性，例如流计算，SparkSQL交互式查询
丿沐染烟忱丶·2023-08-04 18:03

Apache Flink概述

Flink是构建在数据流之上的一款有状态的流计算框架，通常被人们称为第三代大数据分析方案第一代大数据处理方案：基于Hadoop的MapReduce静态批处理|Storm实时流计算，两套独立的计算引擎，难度大
LJiaWang·2023-08-03 10:15

Flink Windows（窗口）详解

Windows（窗口）Windows是流计算的核心。
LJiaWang·2023-08-03 10:15

消息队列的选型及当下几种流行队列的优缺点分析

，流行的产品与周边生态系统会有一个比较好的集成和兼容，比如，Kafka和Flink就有比较好的兼容性，Flink内置了Kafka的DataSource，使用Kafka就很容易作为Flink的数据源开发流计算应用
我是pp呀·2023-08-03 05:17

大数据中的流计算

文章目录什么是流式计算数据流数据时序数据集有界数据集无界数据集主要应用场景批、流计算相结合Q&A附录什么是流式计算当你谈起流式计算的时候，说明你当前的处境已经涉及到了大数据范畴。
魏小言·2023-08-01 20:15

Flink 数据统计 举个栗子

一、统计流程image.png所有流计算统计的流程都是：1、接入数据源2、进行多次数据转换操作(过滤、拆分、聚合计算等)3、计算结果的存储其中数据源可以是多个、数据转换的节点处理完数据可以发送到一个和多个下一个节点继续处理数据
生活的探路者·2023-07-29 16:50

实时流计算技术已经主宰阿里各业务线，你还不学起来？！

今日一问：你学实时流计算了吗？这几年，随着越来越多的业务对数据的实时性提出了高要求，实时流计算技术变得越来越火。
浪尖聊大数据-浪尖·2023-07-28 18:10

新版本特性抢先看 | DolphinDB V2.00.10&V1.30.22 即将发布

新版本包含了VSCodeDebug、插件在线下载、TopN系列函数、SQL标准兼容性改进等各种更新，以及TSDB引擎、流计算、多种计算函数性能优化。
DolphinDB智臾科技·2023-07-28 17:19

思格新能源面试（部分）

其中，实时流计算技术主要用于对动态产生的数据进行实时计
qq_23204557·2023-07-27 07:07

简述流计算的场景

从我最开始接触的流计算场景来阐述最近的一些心得，先以场景入手。
夜丨雨·2023-07-27 05:56

Flink学习笔记(5) -- Flink 状态(State)管理与恢复

一、状态  在流计算场景中，数据没有边界源源不断的流入的，每条数据流入都可能会触发计算，比如在进行count或sum这些操作，是选择每次触发计算将所有流入的历史数据重新计算一边还是每次计算都基于上次计算结果进行增量计算呢
满床清梦覆星河·2023-07-26 17:20

spark streaming杂记

Metadatacheckpointing:保存流计算的定义信息到容错存储系统如HDFS中。这用来恢复应用程序中运行worker的节点的故障。
cclucc·2023-07-26 06:10

Apache Flink 流处理（快速入门）

流计算的结果通过Sinks输出,例如将数据写入文件、标准输出等。共同依赖1.7.12.11org.apache.flinkflink-core${flink.version}org.apach
<>=·2023-07-26 03:27

1.Flink概述

1.1技术架构应用框架层:在API层之上构建的满足特定应用场景的计算框架，总体上分为流计算和批处理两类应用框架。
StephenYYYou·2023-07-26 03:21

会 java 8 stream流就会大数据！

本文以javastream流计算为例，讲解一些基础的spark操作。另一个流行的大数据框架flink同理。准备工作测试数据,以下列分别表示姓名，年龄，部门，职位。张三,20,研发部,普通员
python小小Q·2023-07-25 23:44

Mg设备 - 电流计算 隐私政策

This"Mg设备-电流计算"respectsandprotectstheprivacyofalluserswhousetheservice.Inordertoprovideyouwithmoreaccurateandpersonalizedservices
mrTomHank·2023-07-25 23:52

基于Greenplum+Kafka的实时数据处理

Greenplum研发团队在开源Greenplum的基础上，提供了新的高速流数据引擎GPKafka，从而将Greenplum强大的SQL处理能力引入到流计算领域。来自掌数科技的吴贤川将在
Greenplum中文社区·2023-07-25 11:29

Kafka在大数据处理中的应用

Kafka在大数据处理中的应用一、Kafka简介1.基础概念2.Kafka的主要功能3.Kafka的特点二、应用场景1.数据采集和消费2.数据存储和持久化3.实时数据处理和流计算4.数据通信和协同三、技术融合
格林希尔·2023-07-25 11:56

storm实时计算框架（笔记）

Storm令持续不断的流计算变得容易，弥补了Hadoop批处理所不能满足的实时要求。Storm经常用于在实时分析、在线机器学习、持续计算、分布式远程调用和ETL等领域。
性感的人字拖·2023-07-23 18:09

flink 股票

1.今日指数项目之FlinkCEP介绍_flinkcep的优势_Maynor996的博客-CSDN博客.2基于Flink流计算实现的股票交易实时资产应用_flink股票_ApacheFlink的博客-CSDN
neo_sparker·2023-07-23 08:01

Python多线程 Multi-threading

启用时间轮转，CPU对每个任务轮流计算，每次只用万分之一秒执行一个任务。当只有4个任务时，4核CPU可以实现并行，即每个核心负责一个任务。但是当任务数超过CPU的核心数时，则必须要启用时间轮转。
Solomon_Xie·2023-07-20 10:38

玩转幻点活动方案

主题结合商场、时间档期来定2.2内容:参考大丸六一或者保利2.3成功案例（兰州保利、上海久光、孩子王等等）3、我们能带来什么（2-3页）3.1额外带高质量客流客流计算：天数*次数/天*人/场=总数预计带来消费
Andyee·2023-07-20 08:27

NSQ 行情数据无忧处理丨DolphinDB easyNSQ 模块使用教程

为了方便用户快速搭建NSQ实时行情数据的流计算环境，DolphinDB开发了DolphinDBModules::easyNSQ模块（简称easyNSQ模块），主要用于NSQ实时行情
DolphinDB智臾科技·2023-07-18 22:41

matlab液体湿润模拟,【水文模型】01 三水源新安江模型

目录一、概述1.1流域概况1.2产流方式论证1.3设计基本任务1.4设计原始资料二、新安江模型2.1流域划分2.2产汇流计算2.2.1蒸散发计算2.2.2产流计算2.2.3水源划分2.2.4汇流计算2.3
哈士奇爱深海鱼·2023-07-18 03:07

Flink读写kafka主题，并进行数据清洗

数据处理添加读取和写入的数据源依据业务实现数据处理的特质执行器，混入特质动态混入方法，用户执行flink参考flink参考Datastream程序架构datastream是flink提供给用户使用的用于进行流计算和批处理的
Giao.芥末77·2023-07-18 00:01

大数据计算分析技术：批处理、流计算、OLAP引擎

目录一、批处理的基石：MapReduce1.工作流程2.实例分析二、流计算的代表：storm、sparkstreaming和flink
青果HA·2023-07-17 02:37

Spark和Hadoop的对比

一、二者各方面比较HadoopSpark类型基础平台，包含计算、存储、调度分布式计算工具场景大规模数据集上的批处理迭代计算，交互式计算，流计算价格对机器要求低，便宜对内存有要求，相对较贵编程范式Map+
飞Link·2023-07-15 16:46

Dinky0.7.0源码初探

Flink目前是一个使用广泛的基于流计算的流批一体的大数据计算框架，它关注的是流计算的底层实现、集群运行最优化、高效运行的设计等；Dinky是基于Flink的一个应用平台：目前最核心的功能，就是在
武舞悦·2023-07-14 07:22

基于牛顿拉夫逊的配电网潮流计算研究（Matlab代码实现）

欢迎来到本博客❤️❤️博主优势：博客内容尽量做到思维缜密，逻辑清晰，为了方便读者。⛳️座右铭：行百里者，半于九十。本文目录如下：目录1概述2运行结果2.1雅可比矩阵2.2节点电压2.3节点负荷3参考文献4Matlab代码实现1概述牛顿-拉夫逊法在数学上是求解非线性代数方程式的有效方法。其要点是把非线性方程式的求解过程变成反复地对相应的线性方程式进行求解的过程，即通常所称的逐次线性化过程。是数值计算
紫极星光·2023-06-23 21:21

配电网前推后带法求电力系统潮流（Python&Matlab实现）

目录1概述2数学模型3节点分层前推回代潮流计算及步骤3.1计算方法3.2计算步骤4算例及数据5Matlab&Python代码实现1概述配电网通常是单电源全网连接、开环运行，即呈树状。
然哥依旧·2023-06-23 17:39

Storm--简介(一)

随着越来越多的场景对Hadoop的MapReduce高延迟无法容忍，比如网站统计、推荐系统、预警系统、金融系统(高频交易、股票)等等，大数据实时处理解决方案（流计算）的应用日趋广泛，目前已是分布式技术领域最新爆发点
无剑_君·2023-06-22 22:42

版本发布 | TDengine 3.0.5.0 让流计算、数据订阅更好用

自3.0版本发布以来，在研发人员和社区用户的不断努力下，时序数据库（TimeSeriesDatabase）TDengine做了大量更新，产品稳定性和易用性也在不断提升。在我们为TDengine筹备六岁生日“Party”的同时，TDengine的研发小伙伴们也在加班加点地进行优化迭代的工作，想要在六岁生日的节点上为TDengine用户送上一个新版本“大礼包”，共同见证TDengine下一阶段的新成长
涛思数据（TDengine）·2023-06-22 15:56

Flink 学习一 Flink 简介

Flink学习一https://flink.apache.org/1.快速认识Flink1.1离线批计算与实时流式计算批计算：有界流流式计算：无界流批计算：针对有界流，在计算结果前可以看到整个数据集；流计算
C0oOder·2023-06-21 00:49

电力系统直流潮流计算研究【IEEE9节点】（Matlab代码实现）

欢迎来到本博客❤️❤️博主优势：博客内容尽量做到思维缜密，逻辑清晰，为了方便读者。⛳️座右铭：行百里者，半于九十。本文目录如下：目录1概述2运行结果2.1IEEE9节点3参考文献4Matlab代码实现1概述直流潮流发的特点是用电力系统的交流潮流（有功功率和无功功率）用等值的直流电流来代替。甚至只用直流电路的解析法来分析电力系统的有功潮流，而根不如你不考虑无功分布对有功的影响。这样一来计算速度加快，
数学建模与科研·2023-06-20 22:28

最新：机器学习在生态、环境经济学中的实践技术应用及论文写作

R语言是用于统计建模的主流计算机语言，用于机器学习十分方便，且学习曲线相比于Python更加平滑，因此是进行机器学习的首选之一。
weixin_贾·2023-06-19 18:40
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他