hadoopflink流计算第2页

GAMS系列分享6-电力系统最优潮流-3节点最优潮流

本节主要探讨3节点电力系统基于直流潮流的电力系统最优潮流计算。

不设闹钟的罗罗·2024-01-04 03:33

大数据技术原理与应用期末考试题

半结构化和非结构化海量数据的存储和管理B、利用分布式并行编程模型和计算框架,结合机器学习和数据挖掘算法,实现对海量数据的处理和分析C、构建隐私数据保护体系和数据安全体系,有效保护个人隐私和数据安全D、把实时采集的数据作为流计算系统的输

无敌海苔咪·2024-01-03 08:03

Spark内容分享(二十四)：Apache Spark 在爱奇艺的应用实践

ApacheSpark在爱奇艺的现状Spark计算框架应用优化SparkSQL服务的落地与优化总结与展望ApacheSpark在爱奇艺的现状ApacheSpark是爱奇艺大数据平台主要使用的离线计算框架，并支持部分流计算任务

之乎者也··2024-01-02 18:56

Kafka高性能架构设计

1、概述Kafka是大数据领域无处不在的消息中间件，目前广泛使用在企业内部的实时数据管道，并帮助企业构建自己的流计算应用程序。

FourtySeven·2024-01-02 10:18

很实用的电气设计估算公式！

1、照明电路电流计算及熔丝刀闸的选择口诀：白炽灯算电流，可用功率除压求；日光灯算电流，功率除压及功率因数求（节能日光灯除外）；刀闸保险也好求，一点五倍额定流；说明：照明电路中的白炽灯为电阻性负荷，功率因数

电气系·2024-01-01 08:02

Flink 使用之WatermarkStrategy（含源码分析）

AlienPaul·2023-12-31 07:28

Spark Streaming

目录一、流计算概述（一）静态数据和流数据（二）批量计算和实时计算（三）流计算概念（四）流计算框架（五）流计算处理流程二、SparkStreaming（一）SparkStreaming设计（二）SparkStreaming

Francek Chen·2023-12-30 06:54

Flink Has Become the De-facto Standard of Streaming Compute

在全球范围内，Flink已经成为了实时流计算的事实标准。但是Flink不会止步于此。Flink社区在用户的推动下，不断地在技术创新和技术演进中，向着未来的更多场景

Apache Flink·2023-12-27 16:20

Spark Streaming流计算框架的运行流程源码分析

1.sparkstreaming程序代码实例代码如下：objectOnlineTheTop3ItemForEachCategory2DB{defmain(args:Array[String]){valconf=newSparkConf()//创建SparkConf对象//设置应用程序的名称，在程序运行的监控界面可以看到名称conf.setAppName("OnlineTheTop3ItemForE

尼小摩·2023-12-24 01:47

Kafka+Flink 实现准实时异常检测系统

根据业务要求的不同，流计算在其中扮演着不同的角色：既可以做在线的欺诈检测，也可以做决策后近实时的结果分析、全局预警与规则调整等。本文先介绍一种准实时的异常检测系统。

Java大生·2023-12-24 00:27

Flink 运行时[Runtime] 整体架构

【1】API&Libraries层：作为分布式数据处理框架，Flink同时提供了支撑流计算和批计算的接口，

程序猿进阶·2023-12-23 09:21

CVE-2023-49898 Apache incubator-streampark 远程命令执行漏洞

项目介绍ApacheFlink和ApacheSpark被广泛用作下一代大数据流计算引擎。基于大量优秀经验结合最佳实践，我们将任务部署和运行时参数提取到配置文件中。

棱镜七彩·2023-12-23 07:51

MATLAB代码：含SOP配电网重构关键词：配网重构 yalmip 二阶锥

MATLAB代码：含SOP配电网重构关键词：配网重构yalmip二阶锥参考文档：《二阶锥松弛在配电网最优潮流计算中的应用》仿真平台：MATLAB主要内容：参考文献2高比例新能源下考虑需求侧响应和智能软开关的配电网重构参考

chBbzEkkf·2023-12-23 00:16

水电工必备，大工建筑工程软件，涉及工地方方面面

82节，全网最详细桥架弯头制作全套40节视频，现场桥架弯头制作视频，排水管精准计算视频，水电消防视频（不断更新中）等;包含桥架图解大全，水电施工，电工电路符号，图纸图例大全等；还有各种桥架，排水管，电流计算器

go物宜水电桥架·2023-12-22 14:28

线程同步和并发

CPU-高速缓存-主存在主流计算机的设计中，CPU的运算速度比主内存的读写速度要快得多，这就使得CPU在访问内存时要花很长时间来等待内存的操作，这种空等造成了系统整体性能的下降。

NullBugs·2023-12-21 14:21

DolphinDB & 浙商银行 | 第二期现场培训圆满结束

此次培训内容涵盖数据库、数据分析、流计算等中高级课程。学员们通过系统而深入的学习，进一步掌握了DolphinDB相关知

DolphinDB智臾科技·2023-12-20 20:28

极坐标下的牛拉法潮流计算14节点MATLAB程序

微❤关注“电气仔推送”获得资料（专享优惠）潮流计算：潮流计算是根据给定的电网结构、参数和发电机、负荷等元件的运行条件，确定电力系统各部分稳态运行状态参数的计算。

学习不好的电气仔·2023-12-20 03:29

大数据时代必备技能：Flink实时处理框架，学习网站助你一臂之力！

Flink的核心是一个提供数据分发、通信以及自动容错的流计算引擎，同时在流计算之上构建批处理，并且原生的支持迭代计算，内存管理以及程序优化。

知识分享小能手·2023-12-19 22:26

Flink：异步IO关联HBase维表数据

一、使用异步IO关联HBase维表数据优点为避免在流计算环境中频繁的以同步方式查询外部维表，Flink官方提供使用异步IO与外部系统并发的交互方式，这样可以减轻因为网络交互引起的系统吞吐和延迟问题。

GScallion·2023-12-19 08:11

14节点潮流计算程序

这是使用牛顿迭代法，牛顿拉乎逊法进行潮流计算，在matlab平台下进行开发，14节点算例，详细代码见附件http://www.apollocode.net/a/793.html

看个人资料·2023-12-17 01:25

电力系统潮流计算及Matlab编程实现

目录1.潮流计算：2.潮流计算常用算法：2.1牛顿-拉夫逊算法2.1.1牛顿-拉夫逊法的基本原理2.1.2潮流计算的修正方程2.1.3节点电压用极坐标表示时的牛顿-拉夫逊法潮流计算2.1.4潮流计算程序框图

某只旺仔·2023-12-17 01:24

【极坐标下牛顿—拉夫逊潮流计算(matlab版+python版)】

程序名称##极坐标下牛顿—拉夫逊潮流计算(matlab版+python版)程序功能(对象)适用于任意大小的纯交流电网,支持节点和支路的增删；适用于接入多个风电、光伏等分布式电源；子函数包含：节点导纳矩阵计算

Wh-Constelltion·2023-12-17 01:52

基于matlab电力系统的牛顿-拉夫逊法进行潮流计算

（1）迭代前准备工作首先根据已知网络参数形成节点导纳矩阵，由于节点13是有变压器的支路，因此需要首先换简称为Π型电路计算。接下来给定各个节点的电压初值，节点四作为平衡节点。给定节点一二的PQ和节点三的PU。由于迭代时，需要从矩阵中选取元素并选择PQ或PV节点对应的公式进行计算，为了在程序计算时进行有效区分，在节点参数第一列作为说明标签，“1”表示PQ节点，“0”表示PV节点。（2）节点不平衡量的迭

皓月星辰&·2023-12-17 01:52

极坐标下的牛拉法潮流计算39节点MATLAB程序

微❤关注“电气仔推送”获得资料（专享优惠）潮流计算：潮流计算是根据给定的电网结构、参数和发电机、负荷等元件的运行条件，确定电力系统各部分稳态运行状态参数的计算。

学习不好的电气仔·2023-12-17 01:20

kafka高吞吐、低延时、高性能的实现原理

作者：源码时代-Raymon老师Kafka的高吞吐、低延时、高性能的实现原理Kafka是大数据领域无处不在的消息中间件，目前广泛使用在企业内部的实时数据管道，并帮助企业构建自己的流计算应用程序。

墨家巨子@俏如来·2023-12-15 21:27

关于牛顿法计算潮流问题bug解决

关于牛顿法计算潮流问题bug解决1.数据输入和导纳矩阵计算新的改变求节点注入功率的不平衡量求雅可比矩阵，解修正方程修正节点电压求支路功率研究中做仿真准备自己跑一下潮流计算做状态估计，但是发现大佬写的总线修正量未作排序

大不怪将军·2023-12-15 20:42

使用Flink完成流数据统计 | 京东云技术团队

一、统计流程所有流计算统计的流程都是：1、接入数据源2、进行多次数据转换操作(过滤、拆分、聚合计算等)3、计算结果的存储其中数据源可以是多个、数据转换的节点处理完数据可以发送到一个和多个下一个节点继续处理数据

京东云开发者·2023-12-15 16:02

一文讲解如何从 Clickhouse 迁移数据至 DolphinDB

DolphinDB是一款国产高性能分布式时序数据库，拥有图灵完备性的编程语言DolphinDBScript和高性能低延时的流计算框架，为海量结构化数据

DolphinDB智臾科技·2023-12-15 12:37

思维模型路径依赖定律

然而，由于Macintosh电脑采用了与当时主流计算机不同的技术架构，导致其在市场上的推广受到了很大的限制。随着时间的推移，苹果公司不断改进Macintosh电脑的技术和设计，但

图王大胜·2023-12-06 06:17

《十堂课学习 Flink SQL》第四章：Flink 应用 java 开始典型案例

小伙伴们我们从本章开始将基于JAVA进行Flink应用开发，本章节主要介绍Maven开发环境搭建，日志配置，流计算案例以及批计算案例。

smile-yan·2023-12-05 15:22

通过MonoFFT理解比特流计算（BSP）

在下述文献[1]中提到了一种bitstreamprocessing(BSP)的波束合成数字信号计算方法，没看太明白，直到结合单bit雷达中使用的MonoFFT算法，感觉二者有某些联系，遂做了如下的分析，MonoFFT算法可参考文献[2]。采用4阶简化旋转因子，对应2位移相精度即90°1、简化旋转因子：引用MonoFFT技术中对旋转因子的简化，首先考虑4阶简化，即旋转0°对应复乘exp(0*j)=1

CyberInversion·2023-12-05 12:12

初识RocketMQ

RocketMQ在阿里内部被广泛应用在订单，交易，充值，流计算，消息推送，日志流式处理，Binglog分发等场景。经历过多次双十一考验，它的性能、稳定性和可靠性都是值得信赖的。2、为什

清爽的暗之妖刀0369·2023-12-03 23:22

西南科技大学模拟电子技术实验三（BJT单管共射放大电路测试）预习报告

（注意：从抽象公式直接得出结果，不得分，页数可根据内容调整）二、画出并填写实验指导书上的预表电压计算值电流计算值UB/VUC/VUE/VURh2+RP/VIB/μAIC/mA2.258.6V1.55V9.75V150

Myon⁶·2023-12-03 08:13

Apache Flink（二）：数据架构演变

博主个人B栈地址：豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.业务处理-单体架构2.业务处理-微服务架构3.数据分析-大数据Lambda架构4.有状态流计算架构近年来随着越来越多的大数据技术被开源

IT贫道·2023-11-30 11:19

C语言基础语法

初识C语言1.首先C语言是计算机的一门语言，它让人和计算机可以交流计算机语言有C/C++/Java/python2.发展：计算机语言的发展是从二进制到B语言再到C语言的而C语言也是从早期不成熟成熟流行3

柒柒要开心·2023-11-29 23:20

大数据开发：Flink容错机制Task Failover策略

在Flink的容错机制当中，作业执行层面的容错，有一个非常重要的策略，就是TaskFailover策略，这是针对于计算层面的最小执行层面，在大数据流计算场景下，Task错误非常常见。

成都加米谷大数据·2023-11-29 12:37

Spark Streaming基本概念

流计算是一种典型的大数据计算模式，可以实现对源源不断到达的流数据的实时处理分析。一、静态数据和流数据1，静态数据如果把数据存储系统比作一个“水库”，那么，存储在数据存储系

晓之以理的喵~~·2023-11-29 07:36

【软件测试】盘一盘工作中遇到的 MQ 异常测试

被广泛的应用在订单、交易、充值、流计算、消息推送、日志流处理等场

静姐说测试·2023-11-28 15:34

Flink实时流计算入门系列（一）

阿里巴巴双11大屏在峰值期间可以承担每秒超过4.72亿次的访问，这是多高的访问量……为什么学习Flink？image这几年大数据的飞速发展，出现了很多热门大数据计算框架，著名的Hadoop、Storm、Spark，他们都专注于各自的应用场景。Spark掀开了内存计算的先河，也以内存为赌注，赢得了内存计算的飞速发展。Spark的火热或多或少的掩盖了其他分布式计算的系统身影。就像Flink，也就在这个

晨冉1688·2023-11-27 17:17

实时监控：基于流计算 Oceanus ( Flink ) 实现系统和应用级实时监控

1解决方案描述1.1概述本方案结合腾讯云CKafka、流计算Ocea

腾讯云大数据·2023-11-25 06:41

通用矩阵乘(GEMM)优化(卷积加速/卷积优化)(FFT & Winograd& Strassen)

主流的加速方法有以下几种：im2col+GEMM：目前几乎所有的主流计算框架包括Caffe,MXNet等都实现了该方法.该方法把整个卷积过程转化成了GEMM过程，而GEMM在各种BLAS库中都是被极致优化的

hxxjxw·2023-11-24 18:31

基于流计算 Oceanus（Flink） CDC 做好数据集成场景

作者：黄龙，腾讯CSIG高级工程师数据时代，企业对技术创新和服务水准的要求不断提高，数据已成为企业极其重要的资产。无论是在在企业数据中台的建设，亦或者是打造一站式数据开发和数据治理的PASS平台。首先需要做的就是进行跨应用的数据融合计算，需要将数据从孤立的数据源中采集出来，汇集到可被计算平台高效访问的目的地。此过程称之为ETL。通常所说的同步大致分为离线全量ETL、离线增量+离线全量的ETL、实时

腾讯云大数据·2023-11-23 09:07

实时数仓：基于 Flink CDC 实现 Oracle 数据实时更新到 Kudu

首先在本地对OracleCDC进行调试通过，然后结合腾讯云产品流计算Oceanus、EMR（Kudu）实现了Oracle-Oceanus-Kudu一体

腾讯云大数据·2023-11-23 09:07

Flink 内核原理与实现-核心抽象

一、环境对象StreamExecutionEnvironment是Flink应用开发时的概念，表示流计算作业的执行环境，是作业开发的入口、数据源接口、生成和转换DataStre

857技术社区·2023-11-23 07:09

Sylph平台自定义数据源hdfs数据源

Sylph是一个一站式的大数据流计算平台，通过编译StreamSQL，sylph会自动生成ApacheFlink等分布式程序到ApacheYarn集群运行。

cherishpf·2023-11-22 14:24

Flink 常见问题定位指南

一、问题分析概览流计算作业通常运行时间长，数据吞吐量大，且对时延较为敏感。

pucheung·2023-11-22 09:21

DolphinDB 流计算优化实践：时延统计与性能调优

本文介绍如何对DolphinDB流计算任务进行全链路的时延统计，以及如何优化脚本以实现更低时延的实时计算：1.耗时统计在关键链路上记录处理的时刻，可以反映流计算各个环节的

DolphinDB智臾科技·2023-11-21 10:59

流计算 Oceanus | 巧用 Flink 构建高性能 ClickHouse 实时数仓

作者：董伟柯——腾讯云大数据产品中心高级工程师概述ApacheFlink是流式计算处理领域的领跑者。它凭借易用、高吞吐、低延迟、丰富的算子和原生状态支持等优势，多方位领先同领域的开源竞品。同样地，ClickHouse是OLAP在线分析领域的一颗冉冉新星，它拥有极其出众的查询性能，以及丰富的分析函数，可以助力分析师灵活而迅速地挖掘海量数据的价值。然而金无足赤，人无完人，每个组件都有自己擅长和不擅长的

腾讯云大数据·2023-11-21 07:19

matlab求节点导纳矩阵,MATLAB节点导纳矩阵计算

第一章导纳矩阵的计算简介1.1变压器的∏型等值电路在电力系统潮流计算中，往往要计算节点导纳矩阵，而我们计算节点导纳矩阵采用节点电压法来实现，如在变压器构成的电力系统中，需要将变压器模型转变成变压器∏型等值电路

weixin_39954889·2023-11-21 05:22

flink源码启动解析

flink是近来比较热门的实时流计算引擎，相信大家对于其使用并不陌生。

AnzLee888·2023-11-20 23:01

推荐频道

hadoopflink流计算