流计算

流计算的权衡

：快速得到结果为了快速获得结果，每来一个消息都需要及时处理，Storm等架构即是固定long-running的计算逻辑（topologyinStorm），将每个消息在各个计算逻辑间传递，Storm负责流计算任务的容错
泓礼·2020-04-10 13:30

RxSwift（一）-- 函数响应式编程思想

函数式编程几个重要的特性：纯函数无副作用、不变的数据、高阶函数、流计算模式、尾递归、柯里化等。函
Daniel_Harvey·2020-04-08 20:48

利用matlab基础语句实现牛顿法matlab潮流计算

问题描述现代电力系统分析课程留了用计算机进行潮流计算的作业，可以使用各种软件实现，matlab就包含在其中，按老师的意思应该是使用matlab中的某个app。可是我头铁，app是什么，当然要自己写啊！
季天泽·2020-04-07 21:16

JUnit白盒测试之基本路径测试：称重3次找到假球

前言记录一次软件测试课程的课后作业，作业内容是白盒测试中的基本路径测试，步骤如下分析程序的控制流计算环形复杂度找出基本路径设计测试用例执行测试用例（要求使用JUnit）作业要求使用白盒测试用例设计方法为下面的程序设计测试用例
臭咸鱼·2020-04-07 13:00

Hive 终于等来了 Flink

其实比较也没啥意义，不同社区发展的目标总是会有差异，而且Flink在真正的实时流计算方面投入的精力很多。不过笔者想表达的是，
ApacheFlink·2020-04-06 18:37

2. 通过案例对透彻理解三板斧之二：解密SparkStreaming运行机制和架构进阶之运行机制和架构

Sparkcore上面有4个流行的框架：SparkSQL、流计算、机器学习、图计算。从框架入手可以更清晰地了解SparkCore的内容。
milkfan·2020-03-31 19:11

基于Storm流计算天猫双十一作战室项目实战（Storm Kafka HBase Highchats）

基于Storm流计算天猫双十一作战室项目实战（StormKafkaHBaseHighchats）网盘地址：https://pan.baidu.com/s/1-59o76H32Jfp0Vp-o8zLYg提取码
曾经爱过的TA·2020-03-28 05:39

物联网遇到流计算

今天，笔者和大家聊一聊物联网（IoT），不少人都说物联网开启了万物互联时代，尤其是5G的逐渐普及和应用，将会构建万物互联的智能世界，实现物理世界的数字化，影响到每一个人。三言两语聊IoT物联网市场太大，所以不少企业针对物联网提供了一站式智能解决方案，可谓是包装一层又一层，深不见底。留两张图，自己感受一下物联网的浪潮冲击。很早以前，就有一个公式：AIoT（人工智能物联网）=AI（人工智能）+IoT（
DataFlow范式·2020-03-26 23:02

动热稳定

校验公式王永华（安徽省建筑设计研究院，安徽摘合肥２３０００１）要：要想做到安全供电，在设计变电所时应对所采用的高压断路器、电流互感器、母线、电缆等进行必要的短路电流（动、稳定）校验，为热此又必须进行短路电流计算
廖海英范凌萱·2020-03-26 01:07

==22基于Spark机器学习跟实时流计算的智能推荐系统

基于Spark机器学习和实时流计算的智能推荐系统-小黑-博客频道-CSDN.NEThttp://blog.csdn.net/qq1010885678/article/details/46675501概要
葡萄喃喃呓语·2020-03-24 16:48

flume-kafka-storm日志处理经验

最近搞日志处理，注意是日志处理，如果用流计算处理一些金融数据比如交易所的行情数据，是不能这么“粗鲁”的，后者必须还考虑数据的完整性和准确性。
大时代_f479·2020-03-24 07:29

愚人节快乐

关于昨天给舍友发变音造成的困扰请看我舍友原话：因为客人临时决定货物从上海走我正在着急忙慌地找货代找物流把我的货从天津港中转到上海老板也在我旁边帮我联系着多家物流计算成本差价看到qq提醒以为联系的物流新报价来了
我叫不安生·2020-03-24 01:58

Structured Streaming 编程指南

你可以像表达静态数据上的批处理计算一样表达流计算。SparkSQL引擎将随着流式数据的持续到达而持续运行，并不断更新结果。
牛肉圆粉不加葱·2020-03-22 09:27

强制对流中散热片的热阻估算

手工计算公式推导在强制对流计算中，知道一个散热器的形状和尺寸，如何不通过软件仿真而是用手工估算它的热阻呢？首先可以把散热器分成了2部分：一部分是底板，一部分是FIN。
sanre123·2020-03-21 15:41

[flow]Flink～流和批的一体化方案

阿里蒋晓伟：谈流计算和批处理引擎Blink，以及Flink和Spark的对比http://sanwen8.cn/p/2bd8aWI.html记者：相比Spark、Hadoop、Storm等，是什么样的场景需求让阿里搜索团队选择了
葡萄喃喃呓语·2020-03-21 00:26

开卷有益：《公司金融》资本预算：净现值法、自由现金流计算方法（2018-11-30）

项目投资具有不可逆的特点，即使投资者事后发现投资失误，也很难将此项目变现。因此，在项目投资之前，需对目标项目的未来经营状况进行预测分析，判断该项投资所产生的未来现金性收益是否能够弥补期初的投资，是否可以为有关投资者或公司提供令人满意的投资回报。这样的投资决策分析过程称为资本预算（capitalbudgeting）。传统资本预算方法一、净现值法式中，NPV表示目标项目的净现值；CF0表示目标项目的期
周益军·2020-03-20 08:10

5 基于案例一节课贯通Spark Streaming流计算框架的运行源码

本期内容：1、在线动态计算分类最热门商品案例回顾与演示2、基于案例贯通SparkStreaming的运行源码第一部分案例：packagecom.dt.spark.sparkstreamingimportcom.robinspark.utils.ConnectionPoolimportorg.apache.spark.SparkConfimportorg.apache.spark.sql.Rowim
海纳百川_spark·2020-03-20 01:34

mapreduce和storm两者处理数据的差异！

首先，先来说下storm是典型的流计算系统，mapreduce是典型的批处理系统。下面，我们把整个数据处理流
大圣众包·2020-03-19 23:27

Spark 伪分布式部署

Spark支持SQL、流计算和复杂分析，提供了SparkSQL、SparkStreaming、MLli
郭寻抚·2020-03-19 00:03

spark streaming连接kafka引发"partition.assignment.strategy"异常处理

服务器运行环境：spark2.4.4+scall2.11.12+kafka2.2.2由于业务相对简单，kafka只有固定topics，所以一直使用下面脚本执行实时流计算spark-submit--packagesorg.apache.spark
AllEmpty·2020-03-18 10:00

32.jquery 实战-无限加载+jsonp+瀑布流

在图片容器放置一个空元素(display:none)，用于瀑布流计算宽度用。jsonp接口参数：http://platform.sina.com.cn/slide/album_tech?
鸿鹄飞天·2020-03-18 05:23

云计算的兄弟-雾计算和流计算

云计算无疑是当下的热门词汇，而与之极其相似的雾计算、流计算也随着而来。【嵌牛鼻子】云计算，雾计算，流计算简单介绍。【嵌牛提问】云计算，雾计算，流计算那么这三个词究竟有何区别，代表了什么意思?
于占胜·2020-03-17 05:13

阿里云流计算使用教程

阿里云大学课程：阿里云流计算使用教程课程介绍：阿里云流计算(AlibabaCloudStreamCompute)是运行在阿里云平台上的流式大数据分析平台，提供给用户在云上进行流式数据实时化分析工具。
阿里云大学百科·2020-03-15 02:11

原理解析 | Apache Flink 结合 Kafka 构建端到端的 Exactly-Once 处理

Flink应用程序端到端的Exactly-Once语义示例Flink应用程序启动预提交阶段在Flink中实现两阶段提交Operator总结ApacheFlink自2017年12月发布的1.4.0版本开始，为流计算引入了一个重要的里程碑特性
Flink中文社区·2020-03-11 15:47

Apache Flink 结合 Kafka 构建端到端的 Exactly-Once 处理

Flink应用程序端到端的Exactly-Once语义示例Flink应用程序启动预提交阶段在Flink中实现两阶段提交Operator总结ApacheFlink自2017年12月发布的1.4.0版本开始，为流计算引入了一个重要的里程碑特性
阿里云云栖号·2020-03-06 02:23

Apache Flink DataStream 编程全集

概述Flink是构建在数据流之上的有状态计算的流计算框架，通常被人们理解为是第三代大数据分析方案。
麦田里的守望者··2020-03-04 17:20

菜鸟实习日记~day9(CF+LK)

光流法计算最初是由Horn和Schunck于1981年提出的，创造性地将二维速度场与灰度相联系，引入光流约束方程，得到光流计算的基本算法．光流计算基于物体移动的光学特性提出了2个假设：①运动物体的灰度在很短的间隔时间内保持不变
飞翔的小瓜瓜·2020-03-03 20:56

覆盖电商、推荐、ETL、风控等多场景，网易的实时计算平台做了啥？

目前网易流计算规模已经达到了一千多个任务，2万多个vcores以及80多T的内存，网易流计算覆盖了绝大多数场景，包括广告、电商大屏、ETL、数据分析、推荐、风控、搜索、直播等。
ApacheFlink·2020-02-28 21:00

首发｜《Apache Flink 年度最佳实践》，揭秘一线大厂实时平台构建实践

Flink作为业界公认为最好的流计算引擎，不仅仅局限于做流处理，而是一套兼具流、批、机器学习等多种计算功能的大
ApacheFlink·2020-02-28 21:28

基于水文分析方法提取山脊线和山谷线

因此通过地表径流计算后，这些栅格的水流方向应该都只具有流出方向而不存在流入方向，也就是说这些栅格的汇流累积量为0，因此通过对0值的提取也就得到了山脊线。
进击的码农设计师·2020-02-27 09:52

Logtail技术分享(一) : Polling + Inotify 组合下的日志保序采集方案

日志数据采集提到数据分析，大部分人首先想到的都是Hadoop，流计算，API等数据加工的方式。如果从整个过程来看，数据分析其实包含了4个过程：采集，存储，计算和理解四个步骤。
肆虐的悲傷·2020-02-21 16:46

一个玩游戏的失足青年，转行做软件开发的挣扎过程

在网吧一年多的时间里，天天陪人玩游戏，后来去读了一个三流计算机专业，毕业后转做软件开发，最近五年转入游戏开发行业！01开网吧那时中专还未毕业，我在城里跟人学电脑装机、维修。
张晓衡·2020-02-21 08:55

流计算

11.1流计算概念流计算:实时获取来自不同数据源的海量数据经过实时处理获得有价值的信息11.4Storm基本术语Streams:流数据，无界的tuple序列。
自然语言不理解·2020-02-20 23:03

11月27日云栖精选夜读：阿里毕玄：智能时代，运维工程师在谈什么？

yq传送门2017-11-2717:21:44浏览210评论0大数据c++云服务器高可用数据库安全组容器测试scala流计算MaxCompute摘要：智能化运维的终极目标，就是将运维人员从繁琐的工作中解放出来
暖夏未眠丶·2020-02-19 14:00

计网基础知识

消息，报文段，数据报，帧，比特流计算机网络由：资源子网和通信子网组成数据报和虚电路。数据报都会携带目的
WalterJ726·2020-02-16 20:00

Spark生态圈

SparkStreaming:伪实时的流计算，缓冲时间默认为1S,用于实时处理数据。
终生学习丶·2020-02-16 13:54

PostgreSQL\HybridDB for PG 毫秒级多维数据透视 案例分享

阅读原文请点击摘要：标签PostgreSQL,数据透视,实时,物化,预计算,多维分析,流计算,增量合并,调度,HLL背景典型的电商类数据透视业务，透视的语料可能会包含一些用户的标签数据：例如包含品牌的ID
阿里云_云栖社区·2020-02-07 11:06

理解闭包的前置条件—— λ演算和作用域规则

前言这几天用Scala写了一堆流计算程序，在翻阅Scala文档时看到了闭包一节，不知怎么就回忆起了自己上大二时用JavaScript做创新项目的经历——因为JS闭包的原理对当时的我来说很费解，以至于熬了一整个通宵才差不多弄明白
LittleMagic·2020-02-06 13:13

线路参数测试，简约不简单

实测参数有别于理论参数，它在电网潮流计算，电网稳定计算，保护定值整定中具有更加实际意义。变电设备由于更加标准化，模块化。可以在出厂前进行试验，计算得出实际参数数值。
加一的修炼场·2020-02-06 10:20

mlsql流任务实现distinct

流计算场景里distinct很常用，sparksql对streamdataset不支持SELECTCOUNT(DISTINCTCompany)FROMOrders这种用法，但是dataframe支持dropDuplicates
dongbin_·2020-02-05 20:56

Hive 终于等来了 Flink

其实比较也没啥意义，不同社区发展的目标总是会有差异，而且Flink在真正的实时流计算方面投入的精力很多。不
DataFlow范式·2020-02-04 23:28

陈伟视频(1~5集）

第一、二集主流计算机语言·传统过程式语言Fortran,PASCAL,C,…·面向对象语言C++,ObjectPascal,Ada,…·Internet编程Java,…·VisualStudio·可视化编程语言
杨思默·2020-02-03 17:07

【2020/2/2】寒假自学——学习进度报告9

流计算可以很好地对大规模流动数据在不断变化的运动过程中实时地进行分析，捕
limitCM·2020-02-02 21:00

Heron~Twitter 开源了数据实时分析平台(Twitter已经用Heron替换了Storm)

Twitter开源了数据实时分析平台Heron-开源中国社区http://www.oschina.net/news/73811/twitter-open-source-heronTwitter对外宣布了新的分布式流计算系统
葡萄喃喃呓语·2020-02-01 22:27

Spark Streaming流计算核心概念

一.DStreams【离散流】DStreams或离散流是SparkStreaming提供的基本抽象。它表示连续的数据流，可以是从源接收的输入数据流，也可以是通过转换输入流生成的已处理数据流。在内部，DStream由一系列连续的RDD表示，这是Spark对不可变的分布式数据集的抽象。DStream中的每个RDD都包含来自特定间隔的数据，如下图所示：在DStream上执行的任何操作都转换为对基础RDD
云山之巅·2020-02-01 10:00

【读书笔记】计算广告（第3部分）

第9章计算广告技术概览9.1个性化系统框架日志->数据高速公路->流计算->在线特征->投放引擎；日志->数据高速公路->分布式计算->离
LogM·2020-02-01 06:18

大数据四十二条

2019年，大数据的“大”已不再是核心问题，核心是如何更快，比如流计算。数据大了价值不一定就高，价值更可能被大噪音淹没掉。主张让大数据放弃追求因果关系，就是要让我们回退到巫术时代。主张大
wMeSlAx767·2020-01-17 10:46

基于akka-actor的流计算引擎

0背景术语表术语备注akka一套运行于JVM上实现了Actor模型的Scala类库，用于构建高并发、基于消息驱动的分布式高性能应用YStream基于akka-cluster的流计算引擎Gossip基于TCP
Ever_00·2020-01-10 16:40

Flink结合Kafka简单实战应用

二、概念说明  （一）Flink流处理任务的逻辑视图  同SparkStreaming、Storm等流计算引擎一样，Flink的数据处理组件也被分为三类：数据输入（source）、数据处理（transforma
曾小健_0532·2020-01-08 20:19

18. Storm基础

1.Storm介绍：Storm是实时流计算框架。
奉先·2020-01-08 15:13
上一页 18 19 20 21 22 23 24 25 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他