nebula流计算

【第18期】未来的计算世界里，将会是“万物皆流”？

在第250期项目中，笔者有关实时流计算技术的一些问题与读者进行了互动。在一问一答的过程中，笔者发现大家对“流”这种计算模式还是非常感兴趣的。因此，笔者想再将这些问题的核心知识点做些归纳总结。
hzbooks·2020-09-11 12:44

腾讯云发布全链路数据开发平台WeData，企业数据开发门槛降低60%

9月11日，在腾讯全球数字生态大会大数据专场上，腾讯云重磅发布了全链路数据开发平台WeData，同时发布和升级了流计算服务、云数据仓库、ES、企业画像等6款核心产品，进一步优化和提升了腾讯云大数据的全托管能力
CSDN 程序人生·2020-09-11 12:52

Spring Boot 修改默认端口号

实现原因可看以下链接:https://www.cnblogs.com/darknebula/p/8820629.html
我欲混吃与等死·2020-09-11 12:17

position的值， relative和absolute分别是相对于谁进行定位的

没有定位，元素出现在正常的流中sticky生成粘性定位的元素，容器的位置根据正常文档流计算得出
angybaby97·2020-09-11 08:09

position的值，relative和absolute分别相对于什么定位

没有定位，元素出现在正常的流中sticky：生成粘性定位的元素，容器的位置根据正常文档流计算得出
古兮!怪哉·2020-09-11 07:22

Spark Streaming基础简介

批量计算和流计算首先什么是静态数据和流数据？很多企业为了支持决策分析而构建的数据仓库系统，其中存放的大量历史数据就是静态数据。而流数据即数据以大量、快速、时变的流形式持续到达。
zxc123e·2020-09-11 06:31

Spark Streaming 流计算优化记录(6)-GC优化与shuffle service

11.Spark应用的GC调优说到GC,可能很多人都倾向于使用新潮的G1垃圾收集器,特别是intel的那几个兄弟在databrick发表了篇用G1调优Spark应用的博文后,就更多人热衷于尝试G1了.但其实我们再去年就对G1和老牌的CMS+NewPar进行过对比测试,发现G1根本没有比CMS好,有时候还会导致更多的FullGC,而实际上连Oracle官方都觉得G1还没有productionread
小狼_百度·2020-09-11 06:01

flink总结

flink简介什么是flinkflink是一个分布式计算引擎，支持流计算和批计算（本质是实时流计算，以流做批）。
樱花庄青山七海·2020-09-11 05:06

Flink学习笔记

由于该款框架出现的较晚2014.12月发布，通常被人们认为是第3代流计算框架。
骚白~·2020-09-11 03:39

Apache Flink（三）：Flink对接DataSource

DataSourceDataSource指定了流计算的输入，用户可以通过flink运行环境streamExecutionEnvironment的addSource()方法添加数据源,Flink已经预先实现了一些
静水流深3721·2020-09-11 03:39

Flink 窗口计算

Flink窗口计算一、概述窗⼝计算是流计算的核⼼，窗⼝将流数据切分成有限⼤⼩的“buckets”，我们可以对这个“buckets”中的有限数据做运算。
纯净天空7·2020-09-10 23:01

Flink的基本DataSource与自定义DataSource

DataSourceDataSource指定了流计算的输入，用户可以通过StreamExecutionEnvironment.addSource(sourceFunction),Flink已经预先实现了一些
人间小鲸鱼·2020-09-10 23:15

Flink 数据源 DataSource是这个样子的？

而在Flink这个优秀的流计算框
javageektech·2020-09-10 22:43

关于高并发

Nginx负载均衡，vanish+共享存储实现动静分离，Nginx后挂载N台服务器集群，服务器集群后挂载微服务化、微服务后挂载数据库分库分表+消息队列+任务调度，最后端挂载数据集群负责数据的统一归档+流计算
weixin_34380948·2020-09-10 20:44

十大开源游戏引擎深入比较

在国内外，业界盛传有十大开源游戏引擎，分别是OGRE、Irrlicht、Panda3D、CrystalSpace、jME、BlenderGameEngine、RealityFactory、TheNebulaDevice2
看海听风·2020-09-10 17:51

【Scratch真题解析】2019-5 Scratch等级考试一级考试A卷真题37题

题目名称：编程题37题-火箭发射题目要求1.准备工作(1)选择背景Galaxy、Nebula(2)选择角色Kiran、Rocketship、Earth2.功能实现(1)点击绿旗，角色Kiran初始化位置在舞台左边的中部
frank2102·2020-09-10 13:57

实战SparkStream+Kafka+Redis实时计算商品销售额

天猫这个大屏后面的技术应该是使用流计算，阿里使用Java将Storm重写了，叫JStrom(https://github.com/alibaba/jstorm)，最近学习SparkStream和Kafka
赵侠客·2020-08-26 09:44

实战SparkStream+Kafka+Redis实时计算商品销售额

天猫这个大屏后面的技术应该是使用流计算，阿里使用Java将Storm重写了，叫JStrom(https://github.com/alibaba/jstorm)，最近学习SparkStream和Kafka
小小的_我·2020-08-26 09:21

Hadoop YARN：调度性能优化实践

实时业务主要运行SparkStreaming，Flink为主的实时流计算作业。机器学习业务主要运行TensorFl
美团技术团队·2020-08-26 08:20

阿里巴巴大数据实践—实时技术

在大数据业界中，流计算技术的研究是近年来非常热门的课题。业务诉求是希望能在第一时间拿到经过加工后的数据，以便实时监控当前业务状态并做出运营决策，引导业务往好
阿里云云栖号·2020-08-25 16:20

算法的并行优化

（4）任务并行：每个控制流计算一件事或者多个并行任务的一个子任务（5）任务并行任务并行的通信通常比较少，故易于实现，但是负载不均衡的可能性非常大。数据并行指一
Zz鱼丸·2020-08-25 15:53

Nebulas 底层技术之智能合约

Nebulas底层技术之智能合约智能合约使用的语言是JavaScript和TypeScript。基本选用JavaScript就好。这两种语言都能被google的ChromeV8引擎所支持。
建怀·2020-08-25 03:55

备考日记2

期间确定、系数间关系、期数系数加1减1、混合现金流计算、内插法...课件反反复复听，例题、基础公式反反复复推导练习验证，差不多花了一下午时间才给弄懂（奔溃脸o(╥﹏╥)o）。
麦乐地·2020-08-24 18:59

同样是查询语言，它和 SQL 竟然有这么多不同

摘要：这篇文章将介绍图数据库NebulaGraph的查询语言nGQL和SQL的区别。
NebulaGraph·2020-08-24 17:08

sparkStreaming：实时流计算Java案例

现在，网上基于spark的代码基本上都是Scala，很多书上也都是基于Scala，没办法，谁叫spark是Scala写出来的了，但是我现在还没系统的学习Scala，所以只能用java写spark程序了，spark支持java，而且Scala也基于JVM,不说了，直接上代码这是官网上给出的例子，大数据学习中经典案例单词计数在linux下一个终端输入$nc-lk9999然后运行下面的代码package
花和尚也有春天·2020-08-24 17:31

Dev 日志 | 一次 Segmentation Fault 和 GCC Illegal Instruction 编译问题排查

摘要笔者最近在重新整理和编译NebulaGraph的第三方依赖，选出两个比较有意思的问题给大家分享一下。
NebulaGraph·2020-08-24 16:30

Spark系列4- Spark Streaming

1流计算静态数据和流数据静态数据类似存储在水库中的水，是相对静止不动的，如数据仓库中储存的数据、关系型数据库中存储的数据等。
georgeguo·2020-08-24 15:23

Streaming 101: The world beyond batch

如今，有充分的理由，流数据处理在大数据中已占很大的比重:企业渴望更及时的数据，而应用流计算是实现较低延迟的好方法使用为此类永无止境的数据设计的系统，可以更轻松地驯服在现代业务中越来越普遍的海量的无界数据集
dataliu·2020-08-24 15:31

Apache流计算框架详细对比

www.cakesolutions.net/teamblogs/introduction-into-distributed-real-time-stream-processing)目前对于这种日渐增加的分布式流计算的需求的原因
王下邀月熊_Chevalier·2020-08-24 13:18

Sparkstream小结

Sparkstream与storm的区别storm实时流计算框架是一条一条数据处理，sparkstream准实时流式框架，微批处理，延迟比storm高；两者都支持动态调整资源；sparkstream支持复杂的业务逻辑
花掏尽·2020-08-24 12:04

实时计算 Flink SQL 核心功能解密

实时计算FlinkSQL核心功能解密FlinkSQL是于2017年7月开始面向集团开放流计算服务的。
阿里云云栖号·2020-08-24 07:34

Kafka VS RocketMQ VS RabbitMQ

例如：订单，交易，充值，流计算，消息推送，日志流式处理，binglog分发等可靠消息传输。和RocketMQ类似。
小飞哥wzf·2020-08-24 04:37

MATLAB/Simulink电力系统与仿真，第七章0°接线方向阻抗继电器建模经验

MATLAB/Simulink电力系统与仿真，第七章0°接线方向阻抗继电器建模经验本人在学习simulink时参考此书，按照书中教程和参数搭建潮流计算模型，但是书中并未详细给出所以的设置参数，对元件应用描述还没有很细
belongz·2020-08-24 04:45

目标检测光流法（三）：opencv下光流Farneback法

calcOpticalFlowPyrLK光流算法，可以看到它实际上是一种稀疏特征点的光流算法，也就是说我们先找到那些（特征）点需要进行处理，然后再处理，该节介绍下一个全局性的密集光流算法，也就是对每一个点都进行光流计算
on2way·2020-08-24 01:16

云计算相关论文目录

1.Comparisonofopen-sourcecloudmanagementplatforms:OpenStackandOpenNebula
开发维护·2020-08-23 22:50

关于项目中使用Structure Streaming的一点记录

公司的流计算的主要的任务分为日志清洗和清洗后的数据统计，在做这项任务的时候，在技术选型阶段，我们当时有Flink和Spark两个考虑。
隔壁寝室老吴·2020-08-23 18:10

Spark Streaming 简介

流计算简介数据分为：静态数据和流数据对应两种计算模式：批量计算和实时计算批量计算以“静态数据”为对象，可以在很充裕的时间内对海量数据进行批量处理Hadoop就是典型的批处理模型，由HDFS和HBase存放大量的静态数据
博弈史密斯·2020-08-23 15:51

2019年度计划：1年掌握22本国外最经典计算机类巨著

教材的作者均为美国一流计算机科学家，要么是图灵奖获得者，要么是美国科学院院士。每本教材的难度系数均为同领域课程最难或最深入级别。每本教材的
彪悍的人生不需要解释哈·2020-08-23 08:33

一起来看「暴风雨」

storm：暴风雨免费开源实时流计算系统storm是一个分布式的，可靠的，容错的数据流处理系统。暴风雨的世界应用实例：计算数字之和，1+2+3+....
小小小海文·2020-08-23 06:35

Spark的基本概念

它基于一个内核模块衍生出机器学习，实时流计算，OLAP，和图数据处理等模块，如图1-1-1所示。本书主要介绍Spark内核模块的实现原理。
一 铭·2020-08-23 04:31

Flink SQL 功能解密系列 —— 流计算“撤回(Retraction)”案例分析

2019独角兽企业重金招聘Python工程师标准>>>摘要：通俗讲retract就是传统数据里面的更新操作，也就是说retract是流式计算场景下对数据更新的处理方式。什么是retraction（撤回）通俗讲retract就是传统数据里面的更新操作，也就是说retract是流式计算场景下对数据更新的处理方式。首先来看下流场景下的一个词频统计列子。没有retract会导致最终结果不正确↑：retra
weixin_33690963·2020-08-23 03:51

Kafka 生产者API，消费者API，拦截器，流计算

pom文件如下：org.apache.kafkakafka-clients2.0.0org.apache.kafkakafka-streams2.0.0一、Kafka生产者APIpackagecom.qjl.kafka.producer;importjava.util.Properties;importorg.apache.kafka.clients.producer.KafkaProducer;
曲健磊·2020-08-23 01:41

vue动态绑定背景图片

onlineShopping",data(){return{goalList:[{id:1,title:'行业数据透视',text:'汇聚用户购物能力、日常行为和区域经济等数据，进行数据处理分析，实现大数据计算、流计算
AIU哎呀·2020-08-23 00:39

大数据的应用场景(大数据能干啥?)

一日志事件分析(流计算)二原有数据存储不下,查询性能性能太差,(大数据存储与交互式查询SQL)三寻找数据的价值大数据分析与挖掘,可视化四大数据搜索(弹性搜索)五
maple5218·2020-08-22 22:06

Spark Streaming 流计算优化记录(2)-不同时间片数据流的Join

1.不同时间片数据流的Join初体验之后,看了一下SparkWebUi的日志,发现由于SparkStreaming需要每秒跑一次,以实时计算数据,所以程序不得不每秒都读一次HDFS去获取数据进行innerjoin.本来SparkStreaming会对其进行处理的数据进行缓存,以减少IO和提高计算速度的,但由于现在我们的场景是要把每秒都有新数据的数据流与大约2周才更新一次HDFS数据进行innerj
小狼_百度·2020-08-22 20:33

Spark Streaming 流计算优化记录(1)-背景介绍

1.背景概述业务上有一定的需求,希望能实时地对从中间件进来的数据已经已有的维度表进行innerjoin,以便后续的统计.维表十分巨大,有近3千万记录,约3G数据,而集群的资源也较紧张,因此希望尽可能压榨SparkStreaming的性能和吞吐量.技术架构大致上如下述:数据从Kafka流入,SparkStreaming会从HDFS中拿到维度表的数据,与流入的消息进行计算,最后进行innerjoin,
小狼_百度·2020-08-22 20:33

Flink最佳实践（一）流式计算系统概述

为了适应逐渐变得「实时」的年代，大数据系统架构也由简单的批处理转向批流混合的Lambda架构，最后可能会逐渐演变成只有流计算的高精准高时效的Kappa架构。
xiaohei.info·2020-08-22 17:10

Flink学习--管理大型状态之增量 Checkpoint 详解

文章转载自：https://ververica.cn/develope...作者：邱从贤（山智）ApacheFlink是一个有状态的流计算框架，状态是作业算子中已经处理过的内存状态，供后续处理时使用。
小明的数据脚印·2020-08-22 16:49

使用图数据库 Nebula Graph 数据导入快速体验知识图谱 OwnThink

前言本文由NebulaGraph实习生@王杰贡献。
NebulaGraph·2020-08-22 13:47

微软、IBM、GitLab 等大厂全部到齐的 OCS 第一天有什么看点？

在本周一的推文中我们大致介绍了下OpenCore峰会及到场嘉宾，(≧▽≦)当然还有NebulaGraph在会场的展位位置图，本文我们来看看OpenCore峰会第一天有哪些值得一看的议题。
NebulaGraph·2020-08-22 12:09
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他