实时处理

JS学习笔记——异步回调中Async Await和Promise区别

相比较而言，异步调用的性能最佳，程序不会出现卡顿的现象，而同步调用则通常用于需要立即获得结果并实时处理的情况。2、正文promise是ES6，
前端老Chen先生·2021-07-16 17:13

Spring Batch(1)——数据批处理概念

根据业务需要实时处理读取的数据。将处理后的数据写入某个位置，可以是数据库、文件或者推送到队列。
Java架构小喳喳·2021-06-27 15:31

Apache Hudi使用简介

[TOC]数据实时处理和实时的数据实时分为处理的实时和数据的实时即席分析是要求对数据实时的处理，马上要得到对应的结果Flink、SparkStreaming是用来对实时数据的实时处理，数据要求实时，处理也要迅速数据不实时
西北偏北·2021-06-26 02:24

B站弹幕遮挡技术分析

实现方式有以下几种可能：1.服务器端处理通过服务器端对上传的视频进行分析处理，并将遮罩数据和视频一起保存，观看时下发给客户端2.客户端实时处理应该不会把识别的工作量交给客户端，影响客户端耗电量分析https
Zszen·2021-06-26 00:02

数列科技百万级全链路压测产品宣布开源，为行业节约20%的研发人员

目前中国人寿、顺丰科技、希音、中通快递、中国移动、永辉超市、爱库存、浙江大学等50+行业头部公司都采用了该技术，10万+探针同时线上运行，每天实时处理数百亿条用户请求，生成数百TB链路数据。
·2021-06-25 15:49

Java8 Stream 使用及其详解

它也不同于StAX对XML解析的Stream，也不是AmazonKinesis对大数据实时处理的Stream。
走在路上的小二·2021-06-23 11:49

Fllink实时计算运用（八）Flink 大数据实战案例一

1.Flink大数据实时处理设计方案整套方案通过Canal+Kafka连接器+Protobuf，实现数据的同步接入，由Flink服务负责对各类业务数据的实时统计处理。
·2021-06-22 21:34

系统谈数据治理，具体案例来分析

为什么要做数据治理进入到大数据时代，数据领域里的工程师、分析师和科学家们可以很轻易的使用开源世界的各种技术（比如离线处理有MapReduce、Spark，实时处理有Flink、SparkStreaming
宋懵懵的数据生活·2021-06-21 01:19

使用 Apache Flink 开发实时ETL

它与Spark的不同之处在于，它是使用流式处理来模拟批量处理的，因此能够提供亚秒级的、符合Exactly-once语义的实时处理能力。
·2021-06-18 22:03

YOLO： Unified, Real-Time Object Detection

我们的base模型以每秒45帧的速度实时处理图像。一个
jmt330·2021-06-14 01:22

快速理解Celery

1.什么是CeleryCelery是一个简单、灵活且可靠的，处理大量消息的分布式系统专注于实时处理的异步任务队列同时也支持任务调度Celery架构Celery架构图Celery的架构由三部分组成，消息中间件
乔治大叔·2021-06-09 17:58

分布式存储和计算高可用HA集群：Hadoop + HBase + Flink

Flink：基于Hadoop的DFS系统或实时输入流，实现批量作业处理和流式数据处理的分布式计算引擎，支持实时处理。三者关系如下图所示：[图片上传失败...
飞鱼007·2021-06-05 04:44

STC89C52RC单片机额外篇 | 01 - 认识中断、中断源以及中断优先级

1中断的概念中断是为使单片机具有对外部或者内部随机发生的事件实时处理而设置的。把自己想象成单片机的CPU，你正在打王者荣耀，但是突然快递小哥给你打电话让你去拿快递（被打断心情很不爽。。。）
Neutionwei·2021-06-04 22:57

云原生数据库 2.0：一站式全链路数据管理与服务

目前，阿里云拥有国内最强大和丰富的云数据库产品家族，涵盖关系型数据库、非关系型数据库、数据仓库、数据库生态工具四大版块，可以为企业数据生产和集成、实时处理、分析与发现、开发与管理提供全链路生命周期的服务
阿里云开发者·2021-06-04 14:20

GPUImage 初探

1.功能1.imgage的PS工具，具有丰富的滤镜和特效2.美颜相机：实时处理摄像头返回的图片数据3.视频滤镜、美颜2.优点1.最低可支持iOS4.02.使用了GPU，可充分利用苹果手机的硬件，响应速度快
ChiCoChiCo·2021-06-04 03:53

samza实时处理数据案例一

samza是新兴的流式处理框架，相比storm，samza是基于hadoop，使用自家的kafka实现分布式消息系统，任务提交到yarn集群进行调度，粒度更细。下面就结合一个案例来说下samza程序的开发。当刚开始使用samza，想要了解如何开发samza程序时，可参考官网的hello-samza例子。麻雀虽小五脏俱全，搞懂这个例子后就可以自己开始用samza处理实时数据了。简单说下hello-s
皮蛋嘚孤独·2021-05-19 21:23

深度学习核心技术精讲100篇（三十二）-网易实时数仓实战应用

前言随着大数据技术的进步，各种计算框架的涌现，数据仓库相关技术难题已经从离线数仓逐渐过渡到实时数仓，越来越多的企业对数据的实时性提出了严格的要求，如何满足企业的低延时的数据需求，如何看待批量处理和实时处理的关系
文宇肃然·2021-05-16 06:13

简单几招助您加速 ARM 容器应用开发和测试流程

我们需要将智能决策、实时处理能力从云延展到边缘和IoT设备端。阿里云容器服务推出了边缘容器，支持云-边-端应用一体协同。
暖忆_·2021-05-14 01:46

【全网详解】从0到1搭建双十一实时交易数据展示平台——Spark+Kafka构建实时分析系统

安装Kafka安装Kafka核心知识介绍Kafka开启及测试服务Python依赖库PyCharm安装搭建总结八仙过海之各显神通数据预处理运行效果代码代码展示神笔马良之画龙点睛SparkStreaming实时处理数据配置
王小王-123·2021-05-13 20:51

spark实时处理hdfs流数据

项目说明Spark构建一个实时数据处理及展示系统流数据数据处理：scala调用spark-SQL：python如图：Paste_Image.png问题总结1、spark-streaming流处理2、sbt打包3、hdfs小文件（20150701_记，后续补充）后续1、flume、kafka结合spark2、spark处理数据存放到hbase
gk4030·2021-05-09 13:15

基于函数计算处理数据并分发的实践操作

函数计算可以对存储到表格存储里的数据进行准实时处理（目前可以定义1秒触发一次、一次传输100条记录），通过触发器函数计算能够监控到表格存储里数据的增、删、改等操作，当批量数据在表格存储被修改后，触发器会通知函数来进行处理
暖夏未眠丶·2021-05-02 19:44

kafka基础概述

kafka.apache.org/quickstart官方定义ApacheKafkaisadistributedstreamingplatform，Kafka是一个分布式的基于发布/订阅模式的消息队列，主要应用于大数据实时处理领域
_羊羽_·2021-05-01 00:11

Android摄像头数据采集实时处理渲染实验

实验目的：为了寻找一种比较好的不在glsl里面实时处理摄像头数据的方式。
曾大稳丶·2021-04-27 08:14

[源码分析]并行分布式任务队列 Celery 之 子进程处理消息

[源码分析]并行分布式任务队列Celery之子进程处理消息0x00摘要Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统，专注于实时处理的异步任务队列，同时也支持任务调度。
罗西的思考·2021-04-26 08:34

背压

BackPressure是流处理系统中，非常经典常见的问题，它是让流系统能对压力变化能够呈现良好抗压性的关键所在各个开源实时处理系统，在中后期，都开始有对背压机制有完善的考虑和设计，基本原理一致。
___Hello·2021-04-21 14:59

Android使用Walle实现多渠道打包功能的实现示例

瓦力通过在Apk中的APKSignatureBlock区块添加自定义的渠道信息来生成渠道包，从而提高了渠道包生成效率，可以作为单机工具来使用，也可以部署在HTTP服务器上来实时处理渠道包Apk的升级网络请求
·2021-04-19 15:58

基于flink sql构建实时数据仓库

1、需求背景根据目前大数据这一块的发展，已经不局限于离线的分析，挖掘数据潜在的价值，数据的时效性最近几年变得刚需，实时处理的框架有storm，spark-streaming，flink等。
愤怒的谜团·2021-04-15 02:49

基于DAYU的实时作业开发，分分钟搭建企业个性化推荐平台

一个典型的推荐系统包括批处理计算、实时处理层、推荐应用3部分，是典型的Lamda架构
华为云开发者社区·2021-04-12 23:48

Apache Iceberg 数据湖从入门到放弃(0) —— 初步入门三部曲

对于实时处理场景，我们一般又可以分为两类，一类诸如
黄瓜炖啤酒鸭·2021-04-08 09:11

Kafka概述

第一章、Kafka概述1.1、定义Kafka是一个分布式的基于发布/订阅模式的消息队列，用于大数据实时处理领域1.2、消息队列1.2.1、应用场景异步处理、解耦、削峰1.2.2、使用消息队列的好处解耦：
·2021-04-05 11:36

Kafka概述

第一章、Kafka概述1.1、定义Kafka是一个分布式的基于发布/订阅模式的消息队列，用于大数据实时处理领域1.2、消息队列1.2.1、应用场景异步处理、解耦、削峰1.2.2、使用消息队列的好处解耦：
·2021-04-05 11:57

精心整理！面试必问的 kafka 知识点

Kafka概述定义Kakfa是一个分布式的基于发布/订阅模式的消息队列（messagequeue），主要应用于大数据的实时处理领域。
·2021-04-02 19:07

精心整理！面试必问的 kafka 知识点

Kafka概述定义Kakfa是一个分布式的基于发布/订阅模式的消息队列（messagequeue），主要应用于大数据的实时处理领域。
·2021-04-02 14:21

实时数据仓库的发展、架构和趋势

对于实时处理场景，我们一般又可以分为两类，一类诸如监控报警类、大
NetEaseResearch·2021-04-02 09:25

Flink中watermark（水印）讲解

使用场景（解决问题）：处理乱序数据：flink中是实时处理数据，但是在处理数据的时候会出现因为网络传输的问题，所以数据先产生的反而到后面才到达，在被处理时候就会出现数据混乱，而且因为开窗，窗口关闭但是本窗口的数据来迟
·2021-03-23 01:49

大数据开发-Spark-Streaming处理数据到mysql

前面一篇讲到streamin读取kafka数据加工处理后写到kafka数据，大数据开发-Spark-开发Streaming处理数据&&写入Kafka是针对比如推荐领域，实时标签等场景对于实时处理结果放到
·2021-03-19 22:14

Flink中watermark（水印）讲解

使用场景（解决问题）：处理乱序数据：flink中是实时处理数据，但是在处理数据的时候会出现因为网络传输的问题，所以数据先产生的反而到后面才到达，在被处理时候就会出现数据混乱，而且因为开窗，窗口关闭但是本窗口的数据来迟
·2021-03-10 21:51

Storm学习笔记 - Storm初识

Storm是一个开源免费的分布式计算框架，可以实时处理大量的数据流。2.Storm的特点高性能，低延迟。分布式：可解决数据量大，单机搞不定的场景。
云端笑猿·2021-03-10 18:18

四十二、Kafka的介绍

Kafka是一个分布式的基于发布/订阅模式的消息队列，主要应用于大数据实时处理领域。
象在舞·2021-02-25 08:23

Elastic开源协议改了，用户怎么办？

1月15日，全球著名的大数据搜索与实时处理公司Elastic公司CEOShayBanon突然发文宣布，Elasticsearch和Kibana的其中一项开源许可协议将发生变更。
·2021-02-23 20:21

边缘计算与云计算的关系-一文读懂

经硕朗小编多方查询，主要存在以下几点原因：1)网络带宽与计算吞吐量均成为云计算的性能瓶颈2)物联网时代数据量激增，对数据安全提出更高的要求3)终端设备产生海量“小数据”，需要实时处理。
硕朗通讯之家·2021-02-19 09:07

論建立实时大数据平台

实时大数据平台需要实时增量获取数据并进行实时处理，才能提供实时数据服务。我们采用
qq_34231800·2021-02-15 10:36

初始流媒体与javacv

背景介绍大数据离线内容这几年做的也比较多了，今年想做些实时的大数据处理，包含实时采集、实时处理、实时分析以及后续的实时推荐等。
xiaoyutongxue6·2021-01-31 19:54

kafka集群 kubernetes_【kafaka】在Kubernetes上使用helm部署kafka

对于像Hadoop一样的日志数据和离线分析系统，但又要求实时处理的限制，这是一个可行的解决方案。Kafka的目的是通过Hadoop的并
清清清飏·2021-01-27 03:39

Elastic开源协议改了，用户怎么办？

1月15日，全球著名的大数据搜索与实时处理公司Elastic公司CEOShayBanon突然发文宣布，Elasticsearch和Kibana的其中一项开源许可协议将发生变更。
·2021-01-25 20:56

Apache Hudi使用简介

ApacheHudi使用简介[TOC]数据实时处理和实时的数据实时分为处理的实时和数据的实时即席分析是要求对数据实时的处理，马上要得到对应的结果Flink、SparkStreaming是用来对实时数据的实时处理
·2021-01-24 16:39

干货丨时序数据库DolphinDB异常检测引擎教程

DolphinDB作为一个高性能的分布式时序数据库(timeseriesdatabase)，内置了一个流数据框架，既能实时处理分析这些物联网数据，也能对历史数据进行计算分析，帮助用户利用、发挥这些数据的价值
DolphinDB·2021-01-21 10:31

SparkStreaming的介绍

探讨SparkSreaming之前,先要了解什么是批处理,什么是流处理.批处理:也叫离线处理T+1的模式,以Hive+Spark为主流处理:水流也叫实时处理,SparkStreaming(秒级别,微批次处理
刘啊福·2021-01-20 12:47

kafka（一）：工作流程、存储机制、分区策略

kafka主要应用在大数据的实时处理领域，使用起来比较简单，本文主要分析kafka的工作流程、存储机制，分区策略，并围绕多个角度展开总结。
萧渊之·2021-01-20 12:34

Kafka系统学习（未完待续。。。）

1.概念1.Kafka是一个分布式的基于发布/订阅的消息队列，应用于大数据实时处理。1.1消息队列就是为了让消费者跟生产者解耦，实现高效，但是安全性肯定降低，需要额外处理。
码上中年·2021-01-11 20:41
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他