实时处理

#Wormhole# （开源）流式处理平台设计思想

流式处理作为实时处理的一种重要手段，正在因数据实时化的发展而蓬勃发展。本文是敏捷大数据（AgileBigData）背景下的实时流式处理平台Wormhole的开篇介绍。W
敏捷大数据·2020-08-13 22:24

简析Spark Streaming/Flink的Kafka动态感知

那么，Kafka后面作为消费者的实时处理引擎是如何感知到topic和part
run_bigdata·2020-08-13 18:07

Android Signature V2 Scheme签名下的新一代渠道包打包神器Walle

签名下的新一代渠道包打包神器瓦力通过在Apk中的APKSignatureBlock区块添加自定义的渠道信息来生成渠道包，从而提高了渠道包生成效率，可以作为单机工具来使用，也可以部署在HTTP服务器上来实时处理渠道包
weixin_34162401·2020-08-12 18:13

申通的云原生实践之路：如何实现应用基于容器的微服务改造？

目前，申通快递日订单处理量已达千万量级，亿级别物流轨迹处理量，每天产生数据已达到TB级别，使用1300+个计算节点来实时处理业务。
wx5f21433ac3ee5·2020-08-12 17:14

kafka概述及快速入门

一kafka概述1kafka定义kafka是一个分布式的基于发布、订阅模式的消息队列，广泛应用于大数据实时处理领域。
一过人_·2020-08-12 11:40

大数据技术之Kafka是什么

对于像Hadoop的一样的日志数据和离线分析系统，但又要求实时处理的限制，这是一个可行的解决方案。Kafka的目的是通过Hadoop的并行加载机制来统一线上
秉寒CHO·2020-08-12 11:40

Kafka-概述，消息队列，基础架构

概述，消息队列，基础架构文章目录Kafka-概述，消息队列，基础架构概述消息队列Kafka基础架构概述Kafka是一个分布式的基于发布/订阅模式的消息队列（MessageQueue），主要应用于大数据实时处理领域
Demik·2020-08-12 10:27

大数据处理实例——Amazon商品评分&评论（四）

背景在本系列的第二篇中给出了Storm实时处理框架。其中有提到由于后面的离线学习部分都是基于文本的词频向量，因此需要统计非重复单词个数(向量维度)以及为每个单词编号(该单词词频所在列)。
晨丢丢·2020-08-12 00:48

淘宝双十一实时显示成交数据是怎么实现的？

这个电子大屏的背后，就是用到我们所说的数据的实时处理技术。当然实时计算也不是完全实时，它一定有一个延时，只不过这个延时非常短。什么是数据实时处理呢？
zhisheng_blog·2020-08-11 23:19

Flink1.5简单应用DataSet开发

Flink应用开发flink和spark类似，也是一种一站式处理的框架；既可以进行批处理（DataSet），也可以进行实时处理（DataStream）使用maven导入相关依赖1.81.8UTF-82.11.22.112.6.21.5.0
Share-Get·2020-08-11 23:10

连载：阿里巴巴大数据实践—实时技术

阿里数据人都在用的内部技术经验关注数智化转型俱乐部，数智化不迷路摘要相对于离线批处理技术，流式实时处理技术作为一个非常重要的技术补充，在阿里巴巴集团内被广泛使用。
数据社·2020-08-11 20:24

申通的云原生实践之路：如何实现应用基于容器的微服务改造？

目前，申通快递日订单处理量已达千万量级，亿级别物流轨迹处理量，每天产生数据已达到TB级别，使用1300+个计算节点来实时处理业务。
阿里技术·2020-08-11 18:40

单片机（AT89C51）中断系统详解和中断系统应用实验

⑴提高CPU工作效率⑵具有实时处理功能⑶具有故障处理功能⑷实现分时操作中断源中断源是指能发出中断请求，引起中断的装置或事件。80C51单片机的中断源共有5个，其中2个为外部中断源，3
Do Myself forever·2020-08-11 14:48

图像采集中的问题

利用VFW获取实时视频数据通常可以运用视频处理的回调机制(call-backmechanism)获得实时数据缓冲区的首址和长度并对图像数据进行实时处理，但是在这个过程中图像处理程序不能太长，否则视频显示不流畅
觅食的猫猫·2020-08-11 11:48

边缘计算（六）一起来谈谈未来的智慧实验室

当需要长时间连续测量或者当需要速度较快的读数时，靠人工观察以及实时处理的效率普遍低下。加之各种仪器种类繁多、型号各异，测试与检定工作量很大。以及无法适应当前中国产业升级现代研究开发
CYBERIOT赛博·2020-08-11 11:17

申通的云原生实践之路：如何实现应用基于容器的微服务改造？

目前，申通快递日订单处理量已达千万量级，亿级别物流轨迹处理量，每天产生数据已达到TB级别，使用1300+个计算节点来实时处理业务。
阿里技术官方号·2020-08-11 10:54

快速傅立叶变换原理

矩阵请参阅信号与系统方面的书籍）相运算，随着N值的增大，运算次数显著上升，当点数达到1024时，需要进行复数乘法运算1，048，576次，显然这种算法在实际运用中无法保证当点数较大时的运算速度，无法满足对信号的实时处理
iu_81·2020-08-11 03:02

Flume整合Kafka

.创建topic2.创建flume-agent配置文件3.开启消费者4.后台启动flume-agent5.测试flume主要是做日志数据（离线或实时）地采集flume采集完毕数据之后，进行的离线处理和实时处理两条业务线
DanielMaster·2020-08-11 02:08

图像的快速去雾

参考这个网站实现了去雾算法（http://blog.csdn.net/laviewpbt/article/details/14225413#comments一种可实时处理O(1)复杂度图像去雾算法的实现
遥感服务·2020-08-10 12:29

Flink1.10新特性探究之Hive整合以及实时数据处理实例（上）

ps:感谢老哥（haha）一直想写一篇Flink1.10.0与Hive的整合博文，上周末进行的整合探究，现将心得和实践实例呈上，希望给正在探索的小伙伴提供一些帮助，顺带将Flink新特性在数据实时处理上的心得一并呈上
宝宝不哭^_^·2020-08-10 08:09

Spark Streaming与Kafka Streaming对比

流处理是对数据进行连续、并行的实时处理。
架构师小秘圈·2020-08-09 20:51

android学习笔记17--------------android 通过数组，流播放声音的方法

与该包中的MediaRecorder和MediaPlayer类不同，AudioRecord和AudioTrack类在获取和播放音频数据流时无需通过文件保存和文件读取，可以动态地直接获取和播放音频流，在实时处理音频数据流时非常有用
知耻而后勇的蜗牛·2020-08-09 16:20

音频的录制方式-AudioRecord,MediaRecorder的使用及播放

1.AudioRecord(基于字节流录音)优点：可以实现语音的实时处理，进行边录边播，对音频的实时处理。缺点：输出的是
xiaohuanqi·2020-08-09 15:16

Sprint Boot如何基于Redis发布订阅实现异步消息系统的同步调用？

与此同时，这种方案也带来了调用链路处理上的问题，因为大部分应用请求都会要求同步响应实时处理结果，而由于请求的处理过程已经通过消息异步解耦，所以整个调用链路就变成了异步链路，此时请求链路的发起者如何同步拿到响应结果
无敌码农～·2020-08-09 15:24

Flink DataSet API编程指南

Flink最大的亮点是实时处理部分，Flink认为批处理是流处理的特殊情况，可以通过一套引擎处理批量和流式数据，而Flink在未来也会重点投入更多的资源到批流融合中。
西贝木土·2020-08-09 13:57

你真的了解Flink Kafka source吗？

引言当我们在使用SparkStreaming、Flink等计算框架进行数据实时处理时，使用Kafka作为一款
西贝木土·2020-08-09 13:25

那些阿里人写过的书

出版时间：2014-08-01内容简介：随着大数据实时处理需求的强劲增长，Storm的出现填补了大数据处理生态系统的缺失，并被越来越多的公司所采用。
weixin_34029949·2020-08-09 05:13

音频的两种录制方式-AudioRecord,MediaRecorder的使用及播放

1.AudioRecord(基于字节流录音)优点：可以实现语音的实时处理，进行边录边播，对音频的实时处理。缺点：输出的是PCM的语音数据，如果保存成音频文件是不能被播放器播放的。
melonss·2020-08-09 04:17

【人脸检测】学界 | 中科院自动化研究所提出 FaceBoxes：实时、高准确率的 CPU 面部检测器

为了解决这个问题，中国科学院自动化研究所和中国科学院大学的研究者提出了一种名叫FaceBoxes的新方法，在保证了CPU面部识别的准确度的同时，还做到了实时处理。机器之心对该研究进行了摘要介绍。
zj360202·2020-08-09 04:26

Spark学习-Streaming

是纯实时处理。SparkStreaming处理逻辑会等待一段时间，可以认为设置等待多久。比如等待10s，那么等到10s后，会把这
wendaocp·2020-08-09 02:22

面向AI的嵌入式车牌识别行业背景

嵌入式AI对于这一需求及高实时处理的场景具有天然的优势，在无人机、智能汽车、产业机械、
冰海228·2020-08-08 18:30

Android平台Camera实时滤镜实现方法探讨(十一)--实时美颜滤镜

所以很难简单的直接应用在移动端实时处理上。另一方面，人物的正常肤，色应该是偏红，所以则会导致人物图像的红
程序员扛把子·2020-08-08 18:11

Flink DataSet API编程指南

Flink最大的亮点是实时处理部分，Flink认为批处理是流处理的特殊情况，可以通过一套引擎处理批量和流式数据，而Flink在未来也会重点投入更多的资源到批流融合中。
西贝木土·2020-08-08 14:29

你真的了解Flink Kafka source吗？

引言当我们在使用SparkStreaming、Flink等计算框架进行数据实时处理时，使用Kafka作为一款
西贝木土·2020-08-08 14:34

ARM版本号知识

mmicrocontroller微控制器，相当于单片机，例如STM32aapplication应用级处理器，相当于手机、平板、电脑的cpu，操作系统对于有显示器的用安卓，对于没有显示器的用linuxrrealtime实时处理器
RunInProgram·2020-08-08 13:45

apollo学习笔记十五：apollo ROS（上）

背景介绍自动驾驶系统包括障碍物检测、行为决策、路径规划等一系列复杂的工程模块，同时还要支持激光雷达、相机、GPS等一系列传感器的实时数据收集和实时处理。
siri99999·2020-08-08 00:42

Apollo进阶课程[6]——ROS介绍

背景介绍自动驾驶系统包括障碍物检测、行为决策、路径规划等一系列复杂的工程模块，同时还要支持激光雷达、相机、GPS等一系列传感器的实时数据收集和实时处理。
ios_miracle·2020-08-07 23:02

智能驾驶进阶6——ROS

ROS背景介绍ROS概述ROS的基本概念ApolloROS原理ServiceROS深入介绍Apollo框架使用背景介绍感知决策规划灯模块的实时数据收集和实时处理需要相互独立且将有交互的模块集成在一起。
次言·2020-08-07 23:06

大数据处理实例——Amazon商品评分&评论（二）

其中实时处理环境的搭建可参见这里总体架构实时预处理1.准备工作从Stanford的Amazon开源数据上下载Music类商品的评价数据文件Musical_Instruments_5.json,其中每行数据示例如下
晨丢丢·2020-08-07 22:35

FOS的消息队列管理

什么是消息队列消息队列的使用消息队列的设计什么消息队列想象一个场景，线程a断断续续的向线程b发送数据，线程b要根据接送到的数据去解析做逻辑处理，但是b线程是优先级比较低的任务，不会去实时处理数据，造成丢数据
杨善锦·2020-08-07 15:17

Intel联合Waymo研发自动驾驶技术，在处理器及互联网芯片上展开合作

Intel表示，在Waymo计算平台设计期间，公司就已经与Waymo合作了，目的在于使自动驾驶汽车可以实时处理信息。
whale52hertz·2020-08-07 09:11

Yolov1--v3目标检测解读

YOLO可以实时处理图像，达到45帧每秒检测原理1.将图像resize到448*448作为神经网络的输入。
荪荪·2020-08-06 12:30

7.Spark Streaming：输入DStream之基础数据源以及基于HDFS的实时wordcount程序

输入DStream之基础数据源HDFS文件：基于HDFS文件的实时计算，其实就是，监控一个HDFS目录，只要其中有新文件出现，就实时处理。相当于处理实时的文件流。
十点进修·2020-08-06 11:45

快速入门Flink(1)——Flink介绍与架构体系

现在好多到大公司使用来Flink做实时处理与批处理。
lhh学bg·2020-08-05 12:44

基于深度学习的目标检测实现方案介绍丨OPEN AI LAB

尤其是在复杂场景中，需要对多个目标进行实时处理时，目标自动提取和识别就显得特别重要。简单的说，目标检测就是把一张图或一个视频里面的目标物找出来，比如我要找摩托车，这就是目标检测。
OPEN AI LAB·2020-08-05 08:46

深度学习---抖音漫画算法解密

对于抖音的漫画效果，包括两个版本，一个是实时处理版本，也就是抖音上线的第一个版本，如图Fig.1所示，可以实时展示漫画效果；另一个是
Trent1985·2020-08-04 23:41

基于FPGA dspbuilder的DNLMS滤波器实现

算法由于结构简单，计算量小，易于实时处理，因此在噪声抵消，谱线增强，系统识别等方面得到了广泛的应用。为了克服定步长LMS算法中收敛速度、收敛精度及跟踪速度等对步长大小选取相互矛盾的缺点
weixin_34138255·2020-08-04 20:03

基于stm32的数字示波器设计方案

与模拟示波器相比，数字示波器不仅具有可存储波形、体积小、功耗低，使用方便等优点，而且还具有强大的信号实时处理分析功能。因此，数字示波器的使用越来越广泛。
漠落·2020-08-04 11:58

视频教程-Python数据可视化教程：基于Plotly的动态可视化绘图-Python

Python数据可视化教程：基于Plotly的动态可视化绘图JAVA企业级应用讲师、大数据实时处理技术领域工程师。从事多年JAVAEE、大数据处理方向的研发，设计和管理工作，擅长分布式开发和实时计算。
leoguo微信·2020-08-04 04:00

视频教程-Python数据可视化 Matplotlib实战 视频课程-机器学习

Python数据可视化Matplotlib实战视频课程JAVA企业级应用讲师、大数据实时处理技术领域工程师。从事多年JAVAEE、大数据处理方向的研发，设计和管理工作，擅长分布式开发和实时计算。
weixin_33054339·2020-08-04 04:00
上一页 17 18 19 20 21 22 23 24 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他