kafkastream

apache kafka系列之ZookeeperConsumer实现

ZookeeperConsumerConnectordefconsume[T](topicCountMap:scala.collection.Map[String,Int],decoder:Decoder[T]):Map[String,List[KafkaStream
幽灵之使·2020-08-11 05:52

手动维护offset好处

自动维护offset之前使用kafka的KafkaStream让每个消费者和对应的patition建立对应的流来读取kafka上面的数据，如果comsumer得到数据，那么kafka就会自动去维护该comsumer
Mr·路·2020-08-10 04:56

Transactions in Kafka

transactions-apache-kafka/在之前的博客文章（见尾部链接）中，我们介绍了ApacheKafka的exactlyonce语义，介绍了各种消息传输语义，producer的幂等特性，事务和KafkaStream
weiqing687·2020-08-08 19:49

快速起步的Apache Flink，远比我们看到的更强大，难怪阿里会选择它

目前开源大数据计算引擎有很多选择，流计算如Storm,Flink,KafkaStream等，批处理如Spark,Hive,Pig,Flink等。
爱开发V·2020-08-01 09:12

Kafka Streams 入门实例1 WordCount

KafkaStream也不例外。作为集成在Kafka消息系统上的数据实时处理接口，WordCount也可以作为一个很好的入门实例。
表现力·2020-07-28 00:42

Kafka Streams | 流，实时处理和功能

此外，我们将看到KafkaStream架构，用例和Kafka流功能。此外，我们将讨论ApacheKafka中的流处理拓扑。
weixin_30433075·2020-07-15 03:06

kafka stream（kafka流处理）

kafkastream（kafka流处理）问题：1）列转化问题(列转化行)user_attendeesfriend_id//打开zookeeper[root@bigdatabin]#zkServer.shstart
TT15751097576·2020-07-14 06:46

kafka-streams进行简单的数据清洗

packagecom.terry.kafkastream;importorg.apache.kafka.streams.KafkaStreams;importorg.apache.kafka.streams.StreamsConfig
领悟大数据·2020-07-14 03:34

Kafka Stream 数据清洗

1.1KafkaStream特点功能强大高扩展性，弹性，容错轻量级无需专门的集群一个库，而不是框架完全集成100%的Kafka0.10.0版本兼容
qq_43193797·2020-07-13 12:21

Kafka Stream maven WordCount实例

我们打算设计一个接口统计系统，根据日志统计出来具有高延时的接口，以及错误信息等．开始打算使用Spark来做，后来得知Kafka中提供了这个功能，叫做KafkaStream,基本的流处理已经能够实现了．于是就打算直接使用
AlstonWilliams·2020-07-07 11:45

头条--黑马头条_ 热点文章处理day12

热点文章处理目标能够清晰计算热文章数据的流程能够编写定时定时计算热文章的功能能够编写实时计算文章行为数据了解kafkastream的应用1热文章处理-功能需求为了能够更好的把文章提供给用户，推出热文章计算功能
LuckyAsYou·2020-07-05 05:31

Kafka Streams 运算操作详解

流处理概念数据流（stream）Stream是KafkaStream中最重要的概念，代表大小没有限制且不断更新的数据集(unbounded,continuouslyup
表现力·2020-06-30 05:24

编写kafka stream应用程序

关于kafkastream的介绍此处不再多做介绍，可以参考别的博客。直接看代码。
topEngineerray·2020-06-26 20:41

kafka个人基础教程（三）java demo kafkaStream篇

需要启动kafka服务和zookeeper服务以下为入口kafka入门zookeeper入门参考地址:https://kafka.apache.org/23/documentation/streams/tutorial#tutorial_code_pipe导入Maven包org.apache.kafkakafka_2.122.3.0providedorg.apache.kafkakafka-str
skindow·2020-06-25 23:17

Kafka总结（七）：数据采集应用

）：Kafka概述Kafka总结（二）：Kafka核心组件Kafka总结（三）：Kafka核心流程分析Kafka总结（四）：Kafka命令操作Kafka总结（五）：API编程详解Kafka总结（六）：KafkaStream
一念成佛_LHY·2020-06-25 11:44

Kafka快速入门系列(12) | Kafka Streams的简单介绍

目录1.什么是KafkaStreams2.KafkaStreams特点3.为什么要有KafkaStream4.KafkaStream数据清洗案例1.需求2.需求分析3.案例实操1.什么是KafkaStreams
不温卜火·2020-06-24 23:43

Kafka stream 开发碰到的问题：offset commit 失败 与 数据不准确

最近使用kafkastream来给系统日志做整合统计。
changtianshuiyue·2020-06-22 21:21

kafka学习总结

www.atatech.org/articles/59015无状态计算：数据分发和过滤，基于规则和策略有状态计算：达到某个阈值时触发报警，比如暴力密码破解行为，需要在内存中进行aggregation计算KafkaStream
阿来007·2020-06-22 13:45

Kafka Streams未来可期

核心知识预热TIPS1.资料来源说明书以及内部构造2.学习技术就是不断解惑的过程，就kafkastream自问：是个什么技术，能干什么，怎么使用..KafkaStreams是一个数据输入和数据输出都保存在
lang·2020-06-04 01:02

Kafka核心API——Stream API

KafkaStream概念及初识高层架构图KafkaStream是ApacheKafka从0.10版本引入的一个新Feature，它提供了对存储于Kafka内的数据进行流式处理和分析的功能。
ZeroOne01·2020-05-24 22:02

Kafka日志分段与消息查找

Kafka作为一个消息中间件(后面Kafka逐渐转向一个流失处理平台KafkaStream)，消息最终的存储都落在日志中。
shysh·2020-03-06 02:57

kafka stream入门1

kafkastream入门1最近本人在单位经常有对于大量心跳数据进行汇总计算，然后更加计算汇总出不同种类的中间数据集合，来提供后期的处理的需求。
来福马斯特·2020-02-12 00:44

如何从头开始创建Spring Cloud Stream Binder

SpringCloudStream的核心组件称为“Binder”，这是最常见的消息传递系统（例如ApacheKafka，KafkaStream
优锐课·2019-12-23 09:51

kafka stream学习笔记（一）

流式计算是目前大数据领域很火的一种术语，stream的技术有很多，很早的storm，然后是sparkstream、flink，以及我将要学习了解的kafkastream。其实我对
247609107a39·2019-12-13 22:33

Kafka Stream（五）

原文链接：http://www.jasongj.com/kafka/kafka_stream/本文转发自技术世界，原文链接http://www.jasongj.com/kafka/kafka_stream/KafkaStream
青鸟&飞鱼·2019-09-02 15:04

Kafka系列（二） 生产者Producer（处理模式、消息发送）

在Kafka的不断更新迭代中，KafkaStream已经在流处理中占据一席之地了。借此机会，先科普一下这两种处理模式。什么是批处理、流处理？
FZH_SYU·2019-08-30 19:10

后端架构师技术图谱(六)-基础架构

大数据流式计算Storm官方网站《最详细的Storm入门教程》Flink《Flink之一Flink基本原理介绍》KafkaStream《KafkaStream调研：一种轻量级流计算模式》应用场景例如：广告相关实时统计
咪雅先森·2019-06-26 10:40

Kafka Streams开发者指南

KafkaStream基于一个重要的流处理概念。如正确的区分事件时间和处理时间，窗口支持，以及简单而有效的应用程序状态管理。
daydayup_668819·2019-05-17 09:51

Kafka/Kafka Stream源码阅读环境搭建

KafkaStream源码阅读环境搭建安装JDK下载并安装Gradle下载并安装Scala下载Kafka并构建源码环境**源码环境说明：OS：Ubuntu16.04.6，IDE：IntellijIDEA
ibless·2019-04-11 09:39

SparkStreaming, StructedStreaming, KafkaStream,Storm,Flink 几大常见实时流计算引擎的对比

这类引擎中所有的data在到来的时候就会被立即处理，一条接着一条（HINT：狭隘的来说是一条接着一条，但流引擎有时会为提高性能缓存一小部分data然后一次性处理），其中的代表就是Storm,Samza,Flink,KafkaStream
写Scala的老刘·2018-12-29 17:08

KafkaStream-高级别API

使用StreamsDSL构建一个处理器拓扑，开发者可以使用KStreamBuilder类，它是TopologyBuilder的扩展。在Kafka源码的streams/examples包中有一个简单的例子。另外本节剩余的部分将通过一些代码来展示使用StreamsDSL创建拓扑的关键的步骤。但是我们推荐开发者阅读更详细完整的源码。1.1DualityofStreamsandTables（流和表的对偶性
还好，没肉馅·2018-12-13 11:00

Kfaka Stream使用总结

一、简介1.什么是kafkastream?KafkaStream是ApacheKafka从0.10版本引入的一个新特性。
fantasticMao·2018-11-27 19:37

KafkaStream低级别API

开发者可以通过Processor接口来实现自己的自定义处理逻辑。接口提供了Process和Punctuate方法。其中：Process方法用于处理接受到的消息Punctuate方法指定时间间隔周期性的执行，用于处理周期数据：例如某些状态值计算生成新的流。Processor接口还提供了init方法，init初始化方法可以将ProcessorContext转存到Procesor实例中，以供Prounc
还好，没肉馅·2018-11-20 14:00

KafkStream架构

KafkaStream的整体架构图如下。
还好，没肉馅·2018-11-20 14:00

KafkaStream简介

KafkaStream基于一个重要的流处理概念。如正确的区分事件时间和处理时间，窗口支持，以及简单而有效的应用程序状态管理。
还好，没肉馅·2018-08-31 17:00

Spark Stream、Kafka Stream、Storm和Flink对比，以及阿里巴巴基于Flink打造的Blink解决的问题

一、SparkStream、KafkaStream、Storm等存在的问题在设计一个低延迟、exactlyonce、流和批统一的，能够支撑足够大体量的复杂计算的引擎时，SparkStream等的劣势就显现出来
Johnson8702·2018-08-30 14:16

Kafka总结（八）：KafKa与ELK整合应用

）：Kafka概述Kafka总结（二）：Kafka核心组件Kafka总结（三）：Kafka核心流程分析Kafka总结（四）：Kafka命令操作Kafka总结（五）：API编程详解Kafka总结（六）：KafkaStream
一念成佛_LHY·2018-07-30 13:05

Kafka总结（六）：Kafka Stream详解

）：Kafka概述Kafka总结（二）：Kafka核心组件Kafka总结（三）：Kafka核心流程分析Kafka总结（四）：Kafka命令操作Kafka总结（五）：API编程详解Kafka总结（六）：KafkaStream
一念成佛_LHY·2018-07-30 13:19

Kafka总结（四）：Kafka命令操作

）：Kafka概述Kafka总结（二）：Kafka核心组件Kafka总结（三）：Kafka核心流程分析Kafka总结（四）：Kafka命令操作Kafka总结（五）：API编程详解Kafka总结（六）：KafkaStream
一念成佛_LHY·2018-07-30 13:21

Kafka总结（一）：Kafka概述

）：Kafka概述Kafka总结（二）：Kafka核心组件Kafka总结（三）：Kafka核心流程分析Kafka总结（四）：Kafka命令操作Kafka总结（五）：API编程详解Kafka总结（六）：KafkaStream
一念成佛_LHY·2018-07-30 12:20

Kafka-stream介绍

线程模型kafkastream默认是单线程的。如果启动多线程每一个task拥有自己的statestore。用于帮助kafkastream进行有状态的数据处理。
define_us·2018-07-30 10:34

Kafka stream实现word count

kafkastream实现kafka数据流的wordcount示例。
AlferWei·2018-06-07 18:33

Kafka生产者

其他更高级的API，如KafkaStream等都是在生产者和消费者API之上做的封装，以实现更丰富的功能。producer生产者配置了Kafka集群地址，序列化方法。下述代码阐述了
周一不上班·2018-05-31 09:55

《Kafka Stream》调研：一种轻量级流计算模式

KafkaStream与这些框架比有什么优势？Samza、ConsumerGroup已经包装了Kafka轻量级的消费功能，难道不够吗？
chenyulancn·2018-03-07 14:01

Kafka Stream 类库的使用入门

一，KafkaStream简介KafkaStreams。ApacheKafka开源项目的一个组成部分。是一个功能强大，易于使用的库。用于在Kafka上构建高可分布式、拓展性，容错的应用程序。
后知后觉的肖邦·2018-02-27 16:17

下周任务

1.sparknetty源码分析2.spark对外内存使用3.sparkshuffle流程分析4.presto安装，kylin安装5.kafka管理源码分析6.kafkastream使用7.elkfilebeat
TonyChai·2018-02-26 09:28

流式处理界的新贵 Kafka Stream - Kafka设计解析（七）

本文转发自技术世界，原文链接http://www.jasongj.com/kafka/kafka_stream/KafkaStream背景1KafkaStream是什么2什么是流式计算3为什么要有KafkaStreamKafkaStream
郭俊JasonGuo·2017-11-27 09:12

Kafka设计解析（七）- Kafka Stream

Kafka设计解析（七）-KafkaStream原创文章，转载请务必将下面这段话置于文章开头处。
小小少年Boy·2017-08-16 11:32

java自己手动控制kafka的offset

之前使用kafka的KafkaStream：http://blog.csdn.net/qq_20641565/article/details/60810174，让每个消费者和对应的patition建立对应的流来读取
lijie_cq·2017-03-21 13:49

Kafka Streams架构概述

KafkaStream基于一个重要的流处理概念。如正确的区分事件时间和处理时间，窗口支持，以及简单而有效的应用程序状态管理。
zhifeng687·2017-01-31 21:13
上一页 1 2 3 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他