E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Kafka原理解析
【
kafka
】
kafka
集群的搭建、用户的设置和权限的控制
然后是
kafka
的包和zookeeper的包,
kafka
和zookeeper的版本要适配。
ColdFireMan
·
2023-10-20 13:30
中间件
kafka
Flink之Watermark水印、水位线
Watermark策略内置Watermark生成器单调递增时间戳分配器固定延迟的时间戳分配器自定义WatermarkGenerator周期性Watermark生成器标记Watermark生成器Watermark策略与
Kafka
CodeDevMaster
·
2023-10-20 12:05
#
Flink
flink
大数据
数据流
Flink-CDC|可以替代Canal的数据同步方案-尚硅谷Java培训
CDC主要分为基于查询和基于Binlog两种方式,我们主要了解一下这两种之间的区别:基于查询的CDC基于Binlog的CDC开源产品Sqoop、
Kafka
JDB
尚硅谷铁粉
·
2023-10-20 12:03
java
flink
数据库
八股文学习四(
kafka
)
一.消息中间件
kafka
(1)基本概念(2)生产者生产者将消息发送到topic中去,同时负责选择将message发送到topic的哪一个partition中。
十一路客
·
2023-10-20 12:23
kafka
kafka
可视化工具
Kafka
Tool安装使用
kafka
可视化工具
Kafka
Tool安装使用
Kafka
Tool是一款
Kafka
的可视化客户端工具,可以非常方便的查看Topic的队列信息、消费者信息以及
kafka
节点信息。
beyond阿亮
·
2023-10-20 12:23
mq
Kafka
Tool
kafka
windows系统下
kafka
可视化工具
Kafka
Tool的基本使用
设置完后,点击Test测试是否能连接,连接通了,然后点击Add,添加完成设置设置以字符串的形式显示
kafka
消息体Tool--->Setting--->Topics或者通过如下界面进行配置选择
susu1083018911
·
2023-10-20 12:20
kafka
windows
kafka
Kafka
Tool(
Kafka
可视化工具)安装及使用教程
Kafka
Tool(
Kafka
可视化工具)安装及使用教程
Kafka
Tool工具下载下载地址http://www.
kafka
tool.com/download.html下载界面不同版本的
Kafka
对应不同版本的工具
Coder-CT
·
2023-10-20 12:19
kafka
分布式
tapable
原理解析
2
tapable
原理解析
2本文查看tapable中sync方式的方法运行的方式以及context和intercept的运行逻辑1.SyncHook执行下面的代码const{SyncHook}=require
pipu
·
2023-10-20 12:19
监听redis键失效事件实现延迟功能
评估过
kafka
,可惜支持度不够,如果要实
mikelv01
·
2023-10-20 11:01
redis
延迟功能
监听事件
《黑马头条》 内容安全 自动审核 feign 延迟任务精准发布
kafka
目录《黑马头条》SpringBoot+SpringCloud+Nacos等企业级微服务架构项目_黑马头条项目_软工菜鸡的博客-CSDN博客04自媒体文章-自动审核1)自媒体文章自动审核流程2)内容安全第三方接口2.1)概述2.2)准备工作2.3)文本内容审核接口2.4)图片审核接口2.5)项目集成3)app端文章保存接口3.1)表结构说明3.2)分布式id分布式id-技术选型3.3)思路分析3.4
软工菜鸡
·
2023-10-20 11:28
java
微服务
jmeter集成
kafka
测试
Kafka
的使用查看
kafka
的topic./
kafka
-topics--bootstrap-server10.1.9.84:9092--list查看topic信息.
小赖同学啊
·
2023-10-20 11:43
jmeter
kafka
分布式
4、
Kafka
消费者
5.1
Kafka
消费方式5.2
Kafka
消费者工作流程5.2.1消费者总体工作流程5.2.2消费者组原理ConsumerGroup(CG):消费者组,由多个consumer组成。
myprince003
·
2023-10-20 11:40
Kafka
kafka
分布式
3、
Kafka
Broker
4.1
Kafka
Broker工作流程4.1.1Zookeeper存储的
Kafka
信息(1)启动Zookeeper客户端。
myprince003
·
2023-10-20 11:09
Kafka
kafka
分布式
kafka
生产者和消费者
目录生产者命令行操作消费者命令行操作
Kafka
生产者生产者消息发送流程:发送原理生产者重要参数列表生产者命令行操作1、查看操作生产者命令参数[atguigu@hadoop102
kafka
]$bin/
kafka
-console-producer.sh
笨鸟先-森
·
2023-10-20 10:05
kafka
分布式
java
Kafka
生产者发送数据
往
kafka
发送消息,提供三种构造函数形参:--ProducerRecord(topic,partition,key,value)--ProducerRecord(topic,key,value)--ProducerRecord
undo_try
·
2023-10-20 10:34
#
kafka
kafka
java
分布式
Kafka
生产者
目录一、
kafka
生产者原理二、
kafka
异步发送配置
kafka
创建对象,发送数据带回调函数的异步发送同步发送三、
kafka
生产者分区分区策略指定分区:指定key:什么都不指定:自定义分区器四、生产者提高吞吐量五
Java_Xjc
·
2023-10-20 10:01
kafka学习记录
kafka
java
分布式
SpringBoot使用
Kafka
生产者、消费者
文章目录依赖配置文件生产者消费者依赖org.springframework.
kafka
spring-
kafka
xxx配置文件spring:
kafka
:producer:value-serializer:
刘大猫.
·
2023-10-20 10:58
Kafka
kafka
spring
spring
boot
java
2、
Kafka
生产者
main线程将消息发送给RecordAccumulator,Sender线程不断从RecordAccumulator中拉取消息发送到
Kafka
Broker。
myprince003
·
2023-10-20 10:56
Kafka
kafka
分布式
Android 如何在Service中使用ViewModel
ViewModel
原理解析
,人人都能看得懂!-知乎一文带你了解ViewModel的使用及源码解析-知乎大致的意思就是:必须依赖于UI界面层。如下图的源
seven2729
·
2023-10-20 10:42
原创
android
service
vewModel
Zookeeper 和
Kafka
工作原理及如何搭建 Zookeeper集群 +
Kafka
集群
工作机制1.3Zookeeper特点1.4Zookeeper数据结构1.5Zookeeper应用场景1.6Zookeeper选举机制2部署Zookeeper集群2.1安装前准备2.2安装Zookeeper3
Kafka
3.1
尔尔辞暮
·
2023-10-20 09:19
zookeeper
kafka
分布式
云原生
centos
运维
linux
常用中间件对比
1.
Kafka
Kafka
是LinkedIn开源的分布式发布-订阅消息系统,目前归属于Apache顶级项目。
曾经的飞舞梦
·
2023-10-20 09:00
springboot整合
kafka
pom.xml依赖引入org.springframework.
kafka
spring-
kafka
application.yml配置spring:#
kafka
配置
kafka
:#
kafka
服务器IP、端口bootstrap-servers
daCrazy
·
2023-10-20 09:56
kafka
kafka
java
智慧矿山:区域入侵算法用在哪里及原理-煤矿智能化ai算法
原理解析
系列
本文将讨论区域入侵算法在煤矿智能化中的具体应用以及其
原理解析
。首先,让我们来了解一下区域入侵算法的基本原理。
中伟视界科技
·
2023-10-20 08:09
人工智能
大数据
网络
ZooKeeper部署全攻略——安装部署
目录Zookeeper安装(
KAFKA
自带)准备工具上传与解压修改配置文件添加集群配置信息(继续修改zoo.cfg配置文件)配置myid启动服务添加开机启动Zookeeper安装准备工具上传与解压修改配置文件添加集群配置信息
家里有只小螃蟹
·
2023-10-20 06:11
zookeeper
java-zookeeper
zookeeper
kafka
zookeeper(目前只有安装)
安装流程学
kafka
的时候安装ApacheZooKeeper安装地址:https://archive.apache.org/dist/zookeeper/zookeeper-3.5.7/apache-zookeeper
Int mian[]
·
2023-10-20 06:37
zookeeper
分布式
云原生
appium工具使用 App元素探测器 Adb介绍及
原理解析
<搬代码>
deviceNameplatformNameappPackageappActivitydeviceName设备名字,platformName什么系统android,appPackage测试包名,appActivity启动项的名字找到launchable-activity的name里面launchable-activity:name=‘com.tencent.qqmusic.activity.App
搬代码
·
2023-10-20 05:08
adb
android
android
studio
Flink学习之旅:(三)Flink源算子(数据源)
数据集合数据文件Socket数据
kafka
数据自定义Source2.案例2.1.从集合中获取数据创建FlinkSource_List类,再创建个Student类(姓名、年龄、性别三个属性就行,反正测试用
只爱大锅饭
·
2023-10-20 03:03
大数据学习之路
flink
学习
大数据
Kafka
常用命令
/
kafka
-topics.sh--list--bootstrap-server192.168.1.115:9092创建主题.
nsa65223
·
2023-10-20 03:01
kafka
java
分布式
SparkStreaming如何优雅的停止服务
如果运行的是sparkonyarn模式直接使用yarnapplication-killtaskId暴力停掉sparkstreaming是有可能出现问题的,比如你的数据源是
kafka
,已经加载了一批数据到
尼小摩
·
2023-10-20 02:50
Spark问题出错汇总
一.经验1.SparkStreaming包含三种计算模式:nonstate.stateful.window2.
kafka
可通过配置文件使用自带的zookeeper集群3.Spark一切操作归根结底是对RDD
000X000
·
2023-10-20 02:41
Spark
spark常见问题错误 汇总
一.经验1.SparkStreaming包含三种计算模式:nonstate.stateful.window2.
kafka
可通过配置文件使用自带的zookeeper集群3.Spark一切操作归根结底是对RDD
我丶怀念的
·
2023-10-20 02:40
spark
bug
kafka
消费者的group id从哪里获取
事件起因今天跑了一下
kafka
的示例demo,突然意识到一个问题。
邓不利东
·
2023-10-20 02:09
kafka
kafka
分布式
中间件
java
搭建Spark所遇过的坑
/www.cnblogs.com/qifengle-2446/p/6424377.html一.经验1.SparkStreaming包含三种计算模式:nonstate.stateful.window2.
kafka
富的只剩下代码
·
2023-10-20 02:37
大数据
spark
【大数据】
Kafka
入门简介
Kafka
入门简介1.什么是
Kafka
2.
Kafka
的基本概念3.
Kafka
分布式架构4.配置单机版
Kafka
4.1下载并解压包4.2启动
Kafka
4.3创建Topic4.4向Topic中发送消息4.5
G皮T
·
2023-10-20 02:30
大数据
大数据
kafka
分布式
消息队列
数据同步
kafka
无法启动的问题
[2023-02-0711:12:14,604]INFO[ZooKeeperClient
Kafka
server]Connected.
米达麦呀
·
2023-10-20 02:29
kafka
分布式
scala
kafka
安装步骤以及初步入门
安装Javasudoaptinstalldefault-jdk#执行完直接直接查看版本就好了java-versionhttps://blog.csdn.net/CyberSparkZ/article/details/132441191安装zookeeperhttps://blog.csdn.net/supercrsky/article/details/124570611https://blog.c
我只钓小鱼
·
2023-10-20 02:57
大数据
python
kafka
分布式
Apache Doris &&
Kafka
Kafka
Kafka
入门到精通。
wqy19941008
·
2023-10-20 00:03
学习总结
kafka
java
分布式
flinksql 窗口提前触发
INTERVAL'1'DAY)aswindow_start,TUMBLE_END(ptime,INTERVAL'1'DAY)aswindow_end,COUNT(1)aspay_numfromflink_
kafka
me凡
·
2023-10-20 00:59
流式处理
flinksql
trigger
emit
MQ消息队列的重复消费问题的通用解决办法以及幂等性的原理
目前火热的几款MQ,比如RocketMQ、
Kafka
、Rab
刘Java
·
2023-10-20 00:02
RocketMQ
学习
java
消息队列
重复消费
幂等性
关于Spark Streaming的使用
在使用
Kafka
和SparkStreaming的过程中,需要考虑到复杂的逻辑和数据处理流程。
cong_han
·
2023-10-19 23:47
Spark
大数据
spark
学习
kafka
RabbitMQ
是分布式系统中的重要组件主要解决,异步处理,应用解耦,流量削峰等问题从而实现高性能,高可用,可伸缩和最终一致性的架构使用较多的消息队列产品:RabbitMQ,RocketMQ,ActiveMQ,ZeroMQ,
Kafka
Yuanc丶
·
2023-10-19 23:43
Debezium报错处理系列之九十七:The message is xxxx bytes when serialized which is larger than the total memory
Debezium报错处理系列之九十七:Causedby:org.apache.
kafka
.common.errors.RecordTooLargeException:Themessageis388798167byteswhenserializedwhichislargerthanthetotalmemorybufferyouhaveconfiguredwiththebuffer.memorycon
最笨的羊羊
·
2023-10-19 23:06
debezium
Debezium报错处理系列
Record
TooLarge
Exception
serialized
buffer.memory
Debezium报错处理系列之九十六:The message is 388798167 bytes when serialized which is larger than 40960000
Debezium报错处理系列之九十六:Causedby:org.apache.
kafka
.common.errors.RecordTooLargeException:Themessageis388798167byteswhenserializedwhichislargerthan40960000
最笨的羊羊
·
2023-10-19 23:05
debezium
Debezium报错处理系列
Record
Too
LargeException
larger
than
kafka
(eager)监控
网上推荐的工具为
Kafka
OffsetMonitor但是这个工具因为offset偏移问题并不支持新的
kafka
版本在我踩了无数坑之后决定使用eager监控eager安装(其实官方文档解释的很清楚了)下载地址解压在
比基尼海滩章鱼哥
·
2023-10-19 23:28
kafka
:大规模实时数据流的必选
kafka
:大规模实时数据流的必选Apache
Kafka
:分布式流媒体平台简介ZooKeeper和
Kafka
之间的关系:
Kafka
基本概念主题(Topic)分区(Partition)生产者(Producer
是一个Bug
·
2023-10-19 22:45
kafka
linq
分布式
Golang通道(Channel)
原理解析
引言并发编程是现代软件开发中的一个重要主题。Golang作为一门并发友好的编程语言,提供了一种简单而强大的机制,即通道(Channel),用于在不同的Goroutine之间进行通信和同步。通道的设计和原理是Golang并发模型的核心概念之一,本文将深入探讨Golang通道的原理,包括概念、用法、场景和案例。概念通道是Golang中用于在不同的Goroutine之间进行通信和同步的特殊类型。通道可以
一只会写程序的猫
·
2023-10-19 22:39
Go
golang
爬虫
Kubernetes StatefulSet 实现原理
每一个无状态节点存储的数据在重启之后就会被删除,虽然这种服务虽然常见,但是我们仍然需要有状态的服务来实现一些特殊的需求,StatefulSet就是Kubernetes为了运行有状态服务引入的资源,例如Zookeeper、
Kafka
牛牛Blog
·
2023-10-19 21:34
Kubernetes
StatefulSet
Kubernetes
Kubernetes StatefulSet
有状态应用是将数据或应用程序状态持久化到关联的存储中,例如MySQL、
Kafka
、Zookeeper等应用场景,需要对其进行唯一持久身份的标识及数据
叶康铭
·
2023-10-19 21:53
Kubernetes
玩转系列
Kubernetes(八)Kubernetes StatefulSet 实现原理
每一个无状态节点存储的数据在重启之后就会被删除,虽然这种服务虽然常见,但是我们仍然需要有状态的服务来实现一些特殊的需求,StatefulSet就是Kubernetes为了运行有状态服务引入的资源,例如Zookeeper、
Kafka
liu_weiliang10405
·
2023-10-19 21:22
kubernetes
kubernetes
Kafka
_0.8.2.0与Zookeeper的集成配置
安装配置
kafka
_0.8.2.0区别于
kafka
_2.0.0,0.8.2.0版本的集成配置有些区别。
kafka
_2.0.0版本的集成见:
Kafka
+Zookeepr的单节点集成配置。如下
Ethan_pika
·
2023-10-19 19:24
Kafka
kafka
zookeeper
上一页
83
84
85
86
87
88
89
90
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他