E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
分布式消息系统kafka
Kafka
学习(二)-------- 什么是
Kafka
通过
Kafka
的快速入门https://www.cnblogs.com/tree1123/p/11150927.html能了解到
Kafka
的基本部署,使用,但他和其他的消息中间件有什么不同呢?
大数据流动
·
2023-12-16 17:17
Java面试题及答案整理( 2022 年 2 月最新版,持续更新)
Java工程师面试题包括了:MyBatis、ZK、Dubbo、EL、Redis、MySQL、并发编程、Java面试、Spring、微服务、Linux、Springboot、SpringCloud、MQ、
Kafka
大老高程序员
·
2023-12-16 17:01
SpringCloudStream实战拆解以及3.1后新版本特性分析
2.2:一秒切换对接
kafka
2.3:一秒切换对接RocketMQ三、详解SCS三神器3.1Binder3.2Binding3.3Message四、SCS提供的高级功能4.1消息分组消费机制4.2个性化使用五
roykingw
·
2023-12-16 17:20
java
kafka
java
rabbitmq
rocketmq
scstream
从零到一学习RocketMQ
RocketMQ是一款功能强大的
分布式消息系统
,广泛应用于多个领域,包括异步通信解耦、企业解决方案、金融支付、电信、电子商务、快递物流、广告营销、社交、即时通信、移动应用、手游、视频、物联网、车联网等。
1b( ̄▽ ̄)d
·
2023-12-16 15:53
java
开发语言
消息通知泛型版
最近在做一个项目,项目内部需要使用消息通知系统,由于只是单机内部消息通知,使用类似
kafka
这样的消息队列就太重量级了。所以设计了一个简单的消息通知功能。
天地一蜉蝣_6e86
·
2023-12-16 15:18
消息队列
kafka
详解:
Kafka
架构介绍
一.工作流程
Kafka
中消息是以topic进行分类的,Producer生产消息,Consumer消费消息,都是面向topic的。
码农小旋风
·
2023-12-16 14:20
后端
Kafka
Avro序列化之一:使用自定义序列化
定义Schema通过ApacheAvro编程快速入门,我们定义了User实体类。user.avsc{"namespace":"org.example.avro","type":"record","name"
跟着大数据和AI去旅行
·
2023-12-16 14:50
大数据企业级实战
kafka
schema
本地 idea 连接操作服务器上的
kafka
,配置内外网映射
主要就是内外网映射的配置在
Kafka
的安装目录中的config/server.properties文件中注释掉原来的advertised.listeners和listeners添加以下内容,将下面内容中的
超爱慢
·
2023-12-16 14:18
kafka
分布式
《PySpark大数据分析实战》-10.独立集群模式的代码运行
对大数据技术栈Hadoop、Hive、Spark、
Kafka
等有深入研究,对Data
wux_labs
·
2023-12-16 14:49
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
PySpark
《PySpark大数据分析实战》-08.宽窄依赖和阶段划分
对大数据技术栈Hadoop、Hive、Spark、
Kafka
等有深入研究,对Data
wux_labs
·
2023-12-16 14:19
PySpark大数据分析实战
数据分析
数据挖掘
《PySpark大数据分析实战》-09.Spark独立集群安装
对大数据技术栈Hadoop、Hive、Spark、
Kafka
等有深入研究,对Data
wux_labs
·
2023-12-16 14:49
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
PySpark
《PySpark大数据分析实战》-05.PySpark库介绍
对大数据技术栈Hadoop、Hive、Spark、
Kafka
等有深入研究,对Data
wux_labs
·
2023-12-16 14:05
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
PySpark
KafKa
基本原理
分布式,分区,多副本,zk协调的
分布式消息系统
使用日志收集消息系统用户活动跟踪运营指标概念Brokertopicproducerconsumerconsumergrouppartition通信基于tcp
小淘淘喵的主人
·
2023-12-16 13:59
java
kafka
配置多个消费者groupid
kafka
多个消费者消费同一个partition(java)
目录1-单播模式,只有一个消费者组2-广播模式,多个消费者组3-Java实践
kafka
是由Apache软件基金会开发的一个开源流处理平台。
KG大数据
·
2023-12-16 13:56
kafka
kafka
java
分布式
kafka
常用命令
/bin/
kafka
-console-producer.sh--broker-listdn02.hadoop.cn:6667,dn03.hadoop.cn:6667,dn04.hadoop.cn:6667
wind_103
·
2023-12-16 12:23
扫盲
Kafka
?看这一篇就够了! | 京东云技术团队
kafka
的使用场景为什么要使用
Kafka
消息队列?解耦、削峰:传统的方式上游发送数据下游需要实时接收,如果上游在某些业务场景:例如上午十点会流量激增至顶峰,那么下游资源可能会扛不住压力。
京东云技术团队
·
2023-12-16 11:02
硬核干货
数据库
kafka
京东云
分布式
消息队列
Logstash输入
Kafka
输出Es配置
Logstash介绍Logstash是一个开源的数据收集引擎,具有实时管道功能。它可以从各种数据源中动态地统一和标准化数据,并将其发送到你选择的目的地。Logstash的早期目标主要是用于收集日志,但现在的功能已经远远超出这个范围。任何事件类型都可以通过Logstash进行分析,通过输入、过滤器和输出插件进行转换。Logstash的工作原理是使用管道方式进行日志的搜集处理和输出。这个管道包括三个阶
有梦想的攻城狮
·
2023-12-16 11:24
Elasticsearch
运维相关
kafka
elasticsearch
分布式
logstash
【
Kafka
】
Kafka
实现 Exactly-once
本篇结构:
Kafka
三种语义
Kafka
故障保证Exactly-once参考博客一、
Kafka
三种语义在分布式系统中,构成系统的任何节点都是被定义为可以彼此独立失败的。
w1992wishes
·
2023-12-16 10:59
统一日志管理方案:Spring项目logback日志与logstash和Elasticsearch整合
原创/朱季谦最近在做一个将分布式系统的日志数据通过logstash传到
kafka
的功能,做完之后决定业余搭一个ELK日志分析系统,将logstash采集到的日志传给Elasticsearch。
朱季谦
·
2023-12-16 10:06
ELK
spring
logback
elasticsearch
深入理解Dubbo-7.服务消费调用源码分析
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring源码、JUC源码、
Kafka
原理、分布式技术原理如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2023-12-16 09:33
分布式技术
dubbo
分布式
深入理解Dubbo-8.Dubbo的失败重试设计
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring源码、JUC源码、
Kafka
原理、分布式技术原理如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2023-12-16 09:33
分布式技术
dubbo
分布式
深入理解Dubbo-6.服务消费源码分析
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring源码、JUC源码、
Kafka
原理、分布式技术原理如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2023-12-16 09:03
分布式技术
dubbo
分布式
Mysql存储引擎-InnoDB
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring源码、JUC源码、
Kafka
原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2023-12-16 09:26
数据库技术
mysql
数据库
10、神秘的“位移主题”
神秘的“位移主题”1、什么是位移主题2、位移主题的消息格式3、位移主题是怎么被创建的4、什么地方会用到位移主题5、位移主题的删除机制本章主题是:
Kafka
中的内部主题(InternalTopic)__consumer_offsets
cjh-Java
·
2023-12-16 09:01
#
Kafka
kafka
分布式
分区
kafka
学习笔记--broker工作流程、重要参数
如有侵权、联系速删视频教程链接:【尚硅谷】
Kafka
3.x教程(从入门到调优,深入全面)文章目录
Kafka
Broker工作流程Kakfa信息存储在Zookeeper中
Kafka
Broker总体工作流程Broker
向着百万年薪努力的小赵
·
2023-12-16 09:59
#
Kafka学习--入门到调优
kafka
学习
笔记
3、
Kafka
线上集群部署方案怎么做?
、举例思考本问题:3.2、计算一下:3.3、规划磁盘容量时你需要考虑下面这几个元素:4、带宽规划4.1、计算总结1、操作系统的选择对比Linux、Mac、Window,Linux系统显然要更加适合部署
Kafka
cjh-Java
·
2023-12-16 09:27
#
Kafka
kafka
分布式
容器中的JVM资源该如何被安全的限制?
工程师朋友们加入Java架构开发:277763288群内提供免费的Java架构学习资料(里面有高可用、高并发、高性能及分布式、Jvm性能调优、Spring源码,MyBatis,Netty,Redis,
Kafka
风平浪静如码
·
2023-12-16 08:49
RocketMQ系统性学习-RocketMQ领域模型及Linux下单机安装
MQ之间的对比三种常用的MQ对比,ActiveMQ、
Kafka
、RocketMQ性能方面:三种MQ吞吐量级别为:万,百万,十万消息发送时延:毫秒,毫秒,微秒可用性:主从,分布式,分布式扩展性方面:水平伸缩能力
无敌少年小旋风
·
2023-12-16 08:58
RocketMQ
rocketmq
学习
linux
ClickHouse
Kafka
引擎教程
如果您刚开始并且第一次设置
Kafka
和ClickHouse需要帮助怎么办?这篇文章也许会提供下帮助。我们将通过一个端到端示例,使用
Kafka
引擎将数据从
Kafka
主题加载到ClickHouse表中。
yule.yang
·
2023-12-16 08:25
数据库
kafka
clickhouse
Kafka
集群部署
0准备0.1ZooKeeperhttps://blog.csdn.net/weixin_43724577/article/details/1348293620.2xsynchttps://blog.csdn.net/weixin_43724577/article/details/1348721151集群规划centos701centos702centos704ZooKeeperZooKeeperZ
Mranth
·
2023-12-16 08:55
kafka
分布式
大数据
linux
centos
Kafka
命令行操作
版本:3.6.11
kafka
-topics.shCreate,delete,describe,orchangeatopic.创建、删除、描述或更改主题。
Mranth
·
2023-12-16 08:15
kafka
分布式
大数据
kafka
log4j日志级别修改,一天生成一个日志文件
kafka
的log4j日志默认配置中,有如下配置:log4j.appender.
kafka
Appender=org.apache.log4j.DailyRollingFileAppenderlog4j.appender.
kafka
Appender.DatePattern
从大数据到人工智能
·
2023-12-16 07:15
kafka
可视化工具搭建之kafdrop
Kafdrop介绍Kafdrop是一个用于查看
Kafka
主题和浏览消费者组的WebUI。该工具显示代理、主题、分区、消费者等信息,并且可以预览topic消息。
Memory_2020
·
2023-12-16 07:13
中间件
kafka
分布式
Kafka
-
Kafka
基本原理与集群快速搭建(实践)
Kafka
单机搭建下载
Kafka
ApacheDownloadMirrors解压tar-zxvf
kafka
_2.12-3.4.0.tgz-C/usr/local/src/software/
kafka
kafka
长情知热爱
·
2023-12-16 07:41
kafka
分布式
spring-cloud-stream-
kafka
生产速度慢
包版本spring-cloud-starter-stream-
kafka
:3.1.0修改yaml配置添加poller配置
zhouhangzhouxing
·
2023-12-16 07:25
kafka
spring
cloud
spring
boot
Kafka
-客户端使用
理解
Kafka
正确使用方式
Kafka
提供了两套客户端API,HighLevelAPI和LowLevelAPI。
有梦想的年轻人6174
·
2023-12-16 07:55
kafka
分布式
java
kafka
kafka
什么是
Kafka
Kafka
是一个分布式流式平台,它有三个关键能力订阅发布记录流,它类似于企业中的消息队列或企业消息传递系统以容错的方式存储记录流实时记录流
Kafka
的应用作为消息系统作为存储系统作为流处理器
李昊哲小课
·
2023-12-16 07:46
Java
大数据
云计算
kafka
大数据
数据分析
Kafka
快速实战与基本原理详解
Kafka
是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的
分布式消息系统
,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景
Memory_2020
·
2023-12-16 06:08
中间件
kafka
分布式
Flink+
Kafka
消费
jarorg.apache.flinkflink-java1.8.0org.apache.flinkflink-streaming-java_2.111.8.0org.apache.flinkflink-connector-
kafka
信仰_273993243
·
2023-12-16 06:38
flink
kafka
linq
Apache
Kafka
JNDI注入注入漏洞(CVE-2023-25194)
基于Vulhub搭建的环境一、漏洞概述Apache
Kafka
是一个开源分布式消息队列,
Kafka
clients是相对应的Java客户端。
Guess'
·
2023-12-16 06:36
Guess-Security
apache
kafka
Kafka
核心技术与实战 - 无消息丢失配置怎么实现?
Kafka
是能做到不丢失消息的,只不过这些消息必须是已提交的消息,而且还要满足一定的条件。案例1:生产者程序丢失数据Producer程序丢失消息,这应该算是被抱怨最多的数据丢失场景了。
陈德华
·
2023-12-16 06:00
初识大数据应用,一文掌握大数据知识文集(1)
07、
Kafka
Utils.cr
普修罗双战士
·
2023-12-16 06:22
大数据专栏
大数据
数据分析
数据仓库
数据挖掘
database
数据库开发
阿里云
大数据生态圈
kafka
在物联网中的应用测试
背景由物联网项目中使用到了Tbox应用管理车辆,在上报数据的过程中,需要将终端产生的数据通过
kafka
的producetopiccustomer对数据进行处理后,放置到mysql中。
小赖同学啊
·
2023-12-16 05:37
大数据
kafka
分布式
kafka
解决大消息发送和接收报错问题
kafka
消息超过一定大小会报错如下:Themessageis2044520byteswhenserializedwhichislargerthanthemaximumrequestsizeyouhaveconfiguredwiththemax.request.sizeconfiguration
weixin_48965172
·
2023-12-16 05:51
kafka
java
分布式
Storm+
Kafka
+Zookeeper本地集群实现百万股票数据统计
前提storm集群
kafka
集群zookeeper集群三个集群的搭建可以查看秃头的其他文章需求作业要求使用storm集群对10份股票数据文件进行统计,数据集中包含10支股票,包含股票金额、成交单价、成交量
小小小秃头
·
2023-12-16 05:54
storm
kafka
zookeeper
股票交易信息实时大屏(
Kafka
+storm+Redis+DataV)
Controller示例:Service示例:storm拓扑示例:核心统计bolt:统计结果持久化bolt:Redis连接池:股票大数据统计展屏(基于docker搭建的storm、zookeeper、
kafka
小小小秃头
·
2023-12-16 05:54
kafka
storm
hbase
Docker-compose部署zookeeper+storm集群【保成,秒回】
docker-hub官网教程dockerstorm官网docker-compose安装请参考【Docker安装部署Zookeeper+
Kafka
集群详细教程、部署过程中遇到问题&解决方案】zookeeper
小小小秃头
·
2023-12-16 05:24
docker
zookeeper
storm
Storm+
Kafka
+Redis+zookeeper docker集群实战问题与解决
目录引言问题与解决引言下面的错误主要是在完成大数据展屏时遇到的一些报错,从最开始的storm构建rowkey,hbase实现统计到storm直接统计redis存结果,第一种方式是参考的一本storm实战书籍,但是老师说这种方法无法发挥storm的并行计算的优势,遇到换到了第二种方法,使用多个并行的bolt来实现不同的任务统计,下面介绍的一些报错,希望能帮助到你,欢迎留言讨论。问题与解决1、Conc
小小小秃头
·
2023-12-16 05:18
storm
kafka
zookeeper
二手交易平台系统(springboot mybatis)
本系统采用的整体技术架构如下:后端:springboot+springmvc+mybatis+redis+
kafka
数据库:mysql前端:jsp+jquery+bootstrap该系统实现了一个二手交易平台网站
易-大侠
·
2023-12-16 04:55
java系统设计
spring
boot
mybatis
后端
java
源代码管理
大模型时代-看看大模型能不能设计一个秒杀系统
使用消息队列(如
Kafka
或RabbitMQ)处理高并发下的请求。数据库设计使用MySQL作为主数据库,存储商品信息、用户信息等。使用Redis作为缓存,存储商品库存、秒杀记录等。
奋力向前123
·
2023-12-16 02:11
java
java
上一页
35
36
37
38
39
40
41
42
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他