E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Kafka权威指南
Kafka
:本地设置
这是设置
Kafka
将数据从Elasticsearch发布到
Kafka
主题的三部分系列的第一部分;该主题将被Neo4j使用。第一部分帮助您在本地设置
Kafka
。
前网易架构师-高司机
·
2023-12-30 00:35
游戏服务器开发专栏
kafka
elasticsearch
分布式
PiflowX组件-WriteTo
Kafka
WriteTo
Kafka
组件组件说明将数据写入
kafka
。
暗影八度
·
2023-12-29 23:14
大数据
hadoop
spark
flink
PiflowX组件-ReadFrom
Kafka
ReadFrom
Kafka
组件组件说明从
kafka
中读取数据。
暗影八度
·
2023-12-29 23:13
spark
flink
big
data
大数据
SpringBoot----日志框架和配置,
kafka
视频分析
如何让系统中所有日志统一使用slf4j将系统中其他的日志框架先排除出去用中间包替换原有的日志框架我们导入slf4j其他的实现SpringBoot日志关系=============================================================================![在这里插入图片描述](https://img-blog.csdnimg.cn/e41ba6
m0_64867092
·
2023-12-29 23:11
程序员
面试
java
后端
前端入门16-JavaScript进阶之EC和VO
声明本系列文章内容全部梳理自以下几个来源:《JavaScript
权威指南
》MDNwebdocsGithub:smyhvae/webGithub:goddyZhao/Translation/JavaScript
请叫我大苏
·
2023-12-29 22:45
第十二节:Stream(消息驱动)和Sleuth(分布式请求链路跟踪)
一、Stream(消息驱动)消息驱动概述:MQ(消息中间件):ActiveMQ、RabbitMQ、RocketMQ、
kafka
MQ解决问题:多种MQ适配(切换、维护、开发)屏蔽底层消息中间件的差异,降低切换成本
逆流而上jiao
·
2023-12-29 21:52
JavaCloud【尚硅谷】
java
rabbitmq
spring
boot
中间件
十五.SpringCloud极简入门-Spring Cloud Stream消息驱动
SpringCloudStream介绍1.1.为什么要用SpringCloudStream在项目开发的过程中,由于需求的变更可能会导致MQ中间件的更换,比如我们最开始使用的RabbitMQ,后续需要更换为
Kafka
墨家巨子@俏如来
·
2023-12-29 21:52
《Spring
Cloud
Netflix》
stream
cloud
java
spring
rabbitmq
SpringCloud第十一节内容精简,SpringCloud Stream消息驱动
平时用的消息组件有,RabbitMQ,RocketMQ,
Kafka
,ActiveMQ用消息驱动是为了屏蔽底层消息中间件的差异,降低切换版本,统一消息的编程模型举个例子,你不需要学习mysql,sqlserver
bailaoshi666
·
2023-12-29 21:19
SpringCloud
消息驱动之背景概述(十九)
消息中间件当我们的消息生产者产生了消息之后,就把消息推送到RabbitMQ或
Kafka
这样的消息中间件上,消息消费者实现了对消息中间件的监听,当侦听到了消息的时候,就去获
MrSpirit
·
2023-12-29 21:49
Spring
Cloud
Spring
Cloud
消息中间件
第十一章 Stream消息驱动
底层不管是什么中间件如
kafka
、rabbitmq,Stream
我愿为一粒沙
·
2023-12-29 21:18
spring
cloud
《Android编程
权威指南
》之第二个activity源码及挑战
文章目录前言效果图依赖MainactivityKotlin的“?”kotlin的符号QuizViewModelQuestion类CheatActivityonBackPressed()companionCheatViewModelstring.xml前言实现禁止一题多答,按题记录作弊状态、偷看次数限制、横竖屏切换依旧保存状态数据个人思维的项目分析效果图依赖android{....buildFeat
运气真不错!
·
2023-12-29 20:31
android
SpringBoot 中使用
Kafka
的简单入门
0.在使用Spiringboot集成
Kafka
之前需要将
kafka
的服务端程序(包括jre、zookeeper、
kafka
三部分)安装好。
marksman_e902
·
2023-12-29 17:52
kafka
有几种数据保留的策略?
kafka
有几种数据保留的策略?在Apache
Kafka
中,有几种数据保留策略用于定义消息保存的时长和数据保留的规则。这些策略主要影响
Kafka
中的Topic。
学习资源网
·
2023-12-29 14:28
kafka
分布式
Kafka
初识
kafka
是由LinkedIn公司开发的,是一个分布式、支持分区的、多副本的,基于zookeeper协调的分布式消息系统,它的最大特点就是可以实时的处理大量数据以满足各种需求场景:比如基于Hadoop的批处理系统
Advancer-lbh
·
2023-12-29 14:56
消息中间件
kafka
分布式
消息中间件
kafka
容灾演练的方案
背景
kafka
可以通过MirrorMaker工具把集群的数据从一个集群同步到另一个集群,通过在另一个数据中心创建灾备集群的方式可以做到容灾的效果,但是如果我们不通过如此重量级的工具也想达到容灾演练的目的
lixia0417mul2
·
2023-12-29 13:57
kafka
kafka
分布式
2020-03-09
需要注意:像
Kafka
和RocketMQ这样的消息队列,它是不保证在Topic上的严格顺序的,只能保证
zhchzh
·
2023-12-29 13:29
kafka
消费组下的消费者离开组
主要内容本文是从大型互联网系统的应用角度探讨分布式缓存的。本文站在原理、框架、架构、案例等多个视角对分布式缓存进行了探讨。互联网系统随着容量需求的陡增,许多看似简单的存储类场景都面临着巨大的容量问题和稳定性风险,而其中大部分问题都可以通过对缓存的合理使用来规避。读者从本文中将会获得应对这些问题的思路,也会对分布式缓存有一个体系化的认识。本文内容共分为三个部分,16章的内容,全文按照从理论到实现,再
上班划水小能手
·
2023-12-29 12:21
程序员
面试
后端
java
消息队列中间件的简述以及比较
文章目录引言一、RabbitMQ的简单介绍二、ActiveMQ的简单介绍三、RocketMQ的简单介绍四、
Kafka
的简单介绍五、各个中间件对比总结参考文档引言 上文简单讲述了何为消息队列和消息队列的特点
xiaodaidai丶
·
2023-12-29 08:21
中间件
消息队列
中间件
rabbitmq
java-activemq
java-rocketmq
kafka
kafka
相关面试题及答案
1、什么是
Kafka
,它主要用于什么场景?
Kafka
是一个分布式流处理平台,由LinkedIn开发并于2011年开源,目前是Apache软件基金会的一个顶级项目。
爬山算法
·
2023-12-29 07:25
kafka
分布式
Kafka
学习笔记1(千峰教育)
Kafka
学习笔记1(千峰教育)一、为什么使用消息队列1.使用同步的通信方式来解决多个服务之间的通信2.使用异步的通信方式二、消息队列的流派1.有broker2.无broker三、
Kafka
的基本知识1
该叫啥
·
2023-12-29 07:55
kafka
kafka
学习
笔记
「
Kafka
」生产者篇
「
Kafka
」生产者篇生产者发送消息流程在消息发送的过程中,涉及到了两个线程——main线程和Sender线程。在main线程中创建了一个双端队列RecordAccumulator。
小成同学_
·
2023-12-29 07:20
Kafka
kafka
java
后端
分布式
Kafka
优异的性能是如何实现的?
Apache
Kafka
是一个分布式流处理平台,设计用来处理高吞吐量的数据。它被广泛用于构建实时数据管道和流式应用程序。
KevinAha
·
2023-12-29 07:49
kafka
分布式
Kafka
可视化管理工具
kafka
-manager部署安装和使用-已更名为CMAK
一、
kafka
-manager简介为了简化开发者和服务工程师维护
Kafka
集群的工作,yahoo构建了一个叫做
Kafka
管理器的基于Web工具,叫做
Kafka
Manager。
吕文涛
·
2023-12-29 07:23
SparkStreaming与
Kafka
整合
1.3SparkStreaming与
Kafka
整合1.3.1整合简述
kafka
是做消息的缓存,数据和业务隔离操作的消息队列,而sparkstreaming是一款准实时流式计算框架,所以二者的整合,是大势所趋
Guff_hys
·
2023-12-29 06:55
linq
c#
spark
大数据
分布式
开发语言
kafka
【数据采集与预处理】数据接入工具
Kafka
目录一、
Kafka
简介(一)消息队列(二)什么是
Kafka
二、
Kafka
架构三、
Kafka
工作流程分析(一)
Kafka
核心组成(二)写入流程(三)Zookeeper存储结构(四)
Kafka
消费过程四、
Kafka
Francek Chen
·
2023-12-29 06:55
大数据技术基础
Spark编程基础
kafka
分布式
Spark
权威指南
(中文版)--第23章 生产环境中的结构化流
SparkTheDefinitiveGuide(Spark
权威指南
)中文版。本书详细介绍了Spark2.x版本的各个模块,目前市面上最好的Spark2.x学习书籍!!!
登峰大数据
·
2023-12-29 06:00
docker compose 部署 grafana + loki + vector 监控
kafka
消息
Centos7随笔记录记录dockercompose统一管理granfana+loki+vector监控
kafka
信息。
芝麻馅汤圆儿
·
2023-12-29 06:44
docker
java
eureka
SpringBoot 集成
Kafka
消息中间件,Docker安装
Kafka
环境
前述提供
kafka
、zooker在docker环境下进行安装的示例,springBoot集成
kafka
实现producer-生产者和consumer-消费者(监听消费:single模式和batch模式)
小诺大人
·
2023-12-29 05:21
springboot
mq消息中间件
spring
boot
kafka
docker
Kafka
概述 (3.x/2023)
一.
Kafka
定义1.
kafka
传统定义:
kafka
是一个分布式的基于发布/订阅模式的消息队列(MessageQueue),主要应用于大数据实时处理领域发布/订阅:消息的发布者不会将消息直接发给指定的订阅者
这货不是王马勺
·
2023-12-29 02:09
【头歌实训】
kafka
-入门篇
文章目录第1关:
kafka
-初体验任务描述相关知识
Kafka
简述
Kafka
应用场景
Kafka
架构组件
kafka
常用命令编程要求测试说明答案代码第2关:生产者(Producer)-简单模式任务描述相关知识
撕得失败的标签
·
2023-12-29 00:11
【头歌实训】
kafka
linq
分布式
头歌实训
消息中间件
文章目录1.消息不丢失2.消息重复消费3.死信交换机实现延时队列4.消息堆积问题5.rabbitMQ高可用机制6.
Kafka
是如何保证消息不丢失的7.消息的顺序消费8.
Kafka
高可用机制9.
kafka
ITfeib
·
2023-12-28 21:31
面试总结
消息中间件
私有部署ELK,搭建自己的日志中心(一)-- 概述
涉及到的组件有:filebeat
kafka
logstashelasticsearchkibana
kafka
ui以采集jvm日志为示例,采集对象不外乎是以下两种:虚拟机k8sPod容器市面上采集日志的技术层出不穷
天草二十六_简村人
·
2023-12-28 21:55
elk
云原生
java
logback
企业级ELK-架构与部署(二)亲测可用!
废话不多说,直接上干货——ELK中的logstash、
kafka
与filebeat的部署。实战搭建环境与各主机角色说明。
睿江云计算
·
2023-12-28 21:20
ELK
程序人生
开发工具
架构
大数据处理各组件概念及作用
一、数据采集:1.1Flume集群:数据采集工具,如写脚本将不同源端的数据采集后进行数据存储,或推送至
Kafka
等;1.2FTP集群:文件传输工具;1.3
Kafka
集群:消息队列,未避免消息堵塞而将消息由
p1i2n3g4
·
2023-12-28 17:11
大数据
kafka
分布式
大数据
阿里中间件团队4面真题(60W):线程锁+分布式锁+
Kafka
等
Java中间件一面技术一面考察范围:重点问了Java线程锁:synchronized和ReentrantLock相关的底层实现线程池的底层实现以及常见的参数数据结构基本都问了一遍:链表、队列等Java内存模型:常问的JVM分代模型,以及JDK1.8后的区别,最后还问了JVM相关的调优参数分布式锁的实现比较技术一面题目:1:自我介绍2:擅长哪方面的技术?3;java有哪些锁中类?(乐观锁&悲观锁、可
AI乔治
·
2023-12-28 17:53
日志分析平台的架构方案
2.数据传输层:-使用消息队列(如
Kafka
、RabbitMQ)
Angel
·
2023-12-28 15:51
日志
架构
kafka
基础知识总结
一、
Kafka
的基础1、什么是
kafka
?
Kafka
是一个由Apache软件基金会开发的分布式流处理平台。它最初是为LinkedIn设计的,用于处理大规模的实时日志数据流。
计算衎
·
2023-12-28 13:09
消息队列
kafka
分布式
关于netty
kafka
hdfs hbase性能调研记录
1.netty调研记录项目中准备用netty框架来实现socket接口,对于netty的性能做了个初步调研,大致过程如下:1.1调用socket接口的客户端为了让客户端快速发送数据,我们已经提前将需要传输的数据通过java的ObjectInputStream写数据到了一个文件,主要是节省客户端接口的编码,然后让客户端不断循环发送数据一段时间(比如20分钟,时间是可以指定),客户端代码如下:impo
aperise
·
2023-12-28 13:09
学习总结
netty
kafka
hadoop
netty
kafka
hdfs
hbase
调研
速度
SpringBoot学习笔记-集成其他组件框架记录
动手写了一些测试示例,集成了一些常用的组件框架Mybatis、Redis、Rabbitmq、
Kafka
、Quartz、Swagger、ElasticSearch、OAuth、SMS、InstantMessaging
人生偌只如初见
·
2023-12-28 12:09
J2EE
Spring
Boot
Spring
Cloud
内网离线搭建之----
kafka
-manager集群监控
工具介绍:为了简化开发者和服务工程师维护
Kafka
集群的工作,yahoo构建了一个叫做
Kafka
管理器的基于Web工具,叫做
Kafka
Manager。
落世繁华
·
2023-12-28 12:08
kafka
数据库
分布式
kafka-manager
CMAK
「
Kafka
」入门篇
「
Kafka
」入门篇基础架构
Kafka
快速入门集群规划集群部署官方下载地址:http://
kafka
.apache.org/downloads.html解压安装包:[atguigu@hadoop102software
小成同学_
·
2023-12-28 12:30
Kafka
kafka
中间件
分布式
后端
Kafka
Kafka
Kafka
概念
Kafka
是一种高吞吐量、分布式、基于发布/订阅的消息系统,最初由LinkedIn公司开发,使用Scala语言编写,目前是Apache的开源项目。
武昌库里写JAVA
·
2023-12-28 11:29
高手面试
kafka
分布式
【头歌实训】PySpark Streaming 数据源
文章目录第1关:MySQL数据源任务描述相关知识PySparkJDBC概述PySparkJDBCPySparkStreamingJDBC编程要求测试说明答案代码第2关:
Kafka
数据源任务描述相关知识
Kafka
撕得失败的标签
·
2023-12-28 11:24
【头歌实训】
pyspark
streaming
Kafka
mysql
kafka
头歌实训
智能化运维学习笔记【2】
第四章、分布式消息队列4.1开源消息队列对比与分析目前市面上存在ZeroMQActiveMQRockeMQ
Kafka
等消息中间件,本人在工作中接触到比较多的是ActiveMQ和
Kafka
。
运维仙人
·
2023-12-28 10:23
运维
运维
大数据
kafka
自定义分区实战
本文来说下
kafka
自定义分区相关的知识与内容,同时说下springboot整合
kafka
如何来实现自定义分区文章目录
Kafka
如何实现分区
Kafka
集群是如何知道投递到哪个broker中默认分区策略
Kafka
wh柒八九
·
2023-12-28 10:12
核心知识点
消息队列kafka
分布式
kafka
spring
boot
SpringBoot整合
kafka
实战之带回调的生产者
本文来说下SpringBoot整合
kafka
部分知识内容文章目录带回调的生产者方式一方式二本文小结带回调的生产者前面我们说了简单的生产和消费,本文说下带回调的生产者。
wh柒八九
·
2023-12-28 10:42
核心知识点
消息队列kafka
分布式
kafka
在Windows安装运行
Kafka
本文来说下如何在Windows安装运行
Kafka
。因为
kafka
的运行需要依赖zookeeper,而zookeeper又要依赖jdk。
wh柒八九
·
2023-12-28 10:41
核心知识点
消息队列kafka
分布式
kafka
Kafka
会不会重复消费
本文来说下
kafka
会不会重复消费的问题。在单体架构时代,就存在着接口幂等性的问题,只不过到了分布式、高并发的场景之后,接口幂等性的问题会更加明显。
wh柒八九
·
2023-12-28 10:11
核心知识点
消息队列kafka
kafka
Kafka
的高性能原理
本文来说下
Kafka
的高性能设计文章目录什么是高性能设计
Kafka
高性能设计的全景图生产消息的性能优化手段批量发送消息消息压缩高效序列化内存池复用存储消息的性能优化手段IO多路复用.磁盘顺序写PageCache
wh柒八九
·
2023-12-28 10:11
核心知识点
消息队列kafka
kafka
分布式
kafka
是如何解决粘包拆包的
本文来说下
kafka
是如何解决粘包拆包的文章目录概述kakfa是如何解决粘包拆包问题的呢本文小结概述前面笔者写了一篇文章一文讲清粘包拆包全面的讲解了TCP粘包拆包相关的问题。
wh柒八九
·
2023-12-28 10:41
核心知识点
消息队列kafka
kafka
分布式
上一页
29
30
31
32
33
34
35
36
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他