E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
消息中间件--Kafka
java解析mqtt_Java 编程(MQTT 实战)
一、主题说明MQTT是和HTTP同级别的一种应用层协议,主要应用在IoT物联网的数据通讯架构中并且可以结合Kafaka等三方
消息中间件
进行使用,它可以极少的网络带宽、低配的硬件实现远程设备相对可靠的消息服务
淡慢若水
·
2023-12-28 21:24
java解析mqtt
企业级ELK-架构与部署(二)亲测可用!
废话不多说,直接上干货——ELK中的logstash、
kafka
与filebeat的部署。实战搭建环境与各主机角色说明。
睿江云计算
·
2023-12-28 21:20
ELK
程序人生
开发工具
架构
大数据处理各组件概念及作用
一、数据采集:1.1Flume集群:数据采集工具,如写脚本将不同源端的数据采集后进行数据存储,或推送至
Kafka
等;1.2FTP集群:文件传输工具;1.3
Kafka
集群:消息队列,未避免消息堵塞而将消息由
p1i2n3g4
·
2023-12-28 17:11
大数据
kafka
分布式
大数据
阿里中间件团队4面真题(60W):线程锁+分布式锁+
Kafka
等
Java中间件一面技术一面考察范围:重点问了Java线程锁:synchronized和ReentrantLock相关的底层实现线程池的底层实现以及常见的参数数据结构基本都问了一遍:链表、队列等Java内存模型:常问的JVM分代模型,以及JDK1.8后的区别,最后还问了JVM相关的调优参数分布式锁的实现比较技术一面题目:1:自我介绍2:擅长哪方面的技术?3;java有哪些锁中类?(乐观锁&悲观锁、可
AI乔治
·
2023-12-28 17:53
【SpringCloud笔记】(11)消息驱动之Stream
Stream技术背景底层不同模块可能使用不同的
消息中间件
,这就导致技术的切换,微服务的维护及开发变得麻烦起来概述官网:https://spring.io/projects/spring-cloud-stream
三介只鹤
·
2023-12-28 16:33
SpringCloud
spring
cloud
spring
日志分析平台的架构方案
2.数据传输层:-使用消息队列(如
Kafka
、RabbitMQ)
Angel
·
2023-12-28 15:51
日志
架构
kafka
基础知识总结
一、
Kafka
的基础1、什么是
kafka
?
Kafka
是一个由Apache软件基金会开发的分布式流处理平台。它最初是为LinkedIn设计的,用于处理大规模的实时日志数据流。
计算衎
·
2023-12-28 13:09
消息队列
kafka
分布式
关于netty
kafka
hdfs hbase性能调研记录
1.netty调研记录项目中准备用netty框架来实现socket接口,对于netty的性能做了个初步调研,大致过程如下:1.1调用socket接口的客户端为了让客户端快速发送数据,我们已经提前将需要传输的数据通过java的ObjectInputStream写数据到了一个文件,主要是节省客户端接口的编码,然后让客户端不断循环发送数据一段时间(比如20分钟,时间是可以指定),客户端代码如下:impo
aperise
·
2023-12-28 13:09
学习总结
netty
kafka
hadoop
netty
kafka
hdfs
hbase
调研
速度
SpringBoot学习笔记-集成其他组件框架记录
动手写了一些测试示例,集成了一些常用的组件框架Mybatis、Redis、Rabbitmq、
Kafka
、Quartz、Swagger、ElasticSearch、OAuth、SMS、InstantMessaging
人生偌只如初见
·
2023-12-28 12:09
J2EE
Spring
Boot
Spring
Cloud
内网离线搭建之----
kafka
-manager集群监控
工具介绍:为了简化开发者和服务工程师维护
Kafka
集群的工作,yahoo构建了一个叫做
Kafka
管理器的基于Web工具,叫做
Kafka
Manager。
落世繁华
·
2023-12-28 12:08
kafka
数据库
分布式
kafka-manager
CMAK
「
Kafka
」入门篇
「
Kafka
」入门篇基础架构
Kafka
快速入门集群规划集群部署官方下载地址:http://
kafka
.apache.org/downloads.html解压安装包:[atguigu@hadoop102software
小成同学_
·
2023-12-28 12:30
Kafka
kafka
中间件
分布式
后端
Kafka
Kafka
Kafka
概念
Kafka
是一种高吞吐量、分布式、基于发布/订阅的消息系统,最初由LinkedIn公司开发,使用Scala语言编写,目前是Apache的开源项目。
武昌库里写JAVA
·
2023-12-28 11:29
高手面试
kafka
分布式
数据实时增量同步工具Maxwell与Canal详解
核心思想是,监测并捕获数据库的变动(包括数据或数据表的插入、更新以及删除等),将这些变更按发生的顺序完整记录下来,写入到
消息中间件
中以供其他服务进行订阅及消费。
wespten
·
2023-12-28 11:20
Hadoop
Hive
Spark
大数据安全
数据库
【头歌实训】PySpark Streaming 数据源
文章目录第1关:MySQL数据源任务描述相关知识PySparkJDBC概述PySparkJDBCPySparkStreamingJDBC编程要求测试说明答案代码第2关:
Kafka
数据源任务描述相关知识
Kafka
撕得失败的标签
·
2023-12-28 11:24
【头歌实训】
pyspark
streaming
Kafka
mysql
kafka
头歌实训
智能化运维学习笔记【2】
第四章、分布式消息队列4.1开源消息队列对比与分析目前市面上存在ZeroMQActiveMQRockeMQ
Kafka
等
消息中间件
,本人在工作中接触到比较多的是ActiveMQ和
Kafka
。
运维仙人
·
2023-12-28 10:23
运维
运维
大数据
kafka
自定义分区实战
本文来说下
kafka
自定义分区相关的知识与内容,同时说下springboot整合
kafka
如何来实现自定义分区文章目录
Kafka
如何实现分区
Kafka
集群是如何知道投递到哪个broker中默认分区策略
Kafka
wh柒八九
·
2023-12-28 10:12
核心知识点
消息队列kafka
分布式
kafka
spring
boot
SpringBoot整合
kafka
实战之带回调的生产者
本文来说下SpringBoot整合
kafka
部分知识内容文章目录带回调的生产者方式一方式二本文小结带回调的生产者前面我们说了简单的生产和消费,本文说下带回调的生产者。
wh柒八九
·
2023-12-28 10:42
核心知识点
消息队列kafka
分布式
kafka
在Windows安装运行
Kafka
本文来说下如何在Windows安装运行
Kafka
。因为
kafka
的运行需要依赖zookeeper,而zookeeper又要依赖jdk。
wh柒八九
·
2023-12-28 10:41
核心知识点
消息队列kafka
分布式
kafka
Kafka
会不会重复消费
本文来说下
kafka
会不会重复消费的问题。在单体架构时代,就存在着接口幂等性的问题,只不过到了分布式、高并发的场景之后,接口幂等性的问题会更加明显。
wh柒八九
·
2023-12-28 10:11
核心知识点
消息队列kafka
kafka
Kafka
的高性能原理
本文来说下
Kafka
的高性能设计文章目录什么是高性能设计
Kafka
高性能设计的全景图生产消息的性能优化手段批量发送消息消息压缩高效序列化内存池复用存储消息的性能优化手段IO多路复用.磁盘顺序写PageCache
wh柒八九
·
2023-12-28 10:11
核心知识点
消息队列kafka
kafka
分布式
kafka
是如何解决粘包拆包的
本文来说下
kafka
是如何解决粘包拆包的文章目录概述kakfa是如何解决粘包拆包问题的呢本文小结概述前面笔者写了一篇文章一文讲清粘包拆包全面的讲解了TCP粘包拆包相关的问题。
wh柒八九
·
2023-12-28 10:41
核心知识点
消息队列kafka
kafka
分布式
MQ设计思想分析
对于MQ来说,不管是RocketMQ、
Kafka
还是其他消息队列,它们的本质都是:一发一存一消费。下面我们以这个本质作为根,一起由浅入深地聊聊MQ。
wh柒八九
·
2023-12-28 10:40
消息队列kafka
核心知识点
java
spring
后端
RabbitMQ 和
Kafka
对比
本文对RabbitMQ和
Kafka
进行下比较文章目录前言RabbitMQ架构队列消费队列生产
Kafka
本文小结前言开源社区有好多优秀的队列中间件,比如RabbitMQ和
Kafka
,每个队列都貌似有其特性
wh柒八九
·
2023-12-28 10:04
RabbitMQ
消息队列kafka
rabbitmq
kafka
分布式
四、微服务技术栈有哪些
Consul、Zookeeper等服务调用Rest、RPC、gRPC服务熔断器Hystrix、Envoy等负载均衡Ribbon、Nginx等服务接口调用(客户端调用服务的简化工具)Feign等消息队列
Kafka
菜小六
·
2023-12-28 08:34
从源码全面解析Java 线程池的来龙去脉
作者简介:大家好,我是爱敲代码的小黄,独角兽企业的Java开发工程师,CSDN博客专家,阿里云专家博主系列专栏:Java设计模式、Spring源码系列、Netty源码系列、
Kafka
源码系列、JUC源码系列如果感觉博主的文章还不错的话
爱敲代码的小黄
·
2023-12-28 08:56
#
高并发
java
面试
开发语言
后端
并发
支付系统高可用架构设计,写得太好了!(建议收藏)
每天14:00更新文章,每天掉亿点点头发...源码精品专栏原创|Java2021超神之路,很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析
消息中间件
RocketMQ
Java基基
·
2023-12-28 04:28
java
java-rabbitmq
rabbitmq
开发语言
分布式
Kafka
为什么要有
Kafka
?
_Levi__
·
2023-12-28 04:14
面试官:说说进程间通信和线程间通信的几种方式及区别
每天14:00更新文章,每天掉亿点点头发...源码精品专栏原创|Java2021超神之路,很肝~中文详细注释的开源项目RPC框架Dubbo源码解析网络应用框架Netty源码解析
消息中间件
RocketMQ
Java基基
·
2023-12-28 03:36
中间件
队列
java
多线程
操作系统
面试官:说说进程和线程的区别
最近整理了一份大厂面试资料《史上最全大厂面试题》,Springboot、微服务、算法、数据结构、Zookeeper、Mybatis、Dubbo、linux、
Kafka
、Elasticsearch、数据库等等获取方式
飞乐鸟
·
2023-12-28 03:05
面试干货
java
kafka
高吞吐量的原因
kafa吞吐量高的原因顺序读写
kafka
的消息是不断追加到文件中的,这个特性使
kafka
可以充分利用磁盘的顺序读写性能顺序读写不需要硬盘磁头的寻道时间,只需很少的扇区旋转时间,所以速度远快于随机读写零拷贝在
香港十大金曲
·
2023-12-27 23:59
RocketMQ阅读笔记之路由中心NameServer
为什么会有NameServer
消息中间件
一般基于主题的订阅发布机制,消息生产者会发送某一主体(Topic)的消息到消息服务器(Broker),消息服务器负责该消息的持久化存储,消息消费者订阅感兴趣的主题
九点半的马拉
·
2023-12-27 21:36
聊聊
Kafka
: 在 Linux 环境上搭建
Kafka
1CseCg3k56uE_tLTF4ckEBw,提取码:gw76zookeeper下载地址链接:https://pan.baidu.com/s/1zVc6Z-QqrIrn_FCvQ1s6wA,提取码:a196
kafka
谁叫我土豆了
·
2023-12-27 19:37
Spring Boot学习(三十三):集成
kafka
前言下面是zookeeper和
kafka
的官网下载地址,大家可以学习下载zookeeper下载地址:http://zookeeper.apache.org/releases.html
kafka
下载地址:
way_more
·
2023-12-27 17:03
springboot
spring
boot
kafka
java
后端
spring
cloud
Debezium发布历史30
原文地址:https://debezium.io/blog/2018/03/08/creating-ddd-aggregates-with-debezium-and-
kafka
-streams/欢迎关注留言
大大蚊子
·
2023-12-27 17:55
CDC
FlinkCDC
debezium
数据库
运维
大数据
安装
kafka
静态文件安装(单机)解压到指定目录(解压到/usr)tar-zxf
kafka
_2.11-2.2.0.tgz-C/usr/到指定的解压目录下cd/usr/
kafka
_2.11-2.2.0/配置主机名查看是否配置了
跨海之梦
·
2023-12-27 17:41
kafka
运维开发
Redis布隆过滤器BloomFilter
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring源码、JUC源码、
Kafka
原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2023-12-27 16:30
数据库技术
redis
数据库
缓存
Redis案例实战之Bitmap、Hyperloglog、GEO
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring源码、JUC源码、
Kafka
原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2023-12-27 16:00
数据库技术
redis
数据库
缓存
九个问答牢记RocketMQ架构
RocketMQ是Java兄弟们常用的
消息中间件
,虽说常用,但对于RocketMQ架构经常忘记。究其原因就2点:忙于业务开发然后长时间不看则忘了、不理解架构设计的根本原因记不牢。
胖头鱼不吃鱼-
·
2023-12-27 16:28
rocketmq
架构
关于Redis面试题
这是一个开源的在内存中的数据结构存储系统,可以用作数据库、缓存、
消息中间件
。应用场景在统计方面的场景有哪些基本数据类型?有哪些底层数据结构?sorteds
微风至夏
·
2023-12-27 16:37
面试整理专栏
redis
数据库
缓存
面试
docker部署
kafka
zookeeper模式集群
单机模式链接:https://blog.csdn.net/wsdhla/article/details/133032238kraft集群模式链接:部署
Kafka
_
kafka
部署-CSDN博客zookeeper
wsdhla
·
2023-12-27 14:36
docker
kafka
zookeeper
【
Kafka
中的leader选举】
文章目录Kafak集群中leader选举一、
Kafka
介绍1.
Kafka
的使用场景2.
Kafka
基本概念二.
Kafka
安装教程三.
Kafka
集群中leader节点的选举机制broker的leader
Kafka
你有按下913的勇气吗
·
2023-12-27 14:25
kafka
分布式
【
kafka
消息里会有乱序消费的情况吗?如果有,是怎么解决的?】
顺序生产,顺序存储,顺序消费如何解决乱序数据库乐观锁是怎么解决这个乱序问题吗保证消息顺序消费两种方案固定分区方案乐观锁实现方案前几天刷着视频看见评论区有大佬问了这个问题:你们的
kafka
消息里会有乱序消费的情况吗
你有按下913的勇气吗
·
2023-12-27 14:21
kafka
分布式
实战指南:使用 Spring Cloud Stream 集成
Kafka
构建高效消息驱动微服务
实战指南:使用SpringCloudStream集成
Kafka
构建高效消息驱动微服务视频地址:Stream为什么被引入-尚硅谷SCS-1-内容介绍-图灵诸葛官方文档:SpringCloudStream什么是
沉梦听雨.
·
2023-12-27 11:01
微服务生态
kafka
微服务
分布式
Java八股文面试全套真题【含答案】- RocketMQ篇
RocketMQ是一个开源的分布式
消息中间件
系统,具有高吞吐量、低延迟、可靠性强等特点。特点和优势:高吞吐量:支持每秒百万级别的消息处理能力。低延迟:提供毫秒级的消息传递延迟,适用于需要实时性的场景。
动力节点IT教育
·
2023-12-27 10:21
Java八股文面试题全套
java-rocketmq
java
面试
五分钟,Docker安装flink,并使用flinksql消费
kafka
数据
1、拉取flink镜像,创建网络dockerpullflinkdockernetworkcreateflink-network2、创建jobmanager#创建JobManagerdockerrun\-itd\--name=jobmanager\--publish8081:8081\--networkflink-network\--envFLINK_PROPERTIES="jobmanager.r
刘金宝_Arvin
·
2023-12-27 10:52
Docker
大数据
docker
flink
kafka
Python生产、消费
Kafka
如果想通过docker安装
kafka
,可参考Docker安装
Kafka
生产者importjsonimporttimeimporttracebackfromdatetimeimportdatetimefrom
kafka
import
Kafka
Producerfrom
kafka
.errorsimport
kafka
_errorsproducer
刘金宝_Arvin
·
2023-12-27 10:22
Python
python
kafka
开发语言
【
消息中间件
】Rabbitmq消息可靠性、持久化机制、各种消费
原文作者:我辈李想版权声明:文章原创,转载时请务必加上原文超链接、作者信息和本声明。文章目录前言常见用法1.消息可靠性2.持久化机制3.消息积压批量消费:增加prefetch的数量,提高单次连接的消息数并发消费:多部署几台消费者实例4.重复消费二、其他1.队列存在大量unacked数据前言常见用法1.消息可靠性RabbitMQ提供了多种机制来确保消息的可靠性,以防止消息丢失或被意外删除。以下是几种
我辈李想
·
2023-12-27 09:17
Python全家桶
rabbitmq
python
CentOS7 安装
kafka
3.0.0
文章目录前言一、安装JDK二、安装
Kafka
1、wget下载2、解压3、修改配置文件4、
kafka
配置文件详解三、启动
kafka
&停止启动1、先启动zk2、再启动
kafka
停止1、先停止
kafka
2、再停止
lfwh
·
2023-12-27 08:52
Centos7
Kafka
kafka
分布式
centos7安装
Kafka
Eagle
文章目录前言一、
kafka
-eagle功能介绍二、环境和安装1、安装JDK1.82、启动zk和
kafka
的服务3、wget下载安装包4、解压5、设置环境变量6、创建数据库7、修改配置文件三、测试1、启动
lfwh
·
2023-12-27 08:52
Kafka
kafka
centos
给卡夫卡——囚徒核桃的双脚(译)——海子
To
Kafka
–thewalnut-likefeetoftheprisoner在冬天放火的囚徒无疑非常需要温暖这是亲如母亲的火光当他被身后的几十根玉米砸倒在地,这无疑又是富农的田地TheprisonercommittingarsoninthewinterNeededwarmthundoubtedlyTheflamewereasamiableashismotherWhilebeinghitdownb
嗨嗐
·
2023-12-27 08:04
上一页
33
34
35
36
37
38
39
40
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他