E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
#kafka压测
kafka
-JVM采集器安装
Kafka
采集器安装说明①下载安装采集器下载采集器,并上传至服务器https://github.com/prometheus/jmx_exporter
kafka
_jmx_exporter.tar.gz②
长空~
·
2024-01-28 07:27
采集器
kafka
jvm
分布式
Zookeeper+
Kafka
+Log4j日志采集与管理系统
1、Zookeeper+
Kafka
+Log4j-日志采集与管理随着系统规模变大和复杂度上升,我们的日志管理变得复杂,一个完整的系统通常会有几十上百个节点。
ff&yy
·
2024-01-28 06:28
Zookeeper+Kafka
中间件
zookeeper
kafka
MQ面试题之
Kafka
本人毕业到现在使用的都是公司内部产品,对于通用产品无实际经验,但是各种消息中间件大差不差,故而本次选择一个相对较熟悉的
Kafka
进行详细介绍。
for62
·
2024-01-28 05:39
面试合集
kafka
分布式
ES面试题合集
前言前文介绍了消息中间件之
Kafka
,我们的知识体系逐渐丰满。本文将继续深入,介绍搜索引擎ES。ES面试题合集Elasticsearch有哪些特性?
for62
·
2024-01-28 05:09
面试合集
elasticsearch
搜索引擎
快乐的使用jmeter做
压测
六、生成
压测
报告
在之前的快乐的使用jmeter做
压测
二、如何开始压力测试文章中我们提到了在结果树中保存测试结果文件*.jtl文件。
cleanup123
·
2024-01-28 03:18
当jmeter
压测
3分钟18000时,有部分504错误
这部分504错误的场景是:1.程序在处理大量数据。2.程序中调用外部请求且超时会递归调用3次。这个地方的递归调用不能忽略return,否则后面两次白调了然后在抛异常,不会把第二次或者第三次调用成功的结果返回。jmeter中有20个504,这20个线程其实是抛了异常的。因为nginx的超时为6S而线程处理的时间超过了6S,所以nginx不等返回直接抛504
shuffle_
·
2024-01-28 02:16
java 分布式 日志方案_ELK +
kafka
分布式日志解决方案
本文介绍使用ELK(elasticsearch、logstash、kibana)+
kafka
来搭建一个日志系统。
kimi无悔-618
·
2024-01-28 02:37
java
分布式
日志方案
Kafka
的安装部署、基本操作、集群环境
1、
Kafka
的安装部署下载
kafka
kafka
_2.11-2.0.0.tgz安装过程安装过程非常简单,只需要解压就行,因为这个是编译好之后的可执行程序tar-zxvf
kafka
_2.11-2.0.0.
有梦想的虫子_2018
·
2024-01-28 01:46
马斯克眼中的星舰,就是变形金刚
●B3经受洗礼来自星舰基地的最新动态:SpaceX测试团队正准备对超重型火箭B3进行低温加
压测
试,原计划赶在当地时间周六之前。结果因故推迟到下周。B3(原BN3)是第一枚可用于地面测试的全尺
三体引力波
·
2024-01-27 23:08
JVM系列-9.性能调优
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring原理、JUC原理、
Kafka
原理、分布式技术原理、数据库技术、JVM原理如果感觉博主的文章还不错的话
爱吃芝士的土豆倪
·
2024-01-27 21:19
JVM
jvm
java
开发语言
对于mysql,redis,
Kafka
,zookeeper磁盘缓存技术使用分析
对于mysql,redis,
Kafka
,zookeeper磁盘缓存技术使用分析大部分组件是基于磁盘存储的,但由于CPU速度和磁盘速度之间的鸿沟,都会使用缓存技术来提高性能,缓存简单来说就是一块内存区域,
魏春雨
·
2024-01-27 21:07
MQ消息队列主流消息服务规范及代表产品
市面上消息队列的种类繁多,我们经常在做技术选型的时候,就会搜“RabbitMQ/RocketMQ/
Kafka
…的区别”这样的字眼,为了就是更好地选型,结合业务需求以及消息队列的性能、功能特性、设计规范来综合考虑
c_zyer
·
2024-01-27 18:13
消息队列
中间件
中间件
【代码随想录-数组】移除元素
推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,
kafka
,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂
·
2024-01-27 18:08
s6
算法与数据结构
java
SpringBoot activemq收发消息、配置及原理
与Springframework相比,SpringBoot更近了一步,通过auto-configuration机制实现了对jms及amqp主流框架如ActiveMQ、RabbitMQ以及
Kafka
的自动配置
weixin_44612246
·
2024-01-27 17:16
java-activemq
spring
boot
activemq
Kafka
-4.1-工作原理综述
1
Kafka
工作原理详解1.1工作流程
Kafka
集群将Record流存储在称为Topic的类中,每个记录由⼀个键、⼀个值和⼀个时间戳组成。
江中散人
·
2024-01-27 16:47
云原生进阶-PaaS专栏
kafka
云原生
paas
中间件
架构
【云原生进阶之PaaS中间件】第三章
Kafka
-2-安装部署
1安装部署1.1
kafka
的分布式
kafka
是依靠zookeeper来实现分布式的,所以再启动前需要先启动zookeeper,如下图1.2集群部署官方下载地址:Apache
Kafka
(1)安装和Hadoop
江中散人
·
2024-01-27 16:16
云原生进阶-PaaS专栏
云原生
paas
中间件
kafka
zookeeper
【云原生进阶之PaaS中间件】第三章
Kafka
-3-命令操作
1命令操作1.1主题命令操作查看操作主题命令参数:[atguigu@hadoop102
kafka
]$bin/
kafka
-topics.sh参数描述--bootstrap-server,连接的
Kafka
Broker
江中散人
·
2024-01-27 16:16
云原生进阶-PaaS专栏
云原生
paas
中间件
Kafka
消息队列
【Spring连载】使用Spring访问 Apache
Kafka
(十六)----空payload和‘Tombstone‘记录的日志压缩
【Spring连载】使用Spring访问Apache
Kafka
(十六)----空payload和'Tombstone'记录的LogCompaction当你使用LogCompaction时,你可以发送和接收具有空
85程序员老王
·
2024-01-27 16:26
spring
apache
kafka
【Spring连载】使用Spring访问 Apache
Kafka
(十七)----处理异常
【Spring连载】使用Spring访问Apache
Kafka
(十七)----处理异常HandlingExceptions一、监听器错误处理程序ListenerErrorHandlers二、容器错误处理程序
85程序员老王
·
2024-01-27 16:26
spring
kafka
java
【Spring连载】使用Spring访问 Apache
Kafka
(十八)----非阻塞重试
【Spring连载】使用Spring访问Apache
Kafka
(十八)----非阻塞重试Non-BlockingRetries一、HowThePatternWorks二、BackOffDelayPrecision
85程序员老王
·
2024-01-27 16:26
spring
kafka
数据库
【Spring连载】使用Spring访问 Apache
Kafka
(十)----监控
【Spring连载】使用Spring访问Apache
Kafka
(十)----监控Monitoring一、监控监听器性能MonitoringListenerPerformance二、监控
Kafka
Template
85程序员老王
·
2024-01-27 16:56
spring
apache
kafka
【Spring连载】使用Spring访问 Apache
Kafka
(十一)----事务
【Spring连载】使用Spring访问Apache
Kafka
(十一)----事务Transactions一、概览二、使用
Kafka
TransactionManager三、事务同步TransactionSynchronization
85程序员老王
·
2024-01-27 16:56
spring
apache
kafka
【Spring连载】使用Spring访问 Apache
Kafka
(六)----应用程序事件
【Spring连载】使用Spring访问Apache
Kafka
(六)----应用程序事件ApplicationEvents一、检测空闲和无响应的Consumers二、事件消费EventConsumption
85程序员老王
·
2024-01-27 16:55
spring
kafka
java
【Spring连载】使用Spring访问 Apache
Kafka
(七)----Topic/Partition初始偏移量&定位到特定的偏移量
【Spring连载】使用Spring访问Apache
Kafka
(七)----Topic/Partition初始偏移量&定位到特定的偏移量一、Topic/Partition的初始偏移量InitialOffset
85程序员老王
·
2024-01-27 16:55
spring
kafka
java
【Spring连载】使用Spring访问 Apache
Kafka
(三)----接收消息
【Spring连载】使用Spring访问Apache
Kafka
(三)----接收消息一、消息监听器MessageListeners二、消息监听器容器MessageListenerContainers2.1
85程序员老王
·
2024-01-27 16:25
spring
apache
kafka
【Spring连载】使用Spring访问 Apache
Kafka
(十五)----消息头
【Spring连载】使用Spring访问Apache
Kafka
(十五)----消息头MessageHeadersApache
Kafka
client中提供了对消息中headers的支持。
85程序员老王
·
2024-01-27 16:53
spring
apache
kafka
flume+
kafka
+SparkStreaming+mysql+ssm+高德地图热力图项目
第一步、编写python脚本,产生模拟数据#coding=UTF-8importrandomimporttimephone=["13869555210","18542360152","15422556663","18852487210","13993584664","18754366522","15222436542","13369568452","13893556666","1536669855
printf200
·
2024-01-27 12:24
Kafka
面试题
0.思维导图
Kafka
是一个分布式的基于发布/订阅模式的消息队列,主要用于大数据实时处理邻域 消息队列分为点对点模式(消费者主动拉取数据,消息收到后清除消息)和发布订阅模式(消费者消费数据之后,不删除数据
韩顺平的小迷弟
·
2024-01-27 10:33
大数据面试题
kafka
分布式
kafka
summary
最近整体梳理之前用到的一些东西,回顾
Kafka
的时候好多东西都忘记了,把一些自己记的比较模糊并且感觉有用的东西整理一遍并且记忆一遍,仅用于记录以备后续回顾
Kafka
的哪些场景中使用了零拷贝生产者发送消息
会说话的皮卡丘
·
2024-01-27 09:22
kafka
分布式
电商系统设计到开发03 引入
Kafka
异步削峰
一、前言系统设计:电商系统设计到开发01第一版设计到编码-CSDN博客接着上篇文章:电商系统设计到开发02单机性能
压测
-CSDN博客本篇为大制作,内容有点多,也比较干货,希望可以耐心看看已经开发的代码,
风萧萧兮s
·
2024-01-27 09:15
电商下单并发研究
kafka
分布式
java
easy-upsert-starter 轻量级数据转换存储服务-MySQL使用(二)
easy-upsert-starter轻量级数据转换存储服务简介:针对轻量级数据(单次包数据量10万)处理,提供数据转移存储到MySQL、
Kafka
、ES、HBase、Redis配置相应的数据源,注入IUpser
还在忙碌的吴小二
·
2024-01-27 09:46
SpringBoot
MySQL
mysql
java
全链路
压测
:提升业务可靠性和可用性
全链路
压测
是一种全面评估系统性能和稳定性的测试方法,通过模拟真实用户场景和流程来验证整个应用系统在高负载情况下的表现。
掌动智能
·
2024-01-27 09:31
运维
服务器
nginx
Kafka
-服务端-PartitionStateMachine
PartitionStateMachine是ControllerLeader用于维护分区状态的状态机。分区的状态是通过PartitionState接口定义的,它有四个子类分别代表了分区四种可能的状态,如表所示。分区各个PartitionState之间的转换如图所示。下面分析各个状态之间转换时,需要完成的相关操作。NonExistentPartition→NewPartition从ZooKeeper
Andy技术支援
·
2024-01-27 08:53
队列
kafka
debian
分布式
知识库-
kafka
shell脚本用法
脚本名称用途描述connect-distributed.sh连接
kafka
集群模式connect-standalone.sh连接
kafka
单机模式
kafka
-acls.shtodo
kafka
-broker-api-versions.shtodo
kafka
-configs.sh
知秋ing
·
2024-01-27 08:52
kafka从入门到精通
kafka
分布式
shell脚本--
kafka
生产数据
直接上代码
kafka
参数修改成自己的配置。#!
手提青灯觅佳人
·
2024-01-27 08:52
大数据通用
shell
kafka
Kafka
zookeeper-shell.sh
bin/zookeeper-shell.sh作用是连接zookeeper,并通过命令查询注册的信息,本质上就是zookeeper的语法。bin/zookeeper-shell.shzookeeper_host:port[/path][args…]args参数类型如下statpath[watch]setpathdata[version]lspath[watch]delquota[-n|-b]path
云川之下
·
2024-01-27 08:18
kafka
kafka
【shell-10】shell实现的各种
kafka
脚本
kafka
-shell工具背景日志log一.启动
kafka
->(start-
kafka
)二.停止
kafka
->(stop-
kafka
)三.创建topic->(create-topic)四.删除topic
我先森
·
2024-01-27 08:41
shell
kafka
kafka
linq
分布式
Flink生产环境相关问题
1.Flink+
Kafka
保证精确一次消费相关问题?Fink的检查点和恢复机制和可以重置读位置的source连接器结合使用,比如
kafka
,可以保证应用程序不会丢失数据。
大数据左右手
·
2024-01-27 08:09
Flink
面试
flink
JVM系列-8.GC调优
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring原理、JUC原理、
Kafka
原理、分布式技术原理、数据库技术、JVM原理如果感觉博主的文章还不错的话
爱吃芝士的土豆倪
·
2024-01-27 08:06
JVM
jvm
java
开发语言
JVM系列-7内存调优
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring原理、JUC原理、
Kafka
原理、分布式技术原理、数据库技术、JVM原理如果感觉博主的文章还不错的话
爱吃芝士的土豆倪
·
2024-01-27 08:32
JVM
jvm
java
开发语言
0806-
Kafka
异地复制
Kafka
异地同步:Mirror-Maker(消费者+生产者)原理大概是启动consumer消费南京的topicmessage,发送到重庆的
kafka
集群。
红苹果_小米粒
·
2024-01-27 08:04
大数据平台红蓝对抗 - 磨利刃,淬精兵!
背景目前大促备战常见备战工作:专项
压测
(全链路
压测
、内部
压测
)、灾备演练、降级演练、限流、巡检(监控、应用健康度)、混沌演练(红蓝对抗),如下图所示。
京东云技术团队
·
2024-01-27 07:02
大数据
网络
Flink 集成 Debezium Confluent Avro ( format=debezium-avro-confluent )
本文介绍的场景是:使用
Kafka
Connect的DebeziumMySQLSourc
Laurence
·
2024-01-27 06:54
大数据专题
付费专栏
flink
cdc
debezium
avro
confluent
schema-registry
kafka
37.Java连接
Kafka
37.1实验环境Intellij已安装且正常运行Maven环境正常RedHat7.2CM和CDH版本为5.11.2
Kafka
2.2.0-0.10.2创建topic,test3有3个replication
大勇任卷舒
·
2024-01-27 06:40
RocketMQ-同城双活-高可用架构-同程旅行
背景介绍为何选择RocketMQ我们在几年前决定引入MQ时,市场上已经有不少成熟的解决方案,比如RabbitMQ,ActiveMQ,NSQ,
Kafka
等。
无心六神通
·
2024-01-27 04:59
RocketMQ
rocketmq
架构
同城双活
高可用
【代码随想录-数组】二分查找
推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,
kafka
,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂
·
2024-01-27 04:58
s6
算法与数据结构
java
生命到底多脆弱
今天是我在急诊的最后一天了,来了一个大活,主动脉夹层,病情很凶险,来的时候,患者是一个躁动的状态,左侧血压140/90,右侧肢体血
压测
不出。
小小_6c25
·
2024-01-27 04:33
Kafka
3.0源码学习
内存池3、sender线程发送数据二、消费者源码1、初始化2、消费者订阅主题3、消费者拉取和处理数据3.1消费总体流程3.2消费者/消费者组初始化3.3拉取数据3.4消费者Offset提交三、服务端源码
kafka
魅Lemon
·
2024-01-27 04:25
大数据
kafka
【代码随想录-数组】有序数组的平方
推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,
kafka
,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂
·
2024-01-27 03:24
s6
算法与数据结构
java
实时分析海量新数据的难点 和解决方案
解决方案:使用分布式计算和存储技术,如Hadoop、Spark、
Kafka
等,将数据分散存储在多个节点上,同时进行分布式计算和处理,以实现数据的实时处理和分析。2.数据质量的保障:海量新
云台095
·
2024-01-27 03:40
大数据的应用
大数据
上一页
12
13
14
15
16
17
18
19
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他