E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
java后端kafka
【无标题】Spring Boot整合MyBatis-Plus,并通过AutoGenerator生成编程喵项目骨架代码**
作为一名
Java后端
开发,日常工作中免不了要生成数据库表对应的持久化对象PO,操作数据库的接口DAO,以及CRUD的XML,也就是mapper。
哗哗的世界
·
2024-01-21 12:01
相关技术积累
spring
boot
mybatis
后端
kafka
(一)——简介
简介
Kafka
是一种分布式、支持分区、多副本的消息中间件,支持发布-订阅模式,多用于实时处理大量数据缓存的场景,类似于一个“缓存池”。
却道天凉_好个秋
·
2024-01-21 07:21
kafka
kafka
分布式
大数据开发之
kafka
(完整版)
第1章:
Kafka
概述1.1定义
Kafka
是一个分布式的基于发布/订阅模式的消息队列,主要应用于大数据实时处理领域。
Key-Key
·
2024-01-21 07:19
大数据
kafka
分布式
kafka
入门(九):
kafka
分区分配策略
kafka
分区分配策略参数:
Kafka
提供了消费者客户端参数partition.assignment.strategy来设置消费者与订阅主题之间的分区分配策略。
乐之者v
·
2024-01-21 07:19
A1--kafka
kafka
大数据开发之
Kafka
(broker、消费者、eagle监控、kraft模式)
第4章:
Kafka
Broker4.1
Kafka
Broker工作流程4.1.1Zookeeper存储的
Kafka
的信息1、查看zookeeper中的
kafka
节点所存储的信息启动Zookeeper客户端[
Key-Key
·
2024-01-21 07:18
大数据
kafka
linq
11、
Kafka
------
Kafka
核心API 及 生产者API 讲解
目录
Kafka
核心API及生产者API讲解★
Kafka
的核心API
Kafka
包含如下5类核心API:★生产者API
Kafka
的API文档★使用生产者API发送消息
Kafka
核心API及生产者API讲解官方文档
_L_J_H_
·
2024-01-21 07:48
Kafka
系列
kafka
分布式
ELK 日志分析系统
日志管理方案二、完整日志系统基本特征三、ELK简介ELK组件:1、ElasticSearch2、Logstash3、Kibana可以添加的其它组件:1、Filebeat2、缓存/消息队列(redis、
kafka
luochiying
·
2024-01-21 07:04
elk
大数据之
Kafka
架构的核心组件及其功能
Apache
Kafka
是一个分布式流处理平台,主要用于构建实时数据管道和流应用。
Kafka
的架构设计以高吞吐量、持久化存储和水平扩展为目标。
转身成为了码农
·
2024-01-21 07:34
大数据
kafka
架构
logstack 日志技术栈-04-opensource 开源工具 Syslog-ng+Highlight.io
然后将日志解析、分类、重写和关联到统一格式中,然后将其存储或安全地传输到不同的系统(如Apache
Kafka
或Elasticsearch)。
老马啸西风
·
2024-01-21 07:03
log
ELK
开源
日志
elk
ELK
安装
Kafka
准备下载
Kafka
安装包
Kafka
官方网站我们采用的是
kafka
_2.11-0.10.2.0的版本一、解压并安装
Kafka
sudotar-zxf
kafka
_2.11-0.10.2.0.tgz-C/usr
殊迟
·
2024-01-21 06:51
大数据
kafka
java
大数据
spark
scala
基于SpringBoot Vue高校失物招领系统
很高兴你能来阅读我,我会陆续更新
Java后端
、前端、数据库、项目案例等相关知识点总结,还为大家分享优质的实战项目,本人在Java项目开发领域有多年的经验,陆续会更新更多优质的Java实战项目,希望你能有所收获
Dwzun
·
2024-01-21 06:42
spring
boot
vue.js
后端
基于SpringBoot Vue档案管理系统
很高兴你能来阅读我,我会陆续更新
Java后端
、前端、数据库、项目案例等相关知识点总结,还为大家分享优质的实战项目,本人在Java项目开发领域有多年的经验,陆续会更新更多优质的Java实战项目,希望你能有所收获
Dwzun
·
2024-01-21 06:42
spring
boot
vue.js
后端
基于SpringBoot Vue家政服务预约平台系统
很高兴你能来阅读我,我会陆续更新
Java后端
、前端、数据库、项目案例等相关知识点总结,还为大家分享优质的实战项目,本人在Java项目开发领域有多年的经验,陆续会更新更多优质的Java实战项目,希望你能有所收获
Dwzun
·
2024-01-21 06:42
Java精品项目
spring
boot
vue.js
后端
毕业设计
基于SpringBoot Vue养老院管理
很高兴你能来阅读我,我会陆续更新
Java后端
、前端、数据库、项目案例等相关知识点总结,还为大家分享优质的实战项目,本人在Java项目开发领域有多年的经验,陆续会更新更多优质的Java实战项目,希望你能有所收获
Dwzun
·
2024-01-21 06:38
Java精品项目
spring
boot
vue.js
后端
RabbitMQ 消息队列入门
使用较多的消息队列产品:RabbitMQ,RocketMQ,ActiveMQ,ZeroMQ,
Kafka
等。异步处理用户注册后,需要发送验证邮箱和手机验证码。
RendaZhang
·
2024-01-21 05:01
软件开发
rabbitmq
消息队列
keepalived
HAProxy
Message
Queue
【
Kafka
】Linux本地和Docker安装
Kafka
目录Linux本地安装
kafka
java环境配置Zookeeper的安装配置
Kafka
的安装与配置生产与消费Docker安装
kafka
Zookeeper安装
Kafka
安装Linux本地安装
kafka
java
Ethan-running
·
2024-01-21 05:23
#
kafka
kafka
docker
消息队列
分布式
Linux高级实战部署专题篇:elk日志中心集群多服务部署大全(ELK+filebeat集群:elasticsearch+kibana+logstash+
kafka
+filebeat)
日志中心分析集群:相关文档参考:https://blog.csdn.net/sinat_16658263/article/details/904440381、Elasticsearch:主要用来日志存储是一个基于Lucene的搜索服务器。提供搜集、分析、存储数据三大功能。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTfulweb接口。Elasticsearch是用Java开发的,并作为A
chenshuai199533
·
2024-01-21 05:18
高级阶段
elasticsearch
kafka
linux
深入
Kafka
broker
一、协议设计颗粒度,PRODUCE和FETCH中支持topic,partion等层级的颗粒度;测试友好,基于session_id和epoch确定一条拉取链路的fetchsession;全量增量结合,FetchRequest中的全量拉取和增量拉取;基本结构:header+body。常见header:api_key,api_version,corelation_id,client_id。与网络协议类似
FA-117
·
2024-01-21 05:56
Kafka
kafka
分布式
springboot之
kafka
配置创建springboot项目的时候勾选messaging选项中的
kafka
,springboot自动配置了很多,只需要很少的配置就可以运行了missing-topics-fatal这一条要加上,不然
陆阳226
·
2024-01-21 02:42
SpringBoot 项目中后端实现跨域的5种方式!!!
一、为什么会出现跨域问题二、什么是跨域三、非同源限制四、
Java后端
实现CORS跨域请求的方式1、返回新的CorsFilter(全局跨域)2、重写WebMvcConfigurer(全局跨域)3、使用注解
fpl1116
·
2024-01-21 01:50
JAVA全栈学习路线
#
java
ee
spring
boot
后端
java
intellij-idea
ssm
第二章 Spring Boot 整合
Kafka
消息队列 生产者
系列文章目录第一章
Kafka
配置部署及SASL_PLAINTEXT安全认证第二章SpringBoot整合
Kafka
消息队列生产者第三章SpringBoot整合
Kafka
消息队列消息者(待续)前言
Kafka
维基框架
·
2024-01-21 00:13
spring
boot
kafka
数据库
第一章
Kafka
配置部署及SASL_PLAINTEXT安全认证
系列文章目录第一章
Kafka
配置部署及SASL_PLAINTEXT安全认证第二章SpringBoot整合
Kafka
消息队列生产者第三章SpringBoot整合
Kafka
消息队列消息者(待续)1、下载安装
维基框架
·
2024-01-21 00:43
kafka
安全
分布式
kfaka基本概念
Kafka
第一章
kafka
基本概念文章目录
Kafka
一、kafak作用?二、基本概念一、kafak作用?
Kafka
是一种高吞吐量的分布式发布订阅消息系统,具有高性能、持久化、多副本备份、横向扩展能力。
西堂AI编程提效
·
2024-01-20 23:28
kafka
redis
数据库
database
Kafka
总结
Kafka
保证的是分区有序而不是全局有序。
西堂AI编程提效
·
2024-01-20 23:28
kafka
kafka
分布式
java
kafka
生产者消费者
生产者生产者发送确认机制半数follower响应全部follower响应–>改进:ISR机制:in-sync-replicaset【挑选进入isr的follower规则:1、同步的时间2、和leader相差的条数(0.9版本中被去掉)】注意:isr中的follower和正常的follower的概念问题acks配置0:发送完就返回。Atmostonce1:只等待leader写完就返回。-1:lead
西堂AI编程提效
·
2024-01-20 23:57
kafka
redis
数据库
database
Spark读取
kafka
(流式和批数据)
spark读取
kafka
(批数据处理)#按照偏移量读取
kafka
数据frompyspark.sqlimportSparkSessionss=SparkSession.builder.getOrCreate
中长跑路上crush
·
2024-01-20 23:55
Spark阶段
spark
kafka
大数据
kafka
核心原理及数据积压问题
1
kafka
的分片和副本机制何为分片?分片有什么用呢?
江枫渔火R
·
2024-01-20 22:24
kafka
分布式
python
大数据
【
Kafka
原理】数据积压问题
Kafka
消费者消费数据的速度是非常快的,但是如果在处理
Kafka
消息时,由于外部IO或者网络拥堵会导致
Kafka
中的数据积压(数据堆积)。如果数据一直积压,会导致数据出来的实时性受到较大影响。
TAIKEMAN
·
2024-01-20 22:23
Kafka
kafka
【
Kafka
面试】
Kafka
消费积压百万数据怎么办?
Kafka
面试大全(万字长文,37张图,28个知识点)高频面试题:
kafka
消费积压百万数据怎么办一、问题背景二、问题排查三、解决方案
TAIKEMAN
·
2024-01-20 22:23
Kafka
kafka
Kafka
3.0 消费者事务与数据积压
消费者事务如果想完成Consumer端的精准一次性消费,那么需要
Kafka
消费端将消费过程和提交offset过程做原子绑定。
Alienware^
·
2024-01-20 22:53
#
Kafka
kafka
java
kafka
数据积压语句查询记录
/
kafka
-consumer-groups.sh--bootstrap-server192.168.45.79:9092--list查看某些消费组是否积压.
飞鸟还巢
·
2024-01-20 22:23
大数据
kafka
zookeeper
分布式
Spark Streaming通过receiver方式消费
kafka
数据时数据积压问题
1.问题在通过receiver方式接受
kafka
消息时,发现有大量消息在队列中阻塞最终导致spark任务执行失败。
sinat_36710456
·
2024-01-20 22:23
大数据
数据积压
Spark
Streaming
kafka
kafka
消费组数据积压导致节点挂掉解决办法
前提
Kafka
运行一段时间后,容易出现节点挂掉的情况。排查原因是:存在多个由zookeeper命令创建的消费组,里面消息没有进行消费,导致数据积压,从而导致
kafka
节点挂掉。导致原因.
恒星0915
·
2024-01-20 22:22
kafka
kafka
消费数据积压
生产者生产数据的速度超过消费者处理数据的速度,会造成
kafka
中积压大量未处理的数据2-1使用
Kafka
Eagle查看消费积压
Kafka
Eagle是一个用于监控和管理
kafka
的开源组件,可以同时监控多个
中长跑路上crush
·
2024-01-20 22:21
Spark阶段
spark
Kafka
消息数据积压如何处理
可以从两方面考虑:1、如果是
Kafka
消费能力不足,则可以考虑增加Topic的分区数(一般一个Topic分区数为3-10个),并且同时提升消费组的消费者数量,消费者数==分区数。
AlbenXie
·
2024-01-20 22:21
kafka
大数据
分布式
2024
Java后端
面试最全攻略,一周刷完500道Java面试题,你就可以进大厂
前言本文是为了帮大家快速回顾了Java中知识点,这套面试手册涵盖了诸多Java技术栈的面试题和答案,相信可以帮助大家在最短的时间内用作面试复习,能达到事半功倍效果。本来想将文件上传到github上,但由于文件太大有的都无法显示所以直接整理成多个PDF,供大家学习说明主要是考虑到面试题的综合性,所以整理的顺序也是这样的,并且也作了相对应的注释,所以说不管是应对面试,还是学习来说,都是不错的。这套面试
啊码
·
2024-01-20 20:32
java
面试
LeetCode、162. 寻找峰值【中等,最大值、二分】
寻找峰值【中等,最大值、二分】题目及类型思路及代码思路1:二分思路2:寻找最大值资料获取前言博主介绍:✌目前全网粉丝2W+,csdn博客专家、Java领域优质创作者,博客之星、阿里云平台优质作者、专注于
Java
长路 ㅤ
·
2024-01-20 20:17
#
LeetCode
算法刷题
leetcode
算法
职场和发展
使用Python基于metricbeat和heartbeat采集数据进行告警
一、系统架构IP主机名角色备注11.0.1.11
kafka
1
kafka
和MySQL11.0.1.12
kafka
2
kafka
11.0.1.13
kafka
3
kafka
11.0.1.14demo1metricbeat
你说咋整就咋整
·
2024-01-20 19:25
python
elk
MeterSphere本地化部署实践
JDK11,配置好JDK环境,系统同时支持JDK8和JDK11安装IEAD,配置JDK环境配置maven环境,IDEA配置(解压可以直接使用)无限重置IDEA试用期配置redis环境(解压可以直接使用)配置
kafka
小李广
·
2024-01-20 19:24
metersphere
基于SpringBoot Vue自习室管理系统
很高兴你能来阅读我,我会陆续更新
Java后端
、前端、数据库、项目案例等相关知识点总结,还为大家分享优质的实战项目,本人在Java项目开发领域有多年的经验,陆续会更新更多优质的Java实战项目,希望你能有所收获
Dwzun
·
2024-01-20 18:19
spring
boot
vue.js
后端
基于SpringBoot Vue博物馆管理系统
很高兴你能来阅读我,我会陆续更新
Java后端
、前端、数据库、项目案例等相关知识点总结,还为大家分享优质的实战项目,本人在Java项目开发领域有多年的经验,陆续会更新更多优质的Java实战项目,希望你能有所收获
Dwzun
·
2024-01-20 18:16
spring
boot
vue.js
后端
java
kafka
client_
Kafka
Client API 基本使用
之前讲过了[
Kafka
基本概念及原理][1],这次我们来看看
Kafka
Client的API。要使用
Kafka
Client的API,首先需要先部署
Kafka
集群,部署过程请参见[官网][2]。
沈逸老师
·
2024-01-20 18:00
java
kafka
client
Kafka
consumer group位移重设
本文阐述如何使用
Kafka
自带的
kafka
-consumer-groups.sh脚本随意设置消费者组(consumergroup)的位移。
zxfBdd
·
2024-01-20 18:30
大数据
Kafka
Kafka
查看topic、consumer group状态命令
1,查看
kafka
topic列表,使用–list参数bin/
kafka
-topics.sh--zookeeper127.0.0.1:2181--list2,查看
kafka
特定topic的详情,使用–topic
mhbsoft
·
2024-01-20 18:29
kafka
Kafka
常用命令
文章目录启动
Kafka
并生产消费消息查看修改topic、group命令启动
Kafka
并生产消费消息启动ZooKeeper#启动ZooKeeper$bin/zookeeper-server-start.shconfig
楓葉也
·
2024-01-20 18:29
kafka
big
data
rabbitmq
java
linux
【
kafka
】
Kafka
1.1.0 consumer group位移重设
1.概述转载:https://www.cnblogs.com/huxi2b/p/7284767.html本文阐述如何使用
Kafka
自带的
kafka
-consumer-groups.sh脚本随意设置消费者组
九师兄
·
2024-01-20 18:29
大数据-kafka
kafka
参数配置参考和优化建议 —— 筑梦之路
对于
Kafka
的优化,可以从以下几个方面进行思考和优化:硬件优化:使用高性能的硬件设备,包括高速磁盘、大内存和高性能网络设备,以提高
Kafka
集群的整体性能。
筑梦之路
·
2024-01-20 18:57
linux系统运维
大数据
Java技术
kafka
分布式
在控制台从指定时间戳消费
kafka
1.重置消费位点${
KAFKA
_HOME}/bin/
kafka
-consumer-groups.sh\--bootstrap-server127.0.0.1:9092\--grouptest_group
Mathieu66
·
2024-01-20 18:57
Apache
Kafka
kafka
java
分布式
Kafka
Console Client 的 Consumer Group
以往使用
kafka
-console-consumer.sh消费
Kafka
消息时并没有太在意过ConsumerGroup,在命令行中也不会使用--group参数,本文针对
Kafka
ConsoleClient
Laurence
·
2024-01-20 18:26
大数据专题
kafka
consumer
group
groupid
console
client
消息中间件之
Kafka
(一)
1.简介高性能的消息中间件,在大数据的业务场景下性能比较好,
kafka
本身不维护消息位点,而是交由Consumer来维护,消息可以重复消费,并且内部使用了零拷贝技术,性能比较好Broker持久化消息时采用了
coffee_babe
·
2024-01-20 15:15
消息中间件
kafka
分布式
上一页
17
18
19
20
21
22
23
24
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他