E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
java后端kafka
Java学习路线
-大纲思路(二)Java学习路线熟悉了Java的核心基础概念后,第二阶段我们要开始系统的学习一些Java核心知识点:集合、IO、反射、并发、锁、多线程、数据库原理、JVM基础、常用中间件(Dubbo、
Kafka
Shipley_Leo
·
2023-11-14 18:21
#
学习路线
java
学习
开发语言
深入理解
Kafka
3.6.0的核心概念,搭建与使用
Kafka
是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协调的分布式消息系统,它的最大的特性就是可以实时的处理大量数据以满足各种需求场景
Mumunu-
·
2023-11-14 16:44
ELK
hadoop
kafka
hadoop
kafka
ELK
Kafka
简单汇总
Kafka
的结构图多个Parttion共同组成这个topic的所有消息。
信仰_273993243
·
2023-11-14 16:44
kafka
分布式
Kafka
(三)生产者发送消息
文章目录生产者发送思路自定义序列化类配置生产者参数提升吞吐量发送消息关闭生产者结语示例源码仓库生产者发送思路如何确保消息格式正确的前提下最终一定能发送到
Kafka
?
JackSparrow414
·
2023-11-14 16:43
消息队列
kafka
消息系统
中间件
rabbitmq
CVE-2023-25194
Kafka
JNDI 注入分析
Apache
Kafka
ClientsJndiInjection漏洞描述Apache
Kafka
是一个分布式数据流处理平台,可以实时发布、订阅、存储和处理数据流。
蚁景网络安全
·
2023-11-14 16:13
kafka
分布式
网络安全
安全
Hyperledger Fabric排序服务实现
排序算法solo
kafka
raftRaft(推荐) 作为v1.4.1的新特性,Raft是一种基于etcd中Raft协议实现的崩溃容错(CrashFaultTolerant,CFT)排序服务。
Ddkjawed
·
2023-11-14 15:08
Fabric
Hyperledger
2.x
fabric
kafka
java
kafka
实践-热点数据展示
2.2应用场景日志分析大屏看板统计公交实时数据实时文章分值计算2
Kafka
Stream2.1概述
Kafka
Stream是Apache
Kafka
从0.10版本引入的一个新Feature。它是提
不减到100斤不吃锅包肉
·
2023-11-14 12:16
kafka
分布式
java
Java后端
--服务层常用技术
Java后端
–服务层常用技术配置中心SpringCloudConfigSpringCloudConfig为分布式系统中的外部化配置提供服务器和客户端支持。
IT技术站
·
2023-11-14 11:25
java
java
【Mysql系列】Mysql基础篇
推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,
kafka
,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂
·
2023-11-14 10:10
s5
数据库
mysql
数据库
Flink SQL 练习
--1、实时统计道路拥堵情况,--统计最近15分钟,每隔1分钟统计一次,--统计车流量和平均车速--将统计结果保存到数据库中--1、创建
kafka
source表CREATETABLEcars(card_idString
新手小农
·
2023-11-14 10:41
Flink
1.15.2
flink
sql
大数据
ZooKeeper+
Kafka
+ELK+Filebeat集群搭建实现大批量日志收集和展示
大致流程:将nginx服务器(web-filebeat)的日志通过filebeat收集之后,存储到缓存服务器
kafka
,之后logstash到
kafka
服务器上取出相应日志,经过处理后写入到elasticsearch
蜜蜜不吃糖
·
2023-11-14 09:35
zookeeper
kafka
elk
centos7安装
kafka
及简单使用
【启动
kafka
前,需要调整这个配置文件(/opt/
kafka
-2.1.0/config/server.properties)的一处ip地址】因为每次虚拟机的ip地址可能会有所不同,这和所在网络有关,也可将
战战的坚果
·
2023-11-14 07:27
工作中遇到的问题
java
spring
boot
kafka
Flink必知必会系列之回撤流(RetractStream)源码解读
1.定义Flink中,
Kafka
Source是非回撤流,GroupBy是回撤流。
王知无(import_bigdata)
·
2023-11-14 05:39
flink
java
数据库
大数据
开发语言
面试官:说一下SQL的执行过程
最近整理了一份大厂面试资料《史上最全大厂面试题》,Springboot、微服务、算法、数据结构、Zookeeper、Mybatis、Dubbo、linux、
Kafka
、Elasticsearch、数据库等等获取方式
飞乐鸟
·
2023-11-14 02:02
sql
数据库
Python(八) 字典
最近整理了一份大厂面试资料《史上最全大厂面试题》,Springboot、微服务、算法、数据结构、Zookeeper、Mybatis、Dubbo、linux、
Kafka
、Elasticsearch、数据库等等获取方式
飞乐鸟
·
2023-11-14 02:59
#
基础
python
开发语言
Springboot2整合
kafka
的两种使用方式
1、Springboot2整合
kafka
原文链接:https://blog.csdn.net/victoylin/article/details/93409055
kafka
docker上安装环境Springboot2
微微一动
·
2023-11-14 01:45
消息队列
Springboot系列之
kafka
操作
kafka
简介Apache
Kafka
®是一个分布式流媒体平台。有三个关键功能:发布和订阅记录流,类似于消息队列或企业消息传递系统。以容错的持久方式存储记录流。记录发生时处理流。
落墨微澜
·
2023-11-14 01:15
java
kafka
java
Flink DataStream API编程
消费
Kafka
主题数据importorg.apache.flink.api.common.eventtime.WatermarkStrategy;importorg.apache.flink.api.common.serialization.SimpleStringSchema
柏舟飞流
·
2023-11-14 01:14
大数据
flink
flink
springboot的
kafka
使用
kafka
的一些概念分组:同一组内的consumer对于队列里的消息只会有一个consumer消费一次(一对一),不同组的consumer对队列里的消息会同时消费(一对多)。
Lemon_MY
·
2023-11-14 01:43
kafka
spring
boot
java
【SpringBoot系列】Springboot使用
kafka
的两种方式
如果文章对你有帮助的话,欢迎评论点赞收藏加关注+系列文章:SpringBoot学习大纲,可以留言自己想了解的技术点在公司用
kafka
比较多,今天整理下Springboot使用
kafka
的两种方式。
香菜+
·
2023-11-14 01:13
Java超神之路
spring
boot
后端
java
kafka
集群企业部署最佳实践
哈喽!大家好,我是【IT邦德】,江湖人称jeames007,10余年DBA及大数据工作经验一位上进心十足的【大数据领域博主】!中国DBA联盟(ACDU)成员,目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发,备份恢复,安装迁移,性能优化、故障应急处理等。✨如果有对【数据库】感兴趣的【小可爱】,欢迎关注【IT邦德】❤️❤️❤️感谢各位大可爱小可爱!❤️❤️
IT邦德
·
2023-11-14 01:13
CDH大数据平台
大数据企业实战技术专区
kafka
分布式
flink1.18.0 sql-client报错
CouldnotexecuteSQLstatement.Reason:org.apache.flink.table.api.ValidationException:Couldnotfindanyfactoryforidentifier'
kafka
'thatimplements'org.apache.flink.table.factor
Thomas2143
·
2023-11-14 00:34
总结
sql
linq
数据库
Java后端
程序员常用测试工具与插件
Java后端
程序员常用测试工具与插件一、Postman(接口测试工具)二、Devtools(热部署插件)三、多模块同时开启RunDashBoard四、IDEA的RestfulTool插件一、Postman
Hua·
·
2023-11-14 00:47
工具
测试工具
java
后端
java后端
+前端使用WebSocket实现消息推送
java后端
+前端使用WebSocket实现消息推送(流程+详细代码)创建WebSocket的简单实例操作流程1.引入Websocket依赖2.创建配置类WebSocketConfig3.创建WebSocketServer4
零
·
2023-11-13 21:07
socket编程
java
websocket
前端
前端连接websocket demo
前端连接websocketdemo代码如下
Java后端
WebSocket的Tomcat实现打开WebSocket连接Welcome发送消息关闭WebSocket连接varwebsocket=null;/
52fighting
·
2023-11-13 21:07
组件
websocket
MQ 消息丢失、重复、积压问题,如何解决?
面试官在面试候选人时,如果发现候选人的简历中写了在项目中使用了MQ技术(如
Kafka
、RabbitMQ、RocketMQ),基本都会抛出一个问题:在使用MQ的时候,怎么确保消息100%不丢失?
肥肥技术宅
·
2023-11-13 20:24
java
java
面试
开发语言
34 mysql limit 的实现
fromtz_testlimit$pageOffset,$pageSize”来分页处理但是由于数据表的数据量较大,越到后面的分页,该页的查询耗时越大然后后面调整了一下实现思路,将mysql的数据先放到
kafka
教练、我想打篮球
·
2023-11-13 19:40
12
mysql
mysql
limit
offset
使用docker安装mysql, redis,
kafka
等各类服务
前言大致说来,docker的作用如下绝大部分应用,开发者都可以通过dockerbuild创建镜像,通过dockerpush上传镜像,用户通过dockerpull下载镜像,用dockerrun运行应用。用户不需要再去关心如何搭建环境,如何安装,如何解决不同发行版的库冲突——而且通常不会需要消耗更多的硬件资源,不会明显降低性能。也就是实现了标准化、集装箱文章比较长,想要搜寻特定的服务的docker安装
繁星-赵老师
·
2023-11-13 17:54
mysql
docker
redis
简单实现,在nodejs中简单使用
kafka
什么是
Kafka
Kafka
是由Linkedin公司开发的,它是一个分布式的,支持多分区、多副本,基于Zookeeper的分布式消息流平台,它同时也是一款开源的基于发布订阅模式的消息引擎系统。
qqxinxi
·
2023-11-13 17:23
kafka
分布式
数据分析
springcloudalibaba入门详细使用教程
目录标题一、简介二、SpringCloudAlibaba核心组件2-1、Nacos(配置中心与服务注册与发现)2-2、Sentinel(分布式流控)2-3、RocketMQ(消息队列)/RabbitMq/
kafka
2
程序员小王꧔ꦿ
·
2023-11-13 16:01
微服务
java
spring
spring
cloud
微服务
Flink自定义aggregate聚合函数的步骤
第一步:将dataStream转换城windowedStream//
kafka
中的数据示例452437,3255022,5099474,pv,1511658000813974,1332724,2520771
Vincer_DB
·
2023-11-13 16:04
Flink
大数据
kafka
Manager安装部署
kafka
Manager安装部署下载cmak。
djcjcdj
·
2023-11-13 12:23
kafka
librd
kafka
1php,librd
kafka
- 一个Apache
Kafka
C/C++客户端库
librd
kafka
-theApache
Kafka
C/C++clientlibraryCopyright(c)2012-2020,MagnusEdenhill.librd
kafka
isaClibraryimplementationoftheApache
Kafka
protocol
weixin_39799290
·
2023-11-13 12:52
librdkafka1php
kafka
c语言开发,librd
kafka
: librd
kafka
是 Apache
Kafka
的 C/C++ 开发包,提供生产者、消费者和管理客户端...
librd
kafka
-theApache
Kafka
C/C++clientlibraryCopyright(c)2012-2020,MagnusEdenhill.librd
kafka
isaClibraryimplementationoftheApache
Kafka
protocol
洛斯里克甜面包
·
2023-11-13 12:51
kafka
c语言开发
centos下编译安装
kafka
-manager
kafka
-manager项目地址:https://github.com/yahoo/
kafka
-managerReleases版本下载:https://github.com/yahoo/
kafka
-manager
NCSTA
·
2023-11-13 12:21
kafka
Kafka
Manager配置
勿以浮沙筑高台基础准备,zookeeper集群,
kafka
集群。
负差生
·
2023-11-13 12:19
kafka
kafka
【管理工具】CMAK安装和使用(
kafka
-manager)
文章目录前言一、安装和启动1.1安装CMAK1.2启动cmak二、使用CMAK2.1添加
kafka
集群2.2topic概述2.3broker概述2.4其他操作前言一、安装和启动1.1安装CMAKJava
逆流°只是风景-bjhxcc
·
2023-11-13 12:45
#
消息队列
kafka
分布式
Apache Doris 系列: 入门篇-数据导入及查询
数据导入方式Doris为了满足不同业务场景的数据接入需求,提供不丰富的数据导入方式,去支持不同的数据源:外部存储(HDFS,对象存储)、本地文件、消息队列(
Kafka
)及其他外部业务系统数据库(MySQL
hf200012
·
2023-11-13 12:34
hive
数据库
hadoop
apache
doris
Producer
Producer开发样例版本说明新客户端,从
Kafka
0.9.x开始,client基于Java语言实现。同时提供C/C++,Python等其他客户端实现。
FA-117
·
2023-11-13 10:18
Kafka
kafka
利用OGG实现Oracle到
Kafka
到Greenplum的增量数据同步
墨墨导读:本文来自墨天轮用户肖杰的投稿,介绍用OGG实现Oracle到
Kafka
到Greenplum的增量数据同步的全过程。
数据和云
·
2023-11-13 07:50
数据库
运维
kafka
大数据
mysql
springboot学习(十六):了解springboot自动装配
kafka
原理
说明在上篇《springboot学习(十五):
Kafka
的使用》博文中,通过简单的示例介绍了如何在springboot项目中使用
kafka
。代码十分简单,通过配置文件和注解就可以操作kakfa集群。
布碗
·
2023-11-13 06:38
Spring
Boot
SpringBoot学习
springboot启动流程
springboot自动装配
springboot
kafka
kafka
消费者组重平衡分析
一概念一个consumergroup通过一定的分配算法来分配消费订阅的topic的所有分区。具体有协调者完成重平滑流程。二触发条件组成员发送变更,如consumer增加或减少如consumer进程崩溃、consumer进程所在机器宕机、consumer异常比如poll间隔太久;组订阅的topic数变更,如使用基于正则的订阅,当匹配正则的新的topic创建时会触发;组订阅topic的分区数变化,如使
yanerhao
·
2023-11-13 05:43
KAFKA
java
kafka
删除用户组_详细解析
kafka
之
kafka
消费者组与重平衡机制
㊣
kafka
源码解析与实战源码原理61.5元包邮(需用券)去购买>消费组组(Consumergroup)可以说是
kafka
很有亮点的一个设计。
weixin_39674190
·
2023-11-13 05:12
java
kafka删除用户组
四、
Kafka
消费者组与重平衡机制
目录一、
kafka
消费者组1.1消费者组内消费者数量1.2查看集群中的消费者组二、重平衡(Rebalance)三、重平衡策略3.1Range3.2RoundRobin3.3Sticky四、避免重平衡消费组
猿小许
·
2023-11-13 05:12
中间件
Kafka
消费者组重平衡(Rebalance)
Kafka
ConsumerReblance消费者组的重平衡就组内的消费者,对消费那些主题分区达成一致的过程,
Kafka
会尽量保证分配的均匀。
kobe_yang24
·
2023-11-13 05:41
kafka
kafka
Kafka
消费组重平衡的流程
重平衡需要借助
Kafka
Broker端的Coordinator组件,在Coordinator的帮助下完成整个消费者组的分区重分配。在给我们带来的便利和一些问题。这篇来分析一下重平衡的整个流程。
simanstar
·
2023-11-13 05:10
kafka
kafka
java
分布式
Kafka
消费者组重平衡能避免吗?
Kafka
消费者组重平衡能避免吗?Rebalance就是让一个ConsumerGroup下所有的Consumer实例就如何消费订阅主题的所有分区达成共识的过程。
章全蛋
·
2023-11-13 05:40
Kafka
kafka
消费组重平衡
kafka
消费组ConsumerGroup,是
Kafka
提供的可扩展且具有容错性的消费者机制,一个消费组内可以有一到多个消费实例(ConsumerInstance),共享一个id,这个id就是GroupID
呆东
·
2023-11-13 05:10
中间件
25 | 消费者组重平衡全流程解析
文章目录
Kafka
核心技术与实战深入
Kafka
内核25|消费者组重平衡全流程解析触发与通知消费者组状态机消费者端重平衡流程Broker端重平衡场景剖析
Kafka
核心技术与实战深入
Kafka
内核25|消费者组重平衡全流程解析消费者组的重平衡流程的作用是让组内所有的消费者实例就消费哪些主题分区达成一致
久违の欢喜
·
2023-11-13 05:38
kafka
心跳线程
消费者组状态机
JoinGroup
请求
SyncGroup
请求
25
kafka
消费者组重平衡
触达与通知1.位置主题&写调整复习(TODO)2.重平衡是通过心跳线程的心跳请求来通知的,需要重平衡则请求响应REBALANCE_IN_PROGRESS。0.10.1.0版本后心跳线程和消息消费线程分离,避免了消息消费时间长影响心跳。heartbeat.interval.ms参数控制心跳请求频率也控制重平衡频率。消费者组状态机1.empty状态的消费者组,才会执行过期位置删除2.协调者通过什么判断
ZyyIsPig
·
2023-11-13 05:37
kafka核心技术与实战
kafka
上一页
64
65
66
67
68
69
70
71
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他