E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Kafka深度剖析
Failed to start bean ‘org.springframework.
kafka
.config.internal
Kafka
ListenerEndpointRegistry‘;
错误原因:
kafka
的配置文件consumer.properties里面的group.id和idea中项目配置文件中的group-id设置的不一样。解决办法:设置为相同值就可以了。
假期的学习
·
2024-01-18 00:15
其他
kafka
【
Kafka
每日一问】
Kafka
的高可用机制是什么?
1.副本(Replication)副本因子:当创建一个
Kafka
Topic时,可以指定副本因子,这个因子决定了每个分区会有多少个副本存储在不同的broker上。
jianjun_fei
·
2024-01-18 00:23
Kafka每日一问
kafka
分布式
【
Kafka
每日一问】
Kafka
消费者故障,出现活锁问题如何解决?
在
Kafka
中,消费者的“活锁”通常是指消费者实例持续失败并重新加入消费者组,但却始终无法成功处理消息。这种现象可能会导致消费者组不断触发重平衡(rebalance),而消息却没有被实际消费。
jianjun_fei
·
2024-01-18 00:18
Kafka每日一问
kafka
分布式
连接超时的问题
windows上Hosts文件域名解析有问题比如:192.168.xx.100node1192.168.xx.161node1两个都解析成node1需要注释掉一个#192.168.xx.161node1
kafka
tool
中长跑路上crush
·
2024-01-17 23:33
每日问题合集
spark
Kafka
详解
KAFKA
1、消息队列(了解)1-1消息队列介绍英文名:MessageQueue,经常缩写为MQ。
中长跑路上crush
·
2024-01-17 23:02
Spark阶段
kafka
linq
分布式
JavaIO:企业级
深度剖析
NIO技术
本文将
深度剖析
NIO技术,探讨其在企业级应用中的实际应用和性能优势。
星光闪闪k
·
2024-01-17 22:18
Java
nio
java
开发语言
后端
架构
Flume 之自定义 Source
1、简介Flume自带Source有Avro、Thrift、Netcat、Taildir、
Kafka
、Http等,有些场合比如我们指定访问接口获取数据当做Flume的Source,像这种定制化的Source
知其_所以然
·
2024-01-17 19:52
flume
java技术
flume
大数据
flume的自定义sink-
Kafka
1、创建一个agent,sink类型需指定为自定义sinkvi/usr/local/flume/conf/agent3.confagent3.sources=as1agent3.channels=c1agent3.sinks=s1agent3.sources.as1.type=avroagent3.sources.as1.bind=0.0.0.0agent3.sources.as1.port=41
weixin_30483013
·
2024-01-17 19:20
大数据
shell
java
项目压测优化实践思路
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring原理、JUC原理、
Kafka
原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2024-01-17 19:52
解决方案与实现思路
压测优化
性能优化
设计一个简易版本的分布式任务调度系统
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring源码、JUC源码、
Kafka
原理、分布式技术原理如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2024-01-17 19:22
解决方案与实现思路
分布式
zookeeper
分布式任务调度
设计一个简单的规则引擎
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring原理、JUC原理、
Kafka
原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2024-01-17 19:22
解决方案与实现思路
java
规则引擎
二叉树
mysql
设计一个抽奖系统
作者简介:大家好,我是爱吃芝士的土豆倪,24届校招生Java选手,很高兴认识大家系列专栏:Spring原理、JUC原理、
Kafka
原理、分布式技术原理、数据库技术如果感觉博主的文章还不错的话,请三连支持一下博主哦博主正在努力完成
爱吃芝士的土豆倪
·
2024-01-17 19:20
解决方案与实现思路
项目设计
项目优化
【FLINK】
Kafka
数据源通过Flink-cdc进行实时数据同步
下图是flink-cdc最新支持的数据源类型:对有记录事务操作的
kafka
数据源通过flink-cdc实现实时数据同步
kafka
的数据源要通过flink-cdc
木棉庭
·
2024-01-17 18:09
技术分享
KAFKA
FLINK
kafka
flink
数据库
关于Flink在一条计算管道中配置流和数据流通过广播方式合流的情形下,无保存点和检查点重跑时,让配置流先行,数据流等延迟几秒再进入合流节点的思考
配置流和数据流的输入源都是
Kafka
主题,但是是两个不同的
Kafka
主题。配置流的
Kafka
主题中存储的是规则配置,数据流中存储的是要分析的数据。
OkGogooXSailboat
·
2024-01-17 18:36
flink
linq
大数据
深度剖析
JavaScript中冒泡和捕获机制、事件代理
JS事件传播的两种机制包括冒泡和捕获,下面将具体剖析它们之间本质的区别。 事件冒泡:先触发子元素的事件,再触发父元素的事件。 创建一个ullabel和lilabel,分别绑定一个父id和子id,再通过创建script,去绑定各自的点击事件。Document我是一个无序列表第1个列表项document.getElementById('father').onclick=function(){c
冯大少
·
2024-01-17 18:09
javascript
开发语言
常用的消息队列和中间件都有哪些
Kafka
:
Kafka
是一个高吞吐量的分布式发布订阅消息系统,由Apache开发。它主要用于处理大规模的实时数据流,具有高性能和可扩展性。
酷爱码
·
2024-01-17 16:08
经验分享
中间件
flink1.15消费
kafka
之checkpoint 二
前言上一篇讲解了checkpoint恢复的流程,以及checkpoint恢复时如何从状态中获取topic、partition,开始offset值,本篇主要如何取到offset值进行消费的。流程Task运行时,首先调用doRun方法:publicvoidrun(){try{doRun();}finally{terminationFuture.complete(executionState);}}pr
zhiyi329
·
2024-01-17 16:29
flink
kafka
kafka
java
分布式
2024.1.16 用户画像day01 - 项目介绍
elasticSearch-业务数据源导入-离线指标开发-Flume实时采集-Nginx日志埋点数据-结构化流实时指标-制作报表数仓开发用户画像实时开发hive-spark数据挖掘结构化流-Flume-
Kafka
-Flink
白白的wj
·
2024-01-17 15:40
spark
大数据
分布式
python
kafka
zookeeper
hive
Linux环境下
kafka
2.7.0的安装
1下载
kafka
安装包官方下载地址http://
kafka
.apache.org/downloadsimage.png使用镜像地址下载,https://mirrors.bfsu.edu.cn/apache
FyK_21f8
·
2024-01-17 13:22
关于
kafka
中的tcp连接
生产者建立连接时机启动在创建
Kafka
Producer实例时,生产者应用会在后台创建并启动一个名为Sender的线程,该Sender线程开始运行时首先会创建与Broker的连接。
kar_joe
·
2024-01-17 12:35
单节点部署 Gpmall 商城系统
目录实验中使用的技术实验过程实验中使用的技术JavaRedisElasticsearch(先不用)NginxMariaDBZooKeeper
Kafka
实验过程1.Xnode1克隆虚拟机gpmallCRT
守丘
·
2024-01-17 09:25
CentOS
7
服务器
linux
运维
kafka
-ui通过docker部署
创建docker-compose.yamlservices:
kafka
-ui:container_name:
kafka
-uiimage:provectuslabs/
kafka
-ui:latestports
weixin_43169720
·
2024-01-17 09:23
docker
大数据
kafka
docker
kafka-ui
Kafka
的架构
实验过程1.三个虚拟机中解压
kafka
软件包tar-zxvf
kafka
_2.11-1.1.1.tgz2.修改3个节点配置文件在zookeeper节点,进入
kafka
_2.11-1.1.1/config目录下
守丘
·
2024-01-17 09:52
CentOS
7
架构
Linux 安装 Apache
Kafka
一、安装下载
kafka
,下载地址,只是使用的话下载Binary版本就行。
South_BJ
·
2024-01-17 08:10
Apache
linux
apache
kafka
kafka
简单介绍和代码示例
“这是一篇理论文章,给大家讲一讲
kafka
”简介在大数据领域开发者常常会听到MQ这个术语,该术语便是消息队列的意思,
Kafka
是分布式的发布—订阅消息系统。
necessary653
·
2024-01-17 07:53
kafka
分布式
Kafka
学习
Kafka
的消息通过主题(topic)进行分类主题可以被分为若干个分区(partition),一个分区就是一个提交日志,通过分区来实现数据冗余和伸缩性消息以追加的方式写入分区,然后以先入先出(FIFO)
error0318
·
2024-01-17 07:37
kafka
学习
分布式
Kafka
简介
目录1、概念介绍
Kafka
由来ZooKeeper
Kafka
特性
Kafka
使用场景
Kafka
复制备份2、
Kafka
架构BrokerTopicProducerPartitionConsumersConsumerGroupDistribution1
HuaLuLemon
·
2024-01-17 07:03
Kafka
kafka
分布式
Kafka
集群部署
目录1、环境准备2、搭建ZooKeeper集群配置文件节点标记环境变量启动集群数据同步测试故障测试3、搭建
Kafka
集群配置文件环境变量配置其他机器启动服务4、集群测试创建Topic显示Topic配置创建
HuaLuLemon
·
2024-01-17 07:03
Kafka
kafka
分布式
Kafka
系列(四)
本文接
kafka
三,代码实践
kafka
Stream的应用,用来完成流式计算。
kafka
stream关于流式计算也就是实时处理,无时间概念边界的处理一些数据。
happystudy_neu
·
2024-01-17 07:32
kafka
分布式
Kafka
详解及常见面试问题解析(值得珍藏)
1.定义
Kafka
是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。它是一种高吞吐量的分布式发布订阅消息系统,可以处理消费者在网站中的所有动作流数据。
孤蓬&听雨
·
2024-01-17 07:29
知识库
面试资料
kafka
面试
分布式
消息队列
springboot2.x整合
kafka
【详细】
文章目录一、中间件部署1.环境2.版本选择依据3.解压安装3.1zookeeper安装部署3.2
kafka
安装部署二、springboot整合1.pom.xml添加依赖2.application.yml
喵王叭
·
2024-01-17 06:16
Java
Spring
java
kafka
zookeeper
中间件
CSRF跨站请求伪造的GET情况和POST情况攻击和防御详解
参考书目《Web安全
深度剖析
》张炳帅CSRF英文名:cross-siterequestforgery叫做跨站请求伪造CSRF不是很流行,但是具有很高的危险性,相比于XSS更加难以防范。
Zeker62
·
2024-01-17 06:06
网络安全学习
session
安全
web
cookie
http
深入探索智能问答:从检索到生成的技术之旅
通过对技术和应用的
深度剖析
,旨在帮助读者对这一令人兴奋的领域有更全面的认识。
工业甲酰苯胺
·
2024-01-17 06:38
机器学习
大数据
深度学习
人工智能
Spark面试
它支持从多种数据源读取数据,比如
Kafka
、Flume、Twitte
lune_Lucky
·
2024-01-17 05:30
大数据
big
data
spark
【
Kafka
】log4j2漏洞不影响集群安全
1.背景最近发现不少文章提到log4j的远程代码执行漏洞会影响
Kafka
,在此向大家说明
Kafka
采用的版本是log4j1.2.17且不受此事件影响2.详情打开GitHub-apache/
kafka
默认主分支
扬_帆_起_航
·
2024-01-17 04:40
springboot集成
kafka
消费数据
springboot集成
kafka
消费数据文章目录springboot集成
kafka
消费数据1.引入pom依赖2.添加配置文件2.1.添加
Kafka
ConsumerConfig.java2.2.添加
Kafka
IotCustomProperties.java2.3
这名字应该不会重复吧
·
2024-01-17 02:33
java
spring
boot
kafka
spring
boot
kafka
java
【算法Hot100系列】全排列
推荐:kwan的首页,持续学习,不断总结,共同进步,活到老学到老导航檀越剑指大厂系列:全面总结java核心技术点,如集合,jvm,并发编程redis,
kafka
,Spring,微服务,Netty等常用开发工具系列
檀越剑指大厂
·
2024-01-17 01:21
s6
算法与数据结构
算法
kafka
内外网配置
看此文档,需要首先会安装
kafka
集群,zookeeper集群;熟悉组件命令;三台
kafka
集群(设置加密通道):192.168.1.86:9092外网IP:19092192.168.1.87:9092
窦再兴
·
2024-01-17 00:16
技术贴
kafka
集群
加密
内外网
zookeeper
开启讲书之路
本文,将从什么是讲书,为什么要讲书,可以怎样讲书三个方面
深度剖析
讲书这件事情。01什么是讲书?从字面上来看,就是“把书讲出来”。樊登老师为什么会开始讲书呢?
沐年读书
·
2024-01-17 00:15
flume
Kafka
网络端口数据1.2Flume基础架构1.
添柴少年yyds
·
2024-01-17 00:55
flume
大数据
活动预告|张宏杰书友会:跟人生赢家练领导腕力
领兵数十万坚持十多年疆场血战最终平定太平天国除了他出色的人格、学识、才能更离不开其独家的领导艺术可以说“识人用人之道”亦是其事业成功的一大法宝探秘曾国藩的非凡领导力
深度剖析
晚清官场的生存交往之道在作家的妙笔下看历史风云人物如何轮番登场再现纷繁复杂的晚清时局上演惊心动魄的历史场景
拙诚学堂
·
2024-01-16 22:16
Kafka
-RecordAccumulator分析
前面介绍过,
Kafka
Producer可以有同步和异步两种方式发送消息,其实两者的底层实现相同,都是通过异步方式实现的。
Andy技术支援
·
2024-01-16 22:52
队列
kafka
分布式
深度剖析
C语言数据在类型中的存储之整型在内存中的存储
目录1.数据类型介绍(数据知识基础复习铺垫)1.1类型的意义编辑1.2.类型的基本归类2.正文:整形在内存中的存储2.1.原码、反码、补码2.1.1思考:为什么整型数据在内存中存放的是补码?2.1.2(重要)关于整形家族有符号类型和无符号类型的区别2.2大小端存储字节序。2.2.1数位的低位高位2.2.2高地址和低地址2.2.3大小端的例子理解3.结语1.数据类型介绍(数据知识基础复习铺垫)内置类
Nicn
·
2024-01-16 21:49
c语言
算法
数据结构
深度剖析
C语言数据在类型中的存储之浮点型在内存中的存储
目录1.对浮点数的初步认识1.1浮点数的表示范围:2.用一个题的例子来引入对浮点数存储的探讨3(重点)浮点数的存储规则4.对例子答案的解释1.对浮点数的初步认识浮点数就是我们口头的小数常见的浮点数如:3.14等另外的浮点数的表达:1E10(这种表示方法常用在Python中,E表示次方的意思,该数表示1.0*10^10C语言中浮点数家族包括:float(大小为2个字节),double,大小为8个字节
Nicn
·
2024-01-16 21:15
c语言
算法
开发语言
「
Kafka
」Broker篇
「
Kafka
」Broker篇主要讲解的是在
Kafka
中是怎么存储数据的,以及
Kafka
和Zookeeper之间如何进行数据沟通的。
小成同学_
·
2024-01-16 21:44
Kafka
kafka
分布式
java
后端
中间件
Kafka
-核心概念
消息消息是
Kafka
中最基本的数据单元。消息由一串字节构成,其中主要由key和value构成,key和value也都是byte数组。
Andy技术支援
·
2024-01-16 20:13
队列
kafka
分布式
Kafka
-生产者
Kafka
在实际应用中,经常被用作高性能、可扩展的消息中间件。
Kafka
自定义了一套网络协议,只要遵守这套协议的格式,就可以向
Kafka
发送消息,也可以从
Kafka
中拉取消息。
Andy技术支援
·
2024-01-16 20:13
队列
kafka
分布式
Docker安装各种软件
目录一.Nacos二.MySQL5.7三.Tomcat四.Clickhouse五.Redis六.Zookeeper七.
Kafka
八.Flink九.Fastdfs十.RabbitMQ十一.Elasticsearch
黑暗对我避而远之
·
2024-01-16 20:37
服务器
docker
容器
运维
Kafka
系列(三)
其中三将讲述
kafka
座位消息中间件的代码样例,四将讲述
kafka
的stream流式计算处理。
happystudy_neu
·
2024-01-16 19:07
kafka
分布式
结构化流的介绍
目录有界数据和无界数据有界数据无界数据结构化流基本介绍入门案例结构化流的编程模型数据结构数据源(Source)FileSource
Kafka
Source(Spark和
Kafka
整合)整合
Kafka
准备工作从
Sisi525693
·
2024-01-16 19:58
python
大数据
spark
kafka
结构化流
上一页
19
20
21
22
23
24
25
26
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他