E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
java后端kafka
zookeeper
我们都知道zookeeper是分布式协调框架,
kafka
这些都会依托于zk来存储元数据zk要了解他的数据结构以及监听机制,这个才是他能够作为分布式协调框架最核心的功能zk是比较典型的CP架构zk是很早的分布式协调框架相当于分布式协调框架的鼻祖现在已经有很多的方案比如说
一个诺诺前行的后端程序员
·
2023-11-06 05:29
zookeeper
分布式
云原生
Kafka
基本概念
一、概述1、
kafka
是什么
Kafka
是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的,发布/订阅模式的消息队列(MessageQueue)。
Andy 陈
·
2023-11-06 05:55
kafka
分布式
java
Kafka
基本使用
一、概述1、
kafka
是什么
Kafka
是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的,发布/订阅模式的消息队列(MessageQueue)。
I_absolutely
·
2023-11-06 05:23
大数据
高并发
消息队列
kafka
big
data
消息队列
Kafka
基本概念
拓扑图Topic是一个逻辑概念,相当于给消息分配的标签Partition分区,topic中的消息被分割为一个或多个的partition,是一个物理概念对应到系统上就是一个或若干个目录,一个分区就是一个日志文件消息以追加的形式写入分区,先后以顺序的方式读取每个日志文件都是一个logentry序列。这个logentry并非由一个文件构成,而是分成多个segmentSegment段,将Partition
风的着点
·
2023-11-06 05:52
中间件
kafka
java
【
Kafka
】基本概念
文章目录一、消息队列的流派1.1有Broker1.1.1重topic1.1.2轻topic1.2无Broker二、
kafka
安装三、
kafka
基本术语四、发送消息五、消费消息六、单播消息七、多播消息八、
bugcoder-9905
·
2023-11-06 05:21
kafka
kafka
分布式
互联网大厂年度总结1000+道高频面试题(附答案解析)冲刺2021
、MyBatis、ZooKeeper、Dubbo、Elasticsearch、Memcached、Redis、MySQL、Spring、SpringBoot、SpringCloud、RabbitMQ、
Kafka
程序员白楠楠
·
2023-11-06 01:03
SpringSecurity6 | 回顾Filter
✅作者简介:大家好,我是Leo,热爱
Java后端
开发者,一个想要与大家共同进步的男人个人主页:Leo的博客当前专栏:Java从入门到精通✨特色专栏:MySQL学习本文内容:SpringSecurity6
LeoToJavaer
·
2023-11-06 00:10
#
SpringSecurity
Spring
Filter
使用helm模板搭建
kafka
集群
官方文档:https://github.com/bitnami/charts/tree/master/bitnami/
kafka
编写values.yamlimage:repository:bitnami
我有一只肥螳螂
·
2023-11-05 23:26
DevOps
kafka
docker
zookeeper
运维
devops
Kafka
线上环境部署
Kafka
线上环境部署集群环境规划操作系统选型I/O模型。
炒栗子不加糖
·
2023-11-05 23:25
Kafka
java
后端
kafka
kafka
2.8.0 without zookerper 部署
kafka
2.8.0withoutzookerper部署1.前言
Kafka
2.8.0可以不需要zookerper,没有zk的参与将会使
kafka
的吞吐量得到更大的提高,具体可看官网,这篇文章主要是针对
kafka
2.8.0
kafka
KRaftmode
爱划船的小菜鸟
·
2023-11-05 23:25
kafka
大数据
分布式
Kafka
安装部署
文章目录1、环境说明1.1、服务器1.2、客户端2、官网3、单机安装部署3.1、local部署3.1.1、安装jdk3.1.2、上传服务器&解压3.1.3、修改配置文件,文件位置3.1.4、启动服务3.1.5、测试3.1.6、停止服务3.2、docker-compose部署3.2.1、参考网站3.2.2、安装&启动docker3.2.3、安装python&更新pip&安装docker-compos
achi010
·
2023-11-05 23:24
BigData
Kafka
安装部署
Kafka
安装
Kafka
部署
Kafka
Docker
安装
Kafka
K8S 搭建
Kafka
:2.13-2.6.0 和 Zookeeper:3.6.2 集群
在K8S搭建
Kafka
:2.13-2.6.0和Zookeeper:3.6.2集群基础上调整,试
kafka
集群能被外部访问搭建
Kafka
:2.13-2.6.0和Zookeeper:3.6.2集群#一、服务版本信息
SURLIYA
·
2023-11-05 23:54
k8s
kafka
kubernetes
kafka
kafka
集群安装部署(最详细 zookeeper+
kafka
+生产者消费者验证)
目录
Kafka
集群规划一.Zookeeper集群准备1.下载2.解压并修改目录名称3.创建data和dataLog目录4.创建myid文件5.修改配置文件zoo.cfg6.赋权7.把修改的zookeeper
BoomLee
·
2023-11-05 23:53
kafka
大数据
kafka
zookeeper
2021windows虚拟机搭建
kafka
集群详细步骤+可能出现的bug+重新部署(带图,超详细,亲测有效)
搭建
kafka
集群需要配合zookeeper使用,有两种选择,第一种是使用
kafka
自带的zookeeper,第二种是自己安装指定zookeeper,墙裂推荐使用第二种.第一章具体搭建步骤:第一步:安装
ManCxyster
·
2023-11-05 23:53
kafka
kafka
java
服务器
kafka
3.6.0集群部署
环境准备机器环境系统主机名IP地址centos7.9
kafka
01192.168.200.51centos7.9
kafka
02192.168.200.52centos7.9
kafka
03192.168.200.53
L白眸
·
2023-11-05 23:53
linux
linux
运维
互联网企业面试必问Spring源码?搞定Spring源码,看完这篇就够了
不用说,Spring已经成为
Java后端
开发的事实上的行业标准。无数公司选择Spring作为基本开发框架。大多数
Java后端
程序员在日常工作中也会接触到Spring。
Java_苏先生
·
2023-11-05 23:38
解决ClickHouse短连接超时的一个问题
在通过消费
kafka
数据写入到CK中,经常会遇到CK的连接失败问题,例如以下报错信息:clickhouseexception,code:1002,host:*.*.*.*,port:8123;*.*.*
岁月静静好
·
2023-11-05 23:15
ClickHouse
ClickHouse
大数据平台之数据存储
数据湖4.数据存储的方式4.1批处理的数据存储4.2实时处理的数据存储1.大数据生态技术数据存储处理:清洗,关联,规范化,组织建模,通过数据质量的检测,数据分析然后提供相应的数据服务离线数仓:实时数仓:以
Kafka
959y
·
2023-11-05 22:25
hadoop大数据
数据仓库
大数据
redis实操指南,
kafka
入门到精通文档
HVALSkey返回指定Key的所有Values名。返回值:Value的列表。HMSETkeyfieldvalue[fieldvalue…]逐对依次设置参数中给出的Field/Value对。如果其中某个Field已经存在,则用新值覆盖原有值。如果Key不存在,则创建新Key,同时设定参数中的Field/Value。其实就是同时设置多个键和值的操作。HMGETkeyfield[field…]获
m0_64205676
·
2023-11-05 22:44
程序员
面试
java
后端
docker-compose 设置 hostname
version:'3.1'services:zookeeper:container_name:docker-
kafka
_zookeeperimage:zookeeper:3.6hostname:zookeeper001
不忘初心丿
·
2023-11-05 22:44
docker
IDEA2020.3激活来了,请查收!!!
最近在整理Java常用的一些基础、ZooKeeper、Spring全家桶、源码、Dubbo、Elasticsearch、Redis、MySql、RabbitMQ、
Kafka
、Linux、微服务等技术栈。
后端架构进阶
·
2023-11-05 21:26
如何学习Java? 大数据培训学习Java吗?
注意:1、所推荐的学习内容是JavaWeb和
Java后端
开发的路线,非JavaWeb和
Java后端
开发的同学请适当参考其学习思想即可,切勿照搬。
玩大数据的小轩
·
2023-11-05 20:33
Java后端
开发(十一)-- Mysql8的详细安装与环境配置
目录1.mysql数据库下载官网在线下载2.下载MySQL的安装包3.安装MySQL
普雅^0^雷蒙达
·
2023-11-05 20:13
Java后端笔记
java
开发语言
Elasticsearch集群及
kafka
集群原理图解
ES集群单个文档写入流程1,客户端发起向es集群的9200发起写单个文档的请求如果请求发送到非主节点,则请求会转发至主节点主节点会根据写文档的id进行计算,判断要将写文档请求转发至哪个主分片路由判断标准:1)如果带id,则根据id的hash值mod集群分片数,取余后得到要发往哪个分片2)如果不带id,则master会给文档生成一个随机值作为id,并对其进行hash计算后,再mod集群分片数,取余后
beretxj_
·
2023-11-05 19:15
kafka
elasticsearch
运维
zookeeper
FlinkSQL源码解析(二)Java SPI机制
现在想更深入的了解,我们书写的sql语句是如何通过connecter属性连接
kafka
、hdfs等,为修改源码新增connector做铺垫。在这里我们先了解下JavaSPI机制。
Yuan_CSDF
·
2023-11-05 19:19
#
Flink源码解析
大数据
flink
kafka
之broker
----常规配置1、broker.id:每个broker的唯一标识2、port:监听端口3、zookeeper.connect:用于保存broker元数据的zookeeper地址4、log.dirs:
kafka
luohuan519
·
2023-11-05 17:26
CVE-2023-34040
Kafka
反序列化RCE
漏洞描述Spring
Kafka
是SpringFramework生态系统中的一个模块,用于简化在Spring应用程序中集成Apache
Kafka
的过程,记录(record)指
Kafka
消息中的一条记录。
合天网安实验室
·
2023-11-05 17:26
kafka
分布式
基于MM2的跨IDC
kafka
热备多活方案
本文主要介绍360商业化在跨IDC
kafka
热备方面的实践,接下来会按以下顺序介绍各个议题:MM2简介跨IDC
kafka
热备多活方案产品化需要注意的风险MM2简介在介绍MM2之前先谈一下MM1,这个是
kafka
360技术
·
2023-11-05 16:30
数据库
kafka
java
分布式
大数据
大数据开发笔记(四):Hive分区详解
大数据开发笔记推荐:大数据开发面试知识点总结_GoAI的博客-CSDN博客_大数据开发面试本文详细介绍大数据hadoop生态圈各部分知识,包括不限于hdfs、yarn、mapreduce、hive、sqoop、
kafka
GoAI
·
2023-11-05 16:08
#
Hive
大数据笔记
分区表
大数据
hive
kubernetes简介
kafka
也是go语言。Kubernetes具有,易学(轻量级,简单容易理解),便携(支持公有云私有云和混合云),可扩展(模块化,可插拔),自动重调度重启和复制。分布式的基本操作是部署,调度以及伸缩。
hailunw
·
2023-11-05 13:49
#
分布式理论
kubernetes
大数据
分布式
容器
java程序设计大作业题目,附答案+考点
思维导图前言在很多时候,我们都可以在各种框架应用中看到ZooKeeper的身影,比如
Kafka
中间件,Dubbo框架,Hadoop等等。为什么到处都看到ZooKeeper?
MySQL学习笔记
·
2023-11-05 13:33
程序员
java
经验分享
面试
Kafka
在分布式系统中的 7 大应用场景
Kafka
介绍
Kafka
是一个开源的分布式流式平台,它可以处理大量的实时数据,并提供高吞吐量,低延迟,高可靠性和高可扩展性。
waynaqua
·
2023-11-05 12:17
kafka
搭建
Kafka
开发环境
搭建
Kafka
开发环境我们搭建了
kafka
的服务器,并可以使用
Kafka
的命令行工具创建topic,发送和接收消息。下面我们来搭建
kafka
的开发环境。
weixin_34253539
·
2023-11-05 12:03
运维
操作系统
java
kafka
幂等/事务特性
https://blog.csdn.net/oTengYue/article/details/104727512
愤怒的老照
·
2023-11-05 11:37
Apache
Kafka
:大数据的实时处理时代
流处理在流处理刚被提出来的时候,很多人认为流处理只能进行做近似的结果或者增量的计算,倘若你想保证其安全性,以Lamda架构为基础,利用流处理得到最现在的结果。但同时你需要采用batchprocessing等其他方式来保证其全局的安全性以正确性。在如此多年的研究结果下,在我看来,流处理并不一定是近似的,或者是仅仅以无法保证真确性为代价而提高速度的一种数据处理方式。相反,流处理应该是一个与全局计算、b
伯雅之英
·
2023-11-05 11:51
让代码变得优雅简洁的神器:Java8 Stream流式编程
目前市面上很多开源框架,如Mybatis-Plus、
kafka
Streams以及Flink流处理等,都有一个相似的地方,即用到Stream流特性,其写出的代码简洁而易懂,当然,若是在不熟悉流特性的基础上而贸然去使用
小满只想睡觉
·
2023-11-05 10:17
java
mybatis
kafka
k8s部署
Kafka
集群
前言本次的目的是通过使用k8s搭建一个三节点的
kafka
集群,因为
kafka
集群需要用到存储,所以我们需要准备三个持久卷(PersistentVolume)简称就是PV。
余空啊
·
2023-11-05 08:19
有限状态机的4种Java实现对比
写在前面:2020年面试必备的
Java后端
进阶面试题总结了一份复习指南在Github上,内容详细,图文并茂,有需要学习的朋友可以Star一下!
Java柱柱
·
2023-11-05 07:59
python3 gzip解压_使用 Python 解压缩 gzip 数据流
有一个使用场景:将tar.gz读成字节数组(bytearray)然后发往
Kafka
。
weixin_39686353
·
2023-11-05 07:00
python3
gzip解压
Android 字体资源
专注于分享各领域原创系列文章,擅长
java后端
、移动开发、商业变现、人工智能等,希望大家多多支持。
Android西红柿
·
2023-11-05 07:55
Android基础
android
字体
面试
Android可绘制资源概览(背景、图形等)
专注于分享各领域原创系列文章,擅长
java后端
、移动开发、商业变现、人工智能等,希望大家多多支持。
Android西红柿
·
2023-11-05 07:19
Android基础
android
图形资源
背景
面试
APM建设踩了哪些坑?去哪儿旅行分布式链路追踪系统实践
从APM整体架构设计入手,讲述了日志收集、
Kafka
传输和Flink任务处理等环节的性能优化实践和踩坑经验。同时,作者结合丰富的分布式系统架构经验,探讨了APM系统和Trace数据的价值。
TakinTalks稳定性社区
·
2023-11-05 07:13
容量治理
flink sql实战案例
目录一、背景二、流程三、案例1.flinksql读取
Kafka
并写入MySQLsourcesinkinsert2.flinksql读
kafka
写入kudusourcesinkinsert四、注意点1.断点续传
chimchim66
·
2023-11-05 06:38
sql
sql
flink
java
Flink SQL 常用作业sql
目录flinksql常用配置
kafka
sourcetomysqlsink窗口函数开窗datagen自动生成数据表tumble滚动窗口hop滑动窗口cumulate累积窗口groupingsets多维分析
zhaoyang10
·
2023-11-05 06:34
flink
sql
大数据
Springboot3整合Mybatis-plus3.5.3报错
✅作者简介:大家好,我是Leo,热爱
Java后端
开发者,一个想要与大家共同进步的男人个人主页:Leo的博客当前专栏:报错以及Bug✨特色专栏:MySQL学习本文内容:记录一次Docker与Redis冲突
LeoToJavaer
·
2023-11-05 06:23
#
报错及Bug
mybatis
SpringBoot3
asp.net docker-compose添加
kafka
和redis和zookeeper
docker-compose.yml添加redis:image:redis:alpine
kafka
:image:"bitnami/
kafka
:3.1.1"depends_on:-zookeeperzookeeper
赫__________________
·
2023-11-05 04:46
docker
kafka
redis
Netty实战专栏 | JavaIO演进之路
✅作者简介:大家好,我是Leo,热爱
Java后端
开发者,一个想要与大家共同进步的男人个人主页:Leo的博客当前专栏:Netty实战专栏✨特色专栏:MySQL学习本文内容:Netty实战专栏|JavaIO
LeoToJavaer
·
2023-11-05 03:51
Netty实战专栏
netty
Java
io
kafka
生产者和消费者的具体交互以及核心参数详解
目录目标
KAFKA
官方API实战生产者发送消息消费者消费消息把消费者组对应的主题内未消费完的数据导入到文件中生产者核心参数acksretries&&retry.backoff.msbuffer.memory
我的身前一尺是我的世界
·
2023-11-05 01:43
Kafka
kafka核心参数
kafka消费时间
kafka指定时间消费
kafka指定结束时间消费
kafka导出未消费的消息
java后端
响应结果Result
目录一、Result1-1、响应代码1-2、调用响应1-3、在前端vue页面使用方法一、Result1-1、响应代码packagecom.aaa.common;importlombok.AllArgsConstructor;importlombok.Data;importlombok.NoArgsConstructor;@Data@AllArgsConstructor@NoArgsConstruc
程序员小王꧔ꦿ
·
2023-11-05 01:05
java
java
开发语言
flink cdc原理与使用
基于FlinkSQLCDC的数据同步方案实践2.1案例1:FlinkSQLCDC+JDBCConnector2.2案例2:CDCStreamingETL2.3案例3:StreamingChangesto
Kafka
3FlinkSQLCDC
Direction_Wind
·
2023-11-05 00:18
flink
数据库
mysql
上一页
70
71
72
73
74
75
76
77
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他