Kafka集群调优

kafka学习笔记6 ACL权限 —— 筑梦之路

在Kafka中，ACL（AccessControlList）是用来控制谁可以访问Kafka资源（如主题、消费者组等）的权限机制。
筑梦之路·2025-01-22 06:59

K8S中Pod控制器之DaemonSet(DS)控制器

DaemonSet(DS)控制器DaemonSet类型的控制器可以保证在集群中的每一台（或指定）节点上都运行一个副本。一般适用于日志收集、节点监控等场景。
元气满满的热码式·2025-01-22 06:27

Shell控监Kafka积压

1、获取Kafka消息堆积情况vicheck-kafka-lag.sh#！
docsz·2025-01-22 06:25

java微服务中消息队列处理中间件基础语法学习，零基础学习

常用的Java消息队列工具包括RabbitMQ、ApacheKafka和ActiveMQ。下面我将详细介绍这些消息队列工具在Java中的基础语法和使用方法。
慧香一格·2025-01-22 05:52

消息队列篇--原理篇--RabbitMQ和Kafka对比分析

RabbitMQ和Kafka是两种非常流行的消息队列系统，但它们的设计哲学、架构特点和适用场景存在显著差异。对比如下。
weisian151·2025-01-22 05:52

【Es】python es操作

表因为es是集群所以es_hosts是列表fromelasticsearchimportElasticsearchES_HOSTS=["127.0.0.1:9200"]ES_HTTP_AUTH="***
小毛驴吃梨子·2025-01-22 03:03

Kafka系列5-Kafka 常见面试题

文章目录一.常见面试题1.1Kafka中的ISR(InSyncRepli)、OSR(OutSyncRepli)、AR(AllRepli)代表什么？1.2Kafka中的HW、LEO等分别代表什么？
只是甲·2025-01-22 01:19

分布式资源管理和调度架构

资源管理和调度是将计算任务分配到资源的过程，为了处理并发的计算任务，系统会通过集群的方式组织资源。集群中的资源可以按照服务器或者虚拟机的方式划分。注：本文是《分布式架构原理与实践》的
johnny233·2025-01-22 00:14

小白学JVM调优一: 三种场景模拟OOM获得dump文件

小白学JVM调优一:三种场景模拟OOM获得dump文件三种场景模拟OOM获得dump文件实操一.mac用idea启动main方法导致堆内存溢出,使用EclipseMemoryAnalyzer分析://VMoption
hinsss·2025-01-22 00:13

Kafka消息轨迹方案设计与实现

在处理过的几个千万级TPS的Kafka集群中，消息追踪始终是一个既重要又棘手的问题。
小马不敲代码·2025-01-22 00:06

hive电影数据分析系统 Springboot协同过滤-余弦函数推荐系统 爬虫2万+数据 大屏数据展示 + [手把手视频教程 和 开发文档]

余弦函数推荐系统爬虫2万+数据大屏数据展示+[手把手视频教程和开发文档]【功能介绍】1.java爬取【豆瓣电影】网站中电影数据,保存为data.csv文件,数据量2万+2.data.csv上传到hadoop集群环境
QQ-1305637939·2025-01-21 22:28

hadoop电影数据分析系统 Springboot协同过滤-余弦函数推荐系统 爬虫2万+数据 大屏数据展示 + [手把手视频教程 和 开发文档]

Springboot协同过滤-余弦函数推荐系统爬虫2万+数据大屏数据展示【Hadoop项目】1.java爬取【豆瓣电影】网站中电影数据,保存为data.csv文件,数据量2万+2.data.csv上传到hadoop集群环境
QQ-1305637939·2025-01-21 22:28

spark电影数据分析系统 Springboot协同过滤-余弦函数推荐系统 爬虫2万+数据 大屏数据展示 + [手把手视频教程 和 开发文档]

余弦函数推荐系统爬虫2万+数据大屏数据展示+[手把手视频教程和开发文档【功能介绍】1.java爬取【豆瓣电影】网站中电影数据,保存为data.csv文件,数据量2万+2.data.csv上传到hadoop集群环境
QQ-1305637939·2025-01-21 22:58

ctr、crictl和nerdctl命令介绍与常用命令列表

crictl工具crictl是一个遵循CRI（ContainerRuntimeInterface）规范的命令行工具，用于检查和调试Kubernetes集群中的
篙芷·2025-01-21 22:51

RocketMQ的集群架构是怎样的?

今天分享关于【RocketMQ的集群架构是怎样的?】面试题。希望对大家有帮助；RocketMQ的集群架构是怎样的?
java1234_小锋·2025-01-21 21:17

kafka学习笔记2 —— 筑梦之路

KRaft模式Kafka的KRaft模式是一种新的元数据管理方式，旨在去除对ZooKeeper的依赖，使Kafka成为一个完全自包含的系统。
筑梦之路·2025-01-21 20:09

深度挖掘：Oracle RAC数据库架构分析与实战攻略

深度挖掘：OracleRAC数据库架构分析与实战攻略本书内容从集群概念入手，深入RAC原理和结构进行分析，结合存储和网络传输知识，全面讲解小机集群数据库RAC的安装示例，探讨RAC的管理和维护，详述备份恢复
拟声的主扬·2025-01-21 20:37

自建 MongoDB 实战 | MongoDB 文档查询

主要涉及到：·MongoDB的安装及基本使用（点击进入）·MongoDB文档查询（本期内容）·MongoDB复制集的介绍及搭建（后续更新）·MongoDB分片集群的介绍及搭建（后续更新）·MongoDB
新钛云服·2025-01-21 15:46

分布式二级缓存组件实战（Redis+Caffeine实现）

但是一般redis是单独部署成集群，所以会有网络IO上的消
鸨哥学JAVA·2025-01-21 14:46

服务器性能监控与优化系统：实战指南与代码案例

通过实时监控和调优，能够及时发现并解决潜在的性能瓶颈，从而提升用户体验和系统稳定性。本文将详细介绍服务器性能监控与优化系统的实践方法，并通过具体代码案例进行说明。
我的运维人生·2025-01-21 14:07

JVM学习指南(40)-Java调优工具介绍

文章目录引言JVM调优工具概览工具详细解析JConsoleVisualVMMATJProfiler调优工具的选择与使用最佳实践与技巧总结引言在Java开发中，JVM（Java虚拟机）调优是一个至关重要的环节
俞兆鹏·2025-01-21 11:49

oceanbase架构、功能模块、数据存储、特性、sql流转层等概念详解

一、架构图OceanBase数据库采用无共享（Shared-Nothing）分布式集群架构，各个节点之间完全对等，每个节点都有自己的SQL引擎、存储引擎、事务引擎，运行在普通PC服务器组成的集群之上，具备高可扩展性
小成很成·2025-01-21 11:16

nginx反向代理kafka集群实现内外网隔离访问 —— 筑梦之路

背景说明我们在使用Kafka客户端连接到Kafka集群时，即使连接的节点只配置了一个集群的Broker地址，该Broker将返回给客户端集群所有节点的信息列表。
筑梦之路·2025-01-21 11:42

k8s部署Kafka集群

1.1、Kafka(消息队列)是一个分布式消息中间件,支持分区的、多副本的、多订阅者的、基于zookeeper协调的分布式消息系统。
潞哥的博客·2025-01-21 10:38

K8S环境快速部署Kafka(K8S外部可访问)

apiVersion:v1kind:Servicemetadata:name:zookeeper-nodeportnamespace:kafka-testspec:type:NodePortports:
2401_83817392·2025-01-21 10:31

kafka学习笔记5 PLAIN认证——筑梦之路

在Kafka中，SASL（SimpleAuthenticationandSecurityLayer）机制包括三种常见的身份验证方式：SASL/PLAIN认证：含义是简单身份验证和授权层应用程序接口，PLAIN
筑梦之路·2025-01-21 09:00

云原生周刊：K8s 生产环境架构设计及成本分析

开源项目推荐KubeZoneNetKubeZoneNet旨在帮助监控和优化Kubernetes集群中的跨可用区（Cross-Zone）网络流量。
KubeSphere 云原生·2025-01-21 09:59

大数据学习(37)- Flink运行时架构

大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦1）作业管理器（JobManager）JobManager是一个Flink集群中任务管理和调度的核心
viperrrrrrr·2025-01-21 09:57

我的软件架构师——Java 职位面试经历。

面试官问我有关AWS、Docker、Kubernetes、Kafka、ElasticSearch、SQL/NoSQL和设计模式的问题。
小蜗牛慢慢爬行·2025-01-21 08:44

Apache SeaTunnel 2.3.9 正式发布：多项新特性与优化全面提升数据集成能力

本次更新新增了`Helm集群部署、Transform支持多表、Zeta新API、表结构转换、任务提交队列、分库分表合并、列转多行`等多个功能更新！
·2025-01-21 07:40

【开源免费】kettle作业调度—自动化运维—数据挖掘—informatica-批量作业工具taskctl

关注公众号"taskctl"，关键字回复"领取"即可获权产品简介taskctl是一款由成都塔斯克信息技术公司历经10年研发的etl作业集群调度工具，该产品概念新颖，体系完整、功能全面、使用简单、操作流畅
加菲盐008·2025-01-21 06:31

k8s部署rabbitmq集群（使用rabbitmq-cluster-operator部署）

1.下载并安装cluster-operatorkubectlapply-frabbitmq-cluster-operator.yml百度网盘请输入提取码：qy992.部署rabbitmq实例kubectlapply-frabbitmq.yaml存储类改为自己的（如：managed-nfs-storage）#rabbitmq.yaml---apiVersion:rabbitmq.com/v1beta
仇誉·2025-01-21 06:55

hadoop常用命令

yarnapplication-list杀死对应的yarn任务yarnapplication-kill{application_Id}（id可以通过-list看到）hdfs查看hdfs目录hdfsdfs-ls/（查看本集群的目录
我要用代码向我喜欢的女孩表白·2025-01-21 05:54

Kubernetes架构原则和对象设计（二）

Kubernetes常见问题解答本文从云计算架构发展入手，详细分析了kubernetes的生态系统、设计理念、分层架构、API设计原则、架构设计原则等，并介绍了使用kubelet+staticPod拉起集群的过程
grahamzhu·2025-01-21 05:53

【高级开发进阶】总篇

未来一年我可能会以这个为主，写博文，待全部写完后会出书一本，希望大家有所收获第一篇性能调优专题****第1章Jvm1.1JVM类加载机制1.1.1启动类、扩展类、应用程序类加载器1.1.2手写自定义类加载器
vip1024p·2025-01-21 04:13

你说通过Kafka AdminClient获取Lag会有性能问题？尊嘟假嘟0.o

0.前言前阵子团队里出了个大故障，本质是因为其他语言实现的client有问题，非常频繁的请求大量元数据，而Kafka服务端这边也没有做什么限制，导致KafkaBroker宕了。
·2025-01-21 03:31

kubernetes 集群搭建(二进制方式)

除了使用kubeadm等工具简化集群的创建过程外，直接通过二进制文件安装Kubernetes组件也是一种常见的方法。
難釋懷·2025-01-21 02:50

gds文件 导出_GaussDB 200使用GDS服务导入导出数据

GaussDB200支持将存在远端服务器上的TEXT、CSV和FIXED格式的数据导入到集群中。本文介绍使用GDS(GaussDataService)工具将远端服务器上的数据导入GaussDB200。
weixin_39576066·2025-01-21 01:37

MPP-大规模并行处理

MPP(MassivelyParallelProcessing)，即大规模并行处理，在数据库非共享集群中，每个节点都有独立的磁盘存储系统和内存系统，业务数据根据数据库模型和应用特点划分到各个节点上，每台数据节点通过专用网络或者商业通用网络互相连接
quanzaiwoxin1·2025-01-21 01:35

Windchill配置-数据库相关的基础操作

Linux1.2.2监听相关命令1.2.3进入sqlplus的方式1.2.4基础SQL命令二、常用的SQL语句2.1数据库表空间使用情况查询2.1.1统计2.1.2明细2.2数据库表空间扩容2.2.1单机环境2.2.2集群环境
这城有海·2025-01-20 23:19

70_Redis数据结构-RedisObject

从Redis使用者的视角来看，一个Redis节点可以包含多个数据库（在非集群模式下默认为16个，而在集群模式下则限制为1个），每个数据库
袁庭新·2025-01-20 21:09

同城双活和两地三中心架构设计

同城两个机房各承担一部分流量，一般入口流量完全随机，内部RPC调用尽量通过就近路由闭环在同机房，相当于两个机房镜像部署了两个独立集群，数据仍然是单点写到主机房数据库，然后实时同步到另外一个机房。
架构未来·2025-01-20 19:16

kafka 学习笔记3-传统部署Kraft模式集群——筑梦之路

部署kafka集群规划一般模式下，元数据在zookeeper中，运行时动态选举controller，由controller进行Kafka集群管理。
筑梦之路·2025-01-20 19:10

共筑BMC技术生态，OurBMC受邀参加第二届融通生态大会

12月11-12日，第二届国家新一代自主安全计算系统产业集群融通生态大会（以下简称“融通生态大会”）在长沙成功召开。
·2025-01-20 17:19

VictoriaMetrics 中文教程（10）集群版简介

VictoriaMetrics中文教程系列文章：VictoriaMetrics中文教程（01）简介VictoriaMetrics中文教程（02）安装VictoriaMetrics中文教程（03）如何配置Prometheus使其把数据远程写入VictoriaMetricsVictoriaMetrics中文教程（04）对接Grafana同时介绍vmuiVictoriaMetrics中文教程（05）对接
·2025-01-20 17:17

云原生周刊：K8s 生产环境架构设计及成本分析

开源项目推荐KubeZoneNetKubeZoneNet旨在帮助监控和优化Kubernetes集群中的跨可用区（Cross-Zone）网络流量。
·2025-01-20 17:45

【kafka】简单运用go语言操作kafka实现生产者和消费者功能的包，confluent-kafka-go和sarama

confluent-kafka-go和sarama对比特性confluent-kafka-gosarama底层实现基于librdkafkaC库完全用Go实现性能高吞吐量、低延迟吞吐量较低，适合常规应用安装依赖需要
{⌐■_■}·2025-01-20 16:17

flume系列之：flume落cos

flume系列之：flume落cos一、参考文章二、安装cosjar包三、添加hadoop-cos的相关配置四、flume环境添加hadoop类路径五、使用cos路径六、启动/重启flume一、参考文章Kafka
快乐骑行^_^·2025-01-20 13:42

【Elasticsearch集群】轻松部署 Elasticsearch：8.0 集群

概要一文教你轻松掌握Elasticsearch：8.0+集群部署，JDK17+环境准备准备3台centos服务器:192.168.0.10、192.168.0.11、192.168.0.121、更新系统
库洛王子·2025-01-20 12:59

Elasticsearch 中的节点（比如共 20 个），其中的10 个选了一个 master，另外 10 个选了另一个 master，怎么办？思维导图 代码示例（java 架构)

在Elasticsearch中，如果出现集群分裂（Split-brain）的情况，即一部分节点选举了一个Master节点，而另一部分节点选举了另一个Master节点，这会导致数据不一致和集群不可用。
用心去追梦·2025-01-20 09:27
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他