Kafka集群

K8s 1.27.1 实战系列（六）Pod

其核心设计目标包括：轻量性：Pod本身不负责资源分配，仅作为容器的逻辑封装单元，高效利用集群资源。临时性：Pod生命周期短暂，故障或任务完成后会被销
白昼ron·2025-03-11 02:05

Windows下安装kafka

在Windows系统下安装Kafka可以按照以下步骤进行：1.安装Java环境Kafka是基于Java开发的，因此需要先安装Java环境。
计算机软件程序设计·2025-03-11 02:34

phoenix无法连接hbase shell创建表失败_报错_PleaseHoldException: Master is initializing---记录020_大数据工作笔记0180

今天发现,我的phoenix,去连接hbase集群,怎么也连不上了,奇怪了...弄了一晚上org.apache.hadoop.hbase.PleaseHoldException:Masterisinitializing
添柴程序猿·2025-03-11 00:52

Rabbitmq从入门到精通

简介1.2组件介绍1.1消息队列的选择1.2Docker安装rabbitmq1.4消息应答机制2.1交换机类型2.1direct2.2fanout2.3topic：2.4header3RabbitMQ集群搭建
XJzz3·2025-03-10 23:17

Java进阶：Zookeeper相关笔记

●zookeeper一般用来实现诸如数据订阅/发布、负载均衡、命名服务、集群管理、分布式锁和分布式队列等功能。
m0_74825634·2025-03-10 23:43

部署skywalking进行链路跟踪

2.环境k8s集群：v1.20.4版本k8s-master1192.168.110.235k8s-node1192.168.110.236k8s-node2192.168.110.237nfs192.168.110.239elasticsearch
BUG弄潮儿·2025-03-10 20:20

使用ansible搭建k8s集群--单节点部署+work节点扩展

单节点部署：1.基础系统配置准备一台虚机配置内存2G/硬盘30G以上最小化安装Ubuntu16.04server或者CentOS7Minimal配置基础网络、更新源、SSH登录等2.下载文件下载工具脚本easzup，举例使用kubeasz版本2.0.2https://github.com/easzlab/kubeasz/blob/master/docs/setup/quickStart.md如果下
chennuan1991·2025-03-10 20:49

【从0到1构建高并发后端系统：Spring Boot + Redis + RabbitMQ实战指南】

一、架构演进路径图图1：从单体架构到微服务集群的演进过程二、核心优化策略与落地实践1.数据库优化方案分库分表实践：//ShardingSphere分片策略配置spring:shardingsphere:
小怪兽9699·2025-03-10 17:58

Guava本地缓存的使用

作为API或者某种功能系统来用的话，无论单机/集群（集群其实就形成了近乎Guava副本的情况），Guava中的数据增
肥肥肥柯·2025-03-10 16:27

代码托管平台深度解析：Gitee如何赋能本土开发团队

一、本地化体验：消除开发环境壁垒Gitee扎根国内开发者生态，从网络基础设施到用户界面均针对本土需求优化：高速访问：国内服务器集群确保代码拉取、提交响应毫秒
·2025-03-10 13:16

构建高可用性、高性能和可扩展的Zabbix Server架构

简介本教程讲解了一下如何设计构建一个高性能、高可靠、高扩展的Zabbix监控集群。
·2025-03-10 13:14

MongoDB 集群模式简单了解

MongoDB集群模式简单了解在现代应用架构中，数据库的扩展性和高可用性至关重要，而MongoDB作为NoSQL数据库的佼佼者，提供了多种集群模式来应对不同场景的需求。
黑风风·2025-03-10 13:00

k-Shape：高效准确的聚类方法

k-Shape依赖于一个可扩展的迭代优化过程，它创建同质和良好分离的集群。作为距离度量，k-Shape使用标准化的交叉相关。基于距离度量的性质，
优化算法侠Swarm-Opti·2025-03-10 12:26

面试必备：Kafka高频面试题及答案解析

本文，已收录于，我的技术网站aijiangsir.com，有大厂完整面经，工作技术，架构师成长之路，等经验分享Kafka中的ProducerAPI是如何工作的？
江-小北·2025-03-10 10:11

【每日八股】Redis篇（七）：集群

目录Redis集群模式有哪些？Redis切片集群的工作原理？哈希槽和Redis节点如何对应？主从模式的同步过程？全量同步增量同步主服务器如何知道要将哪些增量数据发送给从服务器？如何避免主从数据不一致？
YGGP·2025-03-10 07:48

kafka + flink +mysql 案例

假设你有两个Kafka主题：user_activities_topic和product_views_topic，并且你希望将user_activities_topic中的数据写入到user_activities
angen2018·2025-03-10 07:47

数据湖架构与实时数仓实践：Hudi、Iceberg、Kafka + Flink + Spark

1.引言：数据湖与数据仓库的融合趋势在大数据时代，传统的数据仓库（DataWarehouse,DW）因其强一致性和高效查询能力，一直是企业数据分析的核心。然而，随着数据量和数据类型的爆炸式增长，传统数据仓库的存储成本和数据管理难度逐渐增加。为了解决这些问题，数据湖（DataLake）概念应运而生。数据湖能够存储原始数据，支持半结构化和非结构化数据，提供更灵活的计算框架，但其缺乏事务管理和数据一致性
晴天彩虹雨·2025-03-10 03:22

后端架构师必知必会系列：分布式计算与任务调度

什么时候集群化？部署方式又该怎样？……等
AI天才研究院·2025-03-10 01:38

后端架构师必知必会系列：分布式锁与并发控制

在互联网发展的早期，基于集中式服务器部署模式的网站在高并发访问下性能一般般，不过随着大规模集群的出现，如今很多网站已经将应用部署在分布式集群上，特别是在微服务架构兴起之后。为了提高
AI天才研究院·2025-03-10 01:37

K8s 1.18.6版本基于 ingress-nginx 实现金丝雀发布（灰度发布）

环境软件版本kubernetesv1.18.6nginx-ingress-controller0.32.0Rancherv2.4.5本次实验基于Rancher-v2.4.5部署了1.18.6版本的k8s集群
zerchin·2025-03-10 01:35

Hadoop：分布式计算平台初探

Hadoop是一个开发和运行处理大规模数据的软件平台，是Apache的一个用java语言实现开源软件框架，实现在大量计算机组成的集群中对海量数据进行分布式计算。
dccrtbn6261333·2025-03-10 01:32

MapReduce：分布式计算的基石

它使得在大型商用硬件集群（数千台机器）上进行并行处理海量数据成为可能。本文将深入探讨MapReduce的核心概念、工作原理、应用场景以及一些高级主题。
Earth explosion·2025-03-10 00:30

Kafka、RabbitMQ、RocketMQ的区别

Kafka、RabbitMQ、和RocketMQ都是广泛使用的消息中间件，它们各自有不同的特点、架构设计和应用场景。
种豆走天下·2025-03-10 00:26

redis热key

数据倾斜：在Redis集群中，热Key可能导致某个节点的负载过高。缓存击穿：热Key过期或被删除时，大量请求直接打到数据库，导致数据库压力骤增。
杏花春雨江南·2025-03-09 23:17

Apache Kafka 实践：优化与脚本操作指南

本文还有配套的精品资源，点击获取简介：本文深入探讨了ApacheKafka核心概念及其在IT环境中的应用，特别是与Shell脚本的关联。
无畏道人·2025-03-09 23:15

Apache Doris 现行版本 Docker-Compose 运行教程

如有生产环境或性能测试集群部署诉求，请使用裸机/虚机部署或K8SOperator部署方案！
atbigapp.com·2025-03-09 22:41

电商业务数据测试用例参考

1.数据采集层测试用例编号测试目标测试场景预期结果TC-001验证用户行为日志采集完整性模拟用户浏览、点击、加购行为KafkaTopic中日志记录数与模拟量一致TC-002验证无效数据过滤规则发送爬虫请求
SuperCreators·2025-03-09 22:40

Apache Kafka 在生产环境中的管理与优化：从理论到实践

ApacheKafka在生产环境中的管理与优化：从理论到实践在当今这个数据驱动的时代，ApacheKafka已经成为企业流处理和实时数据管道的核心工具。
Echo_Wish·2025-03-09 22:07

Hadoop：全面深入解析

Hadoop是一个用于大规模数据处理的开源框架，其设计旨在通过集群的方式进行分布式存储和计算。
CloudJourney·2025-03-09 21:29

MySQL集群：高可用架构的利与弊

MySQL集群作为一种常见的解决方案，被广泛用于解决单点故障和性能瓶颈的问题。但它是否适合所有场景？本文将从实际应用的角度，分析MySQL集群的核心特点、优势与不足。1.什么是MySQL集群？
异常驯兽师·2025-03-09 18:00

hbase 默认目录_[HBase] HBase数据存储目录解析

RegionServer，都会对应1~n个子目录/hbase/oldWALs当/hbase/WALs中的HLog文件被持久化到存储文件时，它们就会被移动到/hbase/oldWALs/hbase/hbase.id集群的唯一
weixin_39577422·2025-03-09 13:21

hbase集群archive目录过大问题处理

1.问题现象现场反馈hbase集群/hbase/archive目录过大，大小约为1.52PB现场集群已经清理掉2个月以前的snapshot文件，当前archive目录文件仍不能释放现场发现1T以上的archive
spring208208·2025-03-09 12:15

K8s 1.27.1 实战系列（二）安装集群并初始化

一、安装kubeadm、kubelet和kubectl（所有节点）1、配置k8s的yum源地址cat<
白昼ron·2025-03-09 12:44

搭建测试用的redis集群 访问失败小记

首先在ubuntu下启动redis集群下载redis源码，编译成功后，进入utils/create-cluster目录，运行./create-clusterstart.
yinhezhanshen·2025-03-09 09:42

HDFS的设计架构

1.HDFS的设计思想HDFS的设计目标是解决大规模数据存储和处理的问题，其核心设计思想包括：（1）分布式存储-数据被分割成多个块（Block），并分布存储在集群中的多个节点上。
F_0125·2025-03-09 05:21

无人机+自组网：中继通信增强技术详解

在无人机集群中，每个无人机都可以作为终端节点、中继节点或中心节点，实
无人机技术圈·2025-03-09 04:00

一致性哈希HashRing

一致性哈希HashRing一致性哈希算法是一种高效的分布式存储和负载均衡技术，广泛应用于分布式系统中，如缓存集群、分布式数据库等。
留白1108·2025-03-09 04:12

ElasticSearch学习笔记 --- 调研笔记知识点

4.安装Marvel(ES的管理和监控)5.特点：分布式的实时文件存储，每个字段都被索引并可被搜索分布式的实时分析搜引擎可以扩展到上百台服务器，处理PB级机构化或非结构化数据6.集群是一组具有相同cl
杨鑫newlfe·2025-03-09 03:00

ES03 - ES其他知识点

ES其他知识点文章目录ES其他知识点一：分布式集群和路由计算1：单节点集群2：故障转移3：水平扩容4：宕机故障5：路由计算二：分片控制流程1：协调节点2：写流程3：读流程4：更新流程5：多文档操作流程5.1
是小崔啊·2025-03-09 03:42

K8S 集群节点扩容

k8s231192.168.99.2312C4Gmaster1.23.1720.10.24k8s232192.168.99.2322C4Gwoker1.23.1720.10.24k8s233（需上线）192.168.99.2332C4Gwoker1.23.1720.10.24当现有集群中的节点资源不够用
小小大胖子3·2025-03-09 02:38

当Citus添加工作节点时报错---citus_add_node(‘database-2‘, 5433)

不得不说，毕业设计push我学习了很多新鲜的知识具体报错由于硬件条件不允许，我在两台虚拟机上部署了三个postgresql以组成一个协调节点和两个工作节点的集群，其中database-1节点上部署了一个工作节点
学软件的小铃铛·2025-03-09 02:30

大数据运维实战指南：零基础入门与核心技术解析（第一篇）

大数据运维实战指南：零基础入门与核心技术解析（第一篇）系列文章目录第一篇：大数据运维概述与核心技能体系第二篇：Hadoop生态体系与集群部署实战第三篇：分布式存储系统运维与优化第四篇：资源调度框架YARN
emmm形成中·2025-03-09 01:19

【K8S问题系列 | 10】在K8S集群怎么查看各个pod占用的资源大小？【已解决】

要查看Kubernetes集群中各个Pod占用的资源大小（包括CPU和内存），可以使用以下几种方法：1.使用kubectltop命令kubectltop命令可以快速查看当前Pod的CPU和内存使用情况。
颜淡慕潇·2025-03-09 01:34

K8s（八）：如何进行 Kubernetes 集群健康检查？

K8s（八）：如何进行Kubernetes集群健康检查？
Seal^_^·2025-03-09 01:00

hadoop框架与核心组件刨析（四）MapReduce

MapReduce的核心思想分而治之：将大规模数据集分割成多个小块，分布到集群中的多个节点上并行处理。Map阶段：将输入数据转换为键值对（Key-ValuePair）
小刘爱喇石( ˝ᗢ̈˝ )·2025-03-09 00:42

如何收集 Kubernetes 集群的日志

一、Kubernetes日志收集核心方案1.EFKStack（Elasticsearch+Fluentd+Kibana）•适用场景：企业级日志分析、复杂查询需求、长期日志存储。•组件作用：•Fluentd：日志收集器（部署为DaemonSet，每个Node运行一个实例）。•Elasticsearch：日志存储与索引（支持分布式、高并发）。•Kibana：可视化仪表盘（日志搜索、图表展示）。2.Lo
沉默的八哥·2025-03-09 00:42

【AntDB数据库 问答日日新】8.24（5）AntDB分布式架构集群节点不包括下面哪一项

17.AntDB分布式架构集群节点不包括下面哪一项？A、GTMCOORDB、CoordinatorC、DatanodeD、Proxy答案:D解析:无难度:普通18.部署AntDB分布式，
数据库爱好者一枚呀·2025-03-08 18:55

微信群二维码采集，帮助企业或个人获客

前几天准备找人换群来着却发现采集群二维码接口，自己动手写了个免费微信群二维码采集工具下载好，直接打开使用即可使用软件下载地址：微群多多.zip-蓝奏云
e4ert·2025-03-08 16:44

spark集群，kafka集群和zookeeper的docker集群快速搭建

准备操作安装docker(宿主机)yuminstalldocker(宿主机时centos用yum管理包)systemctldaemon-reload(重加载deamon服务，是docker的核心)systemctlrestartdocker.service(重启docker服务)docker常用命令dockerps-a查看所有容器dockersearchUbuntu寻找Ubuntu的镜像docke
醉与浮·2025-03-08 15:05

ZooKeeper的初识（Zookeeper基本知识，ZooKeeper shell，ZooKeeper数据模型 ，ZooKeeper Watcher 监听机制，ZooKeeper选举机制）

Zookeeper基本知识Zookeeper集群搭建Zookeeper集群搭建指的是ZooKeeper分布式模式安装。通常由2n+1台servers组成。
kismetG·2025-03-08 15:33
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他