E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ceph集群
Redis分布式架构详解:从主从复制到
集群
模式的全栈实践
本文将深入解析Redis分布式体系的核心架构模式,涵盖主从复制、哨兵模式、
集群
部署等关键技术,结合具体代码示例,帮助开发者构建稳定高效的分布式缓存系统。
一切皆有迹可循
·
2025-06-21 17:06
redis
redis
分布式
架构
后端
缓存
数据库
分布式存储
Ceph
之PG状态详解
1.PG介绍一,PG的复杂如下:在架构层次上,PG位于RADOS层的中间。a.往上负责接收和处理来自客户端的请求。b.往下负责将这些数据请求翻译为能够被本地对象存储所能理解的事务。是组成存储池的基本单位,存储池中的很多特性,都是直接依托于PG实现的。面向容灾域的备份策略使得一般而言的PG需要执行跨节点的分布式写,因此数据在不同节点之间的同步、恢复时的数据修复也都是依赖PG完成。2.PG状态表正常的
jiangxi_
·
2025-06-21 17:05
ceph
运维
ceph
pgp
分布式
linux
redis的部署方式详解
为了满足不同的业务需求,Redis提供了多种部署架构,包括主从(Master-Slave)、哨兵(Sentinel)和
集群
(Cluster)。以下是对这三种部署架构的原理、优缺点的详解。
p-knowledge
·
2025-06-21 17:05
redis
数据库
缓存
ceph
创建pool时pg_num的配置
pg_num用此命令创建存储池时:
ceph
osdpoolcreate{pool-name}pg_num确定pg_num取值是强制性的,因为不能自动计算。
lvbibir
·
2025-06-21 17:35
数据库
redis
集群
的三种部署方式
一、主从同步redis的主从同步工作原理简单概括为:1、从服务器(SlaveServer)向(主服务器,Master)发送sync(同步)命令2、master启动后台存盘进程,并收集所有修改数据命令3、master完成存盘后,传送整个数据文件到slave4、slave接受数据文件,加载到内存中完成首次完全同步5、后续有新数据产生时,master继续将新的数据命令传递给slave完成同步redis的
Spring_Lws
·
2025-06-21 17:04
数据库
redis
数据库
缓存
ceph
通过 crush rule 修改故障域
创建故障域为osd的crushrule
ceph
osdcrushrulecreate-replicatedreplicated_osd_leveldefaultosd设置pool使用新创建的crushrule
ceph
osdpoolset
ceph
-filesystem-data0crush_rulereplicated_osd_level
时空无限
·
2025-06-21 17:33
ceph
ceph
算力协同创新与能效优化重构工业场景技术生态
当前工业互联网平台中,约67%的实时决策场景依赖边缘节点完成数据处理,而深度学习模型训练等计算密集型任务则需依托云端异构计算
集群
实现资源优化配置。
智能计算研究中心
·
2025-06-21 14:49
其他
AI Infra:C-S-N-D模型,解码 AI 基础设施的黄金比例
引言:从“算力战争”到“基础设施全景图”过去十年,AI技术的爆发让全球陷入了对算力的争夺战:从GPU到TPU,从千卡
集群
到超算中心。但当我们真正将AI技术落地于工业
·
2025-06-21 13:01
人工智能
Nacos Server
除了DEV环境是单机部署外,其他是
集群
方式部署。对外均以域名方式访问,包括SDK方式连接NacosServer和访问NacosServerDashboard控制台页面。
workflower
·
2025-06-21 07:05
java
服务器
linux
Docker Swarm 与 Docker Compose 对比解析
以下是两者的详细对比:1.核心定位差异维度DockerComposeDockerSwarm用途单机容器编排
集群
容器编排适用环境开发/测试环境生产环境节点数量单机多节点
集群
主要功能定义和运行多容器应用管理和调度
集群
中的服务
思静鱼
·
2025-06-21 05:20
虚拟化技术docker和k8s
docker
eureka
容器
Docker Swarm 与 Kubernetes 在
集群
管理上的主要区别
DockerSwarm和Kubernetes是两种流行的容器编排工具,它们都可以用于部署、管理和扩展容器化应用,但在
集群
管理方面有明显的差异。
思静鱼
·
2025-06-21 05:20
虚拟化技术docker和k8s
docker
kubernetes
容器
HDFS Federation(联邦) 架构YARN的Capacity Scheduler调度策略 ResourceManager的共享存储具体实现方式
为了克服这个限制,Hadoop引入了Federation机制,允许一个
集群
中有多个NameNode/NameSpace,每个NameNode管理一部分文件系统,从而分散负载。
2401_8554978
·
2025-06-21 05:49
hdfs
架构
java
LVS负载均衡群集
VS-DR
集群
概述LVS-DR(LinuxVirtualServerDirectorServer)工作模式,是生产环境中最常用的一种工作模式。
归梧谣
·
2025-06-21 04:44
lvs
负载均衡
服务器
scp与rsync
编写
集群
分发脚本xsyncscp(securecopy)安全拷贝(1)scp定义:scp可以实现服务器与服务器之间的数据拷贝。
JeremyHeria
·
2025-06-21 04:12
#
hadoop
hadoop
大数据
Rsync实操
[email protected]
:/root
[email protected]
'spassword: [root@user1~]#ls anaconda-ks.cfg
ceph
-release
KellenKellenHao
·
2025-06-21 03:38
excel
Redis
集群
服务器重启后虚拟IP中断,应该如何处理
Redis
集群
服务器重启后虚拟IP中断,应该如何处理第一步,先登录阿里云账号,然后在阿里云网站中把所有的
集群
服务器按照主从顺序一次停止。第二步,先把从服务器完全启动成功之后,再把主服务器完全启动成功。
Jerry 二河小鱼
·
2025-06-21 03:36
2025运维
nginx
tomcat
redis
redis
服务器
数据库
运维
linux
LVS+Keepalived 高可用群集
目录引言:一、Keepalived概述1.1keepalived服务重要功能1.管理LVS负载均衡软件2.支持故障自动切换(Failover)3.实现LVS
集群
中节点的健康检查(HealthChecking
2354838711
·
2025-06-20 23:10
linux
服务器
运维
Kafka线上
集群
部署方案:从环境选型到资源规划思考
在分布式消息系统的落地应用中,Kafka
集群
的线上部署方案直接关系到业务系统的稳定性与性能表现。
Edingbrugh.南空
·
2025-06-20 22:33
kafka
kafka
分布式
企业内训|Nvidia智算中心深度技术研修-某智算厂商研发中心
课程为期七天,分模块详细讲解了NV算力资源的网络架构、存储优化、智算
集群
的建设与自动化管理、NCCL通信优化及分布式训练进阶等内容,结合大量实际案例,深入探讨各类技术在智算中心中的应用与最佳实践。
TsingtaoAI
·
2025-06-20 22:00
Nvidia
智算集群
企业内训
智算中心
gpu算力
GPU培训
k8s 1.23.6版本apiserver list-watch原理机制
Kubernetes1.23.6版本中,APIServer的**List-Watch机制**是
集群
状态同步的核心机制,其设计目标是高效、实时地将资源变更通知到各组件(如kubelet、controller-manager
斯普信云原生组
·
2025-06-20 19:39
kubernetes
容器
云原生
Eureka、Nacos、Zookeeper、Redis等应用是AP还是CP?
CConsistency一致性有
集群
cluster,如果有客户端对cluster进行了写操作,改变了cluster中的数据,则后面的客户端请求再次访问请求时,cluster返回给客户端的是最新的数据。
全球潮人
·
2025-06-20 17:28
eureka
zookeeper
redis
08 Redis之
集群
的搭建和复制原理+哨兵机制+CAP定理+Raft算法
5Redis
集群
2.8版本之前,Redis采用主从
集群
模式.实现了数据备份和读写分离2.8版本之后,Redis采用Sentinel哨兵
集群
模式,实现了
集群
的高可用5.1主从
集群
搭建首先,基本所有系统,“
·
2025-06-20 17:57
flink的多种部署模式
##部署模式和运行模式###部署模式-本地local-单机无需分布式资源管理-
集群
-独立
集群
standalone-需要flink自身的任务管理工具-jobmanager接收和调度任务-taskmanager
Azoner
·
2025-06-20 16:54
flink
使用Xinference与LangChain实现强大的模型推理
基于XorbitsInference技术,用户可以通过简单的命令来快速部署和服务这些模型,无论是在本地机器还是在分布式
集群
中。核心原理解析Xinference的设计目标是降低使用复杂模型的
yunwu12777
·
2025-06-20 16:53
langchain
【K8S】详解NodePort 和 ClusterIP
以下是详细对比分析:一、核心区别特性ClusterIPNodePort访问范围仅限
集群
内部访问(通过虚拟IP)支持
集群
外部访问(通过节点IP+端口)暴露方式分配虚拟IP(ClusterIP),无节点端口暴露在每个节点开放固定端口
量化投资和人工智能
·
2025-06-20 16:50
kubernetes
人工智能
开发语言
go
kubernetes
docker
云原生
MySQL读写分离技术详解:架构设计与实践指南
MySQL读写分离技术通过将读操作与写操作路由到不同节点,能够显著提升数据库
集群
的处理能力。
weixin_47233946
·
2025-06-20 09:59
数据库
mysql
数据库
【修复MySQL 主从Last_Errno:1051报错的几种解决方案】
当MySQL主从
集群
遇到Last_Errno:1051报错后不要着急,主要有三种解决方案:方案1:使用GTID场景:mysql>STOPSLAVE;(2)设置事务号,事务号从Retrieved_Gtid_Set
我科绝伦(Huanhuan Zhou)
·
2025-06-20 09:57
mysql
adb
android
LVS 负载均衡群集
这里写目录标题LVS-DR
集群
LVS-DR工作原理数据包流向分析LVS-DR模式特点直接路由模式(LVS-DR)准备案例环境配置负载调度器配置虚拟IP地址(VIP)调整proc响应参配置节点服务器配置虚拟
天空之城夢主
·
2025-06-20 07:49
lvs
负载均衡
运维
时序数据库IoTDB分布式架构解析与运维指南
IoTDB的原生分布式架构将服务分为两个核心部分:ConfigNode(CN):管理节点,负责管理分区表、节点信息以及整个
集群
的负载均衡等功能。
时序数据说
·
2025-06-20 07:42
时序数据库
iotdb
分布式
数据库
大数据
架构
运维
【Ambari3.0.0 部署】Step3—安装JDK17与JDK1.8-适用于el8
因此推荐双版本共存方案,让
集群
灵活兼容各种大数据组件,满足未来升级和遗留需求。JDK17与JDK1.8可
TTBIGDATA
·
2025-06-20 06:37
ambari
bigtop
hdp
hidataplus
edp
大数据
el8
Eureka原理和应用(结合Feign)
EurekaEureka出现原因如果后端之间想要调用服务,其中一种方式就是通过HTTP调用,而一般情况下,url会以硬编码的方式出现在代码中的,但如果开发环境发生了变化,导致地址改变,或者对应的服务可能是以
集群
的
小璐乱撞xllz
·
2025-06-20 02:15
分布式
eureka
feign
分布式
注册中心
后端
Redis Sentinel高可用性与部署详解
本文将基于书籍章节内容,探讨RedisSentinel的工作原理,并提供部署RedisSentinel
集群
的详细步骤。
Kimgoeunlaogong
·
2025-06-20 00:29
Redis
Sentinel
高可用性
故障转移
集群部署
配置优化
MySQL从入门到精通50讲(四十二)-线上环境MySQL Last_Errno:1292故障解决方案
问题的定位和处理问题环境概况及部分参数MySQLVersion:10.1.10-MariaDBMySQLPort:3306同步方式:MIXED+binlog-position+异步复制报警所在的MySQL
集群
是一主两从架构
文宇肃然
·
2025-06-19 22:41
数据库应用实战案例集锦
mysql
数据库
mariadb
The connection to the server localhost:8080 was refused - did you specify the right host or port?
原因分析:在执行kubectl时,首先进行本地封装,然后调用kube-apiserver执行对应命令,在这个过程中需要获取k8s
集群
的配置,默认为当前用户下.kube目录的config,
co-n00b
·
2025-06-19 18:17
Linux
Kubernetes
kubernetes
linux
docker
为什么kafka放弃了zookeeper呢?
原来的角色让我们快速理解Zookeeper(ZK)在整个体系中扮演的角色元数据管理(MetadataManagement):ZooKeeper负责存储和管理Kafka
集群
的核心元数据。
动态一时爽,重构火葬场
·
2025-06-19 18:10
middleware
哲学与架构
distributed
kafka
zookeeper
分布式
Kubernetes(k8s)中Node, Pod, Namespace和Service之间的关系(Grok3回答)
namespace和service之间是什么关系在Kubernetes(k8s)中,Node、Pod、Namespace和Service是核心概念,它们之间有着密切的关系,共同构成了Kubernetes
集群
的运行机制
晨欣
·
2025-06-19 17:36
kubernetes
容器
云原生
【2025软考高级架构师】论文篇——4、论可靠性系统中软件容错技术的应用
通过采用以
集群
化的形式进行应用部署;通过主备形式的数据库部署进行软件容错;通过程序设计方面进行
_Richard_
·
2025-06-19 16:58
2025年软考系统架构师
架构
LVS
集群
DR模式 + keepalived
文章目录一、LVS-DR数据包流量分析(同一局域网)二、LVS-DR中的ARP问题三、解决ARP的两个问题的设置方法四、LVS-DR处理问题后的流量分析五、LVS-DR特性六、KeepalivedLVS-DR模式+keepalived实验一、LVS-DR数据包流量分析(同一局域网)1、客户端向目标VIP发送请求,负载均衡器接收2、负载均衡器根据负载均衡算法选择后端真实服务器,不修改也不封装IP报文
突币楠波望
·
2025-06-19 15:52
lvs
keepalived
合合信息开源业内首个AI Agent管理终端Chaterm,开启云资源氛围管理新篇章!
然而,随着企业云原生架构的深入应用,终端管理正面临前所未有的挑战:多
集群
、跨云平台的资源调度日益复杂,传统基于命令行的运维方式已难以满足快速响应和精准管控的需求。
CSDN资讯
·
2025-06-19 14:45
开源
人工智能
自建k8s
集群
,利用开源的GitLab、Jenkins和Harbor实现CI/CD和DevOps的过程回顾
使用自己部署的Kubernetes
集群
,结合GitLab、Jenkins和Harbor实现CI/CD和DevOps的过程大致如下:1.代码管理(GitLab):-开发者在GitLab上创建代码仓库,编写代码并提交变更
chunmiao3032
·
2025-06-19 07:55
java
开发语言
01.生产环境-03-kafka4.0
集群
部署
Kafka3.8三节点生产环境配置优化(基于KRaft模式,8C/16G内存)以下是对您提供的配置的完善和优化建议,针对三节点
集群
(IP:10.62.1.181/182/183)和16GB内存环境:环境规划
·
2025-06-19 05:09
Kafka
集群
以开启客户端鉴权
在Kubernetes环境中,如果您使用的是StrimziKafkaOperator来管理您的Kafka
集群
,您可以通过CustomResourceDefinitions(CRD)来配置Kafka
集群
以开启客户端鉴权
·
2025-06-19 04:38
Kafka 4.0.0
集群
部署
Kafka4.0.0
集群
部署1.1关闭防火墙和selinux关闭防火墙systemctlstopfirewalld.servicesystemctldisablefirewalld.service关闭selinuxsetenforce0
JavaGPT
·
2025-06-19 04:37
Java
kafka
kafka
分布式
Elasticsearch:delete_by_query使用方法
首先,在大数据量下,不推荐使用delete_by_query的方案进行数据删除,这种方式会给es
集群
的cpu、内存、io带来巨大的压力,
集群
有down机的风险。
棉花糖_码农夜读
·
2025-06-19 02:23
elasticsearch
大数据
搜索引擎
Debezium系列之:debezium同步sqlserver数据库数据到kafka
集群
Debezium系列之:debezium同步sqlserver数据库数据到kafka
集群
一、Debezium应用和功能延伸二、debeziumsqlserver数据库插件三、部署debeziumsqlserver
快乐骑行^_^
·
2025-06-18 22:26
debezium
Debezium系列
同步sqlserver数据库
kafka集群
云端算力革命:川翔云电脑如何重新定义创作自由
一、核心优势:突破物理极限的云端工作站弹性算力调度:提供RTX3090至48GB显存的RTX4090Plus全系列GPU配置,支持1-8卡
集群
并行计算。
渲染101专业云渲染
·
2025-06-18 21:46
电脑
云计算
houdini
blender
maya
Kubernetes 部署 Kafka
集群
:容器化与高可用方案(二)
四、Kafka
集群
高可用方案解析4.1副本机制与分区分配Kafka的副本机制是实现高可用性和数据持久性的核心。
计算机毕设定制辅导-无忧
·
2025-06-18 19:38
#
Kafka
kubernetes
kafka
linq
什么是Hadoop Yarn
HadoopYARN:分布式
集群
资源管理系统详解1.什么是YARN?
ThisIsClark
·
2025-06-18 19:35
大数据
hadoop
大数据
分布式
【鲲苍提效】提升系统韧性,从故障注入&故障重试开始
汉得鲲苍基础架构管理平台的核心目标是为企业的异构系统提供简单高效的一站式统一闭环管理能力,包括统一资源(
集群
、主机、存储等)管理、统一应用及部署管理、统一监控管理、统一服务治理,帮助企业实现更快、更好、
·
2025-06-18 14:34
开发工具后端java
linux 安装kafka服务
:解压安装包tar-zxvfkafka_2.12-3.3.2.tgz三:修改配置文件配置文件位置:kafka_2.12-3.3.2/config/server.properties#指定broker在
集群
中的唯一编号
Carver猫哥
·
2025-06-18 10:58
运维笔记【Linux】
linux
kafka
运维
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他