E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
高可用】
构建高效可靠的消息队列系统:设计与实现
目录一、引言二、设计目标2.1、
高可用
性1.集群搭建1.1DockerCompose配置示例2.容错和恢复2.1异常检测与自动故障迁移2.2SpringBoot代码示例3.心跳检测4.优雅关闭2.2、持久性
喔的 喔的嘛呀
·
2024-01-31 07:31
数据库
AI场景下存储架构有哪些?
以下是一些常见的存储架构及其优势:文件系统存储:NAS(NetworkAttachedStorage):如阿里云NAS等,提供
高可用
、可扩展的网络文件共享服务,适合于AI训练过程中模型文件和大量非结构化数据的存储需求
古猫先生
·
2024-01-31 05:25
云技术
服务器
人工智能
linux
从单点 Redis 到 1 主 2 从 3 哨兵的架构演进之路
一、前言我们有个项目中用的MySQL、Redis、ES、微服务都是单节点部署的,没有做集群模式部署,为了提高整体的可用性,对项目的部署架构进行了升级,支持
高可用
。
程序员xysam
·
2024-01-31 05:50
架构
java
学习
程序人生
3台服务器+StarVCenter,搭建“超融合云平台”-完美体验-跑100台虚拟机
这样计算节点即有
高可用
的计算能力,又有
高可用
的存储能力。目前,超融合是多种云平台各种架构中综合性能最强、可用性最高、性价比最高的一种架构模式。今天为大家介绍怎样用3台服务器搭建超融合云平台。
wtyuiohxvm
·
2024-01-31 04:49
服务器
云原生
数据库
[docker] Docker容器服务更新与发现之consul
起初服务都是单节点的,不保障
高可用
性,也不考虑服务的压力承载,服务之间调用单纯的通过接口访问。
为什么老是名字被占用
·
2024-01-31 03:38
docker
容器
consul
云原生
运维
五、Redis 的哨兵机制与哨兵集群
之前提到Redis有主从库集群机制,以减轻主库的请求压力,实现Redis的
高可用
性。并且,我们已经知道,请求的写操作只会在主库上执行,然后主库再同步到各个从库上。
从不中二的忧伤
·
2024-01-31 01:35
VM 虚拟机 构建 Prometheus + Thanos 环境 (1) - 基础架构 && Prometheus 安装
构建Prometheus+Thanos环境时,考虑到Prometheus原生开源版并未提供
高可用
性的支持,特别是在面对更大规模和
高可用
性要求的监控场景时。因此,引入Thanos成为一种选择。
炸鸡物料库
·
2024-01-31 01:54
监控
Thanos
prometheus
云计算
Redis哨兵模式实现网站限流
1、Redis的特性速度快,持久化,支持多种数据结构,支持多种编程语言,功能丰富,主从复制,
高可用
及分布式。2、Redis的应用场景Redis是一个开源。
守住阳光
·
2024-01-30 23:13
redis
高可用
主从模式全量更新1.主从复制期间的写操作写入replicationbuffer,如何避免缓冲区耗尽内存影响redis的稳定性(1)对写操作限流,避免写操作过多耗尽内存(2)使用
高可用
方案,主节点有故障及时切换到从节点
ZyyIsPig
·
2024-01-30 23:20
redis
redis
数据库
RabbitMQ、Kafka、RocketMQ 是如何实现
高可用
的?
本文从
高可用
的角度观察一下RabbitMQ、Kafka、RocketMQ,看看它们各自的实现思路。
SlowGO
·
2024-01-30 22:03
DBA04-1 搭建mycat 分片服务器
分散存放到多个数据库服务器上,达到负载效果垂直分割:单个表切换成多个表,按业务类别分散到不同数据库.水平分割:将表里的多条记录切分到不同数据库.搭建数据分片服务器MyCAT基于JAVA的分布式适合大量写入数据的存储需求分片
高可用
集群读写分离都可以使用
mid的博客
·
2024-01-30 22:27
MySQL数据库知识集
搭建mycat分片服务器
DBA03 1、准备MHA集群环境 2、配置MHA集群环境 3、测试MHA集群
HA(keepalived)、LB(LVSHaproxynginx)MHA软件+一主多从主从同步结构---------->实现mysql
高可用
集群(属于mysql专属软件)准备6台虚拟机,并按照本节规划配置好
mid的博客
·
2024-01-30 22:57
MySQL数据库知识集
搭建MHA集群
apache-dolphinscheduler-3.2.0集群部署
一、apache-dolphinscheduler介绍ApacheDolphinScheduler是一个分布式的开源调度系统,它提供了一种可视化、可扩展、
高可用
的任务调度和数据处理方案。
爱上雪茄
·
2024-01-30 21:32
大数据
机器学习
JAVA知识
apache
大数据
Dubbo学习笔记(三)
配置原则3.2重试次数3.3超时时间3.3.1Dubbo消费端3.3.2Dubbo服务端3.3.3配置原则3.4启动时检查3.5版本号3.6本地存根四、SpringBoot与dubbo整合的三种方式五、
高可用
薛薛哦
·
2024-01-30 21:55
分布式
dubbo
3 - 主从复制结构|持久化|数据类型
主从复制结构|持久化|数据类型主从复制没有
高可用
功能命令行配置修改配置文件(永久有效,重启了redis服务依然有效)配置带验证的主从复制主从从配置哨兵服务(可实现
高可用
)持久化RDB文件的使用AOF文件的使用数据类型主从复制没有
高可用
功能
桑_榆
·
2024-01-30 20:12
数据库
redis
数据库
MySQL(4)
文章目录一、MySQL的主从复制主从复制原理【实战】MySQL主从复制主从复制基本故障处理处理方法一处理方法二处理方法三延时从库半同步复制过滤复制二、MHA
高可用
架构工作流程MHA工具介绍MHA实验环境基于
Dream visit
·
2024-01-30 19:56
企业服务
mysql
数据库
服务器
RabbitMQ学习(一)AMQP协议
业务上,可以实现服务提供者和消费者之间的数据解耦,提供
高可用
性的消息传输机制,在实际生产
kobe0429
·
2024-01-30 19:43
负载均衡技术助力企业数字化转型和
高可用
架构实现
文章目录什么是
高可用
架构什么是负载均衡负载均衡设备硬件负载均衡的代表产品软件负载均衡的代表产品负载均衡基于OSI模型分层负载均衡在网络层负载均衡在传输层负载均衡在应用层优先考虑负载均衡的场景硬件负载均衡的缺点云负载均衡正在成为最佳选择企业数字化转型对负载均衡的需求什么是
高可用
架构
Par@ish
·
2024-01-30 17:21
运维技术
负载均衡
运维
RabbitMQ安全防护,加固策略
RabbitMq简介中间件简介消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,流量削锋等问题实现高性能,
高可用
,可伸缩和最终一致性[架构]使用较多的消息队列有ActiveMQ(安全)
中年程序员一枚
·
2024-01-30 17:27
环境搭建专栏
rabbitmq
安全
分布式
ZK和ETCD的产品对比和差异
ZK和ETCD的产品对比和差异1.底层实现1.1
高可用
机制1.2数据结构2.客户端视角2.1临时数据2.2监听机制探讨zk和etcd的底层实现以及客户端使用上的差异。
李姓门徒
·
2024-01-30 15:03
Zookeeper
分布式
中间件
etcd
数据库
Redis:企业级的深入
高可用
性:集群中的每个节点都可以包含数据的部分副本,确保即使其中一个节点出现故障,其他节点依然可以继续提供服务。自动分片和负载均衡:Redis集群支持自动分片,无
星光闪闪k
·
2024-01-30 15:16
redis
Java
数据库
redis
数据库
缓存
后端
架构
多地多活与单元化架构
为了提高系统的伸缩能力与
高可用
能力,我们都不断的在努力消除系统单点瓶颈。如使用应用集群是为了解决服务层的单点问题,使用主从数据库是为了解决数据库层面的单点问题。
IT枫斗者
·
2024-01-30 13:12
编程学习
JAVA基础工作中实际总结
架构
数据库
java
面试
开发语言
测试用例
android
消息中间件RabbitMQ介绍
消息队列(MQ)是一种应用程序对应用程序的通信方法,由Erlang(专门针对于大数据高并发的语言)语言开发,可复用的企业消息系统,是当前最主流的消息中间件之一,具有可靠性、灵活的路由、消息集群简单、队列
高可用
xmh-sxh-1314
·
2024-01-30 12:56
rabbitmq
高性能和多级
高可用
,云原生数据库 GaiaDB 架构设计解析
1云原生数据库和GaiaDB目前,云原生数据库已经被各行各业大规模投入到实际生产中,最终的目标都是「单机+分布式一体化」。但在演进路线上,当前主要有两个略有不同的路径。一种是各大公有云厂商选择的优先保证上云兼容性的路线。它基于存算分离架构,对传统数据库进行改造,典型产品有AWSAurora、阿里云PolarDB、腾讯云TDSQL-C、百度智能云GaiaDB。数据库作为公有云上的核心基础设施,第一要
百度智能云技术站
·
2024-01-30 12:22
百度智能云数据库
云原生
数据库
百度
Redis面试(二)
1.Redis集群了解吗前面说到了主从同步存在
高可用
和分布式问题,哨兵机制解决了
高可用
问题,而集群就是终极方案,一举解决
高可用
和分布式问题。
海的辽阔
·
2024-01-30 12:21
面试
java知识
redis
面试
数据库
本地MinIO存储服务通过Java程序结合Cpolar内网穿透进行远程连接
它的优点包括高性能、
高可用
性、易于部署和管理、支持多租户等。Cpolar
小沈YO.
·
2024-01-30 11:01
java
开发语言
高可用
架构之异地多活
当谈到架构的
高可用
时,无论是
高可用
计算架构,还是
高可用
存储架构,其本质的设计目的都是为了解决部分服务器故障的场景下,如何保证系统能够继续提供服务。但在一些极端场景下,有可能所有服务器都出现故障。
满载星辉
·
2024-01-30 10:54
后端
电商库存系统一
这对库存系统的准确性和可靠性提出了很高的要求,在各种场景下能保证数据的准确,在遇到突发流量时能保证
高可用
,除此之外,还需要提供熔断和降级的能力,保证在极端情况下不拖垮主站。
程序员的自我修养
·
2024-01-30 10:50
软件系统架构黄金法则:事件驱动架构的力量
传统架构往往采用同步、阻塞的方式进行通信,这种方式在处理高并发、
高可用
、高性能的场景下,往往会遇到瓶颈。此外,传统架构的耦合性较高,不利于系统的扩展和维护。
OpenChat
·
2024-01-30 10:37
AI大模型应用开发实战案例详解
大数据
人工智能
语言模型
AI
LLM
Java
Python
架构设计
Agent
RPA
Xds (eXtensible Discovery Service)理解
XDS协议的设计目标是支持大规模、动态和
高可用
的微服务架构。组成RDS(RouteDiscoveryService):RDS是X
yuluo_YX
·
2024-01-30 09:31
云原生
study
cloud
native
网络
ES实战回顾
业务监控、搜索sug功能、B/M端的一些,业务历史数据,业务单等3、这些索引怎么配置的
高可用
?
shuimuhanchen
·
2024-01-30 08:29
数据处理
elasticsearch
数据库
大数据
Hadoop与Spark横向比较【大数据扫盲】
它们通常提供简单的查询语言,并强调水平扩展和
高可用
性。例如:-键值存储:如Redis,AmazonDynamoDB-列式存储:如ApacheCassandra,HBase-文档数据库:如M
super_journey
·
2024-01-30 06:51
大数据
hadoop
spark
使用 CDC MinIO 汇入端为 CockroachDB 保持持久数据
它从其昆虫名字的坚持不懈中汲取灵感,即使面对硬件故障,CockroachDB也能保证
高可用
性。其分布式架构横跨多个节点,类似于其昆虫原型的适应性。
MinIO官方账号
·
2024-01-30 04:28
硬件架构
minio
cockrachDB
数据库
最全的RocketMQ学习指南,程序员必备的中间件技能
高可用
,具有跟踪和审核功能万亿级消息
丰极
·
2024-01-30 03:53
后端
mq
中间件
架构篇26:
高可用
存储架构-集群和分区
文章目录数据集群数据分区小结上一篇我们讨论了
高可用
存储架构中常见的双机架构,分别为主备复制、主从复制、双机切换和主主复制,并分析了每类架构的优缺点以及适应场景。
星猿杂谈
·
2024-01-30 01:37
软件架构
架构
GFS--Google File System论文翻译和理解
一、系统设计目标
高可用
的大文件分布式文件系统。二、关键点Architecture-架构:有哪些Server,每个Server的功能。Master存储的MetaData的结构。client写数据流程。
不争_900c
·
2024-01-29 23:00
配置nginx+keepalived
高可用
代理数据库ip端口
需求:配置nginx+keepalived
高可用
反向代理数据库ip端口(数据库服务器无法增加新SCANIP或者需要隐藏数据库IP的情况下适用)环境准备:两台centos7.9本机ip为:192.168.20.10
好记忆不如烂笔头abc
·
2024-01-29 21:37
nginx
数据库
tcp/ip
K8S、keepalived、haproxy
高可用
集群实战
K8S、keepalived、haproxy
高可用
集群实战环境:Centos7.6、2个CPU、8G内存以上配置Master1:172.20.26.24Master2:172.20.26.86Master3
lqcbj_IT老混混
·
2024-01-29 17:09
k8s
keepalived
Docker
kubernetes
容器
云原生
美团外卖搜索基于Elasticsearch的优化实践
然而在高并发、
高可用
、大数据量的C端场景,目前可参考的资料并不多。因此,我们希望通过分享在外卖搜索场景下的优化实践,能为大家提供Elasticsearch优化思路上的一些借鉴。
架构未来
·
2024-01-29 17:07
elasticsearch
jenkins
大数据
开发项目发布可能会涉及的流程
服务器选型当选择软件开发项目的服务器时,可以考虑以下几个方面:云服务提供商:主流的云服务提供商包括阿里云、腾讯云、华为云等,它们提供了可靠的服务器托管服务,具有
高可用
性和可扩展性。
仲夏那片海
·
2024-01-29 16:27
运维文档
github
Eureka服务集群DS Replicas为空
Eureka在相互注册(集群)形成
高可用
时DSReplicas为空今儿在用eureka相互注册,想要形成集群时,通过网页浏览时DSReplicas显示为空,如下:查询别人的说法,最后实践验证,如下方法可行
Jastep
·
2024-01-29 15:00
java问题总结
程序世界里的不信任原则
导语人与人之间最重要的是信任,但程序的世界里,可能信任越少越好;我越发觉得越是高性能
高可用
的系统里,不信任原则会体现得更加淋漓尽致。
秃头老码农
·
2024-01-29 13:16
SRE--redis集群
高可用
篇
1.Redis集群与
高可用
1.1redis的编译安装#下载redis二进制安装的依赖包root@redis-server:~#apt-yinstallmakegcclibjemalloc-devlibsystemd-dev
优质&青年
·
2024-01-29 11:17
redis
数据库
缓存
Keepalived+Haproxy+Mysql(双主)
高可用
架构部署
一、背景公司原部署的Mysql架构为keepalived+Mysql双主,但是这个架构有个缺陷是所有的读写请求都在一台机器上(VIP所在机器),造成另一台机器空闲,导致资源浪费,为了解决这个问题,所以需要往Keepalived和mysql之间增加一个haproxy负载均衡插件,将读写请求均衡分布到两台机器上。二、安装keepalived心跳+Mysql双主架构(原有架构)参考:1、快速编译安装my
seaskyccl
·
2024-01-29 10:10
数据库
mysql
架构
adb
读写分离MySQL+MHA+MAXSCALE集群
高可用
需要的包下载:(MHA0.57+MAXSCALE1.432.0)http://down.51cto.com/data/2258543http://down.51cto.com/data/2258544http://down.51cto.com/data/2258545架构图:要点:1、安装配置MHA2、主从搭建3、MAXSCALE安装配置4、单节点故障简介:MasterHighAvailabili
seaskyccl
·
2024-01-29 10:10
数据库
mysql
数据库
5大主流方案对比:MySQL千亿级数据线上平滑扩容实战
1.2停写方案1.3日志方案1.4双写方案(中小型数据)1.5平滑2N方案(大数据量)2.平滑2N扩容方案实践2.1实现应用服务级别的动态扩容2.2实现数据库的秒级平滑2N扩容3.keepalived
高可用
配置大全
seaskyccl
·
2024-01-29 10:10
数据库
设计方案
mysql
oracle
数据库
Mysql5.7
高可用
集群MHA搭建+shell脚本监测切换Manager节点解决单点故障问题
安装MHA五、Manage工具测试五、Shell脚本监测Manager节点解决单点故障问题六、数据库集群的故障测试及切换测试总结前言MHA(MasterHighAvailability)目前在MySQL
高可用
方面是一个相对成熟的解
seaskyccl
·
2024-01-29 10:39
数据库
数据库
想要彻底搞懂大厂是如何实现Redis
高可用
的?看这篇文章就够了!(1.2W字,建议收藏)
高可用
HA(HighAvailability)是分布式系统架构设计中必须考虑的因素之一,它通常是指,通过设计减少系统不能提供服务的时间。假设系统一直能够提供服务,我们说系统的可用性是100%。
跟着Mic学架构
·
2024-01-29 10:54
云上
高可用
博客网站
云上
高可用
博客网站解决方案为企业提供基于云上的
高可用
博客网站架构。采用单地域双可用区部署,具备可用区级别的故障灾备能力,保障数据的可用性和持续性,为用户提供高性能的网站服务。
阿里云优惠 50%
·
2024-01-29 09:31
运维
服务器
阿里云
云计算
开源
百度
微信
云上
高可用
系统-韧性设计模式
韧性设计模式旨在确保系统在面对不可避免的故障时,能够保持
高可用
性、可靠性和性能。这些设计模式不仅关注系统的开发阶段,还包括系统的部署、运维和监控阶段,形成了一个全面
张彦峰ZYF
·
2024-01-29 09:28
系统架构等思考
设计模式
系统架构
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他