E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
reids高可用
hadoop硬件配置
高可用
datanode namenode硬件配置
每个分布式文件系统分块在NameNode的内存中大小约为250个字节,此外还要加上文件和目录所需的250字节空间。500字节一个块假设我们有5000个平均大小为20GB的文件并且使用默认的分布式文件系统分块大小(64MB)同时副本因子为3,5000*20GB=102400000M=97T那么NameNode需要保存5千万个分块的信息,这些分块的大小加上文件系统的开销总共需要1.5GB的内存。但是一
xcagy
·
2024-02-19 13:07
HADOOP
K8S
hadoop硬件
田尚滨
ACK One:构建混合云同城容灾系统
作者:蔡靖对于当前业务运行在IDC内的Kubernetes集群中,希望通过云计算为云下业务提供同城灾备的
高可用
冗余能力,可利用阿里云分布式云容器平台ACKOne[1]来提供统一得流量、应用和集群管理,实现业务流量的多集群路由和灾难情况下的流量的自动平滑容灾
·
2024-02-19 12:35
ACK One:构建混合云同城容灾系统
作者:蔡靖对于当前业务运行在IDC内的Kubernetes集群中,希望通过云计算为云下业务提供同城灾备的
高可用
冗余能力,可利用阿里云分布式云容器平台ACKOne[1]来提供统一得流量、应用和集群管理,实现业务流量的多集群路由和灾难情况下的流量的自动平滑容灾
·
2024-02-19 12:31
MySQL之MHA
高可用
配置及故障切换
MHA(MasterHighAvailability)是一个用于管理MySQL复制集群的
高可用
解决方案。MHA可以自动处理主服务器(Master)的故障并进行故障切换,同时还可以最小化复制延迟。
·
2024-02-19 10:33
大厂的供应链采购系统设计
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及数据中台等架构和开发设计目前主攻降低软件复杂性设计、构建
高可用
系统方向。
·
2024-02-19 10:16
后端
[AIGC] Kafka 的 Rebalance 机制:保证分区的可靠性和
高可用
性
在分布式系统中,Kafka是一种流处理平台,具有高吞吐量、低延迟和可扩展性等特点。在Kafka中,消费者组是一组消费者的集合,它们共同消费一个topic的所有分区。在消费者组中,每个分区只能由一个消费者消费,这个消费者被称为leader,其他消费者被称为follower。在Kafka中,Rebalance是一个重要的概念,它用于在消费者组中分配分区。当有新的消费者加入消费者组,或者消费者组中的消费
程序员三木
·
2024-02-15 10:55
AI
kafka
分布式
Redis缓存穿透和缓存雪崩以及解决方案
Redis缓存穿透和缓存雪崩以及解决方案缓存穿透解决方案布隆过滤缓存空对象比较缓存雪崩解决方案保证缓存层服务
高可用
性依赖隔离组件为后端限流并降级数据预热缓存并发分布式锁缓存穿透缓存穿透是指查询一个一定不存在的数据
安晓生
·
2024-02-15 08:02
运维工程师的转型与升级:解析35岁半衰期现象及其应对策略
目录什么是运维工程师1.系统维护:2.故障排除:3.安全管理:4.性能优化:5.自动化流程:6.云计算服务:运维工程师需要学什么Linux系统知识:网络基础知识:企业级负载集群:
高可用
集群:运维监控:脚本编程
Srlua
·
2024-02-15 02:11
运维
话题分享
运维
TiDB分布式关系型数据库简介
1.关于TiDBTiDB是由PingCAP公司开源的一款分布式关系型数据库,它支持水平扩展、强一致性和
高可用
性。TiDB兼容MySQL协议,可以无缝替代MySQL,特别适合处理大规模数据的场景。
翔云123456
·
2024-02-15 01:11
TiDB
MySQL
分布式
tidb
分布式
数据库
聊聊PowerJob Server的
高可用
序本文主要研究一下PowerJobServer的
高可用
PowerJobSpringWorkertech/powerjob/worker/PowerJobSpringWorker.javapublicclassPowerJobSpringWorkerimplementsApplicationContextAware
·
2024-02-14 23:51
powerjob
Redis的哨兵系统
哨兵系统能够在Redis实例出现问题时自动进行故障转移,确保系统的
高可用
性。其工作原理如下:监控(Monitoring):哨兵会不断地检查你的主节点和从节点是否运行正常。
Persistence is gold
·
2024-02-14 20:29
redis
数据库
缓存
企业级利器,阿里云 NVMe 盘和共享存储
7x24
高可用
是怎样炼成的?现实世界中单点故障是常态,确保故障下业务连续性是
高可用
系统的核心能力,那么在金融、保险、政务等关键应用中,如何保证业务7*24
高可用
?
阿里云技术
·
2024-02-14 18:50
nvme
阿里云
LVS/DR&LVS
高可用
集群
一、基本知识HeartbeatHeartbeat项目是Linux-HA工程的一个组成部分,其与lvs在本质上无关。Heartbeat提供了2个核心的功能正是lvs所需要的,心跳监测部分和资源接管,心跳监测可以通过网络链路和串口进行,而且支持冗余链路,安装了Heartbeat的两台机器会通过心跳检测互相检测对方的状态,当检测到对方失效的时候会调用资源接管来做接管服务器,保证高可靠性。在一个高可靠的l
Hannah_zh
·
2024-02-14 18:39
Linux
LVS集群
keepalived
ipvsadm
VS/DR
在Ubuntu 14.04上使用Consul服务发现系统的介绍
简介Consul是一个分布式、
高可用
、数据中心感知的服务发现和配置系统。它可以用来呈现服务和节点,提供灵活和强大的接口,使客户端始终能够获取其所属基础设施的最新视图。
白如意i
·
2024-02-14 17:30
linux
ubuntu
consul
服务发现
CentOS7安装Redis3
-3.0.7.tar.gz编译将源码翻译为.o文件进入到Redis目录下cd/root/redis-3.0.7执行make命令1.png创建一个安装目录cd/usr/loca/mkdirredis安装
reids
八戒_媳妇儿
·
2024-02-14 16:06
网易面试:请设计一个
高可用
性的软件架构,说明设计思路
尼恩说在前面在40岁老架构师尼恩的读者交流群(50+)中,最近有小伙伴拿到了一线互联网企业如阿里、滴滴、极兔、有赞、希音、百度、网易、美团的面试资格,遇到很多很重要的面试题:请设计一个
高可用
性的软件架构
40岁资深老架构师尼恩
·
2024-02-14 12:41
面试
面试
架构
重构
sentinel
java
中间件
微服务
2021金三银四面试跳槽必备:15个互联网大厂Java高级工程师核心面试宝典
集合22题及答案解析JVM与调优21题及答案解析并发编程28题及答案解析Spring25题及答案解析23种设计模式解析SpringBoot25题及答案解析分布式高并发架构解析(消息队列,分库分表,事务,
高可用
码农小芷
·
2024-02-14 11:43
【解决】No Spring Session store is configured: set the ‘spring.session.store-type‘ property
NoSpringSessionstoreisconfigured:setthe‘spring.session.store-type’property”原因:sessionstoretype是用来设置session的存放方式,现在Springboot中只支持
reids
辣个仔
·
2024-02-14 08:03
问题解决方案
redis
spring
boot
redis
Sentinel服务流控
以及熔断降级来保护系统资源QPS超过阈值直接失败流量控制(flowcontrol),其原理是监控应用流量的QPS或并发线程数等指标,当达到指定的阈值时对流量进行控制,以避免被瞬时的流量高峰冲垮,从而保障应用的
高可用
性
高冷大猛男
·
2024-02-14 06:56
sentinel
java
开发语言
高并发系统的设计(1)
简历上写了有大数据、高并发、
高可用
、分布式系统的架构设计以及研发经验。我把经验写一些。系统的并发量高,怎么办?多上几台服务器,搞个集群!为什么要这么干呢?
Fuly1024
·
2024-02-14 05:32
面试刷题
面试
深入理解负载均衡:关键概念与实践
负载均衡是现代IT架构中不可或缺的组件,它能确保
高可用
性和可靠性,同时提升用户体验。在本文中,我们将深入探讨负载均衡的关键概念和实践技巧,以帮助你更好地理解其在系统设计中的重要性。什么是负载均衡?
一休哥助手
·
2024-02-14 04:45
负载均衡
运维
中移在线:基于openGauss的数据库自主创新替代实践
中移在线基于openGauss输出了安全可控、数据无损、业务低感知的自主创新数据库替代方案,不仅满足了业务应用的自主创新转型要求,其
高可用
架构和高性能优势也提升了业务系统的稳定性和服务效率。
renxyz
·
2024-02-14 04:40
openGauss
数据库
京东云StarDB for openGauss实现混合多云场景元数据安全可控
基于openGauss产品的高性能、
高可用
、高智能、高安全四大核心特性,京东云推出了StarDBforopenGauss的商业版本,作为一款基
renxyz
·
2024-02-14 04:39
openGauss
数据库
一万字详解 Redis Cluster Gossip 协议
RedisClusterGossip协议今天来讲一下
Reids
Cluster的Gossip协议和集群操作,文章的思维导图如下所示。
爱PSUI设计的星星
·
2024-02-14 02:42
一文彻底搞懂Redis的三种集群模式
文章目录1.主从模式1.1基本原理1.2工作机制1.3优缺点2.哨兵模式2.1基本原理2.2工作机制2.3优缺点3.集群模式3.1基本原理3.2工作机制3.3优缺点4.总结redis
高可用
的三种模式:主从模式
澡澡洗澡澡
·
2024-02-13 22:24
Java开发
redis
数据库
缓存
java
高可用
-性能测试-入门
性能测试一般情况下都是由测试这个职位去做的,那还需要我们开发学这个干嘛呢?了解性能测试的指标、分类以及工具等知识有助于我们更好地去写出性能更好的程序,另外作为开发这个角色,如果你会性能测试的话,相信也会为你的履历加分不少。这篇文章是我会结合自己的实际经历以及在测试这里取的经所得,除此之外,我还借鉴了一些优秀书籍,希望对你有帮助。本文思维导图:#一不同角色看网站性能#1.1用户当用户打开一个网站的时
无心六神通
·
2024-02-13 19:25
架构
性能测试
高可用
高可用
-超时-重试-详解
由于网络问题、系统或者服务内部的Bug、服务器宕机、操作系统崩溃等问题的不确定性,我们的系统或者服务永远不可能保证时刻都是可用的状态。为了最大限度的减小系统或者服务出现故障之后带来的影响,我们需要用到的超时(Timeout)和重试(Retry)机制。想要把超时和重试机制讲清楚其实很简单,因为它俩本身就不是什么高深的概念。虽然超时和重试机制的思想很简单,但是它俩是真的非常实用。你平时接触到的绝大部分
无心六神通
·
2024-02-13 19:55
架构
超时
重试
Java
高可用
架构
一、
高可用
架构概述1、单点故障概念:业务只运行在一台服务器上,如果服务器出现故障,就会造成业务中断,甚至数据丢失。2、
高可用
架构:(1)概念:
高可用
架构是指计算机系统能够保证无故障持续运行的概率。
Bean295
·
2024-02-13 17:45
架构
阿里云
云计算
计算机网络
负载均衡
hadoop 分布式集群安装与原理
我们分享一套能让您轻松完成集群搭建的方法,包括Hadoop的源码编译、企业级环境安装与配置和常用大数据组件的基本原理,请点击下面连接按笔记顺序进行学习服务器基础环境批量操作多台服务器zookeeper编译hadoop源码
高可用
海牛大数据_青牛老师
·
2024-02-13 12:44
阿里内部“高并发通关秘籍”曝光,看完带给你独一无二的认知!
引言众所周知,软件系统有三高:高并发、高性能、
高可用
。三者既有区别也有联系,门门道道很多,全面讨论可以大战三天三夜。
码农小芷
·
2024-02-13 09:38
一二三应用开发平台文件处理设计与实现系列之7——minio多节点共享磁盘模式验证
背景在不了解minio架构设计之前,我根据既往经验推测minio是将文件读写封装实现了一个应用系统,如要实现
高可用
,则需要部署两个minio节点,共享同一块磁盘。
学海无涯,行者无疆
·
2024-02-13 09:55
#
能力扩展
附件上传下载
文件处理
minio
对象存储
文件存储方案
linux系统tomcat使用session复制和共享
session复制和session共享技术
高可用
性和容错性:通过复制或共享Session,当一个Tomcat实例发生故障或停机时,其他实例可以接管并继续处理用户请求,而不会丢失Session数据。
丨析木丨
·
2024-02-13 07:49
linux
linux
tomcat
firefox
网易有道 | REDIS 云原生实战
REDIS云原生实战摘要本次以Redis为范例,阐述了有道基础架构团队在基础设施容器化道路上的实践,主要将从声明式管理,Operator工作原理,容器编排,主从模式,集群模式,
高可用
策略,集群扩缩容等方面展开
有道AI情报局
·
2024-02-13 05:16
有道技术团队
有道技术干货
云原生
redis
数据库
第七章 备份恢复
处理方案:主从、
高可用
、备份+日志。逻辑:droptruncatedelete
MySQL_oldguo
·
2024-02-13 00:23
分布式环境下,互斥性与幂等性问题,分析与解决思路
如何用较低成本实现系统的
高可用
、易伸缩、可扩展等目标就显得越发重要。为了解决这一系列问题,系统架构也在不断演进。传统的集中式系统已经逐渐无法满足要求,分布式系统被使用在更多的场景中。
life_niu
·
2024-02-12 20:23
Redis初识
开源基于键值的存储服务系统多种数据结构高性能、功能丰富Redis的特性速度快持久化多种数据结构支持多种编辑语言功能丰富简单主从复制
高可用
、分布式Redis特性-速度快10wops(官方10w次读写)数据存在哪
香沙小熊
·
2024-02-12 17:47
揭秘阿里自研搜索引擎 Havenask 在线检索服务
本文针对性介绍了Havenask的在线服务,它具备
高可用
、高时效、低成本的优势,帮助企业和开发者量身定做适合业务发展的智能搜索服务。
阿里技术
·
2024-02-12 15:01
搜索引擎
Havenask
开源
在线检索
阿里巴巴
分布式
检索系统
GFS分布式文件系统
目录引言一、文件系统的作用1.1、文件系统的挂载使用二、GlusterFS简介三、GlusterFS特点3.1、扩展性和高性能3.2、
高可用
性3.3、全局同一命名空间3.4、弹性卷管理3.5、基于标准协议四
IT.cat
·
2024-02-12 14:56
linux服务
运维
linux
服务器
缓存
Glusterfs分布式存储
目录一、简介二、特点1、扩展性和高性能2、
高可用
性3、全局统一命名空间4、弹性卷管理5、基于标准协议三、专业术语四、GlusterFS构成五、GlusterFS的工作流程1、工作流程2、弹性HASH算法六
忙碌滴比特流
·
2024-02-12 14:55
运维
linux基础
运维
Redis缓存
高可用
集群在电商网站中的应用
实战案例:Redis缓存
高可用
集群在电商网站中的应用背景某大型电商网站在日常运营中面临巨大的访问量和数据压力。
MarkHD
·
2024-02-12 10:44
缓存
redis
spring
Redis缓存
高可用
集群浅谈
Redis缓存
高可用
集群的创新主要体现在以下几个方面:无中心节点设计:Redis集群是一个由多个主从节点群组成的分布式服务器群,它没有中心节点,这使得集群可以水平扩展,并且可以线性扩展到上万个节点(官方推荐不超过
MarkHD
·
2024-02-12 10:14
缓存
redis
数据库
实战 | Nginx+keepalived 实现
高可用
集群
前言今天通过两个实战案例,带大家理解Nginx+keepalived如何实现
高可用
集群,在学习新知识之前您可以选择性复习之前的知识点:给小白的Nginx10分钟入门指南Nginx编译安装及常用命令Nginx
开源Linux
·
2024-02-12 07:45
Hadoop-HA
高可用
集群部署
HadoopHAHA概述(1)所谓HA(HighAvailablity),即
高可用
(7*24小时不中断服务)。(2)实现
高可用
最关键的策略是消除单点故障。
魔笛Love
·
2024-02-12 07:13
hadoop
hdfs
big
data
java中间件之rabbitmq
用于在分布式系统中存储转发消息,在易用性、扩展性、
高可用
性等方面表现不俗。1.2RabbitMQ特点(1)可靠性(Reliab
这一刻_776b
·
2024-02-12 05:42
聊聊如何设计一个容错的微服务架构
本文介绍了基于RisingStack的Node.js咨询和开发经验构建和操作
高可用
性微服务系统的最常见技术和架构模式。如果你不熟悉本文中的模式,
Java码农
·
2024-02-12 03:55
字节跳动官方出品AI,白嫖使用GPT4!
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及数据中台等架构和开发设计目前主攻降低软件复杂性设计、构建
高可用
系统方向。
JavaEdge.
·
2024-02-12 03:44
java
架构演变及分布式解决方案
测试成本也越来越高单体架构下的集群部署:(Session共享问题:通过SpringSession+Redis实现分布式Session共享)通过负载均衡器+多WEB容器实例实现水平负载,提升系统的并发性和
高可用
性
大能嘚吧嘚
·
2024-02-11 22:39
微服务
微服务架构
分布式
架构
java
微服务
再读raft
是什么raft实际是日志复制一致性算法,特别是当服务器宕机之后仍然可以保证
高可用
以及一致性。核心思想是通过大多数一致来实现
高可用
以及一致性。
小跑001
·
2024-02-11 20:55
Redis之旅--Redis集群(十二)
RedisSentinel简介 Sentinel(哨兵)进程是用于监控redis集群中Master主服务器工作的状态,在Master主服务器发生故障的时候,可以实现Master和Slave服务器的切换,保证系统的
高可用
无剑_君
·
2024-02-11 20:23
大厂的供应链域数据中台设计
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及数据中台等架构和开发设计目前主攻降低软件复杂性设计、构建
高可用
系统方向。
·
2024-02-11 18:16
后端
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他