Standalone高可用第12页

KAFKA高可用架构涉及常用功能整理

KAFKA高可用架构涉及常用功能整理1.kafka的高可用系统架构和相关组件2.kafka的核心参数2.1常规配置2.2特殊优化配置3.kafka常用命令3.1常用基础命令3.1.1创建topic3.1.2

李姓门徒·2024-01-31 11:07

flink cdc，standalone模式下,任务运行一段时间taskmanager挂掉

在使用flinkcdc，配置任务运行，过了几天后，任务无故取消，超时，导致taskmanager挂掉，相关异常如下：异常1：didnotreacttocancellingsignalinterrupting;itisstuckfor30secondsinmethod：org.apache.flink.connector.idbc.internal.JdbcoutputFormat,flush(id

java咸鱼_km·2024-01-31 10:21

阿里面试：Sentinel熔断降级，是如何实现的？

尼恩说在前面在40岁老架构师尼恩的读者交流群(50+)中，最近有小伙伴拿到了一线互联网企业如阿里、滴滴、极兔、有赞、希音、百度、网易、美团的面试资格，遇到很多很重要的面试题：问题1：Sentinel高可用熔断降级

40岁资深老架构师尼恩·2024-01-31 09:47

美团面试：Redis怎么做高可用、高并发架构？

说在前面在40岁老架构师尼恩的读者交流群(50+)中，最近有小伙伴拿到了一线互联网企业如阿里、滴滴、极兔、有赞、希音、百度、网易、美团的面试资格，遇到很多很重要的面试题：如果使用Redis的场景很简单，只使用单机版Redis会有什么问题吗？如果Redis故障宕机了，数据丢失了怎么办？如何能保证我的业务应用不受影响？为什么需要主从集群？它有什么优势？什么是分片集群？我真的需要分片集群吗？最近有小伙伴

40岁资深老架构师尼恩·2024-01-31 09:40

高可用pxc+rocketmq+es+redis+minio+keepalive+haproxy 实操

文章很长，建议收藏起来慢慢读！总目录博客园版为您奉上珍贵的学习资源：免费赠送:《尼恩Java面试宝典》持续更新+史上最全+面试必备2000页+面试必备+大厂必备+涨薪必备免费赠送经典图书:《Java高并发核心编程（卷1）》面试必备+大厂必备+涨薪必备加尼恩免费领免费赠送经典图书:《Java高并发核心编程（卷2）》面试必备+大厂必备+涨薪必备加尼恩免费领免费赠送经典图书:《NettyZookeepe

40岁资深老架构师尼恩·2024-01-31 09:01

nginx keepalive 高可用原理和实操（图解+秒懂+史上最全）

文章很长，而且持续更新，建议收藏起来，慢慢读！疯狂创客圈总目录博客园版为您奉上珍贵的学习资源：免费赠送:《尼恩Java面试宝典》持续更新+史上最全+面试必备2000页+面试必备+大厂必备+涨薪必备免费赠送经典图书:《Java高并发核心编程（卷1）加强版》面试必备+大厂必备+涨薪必备加尼恩免费领免费赠送经典图书:《Java高并发核心编程（卷2）加强版》面试必备+大厂必备+涨薪必备加尼恩免费领免费赠送

40岁资深老架构师尼恩·2024-01-31 09:30

【大数据入门核心技术-Tez】（三）Tez与Hive整合

一、准备工作1、Hadoop和Hive安装【大数据入门核心技术-Hadoop】（五）Hadoop3.2.1非高可用集群搭建【大数据入门核心技术-Hadoop】（六）Hadoop3.2.1高可用集群搭建【

forest_long·2024-01-31 08:06

【新课】安装部署系列Ⅲ—Oracle 19c Data Guard部署之两节点RAC部署实战

它使组织能够通过实现容错和负载平衡来提高可用性和可扩展性，同时提高性能。

云贝教育-郑老师·2024-01-31 07:56

KAFKA节点故障的容错方案

KAFKA节点故障的容错方案1.broker启动加载逻辑1.1日志组成和分析1.2snapshot文件1.3broker启动流程1.4LogManager的初始化和启动过程2.controller高可用

李姓门徒·2024-01-31 07:25

kafka Standalone 配置测试

一安装1、安装jdk安装jdk2安装zk这里Standalone模型$tar-zxfapache-zookeeper-3.5.9-bin.tar.gz-C/var/soft/$mvapache-zookeeper

xfchn多多学习学习·2024-01-31 07:24

RabbitMQ简介及其核心概念

AdvancedMessageQueuingProtocol高级消息队列协议）实现，服务器端用Erlang语言编写，支持多种客户端，如：Python、Ruby、.Net、Java、C，用于在分布式系统中存储转发消息，在易用性、扩展性、高可用性等方面表现不错

水宝的滚动歌词·2024-01-31 07:51

构建高效可靠的消息队列系统：设计与实现

目录一、引言二、设计目标2.1、高可用性1.集群搭建1.1DockerCompose配置示例2.容错和恢复2.1异常检测与自动故障迁移2.2SpringBoot代码示例3.心跳检测4.优雅关闭2.2、持久性

喔的喔的嘛呀·2024-01-31 07:31

大数据----4.hadoop分布式框架搭建

hadoop分布式框架搭建一、Hadoop的三种运行模式（启动模式）1.1、单机模式（独立模式）（Local或StandaloneMode）-默认情况下，Hadoop即处于该模式，用于开发和调式。

学无止境的大象·2024-01-31 06:49

AI场景下存储架构有哪些？

以下是一些常见的存储架构及其优势：文件系统存储：NAS(NetworkAttachedStorage)：如阿里云NAS等，提供高可用、可扩展的网络文件共享服务，适合于AI训练过程中模型文件和大量非结构化数据的存储需求

古猫先生·2024-01-31 05:25

从单点 Redis 到 1 主 2 从 3 哨兵的架构演进之路

一、前言我们有个项目中用的MySQL、Redis、ES、微服务都是单节点部署的，没有做集群模式部署，为了提高整体的可用性，对项目的部署架构进行了升级，支持高可用。

程序员xysam·2024-01-31 05:50

3台服务器+StarVCenter，搭建“超融合云平台”-完美体验-跑100台虚拟机

这样计算节点即有高可用的计算能力，又有高可用的存储能力。目前，超融合是多种云平台各种架构中综合性能最强、可用性最高、性价比最高的一种架构模式。今天为大家介绍怎样用3台服务器搭建超融合云平台。

wtyuiohxvm·2024-01-31 04:49

[docker] Docker容器服务更新与发现之consul

起初服务都是单节点的，不保障高可用性，也不考虑服务的压力承载，服务之间调用单纯的通过接口访问。

为什么老是名字被占用·2024-01-31 03:38

五、Redis 的哨兵机制与哨兵集群

之前提到Redis有主从库集群机制，以减轻主库的请求压力，实现Redis的高可用性。并且，我们已经知道，请求的写操作只会在主库上执行，然后主库再同步到各个从库上。

从不中二的忧伤·2024-01-31 01:35

VM 虚拟机构建 Prometheus + Thanos 环境 (1) - 基础架构 && Prometheus 安装

构建Prometheus+Thanos环境时，考虑到Prometheus原生开源版并未提供高可用性的支持，特别是在面对更大规模和高可用性要求的监控场景时。因此，引入Thanos成为一种选择。

炸鸡物料库·2024-01-31 01:54

Redis哨兵模式实现网站限流

1、Redis的特性速度快，持久化，支持多种数据结构，支持多种编程语言，功能丰富，主从复制，高可用及分布式。2、Redis的应用场景Redis是一个开源。

守住阳光·2024-01-30 23:13

redis 高可用

主从模式全量更新1.主从复制期间的写操作写入replicationbuffer，如何避免缓冲区耗尽内存影响redis的稳定性（1）对写操作限流，避免写操作过多耗尽内存（2）使用高可用方案，主节点有故障及时切换到从节点

ZyyIsPig·2024-01-30 23:20

RabbitMQ、Kafka、RocketMQ 是如何实现高可用的？

本文从高可用的角度观察一下RabbitMQ、Kafka、RocketMQ，看看它们各自的实现思路。

SlowGO·2024-01-30 22:03

DBA04-1 搭建mycat 分片服务器

分散存放到多个数据库服务器上,达到负载效果垂直分割:单个表切换成多个表,按业务类别分散到不同数据库.水平分割:将表里的多条记录切分到不同数据库.搭建数据分片服务器MyCAT基于JAVA的分布式适合大量写入数据的存储需求分片高可用集群读写分离都可以使用

mid的博客·2024-01-30 22:27

DBA03 1、准备MHA集群环境 2、配置MHA集群环境 3、测试MHA集群

HA（keepalived）、LB（LVSHaproxynginx）MHA软件+一主多从主从同步结构---------->实现mysql高可用集群（属于mysql专属软件）准备6台虚拟机，并按照本节规划配置好

mid的博客·2024-01-30 22:57

apache-dolphinscheduler-3.2.0集群部署

一、apache-dolphinscheduler介绍ApacheDolphinScheduler是一个分布式的开源调度系统，它提供了一种可视化、可扩展、高可用的任务调度和数据处理方案。

爱上雪茄·2024-01-30 21:32

Dubbo学习笔记（三）

配置原则3.2重试次数3.3超时时间3.3.1Dubbo消费端3.3.2Dubbo服务端3.3.3配置原则3.4启动时检查3.5版本号3.6本地存根四、SpringBoot与dubbo整合的三种方式五、高可用

薛薛哦·2024-01-30 21:55

3 - 主从复制结构｜持久化｜数据类型

主从复制结构｜持久化｜数据类型主从复制没有高可用功能命令行配置修改配置文件（永久有效，重启了redis服务依然有效）配置带验证的主从复制主从从配置哨兵服务（可实现高可用）持久化RDB文件的使用AOF文件的使用数据类型主从复制没有高可用功能

桑_榆·2024-01-30 20:12

MySQL（4）

文章目录一、MySQL的主从复制主从复制原理【实战】MySQL主从复制主从复制基本故障处理处理方法一处理方法二处理方法三延时从库半同步复制过滤复制二、MHA高可用架构工作流程MHA工具介绍MHA实验环境基于

Dream visit·2024-01-30 19:56

RabbitMQ学习（一）AMQP协议

业务上，可以实现服务提供者和消费者之间的数据解耦，提供高可用性的消息传输机制，在实际生产

kobe0429·2024-01-30 19:43

负载均衡技术助力企业数字化转型和高可用架构实现

文章目录什么是高可用架构什么是负载均衡负载均衡设备硬件负载均衡的代表产品软件负载均衡的代表产品负载均衡基于OSI模型分层负载均衡在网络层负载均衡在传输层负载均衡在应用层优先考虑负载均衡的场景硬件负载均衡的缺点云负载均衡正在成为最佳选择企业数字化转型对负载均衡的需求什么是高可用架构

Par@ish·2024-01-30 17:21

RabbitMQ安全防护，加固策略

RabbitMq简介中间件简介消息队列中间件是分布式系统中重要的组件，主要解决应用耦合，异步消息，流量削锋等问题实现高性能，高可用，可伸缩和最终一致性[架构]使用较多的消息队列有ActiveMQ（安全）

中年程序员一枚·2024-01-30 17:27

[Unity] 脚本批量打包渠道包研究

UNITY_STANDALONE：PCMacLinux模型下。UNITY

hcq666·2024-01-30 15:28

实现sentinel持久化，以及各种问题解决

持久化，push模式启动nacos启动单机模式（因为之前conf配置使用的是集群）startup.cmd-mstandalonenacos启动成功启动Sentineljava-jar-Dnacos.addr

在无清风·2024-01-30 15:03

ZK和ETCD的产品对比和差异

ZK和ETCD的产品对比和差异1.底层实现1.1高可用机制1.2数据结构2.客户端视角2.1临时数据2.2监听机制探讨zk和etcd的底层实现以及客户端使用上的差异。

李姓门徒·2024-01-30 15:03

Redis：企业级的深入

高可用性：集群中的每个节点都可以包含数据的部分副本，确保即使其中一个节点出现故障，其他节点依然可以继续提供服务。自动分片和负载均衡：Redis集群支持自动分片，无

星光闪闪k·2024-01-30 15:16

多地多活与单元化架构

为了提高系统的伸缩能力与高可用能力，我们都不断的在努力消除系统单点瓶颈。如使用应用集群是为了解决服务层的单点问题，使用主从数据库是为了解决数据库层面的单点问题。

IT枫斗者·2024-01-30 13:12

网上发现的一个《Flash&flex大全》

挨踢大侠·2024-01-30 13:47

消息中间件RabbitMQ介绍

消息队列（MQ）是一种应用程序对应用程序的通信方法，由Erlang（专门针对于大数据高并发的语言）语言开发，可复用的企业消息系统，是当前最主流的消息中间件之一，具有可靠性、灵活的路由、消息集群简单、队列高可用

xmh-sxh-1314·2024-01-30 12:56

高性能和多级高可用，云原生数据库 GaiaDB 架构设计解析

1云原生数据库和GaiaDB目前，云原生数据库已经被各行各业大规模投入到实际生产中，最终的目标都是「单机+分布式一体化」。但在演进路线上，当前主要有两个略有不同的路径。一种是各大公有云厂商选择的优先保证上云兼容性的路线。它基于存算分离架构，对传统数据库进行改造，典型产品有AWSAurora、阿里云PolarDB、腾讯云TDSQL-C、百度智能云GaiaDB。数据库作为公有云上的核心基础设施，第一要

百度智能云技术站·2024-01-30 12:22

Redis面试（二）

1.Redis集群了解吗前面说到了主从同步存在高可用和分布式问题，哨兵机制解决了高可用问题，而集群就是终极方案，一举解决高可用和分布式问题。

海的辽阔·2024-01-30 12:21

本地MinIO存储服务通过Java程序结合Cpolar内网穿透进行远程连接

它的优点包括高性能、高可用性、易于部署和管理、支持多租户等。Cpolar

小沈YO.·2024-01-30 11:01

高可用架构之异地多活

当谈到架构的高可用时，无论是高可用计算架构，还是高可用存储架构，其本质的设计目的都是为了解决部分服务器故障的场景下，如何保证系统能够继续提供服务。但在一些极端场景下，有可能所有服务器都出现故障。

满载星辉·2024-01-30 10:54

电商库存系统一

这对库存系统的准确性和可靠性提出了很高的要求，在各种场景下能保证数据的准确，在遇到突发流量时能保证高可用，除此之外，还需要提供熔断和降级的能力，保证在极端情况下不拖垮主站。

程序员的自我修养·2024-01-30 10:50

软件系统架构黄金法则：事件驱动架构的力量

传统架构往往采用同步、阻塞的方式进行通信，这种方式在处理高并发、高可用、高性能的场景下，往往会遇到瓶颈。此外，传统架构的耦合性较高，不利于系统的扩展和维护。

OpenChat·2024-01-30 10:37

Xds （eXtensible Discovery Service）理解

XDS协议的设计目标是支持大规模、动态和高可用的微服务架构。组成RDS（RouteDiscoveryService）：RDS是X

yuluo_YX·2024-01-30 09:31

ES实战回顾

业务监控、搜索sug功能、B/M端的一些，业务历史数据，业务单等3、这些索引怎么配置的高可用？

shuimuhanchen·2024-01-30 08:29

Hadoop与Spark横向比较【大数据扫盲】

它们通常提供简单的查询语言，并强调水平扩展和高可用性。例如：-键值存储：如Redis，AmazonDynamoDB-列式存储：如ApacheCassandra，HBase-文档数据库：如M

super_journey·2024-01-30 06:51

使用 CDC MinIO 汇入端为 CockroachDB 保持持久数据

它从其昆虫名字的坚持不懈中汲取灵感，即使面对硬件故障，CockroachDB也能保证高可用性。其分布式架构横跨多个节点，类似于其昆虫原型的适应性。

MinIO官方账号·2024-01-30 04:28

最全的RocketMQ学习指南，程序员必备的中间件技能

高可用，具有跟踪和审核功能万亿级消息

丰极·2024-01-30 03:53

架构篇26：高可用存储架构-集群和分区

文章目录数据集群数据分区小结上一篇我们讨论了高可用存储架构中常见的双机架构，分别为主备复制、主从复制、双机切换和主主复制，并分析了每类架构的优缺点以及适应场景。

星猿杂谈·2024-01-30 01:37

推荐频道

Standalone高可用