高可用集群搭建第9页

hadoop集群搭建踩坑实录

由于不可控以及不可知的原因我搭建的hadoop集群突然显示虚拟机出现了问题导致某一个DataNode数据丢失并且无法通过Xshell远程访问其他的DataNode主机和虚拟机无法互相ping通网上能找的解决办法基本都找了依然无法解决因此我能想到的是只能删除虚拟机重新克隆一台机器然而还是无法通过远程连接无奈之下我重启电脑发现又可以通过Xshell远程访问了具体原因尚不知晓克隆成功后发现集群先格式化集

温文尔雅的流氓·2024-02-07 10:39

Hadoop分布式计算实验踩坑实录及小结

目录Hadoop分布式计算实验踩坑实录及小结踩坑实录Hadoop学习Hadoop简介HDFSSomeconceptsMapReduce主要配置文件集群搭建来源与引用Hadoop分布式计算实验踩坑实录及小结踩坑实录单机

小童同学_·2024-02-07 10:08

[错误解决]centos中使用kubeadm方式搭建多master的高可用K8S集群

安装步骤部署KubernetesMaster时的错误部署KubernetesMaster时，创建了一个kubeadm-config.yaml文件，将相关配置信息放到这个地方，该文件如下：apiServer:certSANs:-master1-master2-master.k8s.io-192.168.44.158#虚拟ip-192.168.44.155#master1的ip-192.168.44.

安安csdn·2024-02-07 09:25

Elasticsearch三节点集群搭建

Elasticsearch三节点集群搭建1、Elasticsearch简介Elasticsearch是一款近实时的分布式搜索、分析引擎，可以动态横向扩展以应对数据的增长。

TSLONG_TSL·2024-02-07 09:18

ES节点故障的容错方案

ES节点故障的容错方案1.es启动加载逻辑1.1segment和translg组成和分析1.2es节点启动流程1.3es集群的初始化和启动过程2.master高可用2.1选主逻辑2.1.1过滤选主的节点列表

李姓门徒·2024-02-07 08:22

RocketMQ消息发送的设计

2、RocketMQ的消息发送如何实现消息发送是如何实现高可用的？3、当批量发送消息的时候如何实现一致性？一、RocketMQ消

NullzzZ·2024-02-07 07:53

Redis缓存高可用集群

redis3.0以前的版本要实现集群一般是借助哨兵sentinel工具来监控master节点的状态，如果master节点异常，则会做主从切换，将某一台slave作为master，哨兵的配置略微复杂，并且性能和高可用性等各方面表现一般

车马去闲闲丶·2024-02-07 07:11

harbor高可用部署

harbor高可用简介harbor目前有两种主流的高可用方案：双主复制，harbor自带的镜像复制功能多harbor实例共享后端存储双主复制架构在遇到大镜像时有同步延迟，并且一个实例故障后需要手动重新开启复制策略才能再次同步

willops·2024-02-07 05:30

3.0 Zookeeper linux 服务端集群搭建步骤

本章节将示范三台zookeeper服务端集群搭建步骤。

二当家的素材网·2024-02-07 03:27

Redis不是一直号称单线程效率也很高吗，为什么又采用多线程了？

Redis作为一个成熟的分布式缓存框架，它由很多个模块组成，如网络请求模块、索引模块、存储模块、高可用集群支撑模块、数据操作模块等。

小梁同学jxy·2024-02-07 00:12

GO实现高可用高并发分布式系统:gRPC实现客户端与服务端的一对一通讯

分布式系统的特点是不同的功能模块会以独立服务器程序的方式运行在不同主机上。当服务A想请求位于另一台机器的服务B完成特定请求时，就必须将要处理的数据提交给B。这个过程就涉及到一系列问题，首先A需要把数据进行序列化然后通过网络连接发送给B，B接收到数据后需要进行反序列化得到数据原型，进行相应处理得到结果，接着把结果序列化后再传递给A，A收到结果后进行反序列化，得到处理结果的数据结构。这一系列过程涉及到

tyler_download·2024-02-07 00:26

【知识整理】一文理解系统服务高可用

一、如何理解高可用1、什么是高可用高可用性（英语：HighAvailability，缩写为HA），指系统无中断地执行其功能的能力，代表系统的可用性程度，是进行系统设计时的准则之一。

卢卡上学·2024-02-06 19:02

K8S集群搭建1.28.x

1、Kubernetes集群规划主机名IP地址说明master192.168.33.201主节点node1192.168.33.202从节点noide2192.168.33.202从节点2、准备环境1、关闭防火墙systemctlstopfirewalldsystemctldisablefirewalld2、关闭selinuxsed-i's/enforcing/disabled/'/etc/sel

程丶的摆烂日常·2024-02-06 18:26

性能实测：分布式存储 ZBS 与集中式存储 HDS 在 Oracle 数据库场景表现如何

作为集中式存储的代表之一，HDS拥有高性能、高可用性和可扩展性的企业级存储特点，适用于实时数据处理、虚拟化和灾难备份等场景。

志凌海纳SmartX·2024-02-06 18:40

故障与部分失败

分布式系统内的可用性就是使用大量低可用性的组件组成一个高可用系统。

MontyOak·2024-02-06 17:03

mysql脑裂原因及解决方法

二、MySQL脑裂的解决方法1.配置MySQL高可用性集群为了防

柯西极限存在准则·2024-02-06 16:00

linux etcd,etcd集群部署详解

简介Etcd是一个高可用的Key/Value存储系统，主要用于分享配置和服务发现。

突驰·2024-02-06 15:16

etcd是啥

etcd是一个golang编写的分布式、高可用的一致性键值存储系统，etcd可以用于存储关键数据和实现分布式调度，etcd基于Raft协议，通过复制日志文件的方式来保证数据的强一致性。

盼盼编程·2024-02-06 15:45

redis集群搭建（基于redis5.0+）

一、前戏1.1下载软件去官网下载软件：https://redis.io/download，笔者使用的是5.0.12，理由就是本人公司使用的也是这个版本。1.2物理机配置本人搭建的是3主3从。使用3台虚拟机，保证主从分配不在一台机器上，避免某台机器挂掉而影响整个集群的运行。物理配置：1.192.168.37.133:63702.192.168.37.133:63803.192.168.37.130:

She_lock·2024-02-06 12:51

postgresql 初始化驱动支持高可用配置

条件：jdk1.6及以上配置：jdbc:postgresql://host1:port1,host2:port2/database连接故障转移：Tosupportsimpleconnectionfail-overitispossibletodefinemultipleendpoints(hostandportpairs)intheconnectionurlseparatedbycommas.The

She_lock·2024-02-06 12:19

RabbitMQ集群搭建

rabbitMQ的两种重要特性,异步化提高系统抗峰值能力和系统及功能解耦，这两个特点决定了rabbitMQ在我们的系统中占据了重要的地位，所以为了让RabbitMQ高可用，我们今天就来讲解下RabbitMQ

AmosZhu·2024-02-06 10:12

Golang学习教程

Golang的主要关注点是使得高可用性和可扩展性的Web应用的开发变得简便容易。

wx479·2024-02-06 09:50

minio集群搭建（纠删码模式）

搭一个4个节点，16块硬盘的minio集群。1.先做一些准备工作，新建了4个centos7的虚拟机，各新添加4块硬盘我用的虚拟机软件是VirtualBox，先搭建4个虚拟机，即4个节点，建虚拟机就不讲了用VirtualBox添加硬盘，这几台虚拟机硬盘我都添加过了，我用一个其他node35这个机器介绍硬盘添加添加磁盘这块我也不是特别懂，但是在搭建minio集群的过程中我是这么做的，而且成功了下一步，

hahaha 1hhh·2024-02-06 09:52

MySQL组复制的介绍

通过结合原理图学习这些概念，可以很好的帮助我们理解组复制技术这一MySQL高可用方案，有利于提升我们对组复制的管理能力，以及为部署组复制和学习InnoDBCluter打下理论基础。

lu9up·2024-02-06 08:09

系统架构演变详解

随着用户量的不断增加、业务功能的扩展逐步，系统架构变得更加完美具备了高性能、高可用、安全性等特性。在互联网发展的早起，我们经常会在一台机器上运行所有的程序和软件。

悦.L·2024-02-06 08:00

FlinkCDC-Hudi:Mysql数据实时入湖全攻略五：FlinkSQL同时输出到kafka与hudi的几种实现

FlinkCDC-Hudi:Mysql数据实时入湖全攻略二：Hudi与Spark整合时所遇异常与解决方案FlinkCDC-Hudi:Mysql数据实时入湖全攻略三：探索实现FlinkCDCmysql主从库同步高可用

大数据点灯人·2024-02-06 08:25

Kafka 使用手册

2.kafka基础架构3.kafka集群搭建4.kafka命令行操作主题命令行【topic】生产者命令行【producer】消费者命令行【consumer】5.kafka生产者生产者消息发送流程Producer

@lihewei·2024-02-06 08:01

ELFK日志采 - QuickStart

文章目录架构选型ELKEFLKElasticsearchES集群搭建常用命令Filebeat功能介绍安装步骤Filebeat配置详解filebeat常用命令Logstash功能介绍安装步骤Input插件

@lihewei·2024-02-06 07:25

linux系统haproxy负载均衡器使用keepalived做高可用

haproxy负载均衡器做高可用haproxy+keepalivedhaproxy+keepalived两台负载均衡器都安装yum-yinstallhaproxyvim/etc/haproxy/haproxy.cfggloballog127.0.0.1local2infopidfile

丨析木丨·2024-02-06 07:44

linux系统keepalived介绍以及和nginx联合使用

keepalivedkeepalived介绍nginx+keepalivedkeepalived介绍keepalived是集群管理中保证集群高可用的一个服务软件，用来防止单点故障。

丨析木丨·2024-02-06 07:13

linux系统mysql数据库使用keepalived做高可用

mysql使用keepalived做高可用mysql+keepalived主库服务器配置从库服务器配置两台服务器安装mysql+keepalived先做两台服务器数据库互为主从主库服务器配置开启binlog

丨析木丨·2024-02-06 07:38

Redis（三）主从架构、Redis哨兵架构、Redis集群方案对比、Redis高可用集群搭建、Redis高可用集群之水平扩展

转自极客时间Redis主从架构redis主从架构搭建，配置从节点步骤：1、复制一份redis.conf文件2、将相关配置修改为如下值：port6380pidfile/var/run/redis_6380.pid#把pid进程号写入pidfile配置的文件logfile"6380.log"dir/usr/local/redis-5.0.3/data/6380#指定数据存放目录#需要注释掉bind#b

_蓝天IT_·2024-02-06 07:37

MongoDB分片集群搭建

----前言mongodb分片一般用得比较少，需要较多的服务器，还有三种的角色一般把mongodb的副本集应用得好就足够用了，可搭建多套mongodb复本集mongodb分片技术mongodb副本集可以解决数据备份、读性能的问题，但由于mongodb副本集是每份数据都一模一样的，无法解决数据量过大问题mongodb分片技术能够把数据分成两份存储，假如shijiange.myuser里面有1亿条数据

ZzzkiYoumi·2024-02-06 06:21

GpuMall智算云平台教程：快速配置Linux云服务器

4.创建实例我们提供两种GPU云资源，社区云和高可用云。对性能和安全要求较高的选择高可用云，个人开发者和小型实验选择社区云。在【社区云】【高可用云】页面，

GpuMall·2024-02-06 05:04

RocketMQ和Kafka的区别，以及如何保证消息不丢失和重复消费

支持的语言少Kafka百万级服务端scala，客户端java主流语言均支持天生分布式、性能最好，常用于大数据领域运维难度大，对zookeeper强依赖，多副本机制下对带宽有一定要求RocketQA适用于高性能、高可用的消息传递场景

Marciaguoguo·2024-02-06 04:38

Mysql架构系列——生产常用的高可用部署模式介绍

模式高可用模式GaleraCluster是由Codership开发的MySQL多主集群，包含在MariaDB中，同时支持Perconaxtradb、MySQL，是一个易于使用的高可用解决方案，在数据完整性

吴代庄·2024-02-06 04:34

nginx3-网站架构(LNMP)/负载均衡/高可用

老男孩教育61期--week16--网站架构(LNMP)/负载均衡/高可用01.课程介绍部分：1.LNMP架构配置过程2.LNMP架构代码上线3.LNMP架构优化部署a数据库数据信息迁移b将数据信息共享存储

mrwangjian·2024-02-06 02:05

centos 配置bond_Centos7双网卡绑定配置 bonding

bonding的七种工作模式:bonding技术提供了七种工作模式，在使用的时候需要指定，每种有各自的优缺点，我们使用的是mode=4balance-rr(mode=0)默认,有高可用(容错)和负载均衡的功能

weixin_39520775·2024-02-06 02:03

2.RocketMQ集群搭建与消息发送样例

1.RocketMQ集群搭建1.1各角色介绍mqGroup.png角色NameServer:Broker的管理者。Broker自己去上报NameServer自己的存在Broker：消息的存储者。

lambdaCC·2024-02-06 00:58

VRRP详解

VRRP（VirtualRouterRedundancyProtocol）是一种网络协议，用于提供路由器冗余和高可用性。

是毛毛吧·2024-02-05 23:05

linux下Redis的安装与配置（4.0.9）

Redis具有内置复制，Lua脚本，LRU驱逐，事务和不同级别的磁盘持久性，并通过RedisSentinel提供高可用性，并通过Redis群集实现自动分区。一、Redis的安装先将安装需

Jason_c8d4·2024-02-05 22:33

Flume 学习之路（一）Flume 概述和基本架构

Flume是一个分布式、可靠且高可用的服务，用于有效地收集，聚合和移动大量日志数据。它具有基于流数据的简单灵活架构，良好的可靠性机制、故障转移和恢复机制，具有强大的容错性。

白白贺·2024-02-05 20:23

对象存储高可用部署

#Minio分布式docker部署##一.前置条件-服务器已安装docker和docker-compose(略)-服务器能访问外网或docker镜像已预拉取好(略)-服务器时间差不能超过15分钟，可用NTP来保证时间一致(略)服务器：|host|IP||-----|-------------||host1|192.168.0.xx1||host2|192.168.0.xx2|1、文件上传oneho

日月星城2·2024-02-05 18:56

Hadoop Start(1) ——Google与Hadoop的前世今生

HadoopDistributionFileSystemHadoop分布式文件系统[2]YARN：YetAnotherResourceNegotiatorHadoop资源管理与调度器[3]HA：HighAvailability高可用

bclz·2024-02-05 18:41

RabbitMQ——基于 KeepAlived + HAProxy 搭建 RabbitMQ 高可用负载均衡集群

一个高可用，负载均衡的RabbitMQ集群架构应类似下图：这里对上面的集群架构做

小小暴徒·2024-02-05 17:24

es搭建集群模式时出现master not discovered or elected yet, an election requires two nodes with ids [xxx，xxx]问题

目录，然后kill掉es进程，重新启动就好了data目录是Elasticsearch节点的核心数据存储区域，它包含了索引、分片和相关的Lucene索引文件，确保数据在节点之间的分布和复制，以实现集群的高可用性和容错性

-00·2024-02-05 17:03

Kafka2.13集群搭建

并配置hosts172.17.0.2 node0172.17.0.3 node1172.17.0.4 node2在其中一台服务器中搭建Zookeeper（单机或集群都可以）Zookeeper集群搭建参考链接下载

咩哥无敌·2024-02-05 17:57

UWA Pipeline 2.6.0 版本更新

UWAPipeline是一款面向游戏开发团队的本地协作平台，旨在为游戏开发团队搭建专属的DevOps研发交付流水线，提供可视化的CICD操作界面、高可用的自动化测试以及UWA性能保障服务的无缝贴合等实用功能

UWA·2024-02-05 16:36

6.Linux虚拟机下的Hadoop集群搭建之完全分布式配置

学习BigData·2024-02-05 13:01

4.Linux虚拟机下的Hadoop集群搭建之Xshell及Xftp的使用和SSH服务配置

学习BigData·2024-02-05 13:31

推荐频道

高可用集群搭建