GFS分布式文件系统集群第11页

Redis 哨兵集群如何实现高可用？（2）

目录7.slave配置的自动纠正8.slave->master选举算法9.quorum和majority10.configurationepoch11.configuration传播7.slave配置的自动纠正哨兵会负责自动纠正slave的一些配置，比如slave如果要成为潜在的master候选人，哨兵会确保slave复制现有master的数据;如果slave连接到了一个错误的master上，比如

fighting哥·2024-03-17 22:34

【项目经验】Redis Sentinel从工程中下线并对业务迁移-进行中

这个命题有问题，往下翻，见彩蛋)，为节省运维成本，提升运维效率，决定将工程中使用的Redissentinel下线，都使用Rediscluster模式，并且给出了当前都有哪些组对哪些Redissentinel集群有引用

小王师傅66·2024-03-16 05:06

ZooKeeper 概述

它主要用于解决分布式应用中遇到的一些复杂问题，如命名服务、状态同步服务、集群管理、分布式锁和队列管理等。

龙大.·2024-03-16 03:32

记录一次filebeat日志丢失的问题

在java化项目中，部署到k8s集群后，一度出现无法定位问题的情况。

无聊的刀刀·2024-03-16 01:03

基于ElasticSearch存储海量AIS数据-架构设计篇

文章目录引言I背景II数据集群架构选型2.1关键点2.2架构设计2.3数据迁移工具:Canal关键词：时空索引；船舶自动识别系统；轨迹压缩；数据集群引言船舶自动识别系统(AIS)数据具有海量性、时空性和小记录频繁更新等特性

iOS逆向·2024-03-15 23:58

opendronemap集群搭建

需求OpenDroneMap（ODM）是一个开源项目，旨在利用无人机采集的图像数据生成地图、模型和其他地理空间数据。它主要解决以下问题：航空摄影数据处理：ODM可以处理无人机拍摄的大量航空图像数据，通过图像处理和计算机视觉技术生成高质量的地图和模型。地图制作与更新：利用ODM，用户可以快速、成本效益地生成地图，并及时更新地理空间数据，有助于城市规划、灾害监测等领域的应用。三维建模：ODM可以生成精

Robber2000·2024-03-15 09:08

关于k8s中 storageclass 的 is-default-sc 默认存储设置

取决于安装模式，你的Kubernetes集群可能和一个被标记为默认的已有StorageClass一起部署。

网络飞鸥·2024-03-14 08:32

RabbitMQ 进阶- 阿里云服务器部署RabbitMQ集群

一、为什么要搭建RabbitMQ集群？

Java北边·2024-03-14 02:34

Hbase集群搭建超详细教程

Hbase集群搭建前言详细步骤1、下载安装包2、解压3、修改配置文件3.1修改hbase-env.sh文件3.2修改hbase-site.xml3.3修改regionservers文件4、分发hbase

笑看风云路·2024-03-13 09:02

HDFS

HDFS是一个分布式文件系统，以流式数据访问模式存储超大文件，将数据分块存储到一个商业硬件

weixin_51987187·2024-03-12 14:32

企业家扶贫—措施（续）

6、产业扶贫：根据当地地理环境、村域特色、种养模式、结合村情实际，调整产业结构、延伸优质产业链条、打造产业基地等，把产业链条和产业集群思维发展的模式运用到产业扶贫中。

郭强GQ·2024-03-11 20:18

运维随录实战（14）之docker搭建mysql主从集群(Replication))

1,从官方景镜像中拉取mysql镜像:dockerpullmysql:8.0.24--platformlinux/x86_642,创建master和slave容器:在创建之前先设置网段dockernetworkcreate--subnet=172.20.0.0/24soil_networkmaster:dockerrun-d-p3306:3306--namemysql-master--netsoi

Loren_云淡风轻·2024-03-11 19:35

区块链学习Day01

学习前的知识储备1.go语言（必须掌握）2.数据库基本操作3.基本算法4.Linux基本操作5.Linux集群搭建6.Web常识Pow工作量证明一、概念的介绍1.P2P区块链有一个前提，就是P2P，这并非是借贷平台

宝哥的菜鸟之路·2024-03-11 14:13

Sqoop一些常用命令及参数

命令类说明importImportTool将数据导入到集群exportExportTool将集群数据导出codegenCodeGenTool获取数据库中某张表数据生成Java并打包Jarcreate-hive-tableCreateHiveTableTool

大数据小同学·2024-03-11 09:19

集群启动脚本

使用SSH服务，要首先确保Linux主机间ssh相互免密，配置免密可看下面：Linux主机间ssh相互免密创建kafka启动脚本vimkafka-cluster.shforiin192.168.8.105192.168.8.106192.168.8.107doecho--------------------------------$ikafka启动-------------------------

西风凋丶碧树·2024-03-11 00:24

docker-swarm集群管理命令

为什么选择swarm集群？灵魂疑问：同样是集群，为什么选择dockerswarm，而不不选择k8s或者k3s？

chenzfp·2024-03-09 12:39

Kubernetes API 安全详解与最佳实践

在Kubernetes集群中，保护API的安全性至关重要，因为它是集群中各个组件进行通信和交互的核心。

ivwdcwso·2024-03-09 03:57

Flink 学习 | 在集群上的，部署模式及运行模式

会话模式需要先启动一个集群，保持一个会话。但启动集群时，资源是共享的，会

狻猊来当程序媛·2024-03-08 23:51

RBD快照灾备方案

一、说明从主集群定期的导出最近两个快照之差，然后导入到备集群。

lihanglucien·2024-03-08 05:35

Oracle Rac lock进程,Oracle RAC后台进程介绍

在OracleRAC数据库上会比单实例数据库多一些进程，这些进程是RAC特有的，为了实现集群数据库功能而设置的。这篇文章会对RAC特有的进程做一些介绍。

weixin_39965102·2024-03-08 05:57

k8s集群的CA证书过期处理

文章目录制作延期的CA证书获取CA全名准备签发申请配置生成新CA验证并替换CA更新master组件的CA配置kube-apiserverkube-controller-managerkube-schedulerkube-admin检查证书过期时间更新ServiceAccountsecret更新node组件配置的CA更新kubelet连接配置签发kubelet自动申请的客户端证书不改变原CA的公私钥

百战天王·2024-03-07 20:45

31.Elasticsearch集群故障排查及修复-2

31.1定位红色或黄色的索引进一步定位未分配的原因可以要求集群进一步返回给定分片的当前分配情况和逻辑需要结合第三步返回结果对下面的_cluster/allocation/explainAPI参数进行修改

大勇任卷舒·2024-03-07 04:19

西安-腾讯云-Python面试经验--一面凉经

如何保证线程安全d.线程崩溃，会不会影响所在的进程e.什么是守护进程，僵尸进程，孤儿进程f.如何产生一个守护进程g.如何避免僵尸进程或者孤儿进程redisa.持久化方式有哪些，区别是什么b.redis集群有了解么

jiet07·2024-03-07 02:53

springcloud-nacos 配置中心和集群搭建

SpringCloudNacos配置中心是一个用于管理和存储应用程序配置信息的服务。它提供了集中式的配置管理、动态配置更新、配置版本控制等功能，使得应用程序可以在运行时获取到最新的配置信息。要搭建SpringCloudNacos配置中心，你可以按照以下步骤进行操作：下载并安装Nacos：首先，你需要从Nacos的官方网站下载Nacos服务器的二进制文件，并将其解压到合适的目录。启动Nacos服务器

momo_128·2024-03-06 03:55

hbase、hive、clickhouse对比

HDFShive通过driver将sql分解成mapreduce任务元数据需要单独存储到一个关系型数据库，一般是mysql实际数据存储可以是外表，也可以是内表clickhouse单体架构分层类似mysql，集群状态下是多主

freshrookie·2024-03-05 16:40

增强AWS ECS监控：批量生产监控设置

然而，确保ECS集群的可靠性和性能需要强大的监控和告警。

ivwdcwso·2024-03-05 08:00

内网安装redis+部署redis-cluster集群

一、安装redisredis安装包下载地址：https://download.redis.io/releases/1.1解压编译并创建数据目录tarxzvfredis-6.2.10.tar.gz-C/usr/local/cd/usr/local/mvredis-6.2.10/rediscd/usr/local/redis/make#编译mkdir/usr/local/redis/data#创建存放

仙女陈·2024-03-05 01:51

如何快速迁移其他云服务器中的网站数据到腾讯云轻量应用服务器中？教你使用宝塔Linux面板迁移网站

使用宝塔Linux面板进行迁移：宝塔Linux面板是一款服务器运维面板，它支持一键部署LAMP、LNMP、集群、监控、网站、FTP、数据库、JAVA等100多项服务器管理功能。因此，使用宝塔L

正宗六脉神剑·2024-03-04 06:25

Zabbix HA高可用集群搭建

ZabbixHA高可用集群搭建ZabbixHA高可用集群搭建一、Zabbix高可用集群（ZabbixHA）二、部署Zabbix高可用集群1、两个服务端配置1.1主节点ZabbixServer配置1.2备节点

KK小草莓·2024-03-03 20:44

分布式ID选型对比（1）

种类全局唯一高性能高可用趋势递增中心服务缺点UUID是高(本地生成,(无网络开销)低(无序,不适用)否否无序、字符串数据库自增单表唯一中中(宕机就会使业务服务中断)是否安全性差,能猜出来规律对于分库分表场景无法唯一数据库自增-集群是中中

Loren_云淡风轻·2024-03-03 14:04

HA集群--一起学习吧之架构

今天想和大家一起学习HA集群。首先，上定义~一、HA定义HA（HighAvailability）集群，即高可用集群，是一种以减少服务中断时间为目的的服务器集群技术。

wd90119·2024-03-03 11:30

使用 kind 集群安装运行极狐GitLab Runner【上】

GitLab是一个全球知名的一体化DevOps平台，很多人都通过私有化部署GitLab来进行源代码托管。极狐GitLab是GitLab在中国的发行版，专门为中国程序员服务。可以一键式部署极狐GitLab。关于kindkind是一个用来运行本地Kubernetes机群的工具，主要使用Docker容器来做为“nodes”。kind的主要设计目的是为了测试Kubernetes本身，但是也可以在本地研发或

极小狐·2024-03-03 07:54

SeaweedFS部署

SeaweedFS介绍SeaweedFS是一个分布式文件系统应用场景：主要用于存储处理小文件、大文件分块成小文件上传Githup地址：https://github.com/chrislusf/seaweedfs

仙女陈·2024-03-02 04:46

Springboot中使用Redisson实现分布式锁

言归正传，今天继续讨论有关“锁”的话题，synchronized和ReentrantLock大家应该都非常熟悉了，但这两个锁，作用域仅限制于单个Tomcat，如果使用了Tomcat集群，这两个锁就不管用了

追风人聊Java·2024-03-02 02:43

【k8s】K8S中的cordon、uncordon和drain 冻结节点、驱离pod

Kubernetes(K8s)中使用Kubectl命令行工具管理Kubernetes集群。kubectl在$HOME/.kube目录中查找一个名为config的配置文件。

云川之下·2024-02-29 17:28

【Elasticsearch管理】节点角色及发现机制

MasterEligibleNodeDataNodeIngestnodetribenodeCoordinatingnodeDataPath发现机制前置概念基本描述设置ZendiscoveryPing列表单播基于文件主节点选举集群故障集群状态更新无

板凳坐着晒太阳·2024-02-29 09:47

ntp时间同步

解决的问题:保证集群中所有的节点时间一致方案:需要使用同步软件NTP,并在主机上开启此服务,其他节点的时间都要和主机的时间保持一致步骤:确认主机的时间是否正确,不正确时进行手动修改datedate-s"

Frank_8942·2024-02-28 17:35

k8s容器访问宿主机或者集群外部服务

需求背景k8s的集群容器需要访问宿主机的某个服务(mysql或者其他类型的服务)，或者其他外部远程设备的服务，但是服务不在集群当中访问外部服务访问远程外部服务，如下任选一个实现外部域名映射到内部service

·2024-02-28 15:32

微服务架构师封神之路11-eureka服务高可用

文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档微服务架构师封神之路11-eureka服务高可用任务eurekaserverpom.xml依赖application.yamlsettings3节点集群服务

B5WANG·2024-02-28 05:44

如何在Linux搭建MinIO服务并实现无公网ip远程访问内网管理界面

Cpolar4.配置MinIO公网地址5.远程访问MinIO管理界面6.固定MinIO公网地址前言MinIO是一个开源的对象存储服务器，可以在各种环境中运行，例如本地、Docker容器、Kubernetes集群等

学编程的小程·2024-02-28 01:39

树莓派4B（Raspberry Pi 4B）使用docker搭建nacos集群

树莓派4B（RaspberryPi4B）使用docker搭建nacos集群由于国内访问不了dockerhub，我选用的国内适配树莓派ARM架构的nacos镜像——centralx/nacos-server

勤匠·2024-02-27 18:59

KubeSphere 镜像构建器（S2I）服务证书过期解决方案

解决方法已开启DevOps模块下载这个更新S2I服务证书压缩包，上传到任一可以访问K8s集群的节点；把上传的压缩包解压进入解压后的目录执行更新证书的脚本.

KubeSphere 云原生·2024-02-27 11:20

XGB-12:在 Kubernetes 上进行分布式 XGBoost 训练

操作步骤为在Kubernetes集群上运行XGBoost作业，执行以下步骤：在Kubernetes集群上安装XGBoostOperator。

uncle_ll·2024-02-27 09:48

shardingsphere自定义hint分片算法，完美实现按区域编码数据隔离，没改一行旧代码

因为已经改造了登录平台，实现了集群统一部署，然后后续就是继续弄集中统一部署服务改造（这里的集中统一部署的意思是区别于每个区域私有部署，服务本身还是可以弹性伸缩的），首先改造一个比较简单的白名单微服务，只涉及到三张表

·2024-02-26 20:03

二进制包方式部署k8s集群

1、准备环境虚拟机操作系统:Centos7角色IP组件Master192.168.150.20kube-apiserver，kube-controller-manager，kube-scheduler，etcdNode1192.168.150.21kubelet，kube-proxy，docker，etcd2、系统初始化工作在三台虚拟机上进行如下操作：2、1关闭防火墙$systemctlstopf

ggrong0213·2024-02-25 06:15

二进制部署k8s

master节点以及node节点需要的组件是什么，如何形成集群，网络如何架构和设计，数据的存储如何部署此处即采用一种高可用架构形式即etcd的分部署部署加一个控制节点和两个工作节点，在这其中比较重要的即是

Professorboy·2024-02-25 06:15

在 k8s 中配置域名解析

但那些集群外的服务，并且已经被硬编码的域名如何访问呢？方法1：修改容器的hosts设想：把hosts文件内容存储在configmap中，通过volume绑定到/etc/host

运维那些事~·2024-02-25 01:09

KeepAlived搭建高可用的HAproxy负载均衡集群系统

服务器规划:serverd(haproxy1,keepalived):192.168.233.141serverb(haproxy2,keepalived):192.168.233.144servera(web1):192.168.233.132serverc(web2):192.168.233.140域名映射:(所有端均配置):vim/etc/hosts192.168.233.141haprox

暗隐之光·2024-02-25 01:39

zookeeper动态扩缩容（无需重启）

目录一、启动一个zk二、扩容一个zk三、缩容一个zk四、重新配置集群的节点前言：zookeeper动态扩/缩容的reconfig命令旨在不需要重启zookeeper中任何一个节点的情况下，对整个zookeeper

cj_eryue·2024-02-24 19:02

Eureka/Zookeeper/Nacos实现注册中心区别

一、CAP定律CAP理论：Consistency（一致性）Availability（可用性）Partitiontolerance（分区容错性）必然存在在我们集群中，如果某个服务器宕机（故障）：保证数据一致性

超级码里喵·2024-02-24 08:24

推荐频道

GFS分布式文件系统集群