——集群搭建第19页

Hadoop集群搭建

Hadoop集群搭建Hadoop集群简介Hadoop集群包括两个集群：HDFS集群、YARN集群两个集群逻辑上分离、通常物理上在一起两个集群都是标准的主从架构集群HDFS集群（分布式存储）主角色：NameNode

藤藤菜丶·2023-09-09 05:45

Redis Cluster

文章目录一、集群搭建1节点规划2集群启动二、配置一致性1基本分工2更新规则三、Sharding1数据分片分片实现分片特点2slot迁移迁移原因迁移支持集群扩容迁移错误背景现象问题分析验证猜想集群缩容3.

FA-117·2023-09-08 14:42

redis集群搭建_亲自操作

【redis介绍与安装】Redis是一个开源的使用ANSIC语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。从2010年3月15日起，Redis的开发工作由VMware主持。从2013年5月开始，Redis的开发由Pivotal赞助。Redis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括st

beyond阿亮·2023-09-07 23:36

Redis监控工具_RedisLive

Redis监控工具_RedisLiveRedis安装请看:MacBook安装Redisredis集群搭建_亲自操作RedisLive安装RedisLive是由python编写的并且开源的图形化监控工具，

阿亮说技术·2023-09-07 23:30

redis cluster集群搭建

集群搭建启动6个redis实例创建6份配置文件mkdirredis-clustercdredis-clustermkdir7001700270038001800280037001文件夹创建配置文件redis.confport7001cluster-enabledyescluster-config-filenodes

bruce128·2023-09-07 22:15

RabbitMQ原理及集群的深入剖析

的组件剖析说一说绑定过程：Exchange类型一些事项一些思考关于持久化RabbitMQ的集群详解RabbitMQ的集群模式一、普通模式：二、镜像模式：消息中间件的比对分析Win8下的RabbitMQ安装RabbitMQ集群搭建生产

芮-凯·2023-09-07 19:50

ELK集群搭建流程（实践可用）

一、概述ELK是一个由三个开源软件工具组成的数据处理和可视化平台，包括Elasticsearch、Logstash和Kibana。这些工具都是由Elastic公司创建和维护的。Elasticsearch是一个分布式的搜索和分析引擎，可以将大量数据存储在一个或多个节点上，支持实时搜索、分析和聚合，提供高性能的全文搜索、复杂查询和分析能力。Logstash是一个数据采集和处理工具，可以将来自各种数据源

7B_coder·2023-09-07 15:23

【区块链 | IPFS】IPFS cluster私有网络集群搭建

对于联盟链的业务中搭建一个私有网络的IPFS集群还是很有必要的，私有网络集群允许IPFS节点只连接到拥有共享密钥的其他对等节点，网络中的节点不响应来自网络外节点的通信。IPFS-Cluster是一个独立的应用程序和一个CLI客户端，它跨一组IPFS守护进程分配、复制和跟踪pin。它使用基于Raft一致性算法来协调存储，将数据集分布到参与节点上。对于我们要将一个peer上的存储同步备份到所有集群上其

区块链（Web3）开发工程师·2023-09-07 09:55

基于Zookeeper搭建Kafka高可用集群（实践可用）

目录一、Zookeeper集群搭建1.1下载&解压1.2修改配置1.3标识节点1.4启动集群1.5集群验证二、Kafka集群搭建2.1下载解压2.2拷贝配置文件2.3修改配置2.4启动集群2.5创建测试主题

7B_coder·2023-09-07 05:50

ETCD集群搭建（实践可用）

概述etcd是兼具一致性和高可用性的键值数据库，可以作为保存Kubernetes所有集群数据的后台数据库。-官方网址：Documentationversions|etcd准备cfssl证书生成工具cfssl是一个开源的证书管理工具，使用json文件生成证书.在任意一台服务器上操作，这里选择k8s01wgethttps://pkg.cfssl.org/R1.2/cfssl_linux-amd64wg

7B_coder·2023-09-07 05:49

Nacos配置文件更新+热更新+多环境配置共享+集群搭建

对服务配置文件场景：如果多个服务对应的配置文件都需要更改时，可以利用配置管理，方便对配置文件进行更新，而且是在本地配置前先读取nacos的配置文件，优先级大于本地配置文件配置步骤1.首先在Nacos中的配置列表中增加一个配置文件：文件名字：服务名称+环境+yaml2.然后配置一个bootstrap.yaml，里面是服务的配置信息：（服务名称，Nacos连接地址，环境，extendion拓展的yam

Lailaaaaa·2023-09-07 04:42

HDFS完全分布式集群搭建与配置

HDFS完全分布式集群搭建与配置介绍HDFS前言HDFS的概念和特性整体思路准备工作配置过程三台虚拟机都已经完成的步骤hadoop-env.shyarn-env.shcore-site.xmlhdfs-site.xmlmapred-site.xmlyarn-site.xmlslaves

stupid_gentleman·2023-09-07 00:53

HDFS 集群启动管理界面缺少 DataNode 节点的解决方法

HDFS集群搭建并启动成功，1个NameNode节点和2个DataNode节点也运行正常，可以在各自的虚拟机中用jps命令查看正在运行的Java进程，但是通过http://master:50070/dfshealth.html

da2869237372·2023-09-07 00:51

第一章、Kubernetes基础之集群搭建（二进制安装）

集群安装基本环境配置10.103.236.201k8s-master01#2C2G40G10.103.236.202k8s-master02#2C2G40G10.103.236.203k8s-master03#2C2G40G10.103.236.236k8s-master-lb#VIP虚IP不占用机器资源#如果不是高可用集群，该IP为Master01的IP10.103.236.204k8s-nod

qq_35302220·2023-09-06 19:46

Centos7 elasticsearch-7.7.0 集群搭建

前言Elasticsearch是一个分布式、RESTful风格的搜索和数据分析引擎，能够解决不断涌现出的各种用例。作为ElasticStack的核心，它集中存储您的数据，帮助您发现意料之中以及意料之外的情况。环境准备软件OS系统IP节点Elasticsearch7.7.0centos710.16.101.27node-1Elasticsearch7.7.0centos710.16.101.28no

安果缘·2023-09-06 17:45

Centos elasticsearch 7.16 集群搭建

官方指引：InstallElasticsearchwithRPM|ElasticsearchGuide[7.16]|Elastic准备3台虚拟机centos7，每个虚拟机挂一块硬盘/esdata。按照官方指引安装挂载硬盘、开防火墙等参考：Centos8常用_leoppeng的专栏-CSDN博客1、rpm--importhttps://artifacts.elastic.co/GPG-KEY-ela

leoppeng·2023-09-06 17:14

一文学会K8s集群搭建

环境准备节点数量：2台虚拟机centos7硬件配置：master节点内存至少3G（2G后面在master节点初始化集群时会报错，内存不够），node节点可以2G，CPU至少2个，硬盘至少30G网络要求：多个节点之间网络互通，每个节点能访问外网集群规划这两个名称是准备设置的主机名称k8s-masterk8s-node1设置主机名hostnamectlset-hostnamek8s-masterhos

测试小婉·2023-09-06 13:43

基于k8s1.15搭建Flink集群（一）

文章目录1.前言2.实验环境3.集群搭建3.1Yaml配置3.1.1JobManagerYaml配置3.1.2TaskManagerYaml配置3.1.3JobManagerServices配置3.2启动

RivenDong·2023-09-06 10:40

k8s 搭建基于session模式的flink集群

1.flink集群搭建不废话直接上代码，都是基于官网的，在此记录一下Kubernetes|ApacheFlinkflink-configuration-configmap.yamlapiVersion:

Json_Marz·2023-09-06 10:40

Docker部署Redis集群详解【主从复制 + 哨兵模式】

前言注意：该文章不会讲解Redis集群搭建的原理，只讲述如何通过Docker容器快速部署搭建Redis主从+哨兵模式的集群准备工作：一台云服务器or本地虚拟机（CentOS和Ubuntu都可以）安装好Docker

Paraverse_徐志斌·2023-09-06 07:06

Docker部署Hadoop集群

前几天写了文章“Hadoop集群搭建”之后，一个朋友留言说希望介绍下如何使用Docker部署，这个建议很好，Docker不仅在生产环境威力巨大，对于我们在自己电脑中搭建学习实验环境更是非常便利。

丨程序之道丨·2023-09-06 03:01

大数据技术——hadoop集群搭建出现的问题

出现的问题和解决方案ssh免密出现的问题：解决方法：出现上图的是语法错误，在ssh和-keygen中多了空格，去掉即可2.ssh免密登录出现的问题：ssh登陆报错“WARNING:REMOTEHOSTIDENTIFICATIONHASCHANGED“解决方法：1)通过ssh-keygen密钥工具更新ssh-keygen-f~/.ssh/known_hosts-R远程主机IP地址2)手动清除～/.s

肉肉肉肉肉肉~丸子·2023-09-06 03:46

hadoop集群搭建出现的一些问题总结

为了实现三台主机(masterslave1slave2)间的免密码登录，分别将slave1和slave2的公钥发送给master，然后再将master复制到slave1和slave2ssh-copy-idmaster验证master里面的authorized_keyscat.ssh/authorized_keys这里出现了问题，只有master和slave2的公钥，没有slave1，最后发现是sl

大角牛向前冲_momo·2023-09-06 03:45

spring cloud系列教程第六篇-Eureka集群版

转载请注明1：Eureka执行步骤理解2：集群原理3：Eureka集群搭建4：修改payment和order项目注册到集群中本文是由凯哥(凯哥Java:kagejava)发布的《springcloud系列教程

凯哥Java·2023-09-05 18:04

hadoop 3.3大数据集群搭建系列1-安装hadoop

一.软硬件配置1.1主机配置及规划hostnamehp5hp6hp7ip10.31.1.11910.31.1.12010.31.1.121内存8G8G8GusernamerootrootrootIP主机名功能10.31.1.119hp5NameNodeDataNodeResourceManagerNodeManager10.31.1.120hp6DataNodeNodeManager10.31.1

只是甲·2023-09-05 18:18

HDFS HA 高可用集群搭建详细图文教程

目录一、高可用（HA）的背景知识1.1单点故障1.2如何解决单点故障1.2.1主备集群1.2.2Active、Standby1.2.3高可用1.2.4集群可用性评判标准（x个9）1.3HA系统设计核心问题1.3.1脑裂问题1.3.2数据状态同步问题二、NAMENODE单点故障问题2.1概述2.2解决三、HDFSHA解决方案--QJM3.1QJM—主备切换、脑裂问题解决3.1.1ZKFailover

Stars.Sky·2023-09-05 17:37

HBase 环境搭建

HBase单机环境的搭建这里先进行单机版环境搭建，主要目的是熟悉HBase，实操角度对HBase有简单认识，后面会分享HBase的原理、架构和集群搭建。

44d18503659e·2023-09-05 14:19

Kubernetes v1.25.0集群搭建实战案例(新版本含Docker容器运行时)

k8s1.24之后弃用了docker容器运行时，安装方式上有所不同，网上找到的大多数都是1.24之前的版本。所以把自己搭建的完整过程记录下来供大家参考。一、前言k8s的部署方式有多种kubeadm、kind、minikube、Kubespray、kops等本文介绍官方推荐的kubeadm的方式搭建集群。二、安装步骤1、虚拟机两台（ip按自己的网络环境相应配置）(master/node)iphost

玄明Hanko·2023-09-05 13:36

mqtt集群搭建并使用nginx做负载均衡_亲测得结论

mqtt集群搭建RabbitMQ集群搭建和测试总结_亲测搭建好RabbitMQ集群,并开启mqtt插件功能,mqtt集群也就搭建好了nginx配置mqtt负载均衡#修改rabbitmq1节点ip为1.19

阿亮说技术·2023-09-05 10:01

Apache Pulsar集群搭建部署2.9.3

集群架构Broker一个或多个Broker处理和负载接受到的生产者发送的消息数据调度消息发送给消费者与Zookeeper进行通信以处理各种协调任务，将消息存储在BookKeeper实例（又称为bookies）中依赖于ZooKeeper集群来执行某些任务，等等ApacheZookeeper（Standby/Cluster）Pulsar使用ZK存储元数据、集群配置，还有协调各Broker协调由那个Br

小韩加油呀·2023-09-05 10:31

Pulsar集群搭建部署

一、集群组成说明1.搭建Pulsar集群至少需要3个组件：ZooKeeper集群、BookKeeper集群和broker集群（Broker是Pulsar的自身实例)。这三个集群组件如下：ZooKeeper集群（3个ZooKeeper节点组成）bookie集群（也称为BookKeeper集群，3个BookKeeper节点组成）broker集群（3个Pulsar节点组成）2.Pulsar的安装包已包含

weixin_33775572·2023-09-05 10:00

Pulsar集群搭建

本文介绍一下pulsar的集群搭建（在3台linux服务器上）1.集群组成1.1搭建Pulsar集群至少需要3个组件：ZooKeeper集群、BookKeeper集群和broker集群（Broker是Pulsar

小刘想学架构·2023-09-05 10:28

pulsar集群搭建_亲测成功

pulsar集群搭建_亲测成功单机运行请看:LinuxMacBook单机部署Pulsar并开启认证功能集群组成搭建Pulsar集群至少需要3个组件：ZooKeeper集群、BookKeeper集群和broker

阿亮说技术·2023-09-05 10:27

zookeeper-3.6.4集群搭建

1、上传zookeeper安装包并解压上传路径：/opt/software/解压路径：/opt/module/2、创建数据目录及日志目录#数据目录：/data/zookeeper/data/#3台机器创建存储目录：sudomkdir-p/data/zookeeper/data#日志目录：/data/log/zookeeper#3台机器创建日志目录：sudomkdir-p/data/log/zook

bigdata-rookie·2023-09-05 09:03

第三章微服务配置中心

文章目录Nacos配置中心统一配置管理在nacos中添加配置文件从微服务拉取配置配置热更新多环境共享配置搭建Nacos集群搭建集群初始化数据库配置Nacos启动nginx反向代理Nacos配置中心Nacos

库里不会投三分·2023-09-05 05:34

redis的主从搭建和密码配置

目录主从的概念主从的配置配置主服务器master配置从服务器slave查看主从关系验证主从读写功能master（读写）slave（只读）redis主从搭建与集群搭建密码的配置主从的概念主Redis写入数据时

万wu皆可爱·2023-09-04 22:05

Redis-Cluster集群搭建

Redis-Clusterredis集群的原理，redis分片是怎么实现的，你们公司redis用在了哪些环境？笔者回答：reids集群原理：其实它的原理不是三两句话能说明白的，redis3.0版本之前是不支持集群的，官方推荐最大的节点数量为1000，至少需要3(Master)+3(Slave)才能建立集群，是无中心的分布式存储架构，可以在多个节点之间进行数据共享，解决了Redis高可用、可扩展等问

apt_fz·2023-09-04 19:04

Nginx+keepalived实现高可用项目实战

(master)192.168.85.129(back)192.168.85.132(web1)192.168.85.133(web2)为达到测试目的两台Web服务写不用的发布目录进行区分二、负载均衡集群搭建

是胡也是福·2023-09-03 18:14

kafka配合ElasticStack技术栈的搭配使用

今日内容:-kafka生产环境调优;-kafka配合ElasticStack技术栈的搭配使用;-zookeeper集群部署;-zookeeper的ACL;-zookeeper的调优;-PB级别项目;-ES8集群搭建

港南四大炮亡·2023-09-03 15:23

Nacos2.0.3集群搭建

集群搭建前置条件JDK1.8MySQL5.7.29Nacos2.0.3搭建过程将Nacos安装包上传至三个服务器，本次搭建使用三个端口来模拟三个不同的主机解压：tar-zvxfnacos-server-

aiYouWei啊·2023-09-03 12:01

5-redis集群搭建安装

1.先决条件1.1.OS基础配置CentOS为了能够正常安装redis，需要对CentOS进行常规的一些基础配置，主要有：关闭防火墙与selinux，设置主机名，配置虚拟机IP地址使其能够与外网ping通，配置IP地址与主机名映射，配置yum源。具体配置参见：Linux常规基础配置_小黑要上天的博客-CSDN博客类型版本CentOS7.9Redis7.0.121.2.Redis介质下载(redis

小黑要上天·2023-09-03 08:46

ES集群搭建

什么是ES：Elasticsearch是一个分布式、RESTful风格的搜索和数据分析引擎。官网地址:https://www.elastic.co/cn/elasticsearch/单点部署ES:1.安装esyum-ylocalinstallelasticsearch-7.17.5-x86_64.rpm2.修改配置文件vim/etc/elasticsearch/elasticsearch.yml.

港南四大炮亡·2023-09-03 06:39

Hadoop 3.2.4 集群搭建详细图文教程

目录一、集群简介二、Hadoop集群部署方式三、集群安装3.1集群角色规划3.2服务器基础环境准备3.2.1环境初始化3.2.2ssh免密登录（在hadoop01上执行）3.2.3各个节点上安装JDK1.8环境3.3安装Hadoop3.4Hadoop安装包目录结构3.5编辑Hadoop配置文件3.5.1hadoop-env.sh3.5.2core-site.xml3.5.3hdfs-site.xm

Stars.Sky·2023-09-02 07:01

Hadoop集群搭建(五)-集群配置文件

目录集群部署规划自定义配置文件节点格式化配置workers启动集群配置历史服务器集群部署规划hadoop102hadoop103hadoop104HDFSNameNodeDataNodeSecondaryNameNodeNataNodeYARNNodeManagerResourceManagerNodeManagerNodeManager自定义配置文件core-site.xml、hdfs-site

HUA_8376·2023-09-02 06:55

高级DBA带你从0到1搭建Mysql NDB Cluster 分布式集群搭建实战全网最详细

MysqlNDBCluster集群搭建实战全网最详细https://dev.mysql.com/doc/refman/8.0/en/mysql-cluster-overview.html#官方的文档介绍地址一

技术很渣·2023-09-02 04:57

聊聊 Pulsar： Pulsar 分布式集群搭建

一、集群搭建要求1.1搭建设计搭建Pulsar集群至少需要3个组件：ZooKeeper集群、Bookkeeper集群和Broker集群（Broker是Pulsar的自身实例）。

老周聊架构·2023-09-01 13:41

ClickHouse集群搭建及ODBC配置

1搭建环境192.168.122.100BCEuler01192.168.122.101BCEuler02192.168.122.102BCEuler031.1关闭防火墙#systemctldisablefirewalld#systemctlstopfirewalld1.2关闭selinux#/etc/selinux/configSELINUX=disabled1.3设置时间同步(chrony)将

shif_l·2023-09-01 08:02

Hadoop完全分布式集群搭建

文章目录一、克隆二、网络配置三、SSH服务配置四、hadoop完全分布式配置一、克隆1.在虚拟机关机的状态下选择克隆2.开始克隆3.选择从当前状态创建4.创建一个完整的克隆5.选择新的虚拟机存储位置（选择内存充足的磁盘）6.开始克隆7.克隆完成8.同样的方法克隆第二台虚拟机9.在计算机中存在三台虚拟机将第一台虚拟机更名为hadoop01修改hadoop01的主机名为hadoop01修改hadoop

T³3·2023-09-01 07:28

Spark自带的集群模式（Standalone），Spark/Spark-ha集群搭建

1、Spark自带的集群模式对于Spark自带的集群模式，Spark要先启动一个老大（Master）,然后老大Master和各个小弟（Worker）进行通信，其中真正干活的是Worker下的Executor。关于提交任务的，需要有一个客户端，这个客户端叫做Driver.这个Driver首先和Master建立通信，然后Master负责资源分配，然后让Worker启动Executor,然后Execut

涂作权的博客·2023-09-01 06:32

Kubernetes最新版v1.27.4安装和集群搭建保姆级教程

1.Kubernetes1.27.4发布一：k8s1.27.x的概述太平洋时间2023年4月11日，Kubernetes1.27正式发布。此版本距离上版本发布时隔4个月，是2023年的第一个版本。新版本中release团队跟踪了60个enhancements，比之前版本都要多得多。其中13个功能升级为稳定版，29个已有功能进行优化升级为Beta，另有18个Alpha级别的功能，大多数为全新功能。1

huainian·2023-09-01 04:51

推荐频道

——集群搭建