hadoop2.7.3集群搭建

搭建Flink集群、集群HA高可用以及配置历史服务器

Flink集群搭建Flink集群搭建集群规划下载并解压安装包修改集群配置分发安装目录启动集群访问WebUIFlink集群HA高可用概述集群规划配置flink配置master、workers配置ZK分发安装目录启动
CodeDevMaster·2023-09-22 00:12

Redis学习（七）--Redis主从复制与Redis集群搭建

Redis主从复制主从复制是什么主机数据更新后根据配置和策略，自动同步到备机的master/slaver机制，Master以写为主，Slave以读为主主从复制能干嘛读写分离，性能扩展；容灾快速恢复；怎么玩：主从复制拷贝多个redis.conf文件include(写绝对路径)；开启daemonizeyes；Pid文件名字pidfile；指定端口port；Log文件名字；dump.rdb名字dbfil
三笠·阿卡曼·2023-09-21 19:03

hadoop集群搭建

vim/etc/hosts192.168.1.2Master.Hadoop192.168.1.3Slave1.Hadoop192.168.1.4Slave2.Hadoop192.168.1.5Slave3.Hadoop若能用主机名进行ping通，说明刚才添加的内容，在局域网内能进行DNS解析。hadoop:https://dlcdn.apache.org/hadoop/common/hadoop-
我有甜甜·2023-09-21 15:45

zookeeper虚拟机集群搭建问题：Cannot open channel to * at election address

配置zoo.cfg中各个主机的ip地址不对，查看myid是否与zoo.cfg中service.*是对应的。关闭防火墙首先查看防火墙的状态systemctlstatusfirewalld.serviceactive(running)表示防火墙开启关闭防火墙systemctlstopfirewalldservicesystemctlstatusfirewalld.servicedisavtive（de
AmeliaPP·2023-09-21 07:09

01.三节点集群搭建--VM配置

1.下载CentOS71.百度搜索centos–>2.点击centos官网连接–>3.点击DVDISO–>4.点击http://ap.stykers.moe/centos/7.6.1810/isos/x86_64/CentOS-7-x86_64-DVD-1810.iso连接进下载.2.安装虚拟机管理软件MwareWorkstation15Pro产品文档Mac安装教程安装完成虚拟机会在桌面上生成虚拟
一碗机智的糖浆·2023-09-21 06:53

Hadoop集群搭建的总结

集群搭建步骤1.设置ip：使用命令servicenetworkrestart重启网卡2.关闭
qq_40178533·2023-09-21 05:43

RabbitMQ高级特性-搭建RabbitMQ普通集群

目录一、架构二、获取cookie三、准备集群配置四、启动集群五、测试1、数据共享测试2、可用性测试一、架构我们通过docker模拟集群搭建，端口分配如下：主机名控制台端口amqp通信端口mq18081—
Blueeyedboy521·2023-09-21 02:17

Hdoop伪分布式集群搭建

文章目录Hadoop安装部署前言1.环境2.步骤3.效果图具体步骤（一）前期准备（1）ping外网（2）配置主机名（3）配置时钟同步（4）关闭防火墙（二）正文（1）配置hosts列表（2）SSH免密钥登录配置①master虚拟机上②slave01虚拟机上③slave02虚拟机上④验证免密登录（3）安装JDK（4）安装部署Hadoop集群（chenqi用户）1.解压缩包2.配置文件3.创建Hadoo
陈七.·2023-09-20 22:27

centos7 mysql集群搭建

mysql集群前置条件修改集群节点设备计算机名称hostnamectlset-hostnamenode1#以此类推node2,3实现集群节点之间的ssh互信功能functionssh_trust(){result=$(cat/etc/ssh/sshd_config|grep"RSAAuthentication")#echo$resultif[!"$result"];thenecho"RSAAuth
祈心无尘·2023-09-20 15:59

mysql 集群搭建(Centos7) for Galera

背景：mysql高可用集群主流的是MHA，缺点不够灵活，需要做单独做读写分离。Galera目前是没有主从，所有节点都可读写，宕机重启自动加入集群，容灾灵活。第一步：环境介绍centos7+mysql-8.0+galera-4第二步：准备工作.执行命令：>vi/etc/selinux/config修改SELINUX=enforcing为permissive,执行reboot重启电脑.准备一个ssh连
谁冷漠了秋天·2023-09-20 15:29

Redis-cluster原理及集群搭建

一3.0版本之前在redis3.0版本之前是不支持集群的，我们的redis如果想要集群的话，就需要一个中间件，然后这个中间件负责将我们需要存入redis中的数据的key通过一套算法计算得出一个值。然后根据这个值找到对应的redis节点，将这些数据存在这个redis的节点中,在取值的时候，同样先将key进行计算，得到对应的值，然后就去找对应的redis节点，从对应的节点中取出对应的值,这样做有很多不
itfanszhao·2023-09-20 14:00

图文结合丨GreatSQL MGR + ProxySQL集群搭建方案

前言ProxySQLProxySQL是基于MySQL的一款开源的中间件的产品，是一个灵活的MySQL代理层，可以实现读写分离，支持Query路由功能，支持动态指定某个SQL进行缓存，支持动态加载（无需重启ProxySQL服务），故障切换和一些SQL的过滤功能。GreatSQLMGRGreatSQL是适用于金融级应用的国内自主开源数据库，具备高性能、高可靠、高易用性、高安全等多个核心特性，可以作为M
·2023-09-20 10:40

Hbase完全分布式搭建

一、简介Hbase官网二、生产集群搭建准备Zookeeper集群，Zookeeper搭建Hadoop集群(必须搭建完)，Hadoop搭建Hbase完全分布式配置(注意切换用户hadoop)#上传Hbase
鋆坤·2023-09-20 03:06

Redis 高级总结

Redis持久化1.RDB2.AOF3.AOF和RDB对比Redis主从集群结构准备实例和配置启动开启主从关系测试数据同步原理搭建哨兵集群集群结构准备实例和配置启动测试哨兵的作用SpringBoot访问哨兵集群搭建分片集群集群结构准备实例和配置启动创建集群测试散列插槽集群伸缩故障转移
_CX_·2023-09-19 18:49

Redis cluster集群搭建

通过三台虚拟机搭建一个3主3从的cluster集群1、安装gcc-c++依赖包yuminstallgcc-c++2、下载安装包并解压wgethttps://download.redis.io/releases/redis-6.0.9.tar.gztar-zxvfredis-6.0.9.tar.gz3、编译安装编译cdredis-6.0.9make默认安装makeinstall指定路径安装(PREF
J_HelloWorld·2023-09-19 10:25

Nacos安装指南以及集群搭建

结合SpringCloud从基础到活用（超详细）查看一、Windows安装开发阶段采用单机安装即可。1.1.下载安装包在Nacos的GitHub页面，提供有下载链接，可以下载编译好的Nacos服务端或者源代码：GitHub主页：https://github.com/alibaba/nacosGitHub的Release下载页：https://github.com/alibaba/nacos/rel
Wen阿杜·2023-09-19 08:50

Hadoop+zookeeper+Flume+Spark+Kafka+Hbase大数据集群搭建

HadoopzookeeperFlumeSparkKafkaHbase大数据集群搭建教程集群搭建流程一、环境的准备和必要软件的下载下载并安装vmvare虚拟机软件下载centos7系统镜像文件，下载链接下载
jjjkkkhhhggg·2023-09-19 07:42

hbase 集群搭建

hbase集群搭建1、安装步骤1.1、安装zookeeper集群1.2、下载/解压hbase1.3、修改配置文件1.3.1、hbase-env.sh1.3.2、hbase-site.xml1.3.3、regionservers1.3.4
.道不虚行·2023-09-18 18:10

nginx+keepalived集群搭建

1.nginx部署单机部署可参考：https://blog.csdn.net/ym5209999/article/details/1198972372.keepalived安装[root@nginx1~]#yum-yinstallkeepalived3.keepalived配置3.1安装完成后，默认配置文件位于：/etc/keepalived，默认配置如下：keepalived.conf!Conf
看到代码头都是大的·2023-09-18 18:59

基于K8S进行postgresql数据备份&恢复

进行数据备份操作4.恢复备份数据5.如何进行数据的定时备份1.前置说明本文基于K8S进行postgres数据库进行备份和数据还原，数据库采用及集群HA的模式进行搭建，可参考前文Rancher+K8S+Docker集群搭建
纠结已成歌e·2023-09-18 14:18

RabbitMQ——RabbitMQ搭建及问题

文章目录单点搭建准备版本确定安装各种依赖模块Erlang安装RabbitMQ安装安装流程安装问题集群搭建一般集群HA集群参考单点搭建准备版本确定官方给出的RabbitMQ和Erlang对应版本RabbitMQ
SK_Jaco·2023-09-18 08:05

redis 最新版 6.2.1 cluster 集群搭建

准备三台服务器，每台启动两个节点，搭建一主一从集群：192.168.3.4192.168.3.5192.168.3.6连接服务器192.168.3.4，下载最新版redis6.2.1cd/home/soft/download-package/wgethttps://download.redis.io/releases/redis-6.2.1.tar.gz复制到其他机器上scpredis-6.2.1
则好·2023-09-18 03:08

docker 安装 redis

文章目录redis单机版1.拉取redis镜像并创建数据卷目录2.复制和修改redis.conf3.启动redis容器4.进入容器并连接redisredis一主两从集群搭建1.复制三份redis.conf2
N-1-萘乙基二胺盐酸盐·2023-09-17 23:26

Redis集群搭建linux

一、什么是Redis集群Redis集群是为了能够解决一台主服务器容量不足或者是出现高并发写操作时性能不足的问题，Redis集群就是将多台主服务器进行连接以实现多台主服务器数据同步和共享。每个Redis集群一共有16384个插槽，这16384个插槽将会被平均分配给群里的主服务器中，当key被存储时，Redis会将key通过CRC16算法计算出相对应的插槽并写入对应的主服务器中，因此每台主服务器只保存
码农弓长先生·2023-09-17 08:17

kafka

-05T11:35:47+08:00draft:falseauthor:“name”tags:[“kafka”]categories:[“install”]description:“测试的”kafka集群搭建下载地址
猪猪侠blogs·2023-09-17 08:13

redis集群搭建

title:“Redis集群搭建”createTime:2022-01-04T20:44:58+08:00updateTime:2022-01-04T20:44:58+08:00draft:falseauthor
猪猪侠blogs·2023-09-17 08:42

Kafka高可用 — KRaft集群搭建

本文介绍了KRaft模式及三节点的KRaft集群搭建。1KRaft介绍KRaft简介KRaft运行模式的Kafka集群，不会将元数据存储在ApacheZooKeeper中。
WonderThink·2023-09-16 22:49

ElasticSearch7(ES)集群搭建(并配置密码)

ElasticSearch之分布式搜索引擎一、简介ElasticSearch官网二、生产集群搭建准备安装JDK的linux服务器三台(JDK版需要与ElasticSearch版本对应好)下载准备好ElasticSearch
鋆坤·2023-09-16 20:24

Nacos安装与集群搭建 （保姆级指南）

Nacos安装快速安装Windows安装Linux安装集群搭建1.Windows安装开发阶段采用单机安装即可。
Lor :)·2023-09-16 18:18

Zookeeper+Hadoop+Spark+Flink+Kafka+Hbase+Hive 完全分布式高可用集群搭建(保姆级超详细含图文)

说明:本篇将详细介绍用二进制安装包部署hadoop等组件，注意事项，各组件的使用，常用的一些命令，以及在部署中遇到的问题解决思路等等，都将详细介绍。1.环境说明1.1ip规划iphostname192.168.1.11node1192.168.1.12node2192.168.1.13node31.2系统配置1.2.1系统版本[root@localhost~]#cat/etc/redhat-rel
Mr.L-OAM·2023-09-16 02:02

Docker 高级篇

文章目录第一章Docker复杂安装详说1.1安装mysql主从复制1.2安装redis集群（哈希槽分区进行亿级数据存储）1.2.1相关面试题1.2.2集群搭建步骤第二章Dockerfile解析2.1是什么
程序猿历险记·2023-09-16 01:11

k8s集群搭建-kubeadm

k8s架构图1636466481738.png安装准备关闭防火墙[root@k8smaster~]#systemctlstopfirewalld[root@k8smaster~]#systemctldisablefirewalld关闭selinux：[root@k8smaster~]#sed-i's/enforcing/disabled/'/etc/selinux/config[root@k8sm
小李飞刀_lql·2023-09-16 00:00

Tomcat与云服务器集群搭建

第一章：Tomcat1.1网站代码PHPLNMPJavaLNMT(Tomcat/Resin/)Oracle(Weblogic)1.2JVMWindows我们希望1分代码可以运行在不同的系统中(代码的可移植性)JAVA程序会被放在1个叫虚拟机容器JVMJavaVirtualMachineJava虚拟机运行java程序：1份代码可以处处使用1.3JDK+TOMCATJDKJavaDevelopment
北疆07·2023-09-15 13:06

nacos的集群搭建步骤

单机版的nacos安装我已经写过一篇文章了，点击这里查看，今天直接开始集群篇的安装，首先安装需要三台nacos（官方推荐最少三台），可以安装一边复制三次，分别定义为nacos8841，nacos8842，nacos8843，如图：并在nacos加目录下的conf目录下的application.properties文件当中将端口号改成对应的88418842和8843其他的请自己配置，然后再conf文
XiaoHH Superme·2023-09-15 07:00

jenkins部署k8s

一、jenkins搭建参考之前的文章：Jenkins搭建二、k8s集群搭建参考之前的文章：k8s集群搭建三、jenkins上配置凭证3.1、配置gitlab凭据3.2、配置kuberntes凭据在master
大A崛起·2023-09-15 00:47

Spark实例学习(一)spark3.x集群搭建

目录集群规划spark安装包下载虚拟机搭建NAT静态网络配置Hadoop集群搭建scala安装配置spark修改conf下文件分发虚拟机修改启动文件名配置历史日志启动sparkUI界面查看测试spark
阳光里哭泣的狗·2023-09-14 10:34

【工具-Nginx】从入门安装到高可用集群搭建

文章已收录至https://lichong.work，转载请注明原文链接。ps：欢迎关注公众号“Fun肆编程”或添加我的私人微信交流经验一.Nginx安装配置及常用命令1.环境搭建首先在linux系统下安装gcc编译环境，执行：yuminstallgcc-c++-y确保当前系统可以编译nginx及其依赖包。同时，安装Nginx还需要以下依赖需要进行安装：pcre-9.37.tar.gzopenss
Fun肆编程·2023-09-13 21:14

Docker——k8s集群搭建

一、知识剖析简介官方中文文档：https://www.kubernetes.org.cn/docsKubernetes是一个开源的，用于管理云平台中多个主机上的容器化的应用，Kubernetes的目标是让部署容器化的应用简单并且高效（powerful）,Kubernetes提供了应用部署，规划，更新，维护的一种机制。Kubernetes一个核心的特点就是能够自主的管理容器来保证云平台中的容器按照用
Treasured _·2023-09-13 17:57

使用docker搭建RocketMQ(非集群搭建官方镜像)

之前在使用RocketMQ官方的包在搭建的时候，发现好多问题，什么修改内存大小，然后启动broker报错，类似servicenotavailablenow,maybediskfull等等…最后决定还是重新用docker搭建下，感觉这样子玩坏了，可以直接把容器干掉，重新启动一个新的容器，毕竟是在学习阶段，这样子快好多。废话不多说，现在开始搭建。具体搭建流程前提说明，由于之前使用非docker搭建的时
Wayfreem·2023-09-13 16:46

Hadoop集群搭建

目录导引Hadoop集群搭建1.安装VMwareWorkstation16PRO2.基于VMwareWorkstation16PRO安装Centos7完全分布式安装1.Hadoop集群节点设置2.准备三台虚拟机
db_gjq_2038·2023-09-13 15:35

Docker搭建RabbitMQ集群_开启MQTT插件后连接不上

RabbitMQ集群搭建和测试总结_亲测Docker安装RabbitMQ集群_亲测成功开启MQTT插件后,集群方式连接不上,看日志报错连接超时,执行如下命令就可以连接上了rabbitmqctleval“
阿亮说技术·2023-09-13 07:47

实操Hadoop大数据高可用集群搭建（hadoop3.1.3+zookeeper3.5.7+hbase3.1.3+kafka2.12）

前言纯实操，无理论，本文是给公司搭建测试环境时记录的，已经按照这一套搭了四五遍大数据集群了，目前使用还未发现问题。有问题麻烦指出，万分感谢！PS：Centos7.9、Rocky9.1可用集群配置iphostname系统CPU内存系统盘数据盘备注192.168.22.221hadoop1Centos7.9416250G192.168.22.222hadoop2Centos7.9416250G192.
虫叽叽·2023-09-12 12:09

【kafka】kafka单节点/集群搭建

概述本章节将分享不同版本的kafka单节点模式和集群模式搭建。在kafka2.8版本之前，需要依赖zookeeper服务，而在kafka2.8版本（包括）之后，可以不在依赖zookeeper服务。本章节将分kafka2.8版本之前的版本和之后的版本分别搭建单节点模式和集群模式。服务器环境规划实际的生产使用中，我们一般推荐搭建奇数多节点的kafka集群，如3/5/7。在本次测试中，我分别使用了1台和
margu_168·2023-09-12 10:19

这 4 种高可用 RocketMQ 集群搭建方案，推荐最后一种。。。

背景笔者所在的业务线，最初化分为三个服务，由于业务初期业务复杂度相对简单，三个业务服务都能很好的独立完成业务功能。随着产品迭代，业务功能越来越多后慢慢也要面对高并发、业务解耦、分布式事务等问题，所以经过团队内部讨论，引入RocketMQ消息中间件来更好的处理业务。由于公司内部业务线部署相互独立，我们业务线对引入RocketMQ的需求也比较急切，所以打算自己搭建一套高可用的RocketMQ集群，同时
架构文摘·2023-09-12 10:36

RabbitMQ集群搭建和测试总结_亲测

RabbiMQ简介RabbitMQ是用Erlang开发的，集群非常方便，因为Erlang天生就是一门分布式语言，但其本身并不支持负载均衡。RabbitMQ模式RabbitMQ模式大概分为以下三种:(1)单一模式。(2)普通模式(默认的集群模式)。(3)镜像模式(把需要的队列做成镜像队列，存在于多个节点，属于RabbitMQ的HA方案，在对业务可靠性要求较高的场合中比较适用)。要实现镜像模式，需要先
beyond阿亮·2023-09-12 09:26

Docker搭建RabbitMQ集群_开启MQTT插件后连接不上

RabbitMQ集群搭建和测试总结_亲测Docker安装RabbitMQ集群_亲测成功开启MQTT插件后,集群方式连接不上,看日志报错连接超时,执行如下命令就可以连接上了rabbitmqctleval“
beyond阿亮·2023-09-12 09:26

Docker安装RabbitMQ集群_亲测成功

先安装DockerCentos7离线安装Docker华为云arm架构安装DockerRabbitMQ集群模式介绍RabbitMQ集群搭建和测试总结_亲测RabbitMQ有三种模式：单机模式，普通集群模式
阿亮说技术·2023-09-12 09:23

(三) Redis集群的搭建

Redis集群搭建主要是按照这篇文章的说明搭建的集群环境，本文也会加入自己遇到的一些坑来说明一下。Redis集群采用了P2P的模式，完全去中心化。
awaa·2023-09-11 17:37

第16章 服务安全控制

ApacheDruid2、热门商品处理3、秒杀抢单操作三、目标1、Gateway限流Gateway限流方案基于令牌桶限流实现2、Nginx限流Nginx速率限流Nginx并发量限流3、Redis集群应用Redis集群搭建
Eclipse_2019·2023-09-11 11:49

（二十六）大数据实战——kafka集群之Kraft模式安装与部署

前言本节内容主要介绍kafka3.0版本以后，一种新的kafka集群搭建模式看kraft，在该模式下，kafka高可用不在依赖于zookeeper，用controller节点代替zookeeper，元数据保存在
北溟溟·2023-09-10 20:22
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他