集群搭建

[容器化技术之十五] K8S集群架构搭建之二 —— etcd 集群搭建和 flannel 网络部署

二、集群环境搭建2.5 部署etcd集群  etcd是基于Raft的分布式key-value存储系统，由CoreOS开发，常用于服务发现，共享配置以及并发控制（如leader选举、分布式锁等）。kubernetes使用etcd存储所有运行数据。  下面介绍部署一个三节点高可用etcd集群的步骤：下载和分发etcd二进制文件；创建etcd集群各节点的x509证书，用于加密客户端（如etcdctl）与
occultator·2021-06-25 10:08

eureka集群搭建

简介用作注册中心的，类似zk。zk实现的是CP，eureka实现的是AP。因为注册中心数据变化不大，而数据可靠性要求较高，所以eureka更适合做注册中心。使用方式1.pom文件中增加eureka依赖因为它是一个纯java的项目，所以需要容器启动，目前基本上都是基于springboot项目启动org.springframework.cloudspring-cloud-starter-netflix
nextbeginning·2021-06-25 09:37

Docker私有镜像仓库Harbor集群搭建

1.Harbor介绍Harbor是由VMware开源的企业级的DockerRegistry管理项目，包括权限管理、LDAP、日志审核、管理界面，自我注册、镜像复制等功能。Harbor相对于DockerRegistry的优点：有管理界面，管理起来比较方便支持镜像同步和集群部署很好的和K8s集成2.环境和软件准备本次演示在LinuxCentOs7系统上操作，准备以下两台机器作为Harbor集群：192
zwffff·2021-06-25 03:21

Redis 集群搭建

Redis集群搭建（伪集群）软件环境centos7.3（虚拟机）redis5.0.5搭建步骤创建相关目录创建主文件夹redis-cluster在此文件夹下面创建六个子文件夹mkdir/opt/redis-clustercd
刘海琦888·2021-06-24 21:44

【hadoop-部署】Hadoop2.x HA集群搭建

一、安装环境准备操作系统：centos7三台主机hdc-data4：192.168.163.54hdc-data5：192.168.163.55hdc-data6：192.168.163.56【安装环境准备每台集群机器一样的操作，或者使用scp远程拷贝】0、创建新的虚拟机【可选】根据安装向导创建一台虚拟机主机(其他主机使用克隆)。然后配置静态ip和主机名。重启网络服务。step1:配置IPvi/e
粮忆雨·2021-06-24 20:19

浅谈实时计算框架Flink集群搭建与运行机制

一、Flink概述1.1、基础简介主要特性包括：批流一体化、精密的状态管理、事件时间支持以及精确一次的状态一致性保障等。Flink不仅可以运行在包括YARN、Mesos、Kubernetes在内的多种资源管理框架上，还支持在裸机集群上独立部署。在启用高可用选项的情况下，它不存在单点失效问题。这里要说明两个概念：边界：无边界和有边界数据流，可以理解为数据的聚合策略或者条件；状态：即执行顺序上是否存在
·2021-06-23 18:15

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5·2021-06-23 15:18

Nacos集群搭建

一、简介Nacos官网二、生产集群搭建准备Linux服务器至少三台，且为单数，(以三台为列)服务器均已安装JDK1.8，且配置好环境变量下载准备好Nacos安装包，官网下载地址解压tar-zxvfnacos-server
鋆坤·2021-06-23 09:52

基于 Docker 的 Redis 高可用集群搭建（redis-sentinel）

前言  之前介绍了用docker来搭建redis主从环境，但这只是对数据添加了从库备份(主从复制)，当主库down掉的时候，从库是不会自动升级为主库的，也就是说，该redis主从集群并非是高可用的。  目前来说，高可用(主从复制、主从切换)redis集群有两种方案，一种是redis-sentinel，只有一个master，各实例数据保持一致；一种是redis-cluster，也叫分布式redis集
happyJared·2021-06-23 07:57

nacos1.2.0集群搭建 linux docker swarm环境

1.环境准备nacos的官方地址文档手册https://nacos.io/zh-cn/index.html下载页面https://github.com/alibaba/nacos/releases由于服务器资源有限，方便测试，我主要采用2台centos云服务器，并且已经具备dockerswarm环境（搭建参见dockerswarm环境），来搭建4个节点的nacos集群服务：两台服务器，每台分别部署
fymit·2021-06-22 23:31

项目部署、单架构、集群搭建

项目部署(阿里云)image.pngimage.png一、阿里云服务器创建实例—控制台给安全组配置规则，添加5000端口利用命令行进行远程服务器的登陆，搭建信息ssh用户名@ip地址二、相关环境配置(单架构)根据远程服务器系统的选择更新源文件sudoapt-getupdate对于数据库MySQL与Redis的安装—针对单架构部署。mysqlapt-getinstallmysql-serverapt
梦醒家先生·2021-06-22 06:01

Hadoop集群搭建

一.安装虚拟机环境虚拟机版本：VMwareWorkstationProLInux版本：CentOS-6.10-x86_64-bin-DVD1.iso（下载地址：https://developer.aliyun.com/mirror或者https://tuna.moe/）二.搭建集群1.集群分配两个节点：主节点（master-192.168.31.160），从节点（follower-192.168.
码戈·2021-06-22 05:10

ZooKeeper的伪分布式集群搭建以及真分布式集群搭建

zk集群的一些基本概念zookeeper集群搭建：zk集群，主从节点，心跳机制（选举模式）配置数据文件myid1/2/3对应server.1/2/3通过zkCli.sh-server[ip]:[port
端碗吹水·2021-06-21 16:31

Nacos配置中心和服务的注册发现

在上一篇中，我们已经把Nacos的集群搭建好了，那么既然已经搭建好了，就要在咱们的项目中去使用。Nacos既可以做配置中心，也可以做注册中心。我们先来看看在项目中如何使用Nacos做配置中心。
牛初九·2021-06-21 16:25

kubernetes部署一个应用程序

没有完成Kubernetes集群搭建的，请参考文档使用kubeadm安装kubernetes1.21创建YAML文件创建文件nginx-deploy.yaml，内容如下：apiVersion:apps/
·2021-06-21 15:41

比较几种Redis集群方案

目录一、概述二、Redis高可用集群搭建三、Redis集群节点间的通信机制3.1、集中式3.2、gossip四、网络抖动五、Redis集群选举原理分析5.1、集群是否完整才能对外提供服务5.2、Redis
·2021-06-21 12:52

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5·2021-06-21 10:10

k8s高可用集群搭建-kubeadm方式

欢迎转载，转载请标明原文地址：https://www.jianshu.com/p/3de558d8b57a一、环境OS:Centos7.7Docker:18.09.9Kubernetes:1.17.0kubeadm:1.17.0kubelet-1.17.0kubectl-1.17.0注意K8s与Docker版本的兼容问题，在Kubernetes1.14后支持的docker版本更新了——Thelis
LazzMan·2021-06-21 07:22

基于kerberos的hadoop安全集群搭建

[TOC]上一份工作主要负责大数据平台的建设，在这个过程中积累了一些Hadoop生态组件的搭建和使用笔记，由于时间关系，不打算去修改其中的错别字和排版问题，直接释出原始笔记。前置条件我所在的集群有三台服务其，对应的host分别为master,slave1,slave2。hadoop服务的安装分部为|机器host|组件情况||:--------|--------:||master|namenode、
·2021-06-20 14:50

基于kerberos的hadoop安全集群搭建

[TOC]上一份工作主要负责大数据平台的建设，在这个过程中积累了一些Hadoop生态组件的搭建和使用笔记，由于时间关系，不打算去修改其中的错别字和排版问题，直接释出原始笔记。前置条件我所在的集群有三台服务其，对应的host分别为master,slave1,slave2。hadoop服务的安装分部为|机器host|组件情况||:--------|--------:||master|namenode、
·2021-06-20 14:13

Linux安装FastDFS单机版与FastDFS集群搭建（超级详细）

文章目录前言一、FastDFS介绍1.1.简介1.2.架构图1.3.fastdfs存储策略1.4.fastdfs上传过程1.5.fastdfs文件同步1.6.fastdfs下载过程二、准备工作2.1.源码编译器安装2.2.解压缩工具安装2.3.预装软件包下载三、FastDFS安装3.1.libfastcommon安装3.1.1.解压>编译>安装3.1.2.创建软连接3.2.fastdfs安装3.2
_alone_·2021-06-19 23:45

阿里负载均衡slb通过wss访问mqtt

*可以先通过下面的链接搭建emq集群服务器配置阿里负载均衡slb和emq集群搭建完成以上步骤，开始配置我们的wss准备工作1.为阿里slb申请一个域名(项目经理申请免费的公司二级域名)2.为此域名购买SSL
江山觑影·2021-06-19 09:12

PXC 集群搭建

一、安装Percona数据库1.离线安装Percona进入RPM安装文件目录，执行下面的脚本yumlocalinstall*.rpm管理MySQL服务systemctlstartmysqldsystemctlstopmysqldsystemctlrestartmysqld2.在线安装Percona使用yum命令安装yuminstallhttp://www.percona.com/downloads
背负代码的宇智波·2021-06-19 08:38

ActiveMQ高可用与集群搭建

ActiveMQ的高可用性架构是基于Master/Slave模型的,Master/Slave模式的搭建有好几种方式:1)SharedFileSystemMasterSlave使用共享文件系统的方式2)JDBCMasterSlave使用数据库作为持久化存储3)基于zookeeper方式搭建我们采取的是zookeeper的方式搭建Active高可用环境:步骤一:确保已经安装好jdk8的环境和zooke
蓝雄威·2021-06-19 06:57

kafka集群搭建和zk集群搭建

kafka转载：https://segmentfault.com/a/11...zk转载：https://segmentfault.com/a/11...两个对照着看，另外在查看kafka消息时一直有日志不断显示，不知道怎么关闭掉，有知道的童鞋可以指点下哈一定要先启动ZooKeeper再启动Kafka顺序不可以改变。先关闭kafka，再关闭zookeeper。zookeeper启动：分别在三台机器
·2021-06-18 22:12

在Docker环境下，TDengine的客户端为什么连不上集群？

这个话题就是——如何完善Docker环境下TDengine的集群搭建。“什么？除了你们官方自己人之外，怎么会有用户加班加点地讨论如何完善Docker环境的集群搭建，这也太假了。”
·2021-06-18 21:57

实时计算框架：Flink集群搭建与运行机制

一、Flink概述1、基础简介Flink是一个框架和分布式处理引擎，用于对无界和有界数据流进行有状态计算。Flink被设计在所有常见的集群环境中运行，以内存执行速度和任意规模来执行计算。主要特性包括：批流一体化、精密的状态管理、事件时间支持以及精确一次的状态一致性保障等。Flink不仅可以运行在包括YARN、Mesos、Kubernetes在内的多种资源管理框架上，还支持在裸机集群上独立部署。在启
·2021-06-18 21:57

实时计算框架：Spark集群搭建与入门案例

一、Spark概述1、Spark简介Spark是专为大规模数据处理而设计的，基于内存快速通用,可扩展的集群计算引擎，实现了高效的DAG执行引擎,可以通过基于内存来高效处理数据流，运算速度相比于MapReduce得到了显著的提高。2、运行结构Driver运行Spark的Applicaion中main()函数，会创建SparkContext，SparkContext负责和Cluster-Manager
·2021-06-18 21:27

Kafka单节点伪分布式集群搭建实现过程详解

Kafka集群搭建分为单节点的伪分布式集群和多节点的分布式集群两种，首先来看一下单节点伪分布式集群安装。
·2021-06-16 10:32

MongoDB集群搭建

当数据量到一定量级且需要高可用的时候，我们需要MongoDB的集群，本文用3个实例做集群搭建演示1.基础环境准备RH/CentosLinux服务器3台，在此假设3台服务器IP/hostname分别为：192.168.10.27
怒放的葱花·2021-06-15 18:38

elasticsearch最佳学习教程

//es.xiaoleilu.com/010_Intro/00_README.html中文学习教程https://cloud.tencent.com/developer/article/1189282集群搭建
有梦想永远年轻·2021-06-14 22:23

大数据集群搭建2

大数据集群搭建本文档将搭建以下集群hadoop集群zookeeper集群hbase集群spark集群kafka集群一、准备1.1软件版本ubuntu18.04jdk1.8.0_151hadoop-3.1.3apache-zookeeper
dhz120·2021-06-14 21:52

redis3.2.8集群搭建

本教程共用到两台服务器搭建了6个redis实例服务器1：192.168.1.111服务器2：192.168.1.123安装redis3.2wgethttp://download.redis.io/releases/redis-3.2.8.tar.gztar-zxvfredis-3.2.8.tar.gzcdredis-3.2.8makePREFIX=/usr/local/redisinstallcp
骑着大象去上班·2021-06-14 16:28

Nginx-主备集群搭建

搭建高可用的Nginx服务集群环境准备1.两台Nginx服务器（192.168.10.231，192.168.10.232）2.安装KeepAlived软件3.需要一个虚拟IP首先在一台虚拟机上安装Nginx1.安装相关依赖yum-yinstallmakezlibzlib-develgcc-c++libtoolopensslopenssl-devel2.下载Nginx安装文件，并解压（这里将文件下
枫之沫翊·2021-06-14 08:01

Zookeeper集群搭建

1.将每一台虚拟机都按照上一篇文章安装zookeeperubuntu修改主机名方式：直接修改/etc/hostname和/etc/hosts对应IP的主机名，这两个文件的内容然后重启就可以了主机名IP地址系统Linux-node1192.168.183.128UbuntuLinux-node2192.168.183.131UbuntuLinux-node3192.168.183.132Ubuntu
Jovi_Mac·2021-06-14 03:22

Mycat+MySQL双主双从集群搭建与读写分离配置

最近一直在研究MySQL的集群搭建，从网上找了好多帖子进行搭建，遇到了很多问题，今天与大家分享一下我的学习成果，如有不对的地方，希望大家能多多指正，另外有关MySQL和Mycat的安装此处不做赘述，此文章只对集群搭建的配置进行详细说明
华仔杨·2021-06-13 18:59

Kubernetes 暴露pod源IP配置（2021-03-23）

环境如下kubernetes:v1.12.5calico:v3.7.5OS:Redhat7.6工作原理本次配置中Kubernetes集群搭建中选用的网络插件为cailico。
TerryTsai·2021-06-13 08:14

apache druid(时序数据库)集群搭建

准备环境mysql、zookeeper、hadoop(HDFS)环境jdk1.8(每台druid服务器都需要安装)druid的服务器列表服务器地址服务器角色备注10.32.10.240druid-queryBroker、Router10.32.10.241druid-queryBroker、Router10.32.10.242druid-mastercoordinator、overlord10.3
不给起这个名字·2021-06-12 21:37

Kafka分布式集群搭建

基于zookeeper-3.4.9和kafka_2.12-2.2.0ZK集群的搭建启动就不赘述了，很多中间件要用到，千篇一律Kafka集群搭建：1.点击上述链接下载kafka并解压，假设解压目录为/home
请叫我李半仙·2021-06-12 10:08

centos环境redis 3.x集群搭建 超详细步骤

一、什么是RedisRedis是由意大利人SalvatoreSanfilippo（网名：antirez）开发的一款内存高速缓存数据库。Redis全称为：RemoteDictionaryServer（远程数据服务），该软件使用C语言编写，Redis是一个key-value存储系统，它支持丰富的数据类型，如：string、list、set、zset(sortedset)、hash。二、Redis特点R
团长plus·2021-06-11 22:16

hadoop集群搭建

1.准备Linux环境1.0先将虚拟机的网络模式选为NAT1.1修改主机名vi/etc/sysconfig/networkNETWORKING=yesHOSTNAME=itcast###1.2修改IP两种方式：第一种：通过Linux图形界面进行修改（强烈推荐）进入Linux图形界面->右键点击右上方的两个小电脑->点击Editconnections->选中当前网络Systemeth0->点击edi
NickYS·2021-06-11 06:01

Hadoop本地集群搭建-CentOS7

设置三台机器的主机名vi/etc/hostnamehadoop102hadoop103hadoop104在任意一台机器Centos7上修改域名映射vi/etc/hosts#添加192.168.3.110hadoop102192.168.3.111hadoop103192.168.3.112hadoop104设置静态IPvi/etc/sysconfig/network-scripts/ifcfg-e
宸晨辰cm·2021-06-10 19:52

linux服务器nginx+nacos2.x集群搭建的部署

在安装nginx之前要先安装nginx相关的依赖包，通过命令一键安装即可yum-yinstallgcczlibzlib-develpcre-developensslopenssl-devel下载nginx源码包解压tar-zxvfnginx-1.18.0.tar.gzvim/usr/local/nginx/conf/nginx.confimage.png配置安装路径、编译、安装#配置安装路径，此时
金哲一·2021-06-10 06:21

redis高可用集群搭建与原理分析

Redis集群方案比较哨兵模式image.png在redis3.0以前的版本要实现集群一般是借助哨兵sentinel工具来监控master节点的状态，如果master节点异常，则会做主从切换，将某一台slave作为master，哨兵的配置略微复杂，并且性能和高可用性等各方面表现一般，特别是在主从切换的瞬间存在访问瞬断的情况，而且哨兵模式只有一个主节点对外提供服务，没法支持很高的并发，且单个主节点内
董二弯·2021-06-10 01:11

史上最全的单机hadoop集群搭建

零零散散两周时间，终于在单机环境下搭建起来了一个4节点的hadoop集群。在这篇文章中，我将分成如下部分进行分享使用vagrant在本地运行虚拟机使用vagrant在本地搭建多机网络Hadoop基础环境搭建Hadoop集群的简单验证HadoopHA模式搭建及验证搭建过程中遇到的问题，及解决方案1.使用vagrant在本地运行虚拟机vagrant是一个用于创建和部署虚拟化开发环境的工具，它能很方便地
aix91·2021-06-09 23:36

kafka+zookeeper 集群搭建配置 实用知识

概念producer:消息生产者，发布消息到kafka集群的终端或服务。consumer:从kafka集群中消费消息的终端或服务。Consumergroup:high-levelconsumerAPI中，每个consumer都属于一个consumergroup，每条消息只能被consumergroup中的一个Consumer消费，但可以被多个consumergroup消费。topic：每条发布到k
silord·2021-06-09 20:55

Kafka集群搭建

Java环境mkdir-p/opt/archives/jdktar-xzv-fjdk-7u80-linux-x64.tar.gz-C/opt/archives/jdk/cd/opt/ln-s/opt/archives/jdk/jdk1.7.0_80/jdkvi~/.bashrc#在文件结尾加上这三行JAVA_HOME=/opt/jdkCLASSPATH=.:$JAVA_HOME/libPATH=$
output·2021-06-09 19:00

高可用RocketMQ集群搭建

一、集群搭建可选方式RocketMQ的物理部署结构图如下：1581598928692(1).jpgProducer和Consumer对应的是我们的应用程序，多个NameServer实例组成集群，但相互独立
会跳舞的机器人·2021-06-09 11:18

Hadoop集群搭建

1、准备工作准备6台虚拟机，内存1G虚拟机节点分配情况序号机器分配1Park01Zookeeper、NameNode(active)、ResourceManager(active)2Park02Zookeeper、NameNode(standby)3Park03Zookeeper、ResourceManager(standby)4Park04DataNode、NodeManager、Journal
御林君·2021-06-09 10:28

第二次课作业

Hadoop集群搭建及测试1.格式化namenode2.格式化zookeeper3.启动dfs4.启动yarn5.启动resourcemanager6.启动historyserver7.执行hadoopmapreducejob
zangalewa·2021-06-09 09:50
上一页 46 47 48 49 50 51 52 53 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他