Codis集群搭建

Docker安装Hadoop分布式集群

一、准备环境dockersearchhadoopdockerpullsequenceiq/hadoop-dockerdockerimages二、Hadoop集群搭建1.运行hadoop102容器dockerrun
qq_14910065·2023-08-11 11:00

mysql8.0.3集群搭建

下载mysql安装包：https://dev.mysql.com/downloads/mysql/5.7.html#downloads准备环境1、准备三台服务器并设置hosts192.168.236.143mysql1192.168.236.144mysql2192.168.236.145mysql32、设置免密登陆#生成秘钥ssh-keygen-trsa#一直按Enter即可#将秘钥分别拷贝到另
love_燕子·2023-08-11 08:11

SpringCloud01

微服务目录基础：SpringCloud01Nacos安装指南SpringCloud实用篇02Nacos集群搭建————————————Docker实用篇安装Docker————————————RabbitMQRabbitMQ
mildness丶·2023-08-11 04:04

KafKa集群搭建&常用命令

1、KafKa概述1.1定义KafKa是一个分布式的基于发布/订阅模式的消息队列，主要应用于大数据试试处理领域是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、Storm/Spark流式处理引擎，web/nginx日志
hodor_wzp·2023-08-11 02:41

KafKa集群搭建和知识点

一、KafKa概述1.1定义KafKa是一个分布式的基于发布/订阅模式的消息队列，主要应用于大数据试试处理领域是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、Storm/Spark流式处理引擎，web/nginx日志
hodor_wzp·2023-08-11 02:40

LVS-DR集群搭建

一、LVS准备VIP和路由1.添加VIPifconfigens33:0192.168.137.123broadcast192.168.0.255netmask255.255.255.0uprouteadd-host192.168.137.123devens33:0注：ens33：0是自己定义的虚拟网卡123自己随意填，但是要和虚拟机IP在一个网段，并且没人使用（可以ping一下）broadcast
CHR_YTU·2023-08-10 18:31

【LVS-DR模式集群搭建】

DR模式全程流向不变则目标地址、源地址不变，因为DR模式工作于2层。第一步、请求报文从客户端发出，源地址：CIP，目标地址：VIP，源MAC：CMAC，目标MAC：VMAC；第二步、请求到达负载均衡器，分配真实服务器（修改MAC），源地址：CIP，目标地址：VIP，源MAC：DMAC，目标MAC：RMAC；第三步、真实服务器接收报文，处理并响应（回头了），源地址：RIP，目标地址：CIP，源MAC
骑着蜗牛追汤圆·2023-08-10 18:01

Nginx安装以及LVS-DR集群搭建

Nginx安装1.环境准备yuminsatall-ymakegccgcc-c++pcre-devel#pcre-devel--pcre库#安装openssl-develyuminstall-yopenssl-devel2.tar安装包3.解压软件包并创建软连接tar-xfnginx-1.22.0.tar.gz-C/usr/local/ln-s/usr/local/nginx-1.22.0//usr
wada64·2023-08-10 18:29

Kafka多版本集群搭建超详细

1.前言大家好，我是楚生辉，在未来的日子里我们一起来学习大数据相关的技术，一起努力奋斗，遇见更好的自己！百度百科对Kafka有如下描述：Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据。本文详细的介绍了多个版本的Kafka集群安装，包括其多个版本之间的命令差异，有需要
楚生辉·2023-08-10 16:41

clickhouse集群搭建、SpringBoot集成及应用

前言在日常工作中，日志查询是我们不可避免的业务场景，当项目访问量较小时，我们可以将日志存储在MySQL或其他行式数据库中，但是如果项目访问量很大，一次查询就会给数据库带来很大压力，也许你会采用elk等成熟的方案去处理日志，但是代价相对较高。下面，介绍一种列式数据库clickhouse，它能够快速处理大批量数据的查询，对于日中存储查询场景比较方便。先贴上一个官方文档https://clickhous
雅俗共赏zyyyyyy·2023-08-10 11:49

10.大数据技术之Flink

2.1Flink中的重要角⾊JobManager处理器：TaskManager处理器：2.2无界数据流与有界数据流无界数据流：有界数据流：2.3Flink数据流编程模型2.4Libraries支持3、Flink集群搭建
数据带你飞·2023-08-10 05:02

ElasticSearch7.x集群搭建详细步骤

文章目录前言一、准备环境二、Elasticsearch集群搭建1.安装JDK2.下载elasticsearch3.安装elasticsearch4.配置目录5.创建用于存放数据与日志的目录6.集群配置7
lfwh·2023-08-09 21:14

ElasticSearch集群搭建

一、ElasticSearch集群1.1搭建集群Elasticsearch如果做集群的话Master节点至少三台服务器或者三个Master实例加入相同集群，三个Master节点最多只能故障一台Master节点，如果故障两个Master节点，Elasticsearch将无法组成集群.会报错，Kibana也无法启动，因为Kibana无法获取集群中的节点信息。由于，我们使用只有一台虚拟机，所以我们在虚拟
楠~枫·2023-08-09 21:44

ElasticSearch：集群搭建

1-ElasticSearch集群1-ES集群相关概念es集群:•ElasticSearch天然支持分布式•ElasticSearch的设计隐藏了分布式本身的复杂性ES集群相关概念:•集群（cluster）：一组拥有共同的clustername的节点。•节点（node)：集群中的一个Elasticearch实例•索引（index)：es存储数据的地方。相当于关系数据库中的database概念•分片
Alaric_L·2023-08-09 21:12

LVS集群搭建

一、LVS集群部署1、LVS集群工作结构图2、LVS的负载调度算法1、轮询（rr,RoundRobin）2、加权轮询（wrr,WeightedRoundRobin）3、最少连接（lc,LeastConnections）4、加权最少连接（wlc,WeightedLeastConnections）5、sourcehashing源地址hash（sh）3、LVS优点1.抗负载能力强2.配置性低3.工作稳定
XBLYL1992·2023-08-09 07:53

高可用etcd数据库集群搭建

高可用etcd数据库集群搭建etcd集群备份和查看集群状态命令etcd集群权限管理和账号密码使用
浅抒流年·2023-08-09 06:44

基于Docker + Consul + Registrator的服务注册与发现集群搭建

前言近年微服务架构在互联网应用领域中愈来愈火，引入微服务主要解决了单体应用多个模块的紧耦合、无法扩展和运维困难等问题。微服务架构就是按照功能粒度将业务模块进行垂直拆分，对单体应用本身进行服务化和组件化，每个组件单独部署为小应用（从DB到UI）。微服务与微服务之间通过ServiceAPI进行交互，同时为了支持水平扩展、性能提升和服务可用性，单个服务允许同时部署一个或者多个服务实例。在运行时，每个实例
weixin_33708432·2023-08-09 00:06

Ocelot + Consul + Registrator 基于Docker 实现服务发现、服务自动注册

目录1.Consul集群搭建1.1F&QConsul官方推荐的host网络模式运行2.Registrator服务注册工具2.1F&QRegistrator悬挂服务Registrator的-internal
爱在一瞬间·2023-08-09 00:33

分布式-高可用redis集群搭建（此处模拟单机多进程，多服务器同理）

分布式-高可用redis集群搭建（此处模拟单机多进程，多服务器同理）环境信息redis版本：5.0.8集群搭建修改配置文件主要修改以下几项内容：pidfile/var/run/redis_6000.piddir
yufw·2023-08-08 23:31

Redis追本溯源（四）集群：主从模式、哨兵模式、cluster模式

文章目录一、主从模式1.主从复制——全量复制2.主从复制——增量复制二、哨兵模式1.实时监控与故障转移2.Sentinel选举领导者三、cluster模式1.三种分片方案2.cluster模式Redis有多种集群搭建方式
TracyCoder123·2023-08-08 18:55

windows下 Elasticsearch服务集群搭建及基本使用，配置ik分词器、及插件head、kopf

1、环境准备2、jdk安装下载JDK后，根据提示进行安装操作；在安装JDK时会安装JRE，一起安装就好。2.1配置环境变量：“我的电脑”—右键属性—高级系统设置—环境变量2.2在系统变量中配置3项属性，JAVA_HOME、PATH、CLASSPATH(大小写忽略),若已存在则点击"编辑"，不存在则点击"新建"。变量设置参数如下：变量名：JAVA_HOME变量值：C:\ProgramFiles\Ja
guanzizizi·2023-08-08 16:40

elasticsearch分片集群搭建

这里准备了三台机子111，112，113以及一台原始配置过es单机的110。创建子用户es在每台服务器上面执行:useraddes#添加es用户passwdes#设置密码将110下面配置好的es发送到另外三台上scp-r/home/es/elasticsearch-7.13.2/[email protected]:/home/esscp-r/home/es/elasticsearch-7.13.2
负差生·2023-08-08 16:10

elasticsearch集群搭建并开启xpack密码验证【踩坑日志】

elasticsearch集群搭建并开启xpack密码验证集群搭建（忽略，网上文章很多，自行寻找，有问题留言）开启密码验证（详细说）以下操作先在一台机器操作：1、获得elastic-stack-ca.p12
萨尔布拉克的星空·2023-08-08 16:10

elasticsearch集群搭建

目录WIndow集群Linux集群单点部署集群部署ES优化硬件选择分片策略推迟分片分配路由选择写入速度优化批量数据提交优化存储设备合理使用合并减少Refresh的次数加大Flush设置减少副本的数量内存设置重要配置WIndow集群创建elasticsearch-cluster文件夹，在内部复制三个elasticsearch服务修改集群文件目录下每个节点的config/elasticsearch.y
m0_67393039·2023-08-08 16:08

ElasticSearch集群搭建

一、集群介绍ES集群是一个P2P类型（使用gossip协议）的分布式系统，除了集群状态管理以外，其他所有的请求都可以发送到集群内任意一台节点上，这个节点可以自己找到需要转发给那些节点，并且直接跟这些节点通信。所以从网络架构及服务配置上来说，构建集群所需要的配置及其简单。在ES2.0之前，无阻碍的网络下，所有配置了相同cluster.name的节点都自动归属到一个集群中。2.0版本之后，基于安全的考
JSUITDLWXL·2023-08-08 16:08

使用 RKE 方式搭建 K8s 集群并部署 NebulaGraph

下面是本次实践的内容规划：一到十章节为K8s集群搭建过程；十一到十五章节为参考NebulaGraph官方文档安装部署NebulaGraph的过程；本文所有实践是在本地虚拟机3台CentOS实例上完成
图数据库NebulaGraph·2023-08-08 13:26

RocketMQ集群搭建

本文只讲RocketMQ集群的搭建(异步复制)，具体理论知识后续会在写新文章详细介绍;环境JDK1.8Centos7主机-两台centos7_1:172.16.54.130centos7_2:172.16.54.128软件资源JDK1.8:https://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.
灰灰H_K·2023-08-07 21:10

单机搭建zookeeper+kafka&集群搭建&容器搭建

单机搭建zookeeper下带有bin的包，不需要再进行编译http://archive.apache.org/dist/zookeeper/zookeeper-3.5.5/apache-zookeeper-3.5.5-bin.tar.gz[root@vmopt]#tarxfapache-zookeeper-3.5.5-bin.tar.gz[root@vmopt]#cdapache-zookeep
daydayup9527·2023-08-07 12:02

Ubuntu-Docker安装和使用

Dcker安装使用及大数据集群搭建安装VMwareToolsDockerdocker安装docker基本命令查看信息创建容器启动容器初始化容器内root密码进入正在运行的容器查看容器删除容器文件拷贝大数据集群搭建创建
律为·2023-08-07 10:43

Redis分布式高可用集群搭建

文章目录Redis分布式高可用集群搭建一、redis集群有三种方式：1.主从模式2.哨兵3.集群（master-cluster）二、基于centos7操作系统操做1.关闭防火墙，三台机器都执行2.hostname
鱼鱼大头鱼·2023-08-07 05:28

Mysql集群搭建学习03 2018-08-31

根据文档搭建网络准备1.关闭防火墙，或者配置防火墙端口3306和11862.测试服务器之间ping通linuxpingip时，使用的代码ping-w10ip或ping-c10ip若pingip时，无法直接停止可使用ctrl+c停止ping或ctrl+z暂停ping(放入后台，使用命令fg可以调出到前台)ping命令：-ccountping指定次数后停止ping；-Wtimeout以毫秒为单位设置p
夏_未至·2023-08-07 04:43

redis集群搭建

1、redis集群的介绍Redis集群是一个提供在多个Redis节点之间共享数据的程序集。Redis集群并不支持同时处理多个键的Redis命令，因为这需要在多个节点间移动数据，这样会降低redis集群的性能，在高负载的情况下可能会导致不可预料的错误。Redis集群通过分区来提供一定程度的可用性，即使集群中有一部分节点失效或者无法进行通讯，集群也可以继续处理命令请求。Redis集群的优势:1.缓存永
我还不够强·2023-08-06 12:14

（十三）大数据实战——hadoop集群之YARN高可用实现自动故障转移

前言本节内容是关于hadoop集群下yarn服务的高可用搭建，以及其发生故障转移的处理，同样需要依赖zookeeper集群的实现，实现该集群搭建时，我们要预先保证zookeeper集群是启动状态。
北溟溟·2023-08-06 00:57

Kafka概论

前言任何消息中间件，除了基础组件架构外，核心特性无非三个，消息可靠性、消息模型、吞吐量，本文要聊的正是这些东西，其余诸如API、下载安装、集群搭建等都是死的，而且会随着版本的变动而改变，这类东西针对不同版本
_BugMan·2023-08-05 21:30

redis 集群 2：分而治之 —— Codis

在大数据高并发场景下，单个Redis实例往往会显得捉襟见肘。首先体现在内存上，单个Redis的内存不宜过大，内存太大会导致rdb文件过大，进一步导致主从同步时全量同步时间过长，在实例重启恢复时也会消耗很长的数据加载时间，特别是在云环境下，单个实例内存往往都是受限的。其次体现在CPU的利用率上，单个Redis实例只能利用单个核心，这单个核心要完成海量数据的存取和管理工作压力会非常大。正是在这样的大数
满载星辉·2023-08-05 12:27

Redis 深度历险： 核心原理和应用实践3

目录Sentinel基本使用集群1：李代桃僵——Sentinel集群2：分而治之——Codis集群3：众志成城——Cluster拓展1：耳听八方——Stream拓展2：无所不知——Info指令拓展3：拾遗漏补
sunhyly·2023-08-05 12:25

2019最新k8s集群搭建教程 (centos k8s 搭建) 2019-04-18

2019-k8s-centos2019最新k8s集群搭建教程(centosk8s搭建)网上全是要么过时的,要么残缺的,大多数都是2016年,2017年的文档,照着尝试了N次,各种卸了重装,最后centos
龙少lol·2023-08-04 18:12

k8s系列03-kubeadm部署calico网络的k8s集群

此前写的一些关于k8s基础知识和集群搭建的一些方案，有需要的同学可以看一下。1、准备工作1.1calico-集群节点信息机器均为8C8G的虚拟机，硬盘为100G。
tinychen·2023-08-04 17:12

mysql修改UUID

mysql修改UUID问题描述：集群搭建时克隆主服务的镜像导致所有节点的服务UUID都一致，此时在集群中添加节点时会提示UUID冲突报错。
懿玖鬮乄·2023-08-04 09:46

Hadoop简介和集群搭建测试(一)

Hadoop的优势有四高：(1)高可用:Hadoop底层维护多个数据副本，所以即使Hadoop某个计算元素或存储出现故障，也不会导致数据的丢失(2)高扩展:在集群间分配任务数据，可方便的扩展数以千计的节点(3)高效性:在MapReduce的思想下，Hadoop是并行工作的，以加快任务处理速度(4)高容错性:能够自动将失败的任务重新分配。Hadoop组成：HDFS架构概述:HadoopDistrib
modi_2020·2023-08-04 08:33

hadoop 3.1.3集群搭建 ubuntu20

相关hyper-v安装ubuntu-20-serverhyper-v建立快照hyper-v快速创建虚拟机-导入导出虚拟机准备虚拟机设置采用hyper-v方式安装ubuntu-20虚拟机和koolsharehostnameiph01192.168.66.20h02192.168.66.21h03192.168.66.22静态IP所有机器都需要按需设置sudovim/etc/netplan/00-in
Jason Yien·2023-08-04 00:57

redis集群搭建

新建需要搭建的集群文件夹2.复制配置文件并进行修改基本配置如果使用的是公网的服务器（云服务器，那么这里的bindip地址一定要改为内网的ip（使用命令（ifconfig）在服务器内得到IP地址））2.1bind192.168.1.12.2port更改端口以不同端口区分不同的服务2.3pidfilepidfile/varrunredis7000.pid每启动一个redis都会生成一个文件，如果多个r
游侠阿枫·2023-08-03 12:57

RabbitMQ（二）

二、高级特性、应用问题以及集群搭建高级特性1.消息的可靠性投递在使用RabbitMQ的时候，作为消息发送方希望杜绝任何消息丢失或者投递失败场景。
dzWatching·2023-08-03 10:38

centos 7 storm集群搭建

1、搭建zookeeper，请看：https://blog.csdn.net/sunxiaoju/article/details/1030398662、从https://archive.apache.org/dist/storm/apache-storm-1.2.3/地址下载storm，如下图所示：3、下载好后通过tar-xzvfapache-storm-1.2.3.tar.gz解压,如下图所示：
sxjlinux·2023-08-03 09:56

Centos中的storm集群环境搭建

0.准备工作1.jdk配置2.zookeeper集群搭建1.软件下载apachestorm官网：下载链接2.解压tar-zxvfapache-storm-1.0.5.tar.gzcdapache-storm
小x今天暴富了吗·2023-08-03 09:22

Centos 7 环境 Storm 2.0.0 完全分布式集群的搭建过程

系列博客地址Centos7环境hadoop3.2.0完全分布式集群搭建Centos7环境hive3.1.1搭建Centos7环境Spark2.4.3完全分布式集群的搭建过程Centos7环境HBase2.1.5
小不强·2023-08-03 09:51

Redis的主从集群搭建与配置

文章目录Redis主从集群模式搭建过程分级管理容灾冷处理Redis主从集群模式Redis的集群模式主从复制模式：利用主从复制原理，一主多从架构。读写分离，主节点可读可写，从节点只能提供读服务。哨兵模式：哨兵实现了自动化的故障恢复，哨兵节点是特殊的redis节点，不存储数据。哨兵监控整个redis集群。Cluster模式：实现了Redis的分布式存储，也就是说每台Redis节点上存储不同的内容。Re
黎明⁢·2023-08-02 11:25

ELK集群搭建

1.安装logstash-filter-multiline插件网上下载logstash-filter-multiline-3.0.4.gem插件上传至服务器新建文件夹logstash-filter-multiline-3.0.4,并将gem文件移入新建的文件夹使用zip命令进行压缩zip-rlogstash-filter-multiline-3.0.4.ziplogstash-filter-mul
MFHack·2023-08-02 10:02

RocketMQ

环境要求2.2安装RocketMQ2.2.1安装步骤2.2.2目录介绍2.3启动RocketMQ2.4测试RocketMQ2.4.1发送消息2.4.2接收消息2.5关闭RocketMQ3.RocketMQ集群搭建
李钟意··2023-08-02 07:21

【云原生】k8s组件&架构介绍与K8s最新版部署

kubernetes专栏：kubernetes_征服bug的博客-CSDN博客目录1集群组件1.1控制平面组件（ControlPlaneComponents）1.2Node组件1.3插件(Addons)2集群架构详细3集群搭建
征服bug·2023-08-02 05:57
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他