Hadoop1.2.1集群配置

linux centos7.6配置Hadoop+Spark+Hbase+Hive+Zookeeper集群

文章目录hadoop&spark集群配置网络配置(桥接模式)ip配置修改用户名（所有节点）配置ssh免密码登录安装JDK1.8.0环境(所有节点)安装Hadoop2.10.0(所有节点)遇到的问题安装关系型数据库
东流-beyond the label·2021-04-08 22:15

Ceph分布式存储实践应用之集群配置管理

1.部署结构虚拟机创建三台服务器，CENTOS版本为7.6，IP网端10.10.20.0/24。三台主机名称为：CENTOS7-1:IP为10.10.20.11，既做管理节点，又做子节点。CENTOS7-2:IP为10.10.20.12，子节点。CENTOS7-2:IP为10.10.20.13，子节点。2.系统配置系统配置工作，三台节点依次执行：修改主机名称[root@CENTOS7-1~]#vi
·2021-04-05 11:05

Ceph分布式存储实践应用之集群配置管理

1.部署结构虚拟机创建三台服务器，CENTOS版本为7.6，IP网端10.10.20.0/24。三台主机名称为：CENTOS7-1:IP为10.10.20.11，既做管理节点，又做子节点。CENTOS7-2:IP为10.10.20.12，子节点。CENTOS7-2:IP为10.10.20.13，子节点。2.系统配置系统配置工作，三台节点依次执行：修改主机名称[root@CENTOS7-1~]#vi
·2021-04-05 11:24

Spring Cloud Alibaba之Nacos单机、集群配置以及springboot整合

SpringCloudAlibaba是阿里的一套springcloud解决方案，感觉比传统的springcloud要更强大易用，总结了一下，一套完整的SpringCloudAlibaba可以包括下面一些微服务组件：服务注册与发现、配置中心：nacosapi网关：gateway或自研网关限流降级、服务熔断：sentinel服务调用：openFeign、springCloudLoadBalancer、
haiyong6·2021-04-04 17:08

Web服务器群集——LVS-DR+Keepalived 高可用集群

LVS-DR+Keepalived高可用集群Keepalived介绍Keepalived实现原理LVS-DR-Keepalived部署搭建lvs-dr模式集群配置lvs服务器配置真实服务器安装和配置Keepalived
stan Z·2021-04-03 22:21

ES elasticsearch集群配置

1环境准备1.1服务器资源这里我使用的是虚拟机环境服务器IP地址node1192.168.51.4node2192.168.51.5node3192.168.51.61.2安装和配置es详情可参照博文：https://www.jianshu.com/p/a47ccfd3d49a如果是虚拟机环境的话，可以直接部署一台，克隆两台。如果是克隆的话，需要将自定义的esdata目录的数据全部清空，按照我的教
小P聊技术·2021-03-17 08:56

完全分布式集群配置

完全分布式集群配置1集群部署规划2.配置集群以下操作都使用dev1账户（1）HDFS配置文件配置hadoop-env.shvimhadoop-env.shexportJAVA_HOME=/opt/module
编程界翁老师·2021-03-10 17:48

srs系列九——源站+边缘站集群模式

一、集群架构图：（1）自己部署时环境部署集群（2）srs官网架构图二、部署方案—源站集群+edge集群Srs其他配置不在此详细列出，以下仅涉及集群配置源站集群基本配置如下：vhost__defaultVhost
李王家的翠花·2021-03-10 15:18

MySQL5.7 集群配置的步骤

本次针对的MySQL版本为5.7，首先分别在A服务器和B服务器上安装MySQL，可以通过yum安装也可以通过wget下载直接编译安装。安装方式可以多种多样，但必须要确保安装成功。1.修改A服务器的my.cnf文件vim/etc/my.cnf并添加如下内容:server-id=1auto_increment_offset=1auto_increment_increment=2gtid_mode=on
·2021-03-09 22:17

Spark集群搭建介绍

工具：SecreCRT1.2分布式集群搭建节点名IP地址node01192.168.211.136node02192.168.211.137node03192.168.211.1381.3Hadoop集群配置需要配置
qq_39247952·2021-03-02 16:24

Neokylin-Server离线环境、跨主机、使用Docker部署PXC集群

切换root账号或所有语句加sudo;2.关闭6个节点防火墙（或打开端口）;3.6个节点导入rpm包后安装基础环境：4.设置所有节点;5.启动docker并导入images;6.时间同步;7.etcd集群配置
Vincent Lu·2021-02-14 12:14

Hadoop集群配置① —— 克隆节点

简单易懂，手把手带小白用VMware虚拟机安装Linuxcentos7系统Hadoop集群搭建及配置〇——Hadoop组件获取&传输文件Hadoop集群搭建及配置①——克隆节点Hadoop集群搭建及配置②——网络IP配置，连接网络Hadoop集群搭建及配置③——基础环境搭建Hadoop集群搭建及配置④——JDK简介及其安装Hadoop集群搭建及配置⑤——Zookeeper讲解及安装Hadoop集群
唐樽·2021-02-08 12:45

Elasticsearch 7.10 集群重启恢复慢（qbit）

本文集群有3个主节点，3个协调节点，20个数据节点解决方案官方文档：https://www.elastic.co/guide/...在每个master节点的elasticsearch.yml中增加或修改集群配置
·2021-02-04 14:21

Hive(一)

HiveHive的基本概念什么是HiveHive的优缺点优点缺点Hive的架构原理Hive和数据库比较查询语言数据存储位置数据更新执行执行延迟可扩展性数据规模Hive安装Hive安装部署Hadoop集群配置
桂圆桂圆车厘子·2021-02-03 22:52

使用 tke-autoscaling-placeholder 实现秒级弹性伸缩

背景当TKE集群配置了节点池并启用了弹性伸缩，在节点资源不够时可以触发节点的自动扩容(自动买机器并加入集群)，但这个扩容流程需要一定的时间才能完成，在一些流量突高的场景，这个扩容速度可能会显得太慢，影响业务
·2021-02-03 21:02

服务注册中心：Eureka

Eureka介绍2.1、Eureka的介绍2.2、Eureka的三种角色2.3、Eureka的运行流程第三章Eureka入门案例3.1、创建注册中心3.2、创建服务提供者3.3、创建服务消费者第四章Eureka集群配置
轻松的小希·2021-01-30 12:44

CentOS PostgreSQL 12 主从复制(主从切换)操作

主从复制1.基于文件的日志传送创建一个高可用性（HA）集群配置可采用连续归档，集群中主服务器工作在连续归档模式下，备服务器工作在连续恢复模式下（1台或多台可随时接管主服务器），备持续从主服务器读取WAL
·2021-01-26 17:26

使用 tke-autoscaling-placeholder 实现秒级弹性伸缩

背景当TKE集群配置了节点池并启用了弹性伸缩，在节点资源不够时可以触发节点的自动扩容(自动买机器并加入集群)，但这个扩容流程需要一定的时间才能完成，在一些流量突高的场景，这个扩容速度可能会显得太慢，影响业务
·2021-01-26 14:41

使用 tke-autoscaling-placeholder 实现秒级弹性伸缩的方法

背景当TKE集群配置了节点池并启用了弹性伸缩，在节点资源不够时可以触发节点的自动扩容(自动买机器并加入集群)，但这个扩容流程需要一定的时间才能完成，在一些流量突高的场景，这个扩容速度可能会显得太慢，影响业务
·2021-01-26 10:33

SpringBoot 实现 Nginx项目的负载均衡（IDEA版本）

Nginx安装部署本地环境为Windows，解压即可修改安装目录下conf目录下的配置文件nginx.conf，只须修改两处：新增集群配置新增代理路径#us
·2021-01-26 02:05

SpringBoot 实现 Nginx项目的负载均衡（IDEA版本）

Nginx安装部署本地环境为Windows，解压即可修改安装目录下conf目录下的配置文件nginx.conf，只须修改两处：新增集群配置新增代理路径#us
·2021-01-26 01:42

六、Hystrix服务降级与熔断

只需点赞SpringCloud系列目录：一、SpringCloud简介二、Eureka服务注册与发现三、Eureka注册与发现之EurekaComsumer四、Eureka、ServerProvider集群配置五
小高同学~·2021-01-24 23:55

分布式计算平台Spark：Core（一）

Core（一）一、课程回顾二、课程目标三、Standalone集群运行1、工作场景2、spark-submit3、本地模式提交4、Standalone集群提交四、SparkonYARN1、应用场景2、集群配置
章鱼哥TuNan&Z·2021-01-13 13:09

（二) K8S集群部署——node节点部署

1.集群配置本次部署使用三台服务器master：192.168.0.2node1：192.168.0.4node2：192.168.0.14服务器配置均为：CentOS7.664位8核/16G/100G2
可以养肥·2021-01-09 16:48

Kafka文件存储机制

整个Kafka架构对应一个ZK集群，通过ZK管理集群配置，选举Leader，以及在ConsumerGroup发生变化时进行Rebalance。Broker：消息中间件处理结点，一个Ka
ITWUYI·2021-01-07 17:02

Elasticsearch 7.10 集群重启恢复慢（qbit）

本文集群有3个主节点，3个协调节点，20个数据节点解决方案官方文档：https://www.elastic.co/guide/...在每个master节点的elasticsearch.yml中增加或修改集群配置
qbit·2021-01-04 21:50

mysql8.0的主从集群架构搭建教程，主从复制原理详解

1.1binlog主从数据同步原理1.2GITD主从数据同步2.主从集群架构搭建2.1配置master主服务器2.2配置slave从服务器2.3主从架构的数据延迟问题3.全库同步与部分同步4.读写分离5.其他集群配置方式
zhb_xxx·2021-01-03 23:10

Elasticsearch常用接口

查看集群统计信息.png1.6查看集群配置信息curl'http://127.0.0.1:9200/_cluster/s
gaofubao·2021-01-03 16:44

Linux离线安装Docker

Docker引擎离线安装及集群配置1.下载对应二进制包根据不同操作系统架构选择，例如：LinuxCentOS7选择：x86_64https://download.docker.com/linux/static
沐囦·2021-01-02 19:59

docker搭建mysql+nacos+nginx集群

docker搭建mysql+nacos+nginx集群配置2个mysql主从3个nacosnginx反向代理mysql集群dockerrun-di--name=mysql_master-p33306:3306
或许吧，哎·2020-12-26 16:16

Kubernetes 开发运维完整指南--构建和管理你的应用程序,编排容器,部署云本地服务

Kubernetes集群在谷歌云平台上配置Kubernetes集群在微软Azure上配置Kubernetes集群在阿里巴巴云上配置Kubernetes集群使用Rancher配置和管理Kubernetes集群配置
仙寨黑马·2020-12-24 09:42

Elasticsearch 7.x 在 Kibana 中看不到监控信息（qbit）

v#查看是否有.monitoring-es-*的索引GET_cat/indices/.monitoring-*#查看集群配置GET/_cluster/settings修改集群配置PUT_cluster/
qbit·2020-12-21 11:29

Elasticsearch 7.x 在 Kibana 中看不到监控信息（qbit）

v#查看是否有.monitoring-es-*的索引GET_cat/indices/.monitoring-*#查看集群配置GET/_cluster/settings修改集群配置PUT_cluster/
qbit·2020-12-21 10:16

springcloud-alibaba-nacos（7）nacos集群搭建整合微服务项目

文章目录前言一、Nacos集群搭建（1）Nacos集群搭建必要环境准备（2）集群搭建（①）解压安装Nacos,复制集群文件（②）修改集群配置文件（③）更改`Nacos`启动端口号连接数据库（④）启动（⑤
保护我方胖虎·2020-12-19 19:17

zookeeper集群配置

1.1Zookeeper1.1.1Zookeeper介绍ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。ZooKeeper的目标就是封装好复杂易出错的关键服务，将简单易用的接口和性能高效、功能稳定的
mathematics·2020-12-14 20:42

Nginx+Tomcat+keepalived动静分离高可用负载均衡集群

Nginx+Tomcat+keepalivedNginx+TomcatNFS存储服务器部署web集群配置Java环境变量部署Tomcat测试tomcat调度器编译安装nginx安装keepalived测试
wishy blog·2020-12-13 00:22

二十九、Linux安装Hive并更改Metastore依赖库

关注专栏《破茧成蝶——大数据篇》，查看更多相关的内容~目录一、安装Hive1.1下载安装包1.2Hive的安装部署1.2.1上传解压1.2.2修改配置文件1.2.3Hadoop集群配置1.2.4将Hive
象在舞·2020-12-10 15:14

redis-cluster集群搭建

redis-cluster(搭建三主三从)redis1.192.168.1.25192.168.1.26192.168.1.41image.png配置：cd/usr/local/redis-3.2.9创建集群配置文件夹
小梅小凌·2020-12-03 23:33

架构设计：微服务模式下，实现灰度发布模式

区分灰度版本和默认正常版本；自定义拦截器，管理版本号或其他标识参数在请求中传递；自定义服务选中策略，基于版本标识路由服务；如果灰度服务不存在，则基于规则选中默认服务；二、版本配置在node12-server集群配置两个服务
知了一笑·2020-11-20 04:11

haproxy和keepalived对EMQ集群做负载均衡高可用

EMQ完成负载均衡高可用集群EMQ集群配置使用到的服务EMQ,EMQ集群需要在不同的两台服务器上做配置。
X_xooo·2020-11-17 17:13

mysql通过kafka实现数据实时同步（四）——zookeeper集群和kafka集群配置以及kafka connector之debezium的使用

zookeeper集群和kafka集群配置以及kafkaconnector的使用zooKeeper是一个分布式协调服务，它的主要作用是为分布式系统提供一致性服务，提供的功能包括：配置维护、命名服务、分布式同步
不存在的记忆·2020-11-13 23:25

（三）spring cloud微服务分布式云架构 - Spring Cloud集成项目简介

SpringCloudConfig配置管理工具包，让你可以把配置放到远程服务器，集中化管理集群配置，目前支持本地存储、Git以及Subversion。S
黑骑士1203·2020-11-13 11:39

HBase集群配置Snappy压缩算法

一、背景介绍在生产环境搭建了HadoopHA集群（Hadoop2.7.7+HBase1.4.10）。根据官方文档，Snappy压缩算法在Hadoop1.0.2中即可使用。二、配置步骤1、首先通过命令查看Hadoop是否支持Snappy。hadoopchecknative-a2、已知Hadoop支持Snappy算法，配置hbase-env.sh，使得HBase能够支持Snappy算法。exportL
yiming1012·2020-10-11 10:44

redis cluster学习笔记

而集群使用公式CRC16(key)%16384来计算每次请求的键key属于哪个槽，通过查询集群配置，便可知道key对应的槽属于哪个redis节点，然后再将请求打到该节点。
byte·2020-10-10 23:12

电子商务b2b b2c o2o javaweb 平台

commonserviceconfigSpring配置管理工具包，让你可以把配置放到远程服务器，集中化管理集群配置，目前支持本地存储、Git以及Subversion。Spring
swiftie10·2020-10-10 08:00

Redis单机安装和集群安装(版本是5.0.9)

文章目录Redis单机和集群配置(版本是5.0.9)单机版的配置文字步骤实际操作集群版配置集群概念介绍集群搭建需要的环境redis集群的搭建步骤安装过程总结Redis单机和集群配置(版本是5.0.9)摘抄自网络并用于自己以后查阅
MarkusZhang·2020-10-01 13:46

3. Hadoop分布式集群部署

3.Hadoop分布式集群1.集群配置此前使用的是伪分布式的单机模式，本篇使用分布式的集群配置。
易成·2020-09-27 07:34

使用kind搭建kubernetes

使用kind搭建kubernetes目录使用kind搭建kuberneteskind架构创建集群将镜像加载到kind的node中配置kind集群配置多节点多控制面指定Kubernetes的版本将node
charlieroro·2020-09-25 12:00

TiDB大规模节点下线实践

集群配置集群版本：v3.0.5集群配置：普通SSD磁盘，128G内存，40核cputidb21TiDB/PD/pump/p
dbapower·2020-09-24 14:03

ClickHouse执行过程分析

集群配置了两分片，这里进行单机和集群查询的执行过程分析。因为真实sql涉及机密，这里做了脱敏处理，后面不再赘述explain这种最简单，直接在sq
易山川·2020-09-24 14:09
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他