hadoop2.7.3集群搭建

Hadoop HBase Hive | 一、Linux集群环境安装采坑介绍

1.描述初次尝试HadoopHBaseHive集群搭建，特地记录下来。
Wbw Belief·2023-01-12 21:34

Centos7.6.1810离线安装Redis5.0.14集群部署

写给小白版本说明准备gcc安装gcc++安装glibc离线安装准备阶段总结1、redis5.0.14集群下载编译安装2、修改redis.conf配置3、单台启动4、开始集群搭建5、集群单台测试6、修改其他节点配置
勤快的小蚂蚁·2023-01-12 19:20

Hadoop集群搭建配置教程

Hadoop3.1.3集群搭建前言集群规划集群搭建具体步骤1、下载`hadoop-3.1.3.tar.gz`2、上传并解压3、配置`path`变量4、修改配置文件4.1修改文件`hadoop-env.sh
笑看风云路·2023-01-11 11:52

Hadoop集群搭建（详细版）

Hadoop集群搭建的前提准备1、确保VMware虚拟机和CentOS系统的成功安装2、打开终端检查是否有外网：ping网络名（例如：pingwww.baidu.com）3、如果有外网，需要安装一些依赖
乱小世·2023-01-11 11:51

Hadoop集群搭建教程（详细）

需要的安装包：1.jdk压缩包2.hadoop压缩包请前往百度云上上下载相关安装包(密码：8op1)开始搭建hadoop集群一.使用VMvare创建两个虚拟机，我使用的是ubuntu16.04版本的,并关闭全部虚拟机的防火墙1.因为默认的虚拟机主机名都是ubuntu，所以为了便于虚拟机的识别，创建完成虚拟机后我们对虚拟机名进行修改，我们把用于主节点的虚拟机名称设为master(按自己的喜好创建)，
普通网友·2023-01-11 11:51

Hadoop集群搭建

Hadoop集群搭建Hadoop集群简介HDFS集群YARN集群Hadoop部署模式Hadoop集群源码编译安装0.Hadoop源码编译1.集群角色规划2.服务器基础环境准备安装JDK1.8(安装OracleJDK8
识途老码·2023-01-11 11:20

elasticsearch集群搭建

1、准备三台服务，ip如下192.168.37.40192.168.37.141192.168.37.482、系统设置将/etc/fstab文件中所有设置为swap的设备关闭swapoff-afree-h注释/etc/fstab的swap行vi/etc/fstab注释swap行设置Linux内核参数vi/etc/sysctl.confvm.swappiness=1fs.file-max=65536
Borny鼎鼎·2023-01-10 03:24

尚硅谷Kubernetes（k8s）视频学习笔记

kubernetes基本介绍2、kubernetes功能和架构2.1概述2.2K8s功能:2.3应用部署架构分类2.4k8s集群架构2.5k8s集群架构节点角色功能2.6k8s核心概念二、kubernetes集群搭建
溯光旅者·2023-01-09 20:58

Redis集群搭建

4.Redis集群4.1redis集群形式4.1.1数据分区方案优点:不使用第三方中间件，分区逻辑可控，配置简单，节点之间无关联，容易线性扩展，灵活性强。缺点:**客户端无法动态增删服务节点，客户端需要自行维护分发逻辑，客户端之间无连接共享，会造成连接浪费。**4.1.2代理分区代理分区常用方案有Twemproxy和Codis,类似于mysql的shardingproxy。4.1.3redis-c
_院长大人_·2023-01-07 12:27

HBase分布式集群搭建（zookeeper+hadoop+hbase）超详细！

hbase-1.4.13master：namenode、resourcemanager，slave1：secondarynamenode、datanode，slave2：datanode一、Hadoop集群搭建
程序员进化者·2023-01-06 11:40

Hadoop 3.2.1 +Hive+Hbase伪分布式集群搭建

根据实战安装步骤，详细描述hadoop3.2.1、hive3.1.2（包括mysql5.7）、zookeeper3.6、hbase2.2.4、flume1.9.0、sqoop1.4.7各组件安装步骤,记录过程中的各种坑，方便各位同学快速安装部署hadoop伪分布集群。软件环境javaversion“1.8.0_212”ApacheHadoop3.2.1Hive3.1.2（mysql5.7）Zook
Ted丶·2023-01-06 11:09

手把手Hadoop伪分布集群搭建+hadoop完全分布式集群搭建

文章目录一.创建模板机二.魔板机调试配置2.1测试是否可上网2.2安装工具配置免密登录2.3关闭防火墙关闭防火墙开机自启动2.4创建atguigu用户，更改密码2.5切换到atguigu用户，创建文件夹2.7修改克隆机主机名2.8root用户修改静态ip2.8在魔板机安装jdk(atguigu用户)2.10在魔板机安装hadoop伪分布搭建三.完全分布式准备3.1克隆虚拟机3.2打开虚拟机3.3更
筝湘湘·2023-01-06 11:38

最最最详细的Hadoop+HBase+Zookeeper+Hive完全分布式环境搭建教程

配置hadoop配置文件三、HBase配置1.配置hbase-site.xml文件2.配置hbase-env.sh文件3.配置log4j.properties文件4.配置regionservers四、集群搭建
艾默生莱斯·2023-01-06 11:07

hadoop2.6.5+zookeeper3.4.10+hbase1.3.1分布式集群搭建

一、配置环境1.三台虚拟机ubuntu16.04相关软件包1.jdk1.8.0_1122.hadoop2.6.53.zookeper3.4.104.hbase1.3.1注：此处采用了三台虚拟机，为方便维护，此处采取了相同的用户名，用户密码，相同的目录结构二、安装Java环境1.下载jdk1.8.0_112压缩包,解压（作者采用的解压路径为:/usr/lib/jvm/）2.配置/etc/profil
Crazy_cjran·2023-01-06 11:05

3台机器配置hadoop集群_Hadoop+Hbase 分布式集群架构

安装搭建Hadoop1、配置说明本次集群搭建共三台机器，具体说明下：主机名IP说明nn01192.168.1.51DataNode、NodeManager、ResourceManager、NameNodedn01192.168.1.52DataNode
张狂年少·2023-01-06 11:04

时序数据库 TDengine 3.0 参数体系使用方式汇总

首先，我们来看下它们的使用方式——参数分级集群级别参数：SHOWCLUSTERVARIABLES;代表集群搭建时，必须要保
·2023-01-04 20:38

十四、《大数据项目实战之用户行为分析》HBase分布式集群搭建

集群建立在Hadoop集群的基础上，而且依赖于ZooKeeper，因此在搭建HBase集群之前，需要将Hadoop集群（本例使用的Hadoop集群为非HA模式，即一个NameNode）和ZooKeeper集群搭建好
大数据张老师·2022-12-28 23:52

pulsar mop mqtt二次开发贡献开源项目代码

pulsarmopmqtt二次开发贡献开源项目代码LinuxMacBook单机部署Pulsar并开启认证功能pulsar集群搭建_亲测成功pulsar开启mqtt和认证pulsar自定义认证插件开发pulsar
·2022-12-28 18:47

Redis 高可用之切片集群

Redis集群搭建Redis集群数据切片和实例的对应分布关系哈希槽与Redis实例映射客户端如何定位数据？
徐俊生·2022-12-28 14:23

redis主从集群搭建

redis主从集群搭建1.下载redis镜像dockerpullredis下载完毕之后，保险起见，看一下下，用dockerimages2.启动redis-master和redis-slave.
寸京·2022-12-27 13:47

Redis主从同步集群搭建

文章目录前言1.Redis群集概述1.1redis集群的作用是什么1.2单一Redis服务器存在的问题1.3Redis集群介绍与优势1.4Redis-Clouder集群的数据分片1.5Redis-Cluster的主从复制模型2.搭建Redis主从同步2.1案例拓扑图及环境2.2项目操作2.3具体实现步骤2.4测试群集前言通过之前的文章，我们了解到了redis的编译安装流程，以及配置优化内容。这里，
人生梦复梦·2022-12-27 13:43

shell脚本企业实战系列-redis主从集群搭建脚本

#!/bin/bash#editorbyyhzong#date2020-08-04#redis主从模式搭建，会提示你输入redis是主节点还是从节点echo"+++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++1、此脚本为redis主从脚本，请首先确定安装机器是主还是从.++2、此脚本默认的版本是redis-5.0.5,如果你需
一个杯子_one·2022-12-27 13:13

redis主从，集群搭建

一、redis安装1.yum安装yum-yinstallredis安装版本降低2.源码安装获取源码包wgethttp://download.redis.io/releases/redis-5.0.0.tar.gz...[root@ryan~]#lsanaconda-ks.cfgredis-5.0.0.tar.gz解压[root@ryan~]#tar-zxvfredis-5.0.0.tar.gz[r
Ryan-ruan·2022-12-27 13:11

Redis主从集群搭建及主从复制原理解析

Redis框架除缓存之外的实用功能前言上篇文章主要介绍redis的实用功能，也就是数据类型。包括string、hash、set、zset、发布订阅、stream等类型；并解析了他们的应用场景；本篇文章会紧接着写redis主从集群的搭建，并详解其中配置，以及主从复制的原理解析。高可用主从集群在Redis中要达到高可用，有两种集群架构方式，有分片和主从集群，这里讨论的是读多写少的场景采用主从集群。re
踩踩踩从踩·2022-12-27 13:38

redis主从复制和集群搭建

redis主从复制准备两台服务器，两台服务器可以互相ping通，可以新建两个虚拟机，然后配置网络，此处不在演示准备两台虚拟机之后，两台虚拟机安装redis，gcc编译之后我们开始配置redis集群服务器1：linux-master服务器2：linux-slave01将linux-master服务器的redis.conf文件都放到redis/bin下修改redis.conf文件：vimredis.c
y我见青山多妩媚·2022-12-27 13:34

redis集群操作

Redis集群1集群2集群架构图3集群细节4集群搭建4.1.创建集群4.2.查看集群状态4.3.添加主节点4.4.添加从节点4.5.删除副本节点4.6.集群在线分片1集群Redis在3.0后开始支持Cluster
秦 羽·2022-12-27 10:44

Redis集群搭建,扩容及收缩节点

Redis集群搭建,扩容及收缩节点简单介绍二.集群搭建一.环境准备二.目录规划三.手动搭建部署集群1.创建安装目录及数据目录(实际端口按规划部署这里以6380,6381为例)3.复制redis1的安装和数据目录到
神膘小金刚·2022-12-26 18:51

Spring Cloud Alibaba 笔记（nacos、sentinel）

3.5、使用nacos作为统一配置中心3.5.1、从nacos获取配置3.5.2、实现自动配置刷新3.5.3、DateId3.5.4、命名空间3.5.5、配置分组3.6、nacos持久化3.7、nacos集群搭建四
渣渣苏·2022-12-26 16:13

springboot整合kafka3.1，实现基本配置和操作

博主自己装了双系统，虚拟机刚刚删了，所以没去做集群，不过当大家的kafka版本来到3.1，建议大家去学习KRaft集群搭建而不是去整合zookeeper。
小胡桃梅花眼·2022-12-24 17:02

[kubeadm] v1.24之前的Kubernetes集群搭建——使用Docker作为容器运行时（后附一键安装脚本）

目录1.拓扑设计1.1IP地址及版本规划1.2集群网络规划2.部署说明3.安装K8S3.1系统环境设置（1）修改主机名（2）修改系统hosts文件（3）修改ubuntu源（4）放行端口流量（5）关闭swap（6）禁用SELinux（7）转发IPv4并让iptables看到桥接流量3.2安装容器运行时Docker（1）更新apt及安装相关依赖（2）添加Docker的gpgkey（3）添加Docker
NOWSHUT·2022-12-24 17:57

Redis基础与使用SpringBoot整合Redis

Redis基础与使用SpringBoot整合RedisRedis进阶学习之数据持久化Redis进阶学习之主从复制、读写分离Redis进阶学习之哨兵模式和分片集群Redis主从复制集群搭建Redis哨兵集群搭建
憨憨撸码·2022-12-24 15:25

slurm-gpu集群搭建详细步骤

初衷首先，slurm搭建的初衷是为了将我多个GPU机器连接起来，从来利用多台机器的计算能力，提高计算效率，之前使用过deepops去搭建，结果最后好像deepops对GPU的卡有要求，我的每台机器卡都不一样，所以后面就开始研究slurm集群的方式了。1、参考文档之前参考过诸多文档，中间会出现各种奇怪的错误，后来还是通过docker的方式去装才成功，不通过docker的还在探索中，以后成功会出新视频
ITIRONMAN·2022-12-23 23:06

redis伪集群搭建详细版

集群搭建使用ruby脚本搭建集群。需要ruby的运行环境。
野鹤、·2022-12-23 19:11

云原生技术---kubeadm使用外置etcd集群

创建etcd集群参考文章：云原生技术—高可用etcd数据库集群搭建准备kubeadm.ymlapiVersion:kubeadm.k8s.io/v1beta2bootstrapTokens:-groups
北漂的菜小白·2022-12-23 13:49

大数据基础平台搭建-（二）Hadoop集群搭建

大数据基础平台搭建-（二）Hadoop集群搭建大数据平台系列文章：1、大数据基础平台搭建-（一）基础环境准备2、大数据基础平台搭建-（二）Hadoop集群搭建大数据平台是基于ApacheHadoop_3.3.4
dyj095·2022-12-23 11:57

Hadoop学习----源码编译，集群搭建

Hadoop源码下载重新编译软件下载：https://hadoop.apache.org/releases.html建议是下载源码包。源码包和官方编译安装包有什么不一样呢？正常情况下，非生产环境直接使用官方编译安装包即可，但是官方提供的安装包不支持本地库。为什么要源码包？第一，里面有一些写的不好，我可以修改源码，这个略过。第二，软件运行需要操作系统支持，操作系统之间存在差异。Linux有很多发行版
北海怪兽Monster·2022-12-23 09:00

Hadoop学习-4-Hadoop部署（HA）

HA环境搭建zookeeper集群搭建zookeeper由2n+1台服务器组成集群搭建java环境，需要安装jdk修稿配置文件#zoo.cfgdataDir=/opt/data/zookeeper_dataserver
小白的数分之路·2022-12-23 09:29

Hadoop集群搭建

文章目录前言一、Hadoop概述二、Hadoop特性优点三、Hadoop集群搭建（一）集群简介（二）集群规划（三）解压Hadoop安装包（四）编辑配置文件总结前言#博学谷IT学习技术支持#想要了解Hadoop
敲键盘的杰克·2022-12-23 03:54

Docker高级篇:实战Redis集群！从3主3从变为4主4从

通过前面两篇，我们学会了三主三从的Redis集群搭建及主从容错切换迁移，随着业务增加，可能会有主从扩容的，所以,本文我们来实战主从扩容PS本系列：《Docker学习系列》教程已经发布的内容，凯哥会在文末加上
凯哥Java·2022-12-22 09:30

基于双k8s集群搭建联邦学习kubefate

一、前言关于联邦学习的背景这里就不做过多介绍了，感兴趣的同学可以去百度一下。联邦学习主要是为了解决数据孤岛和多方安全计算问题的，简单地说就是大家都拿出各自的数据一起建模，但是对方又不能看到或者得到自己的数据，训练的模型大家都可以用。联邦学习分为：横向联邦学习，在两个数据集的用户特征重叠较多而用户重叠较少的情况下，我们把数据集按照横向(即用户维度)切分，并取出双方用户特征相同而用户不完全相同的那部分
大白兔黑又黑·2022-12-22 06:20

redis4.x版本集群搭建（不使用ruby版本）

集群模式3主3从。在三台机器上分别启动2个redis实例。步骤可参考以前的文章。之前配置集群使用的是ruby方案。安装ruby比较麻烦，我不喜欢。其实是可以直接使用redis自己的指令完成的。虽然步骤多一点，（也不多，只要三步）。但是redis的原生方案更放心。redis的5.x版本更方便了，只需要一个命令，见后续文章。clustermeet第一步将所有redis实例之间建立联系。随便选择一个re
运维开发笔记·2022-12-21 14:38

ZooKeeper集群搭建

目录1搭建要求2准备工作3配置集群4启动集群5模拟集群异常1搭建要求真实的集群是需要部署在不同的服务器上的，但是在我们测试时同时启动很多个虚拟机内存会吃不消，所以我们通常会搭建伪集群，也就是把所有的服务都搭建在一台虚拟机上，用端口进行区分。我们这里要求搭建一个三个节点的Zookeeper集群（伪集群）。2准备工作1、首先必须安装好JDK先。2、ZooKeeper压缩包上传到服务器，压缩包下载地址：
一切总会归于平淡·2022-12-20 16:51

pulsar mop mqtt二次开发贡献开源项目代码

pulsarmopmqtt二次开发贡献开源项目代码LinuxMacBook单机部署Pulsar并开启认证功能pulsar集群搭建_亲测成功pulsar开启mqtt和认证pulsar自定义认证插件开发pulsar
·2022-12-19 18:24

hadoop集群搭建

集群简介HADOOP集群具体来说包含两个集群：HDFS集群和YARN集群，两者逻辑上分离，但物理上常在一起。HDFS集群负责海量数据的存储，集群中的角色主要有：NameNode、DataNode、SecondaryNameNode。YARN集群负责海量数据运算时的资源调度，集群中的角色主要有：ResourceManager、NodeManager。那mapreduce是什么呢？它其实是一个分布式运
·2022-12-19 18:52

基于Ubuntu下hadoop集群搭建

一、Hadoop集群搭建1、安装虚拟机1、安装vmtoolshadoop@ubuntu:sudoapt-getinstallopen-vm-tools-desktop-y2、安装vim编辑器hadoop
为什么要学习·2022-12-19 11:04

spring boot分布式部署集成Spring session+redis cluster实现共享Session

rediscluster安装过程参考redis集群搭建nginx负载均衡参考Nginx多台服务器负载均衡1.Maven引用org.springframework.sessionspring-session-data-red
一个人也很酷·2022-12-19 08:04

第五章 Hive的安装与配置

系列文章：第一章Hadoop集群搭建的准备第二章Hadoop集群搭建第三章Zookeeper分布式集群部署（2n+1台虚拟机）第四章Hadoop高可用集群搭建（HA）第五章Hive的安装与配置待更新第九章
开朗小哥·2022-12-18 22:02

ElasticSearch + Kibana最新8.5.2版本搭建，Docker启动ElasticSearch-Kibana，简单启动开发使用方式。

ElasticSearch最新版本搭建-Docker安装ElasticSearch-ElasticSearch集群搭建。
架构师小冯·2022-12-18 11:46

Docker高级

文章目录一.Docker复杂安装1.安装mysql主从复制2.redis集群配置集群搭建主从容错切换迁移案例主从扩容案例主从缩容案例二.DockerFile解析1.是什么2.DockerFile构建过程解析
BlogY·2022-12-18 07:10

Linux系统搭建redis-cluster集群案例

下载以及安装（1）首先要进入Linux系统的根目录（2）安装redis所需的环境（3）下载redis源码包（4）解压redis到根目录下（5）安装redis（6）拷贝配置文件并修改（7）启动并操作（二）集群搭建
孫治AllenSun·2022-12-17 20:40
上一页 35 36 37 38 39 40 41 42 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他