E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
slave2
Apache Sentry安装及简单使用
1环境描述三台hadoop集群,分别是master、slave1和
slave2
。
weixin_30919571
·
2020-08-17 16:41
Docker环境下搭建Hadoop集群
article/details/82744993安装ubuntu系统---->下载docker---->在docker里拉取hadoop镜像---->在此镜像里创建三个容器(Master、Slave1、
Slave2
Selenium39
·
2020-08-17 13:21
大数据
centos7 安装 cdh5 集群超详细教程
系统环境:主节点:master10.18.1.117从节点:slave1,
slave2
,slave310.18.1.118,10.18.119,10.18.1.120一、准备工作,系统环境搭建预先准备工作
mythsc
·
2020-08-17 09:41
Hadoop
cdh5
配置哨兵监控Redis运行情况
哨兵的作用:1、监控redis进行状态,包括master和
slave2
、当masterdown机,能自动将s
node2017
·
2020-08-16 22:08
redis
redis
哨兵
Linux大数据平台搭建master、slave1、
slave2
实验采用的刚装好的三台虚拟机,名字分别为master、slave1、slave2.用到的软件如下:一、前期操作1、启动网卡:(三台机器)修改配置文件:vi/etc/sysconfig/network-scripts/ifcfg-ens33将ONBOOT=no改为ONBOOT=yes,esc、:wq保存退出重启网卡:sudoservicenetworkrestartipaddr或ifconfig查看
奕吉啊
·
2020-08-16 22:02
#
CentOS
笔记
大数据环境搭建
hadoop3.1.0集群搭建
实现步骤:1、利用Vmware10来构建虚拟机,我们需要三台虚拟机,虚拟机配置一个即可,进行克隆操作;2、于/etc/hostname处分别修改主机名为master,slave1,
slave2
;3、防火墙设置
kyswdzz_0
·
2020-08-16 19:01
Hadoop全分布式集群配置指南
这里以centOS7为例先配置好一台master,另外两台slave1和
slave2
克隆master即可创建hadoop用户必须在root用户下进行新用户的创建(或删除):[root@masterhadoop
冽夫
·
2020-08-16 19:50
Hadoop
Hadoop安装(含client安装)
角色定位主机名NamenodemasterDatanodeslave1Datanodeslave2Clientclient1.安装前准备工作:1.1.更改4台机器主机名为master,slave1,
slave2
WhuCS_B701
·
2020-08-16 18:58
Hadoop
hive的远程模式安装(用mysql作为hive的元数据库)
主机ip(主机名):192.168.80.10(Master)192.168.80.11(Slave1)192.168.80.12()
Slave2
在主机Master中解压hive:tar–zxvfhivehive
Marho11
·
2020-08-14 22:15
Hive
Hadoop集群搭建及运行自带的wordcount程序
slave1,
slave2
的配置与master1的所有配置均一致(除了静态ip不同),以下所有配置,三台主机都需配置。1.搭建环境在虚拟机中搭建hadoop集群。
JAnedun
·
2020-08-14 13:58
学习
Phoenix统计某段时间内的数据量
from"normalFlow"where"Timestamp"BETWEEN'2019-05-1017:11:00'and'2019-05-1017:13:25';结果:0:jdbc:phoenix:master,slave1,
slave2
Sword1996
·
2020-08-06 12:32
大数据
HBase中regionserver启动后自动关闭问题解决
查看日志,发现错误2019-06-2420:16:29,432ERROR[regionserver/
slave2
:16020]regionserver.HRegionServer:*****ABORTINGregionserverslave2,16020,1561378582102
Sword1996
·
2020-08-06 12:32
大数据
hadoop分布式环境搭建
首先规划:三台机器,域名分别是master,slave1,
slave2
。
太白酒仙
·
2020-08-03 00:15
大数据
hadoop
hdfs
大数据
hadoop分布式环境搭建
mapreduce
yarn
hdfs
hadoop分布式部署系列2:MR1
jobtracker、tasktracker环境准备:主节点:192.168.58.129(hostname:master)子节点:192.168.58.130(slave1),192.168.58.131(
slave2
liuluxyz
·
2020-08-01 13:35
hadoop
Hive集群安装配置
同时,比如我这里的master、slave1和
slave2
组成的hadoop集群。hive的安装可以安装在任一一个节点上,当然,也可以安装在集群之外,取名为client。只需要ssh免密码通信即可。
差不多程序员
·
2020-08-01 09:06
大数据
在阿里云服务器ECS上用Cloudera搭建集群(随记)
阿里云购买的三台机器,学习用的,所以基本上资源都是按最低买的,按流量时长计费,也花不了多少钱,并且一个账户下的机器不用配置,直接能ping通三台机器
Slave2
是我最早买的,安装的环境都是是CentOS7.364
淑芬和二狗
·
2020-07-30 02:49
云计算
大数据环境搭建(Hadoop,Spark,Zookeeper,Hbase,Kafka)
1Linux环境准备1.1基础设置修改主机名hostnamectlset-hostnamemasterreboot依次将其他3台机器设置为slave1,
slave2
,slave3。
安中古天乐
·
2020-07-30 02:21
Hadoop完全分布式安装
因为我们硬件设施有限,所以我们采用虚拟机的方式模拟hadoop集群,我们准备建立四台虚拟机,一台机器master作为管理节点,其他三台机器slave1、
slave2
和slave3作为子节点。
祖国的沙漠-SUN
·
2020-07-30 01:40
大数据学习
hadoop集群
分布式
Yarn集群配置
1、配置yarn-site.xml文件,用Xshell连接四台机器(master、slave1、
slave2
、slave3),Xshell有命令发送到所有窗口的功能(工具–>发送输入到所有会话),所以我们可以同时修改四台机器上的
祖国的沙漠-SUN
·
2020-07-30 01:09
大数据学习
Linux环境 solr-7.4.0安装【一篇就够】
一、环境说明三台安装了CenOS7操作系统的虚拟机master(192.168.11.128)、slave1(192.168.11.129)、
slave2
(192.168.11.30)二、下载solr安装包地址
sjmz30071360
·
2020-07-30 00:03
solr
分布式Redis主备复制
主备复制流程Redis包含master和
slave2
种节点:master对外提供写服务;slave节点作为master的数据备份,不可以提供写服务。主备复制由master主
风度玉门
·
2020-07-29 12:38
Redis
Hadoop+Zookeeper+HBase完全分布式集群搭建
241Zookeeper:3.5.6Hadoop:2.10.0HBase:1.3.6虚拟机中三台服务器主机信息:|主机名|IP||master|192.168.0.166||slave1|192.168.0.167||
slave2
下等马王德发
·
2020-07-27 17:23
Hadoop
Hadoop2.7.6 完全分布搭建
centos7.5hadoop2.7.6完全分布搭建一、准备3台客户机(master,slave1,
slave2
)关闭防火墙三台机器都要systemctlstopfirewalld.service关闭防火墙
szjmsww
·
2020-07-15 08:13
Linux 如何通过某一台服务器调用执行多台远程服务器上的脚本,结果显示在本地?...
一共三台机器:master:192.168.4.91slave1:192.168.4.45slave2:192.168.4.96在slave1上远程执行master、
slave2
上的脚本,结果显示或者放到本地
weixin_34379433
·
2020-07-15 05:36
spark跑YARN模式或Client模式提交任务不成功(application state: ACCEPTED)
master分配2G,slave1分配1G,
slave2
分配1G。
weixin_33828101
·
2020-07-15 04:27
搭建Spark真实分布式运行环境
sparkstandalone环境部署,不依赖于HDFS配置spark-env.sh文件配置slaves.template文件将配置好的spark文件分发至slaves机器启动spark测试添加slave1和
slave2
jeewang
·
2020-07-15 01:16
Spark
GraphX
图计算系统
Hadoop集群完全分布式搭建教程-CentOS
1.说明本教程中电脑为8G内存,故而将使用四个节点作为集群环境,其中一个为master,3个为slave(分别是slave1、
slave2
和slave3、
shu_lin
·
2020-07-15 01:37
Hadoop
Hive-1.2.1与HBase-1.1.2的整合
的整合这里的整合是指,将HBase作为存储数据的库,由Hive作为连接桥梁修改Hivehive-site.xml增加hbase.zookeeper.quorummaster:2181,slave1:2182,
slave2
木之夭
·
2020-07-15 00:31
大数据薪资分析项目(自建)
Spark详解(二):Spark完全分布式环境搭建
1.前言本文搭建了一个由三节点(master、slave1、
slave2
)构成的Spark完全分布式集群,并通过Spark分布式计算的一个示例测试集群的正确性。
MasterT-J
·
2020-07-14 17:32
Spark框架
Spark框架
hadoop,hbase,hive安装全记录
_01namenode主机名:master,namenode的IP:10.10.102.15datanode主机名:slave1,datanode的IP:10.10.106.8datanode主机名:
slave2
chengweipeng123
·
2020-07-14 08:07
Hadoop + hbase + Zookeeper + spark + scala 集群搭建
在学习大数据过程中,搭建环境笔记:1.装载3个vmmaster、slave1、
slave2
(CentOS6.464位)2.(所有root用户)新建用户/密码hadoop/hadoop1233.
Ray-liusl
·
2020-07-14 05:12
大数据
Hadoop大数据平台搭建与环境配置
执行sudovim/etc/hostname修改主机名,主机修改为master,另外两个分别修改为slave1,
slave2
。当然这只是为了方便,其实也可以不用修改3。
baidu_38371925
·
2020-07-14 01:58
大数据
hadoop中datanode无法启动,报Caused by: java.net.NoRouteToHostException: No route to host
所以我到slave1和
slave2
上面去执行jps查看进程,结果都没有datanode
weixin_33971205
·
2020-07-13 18:23
分布式集群环境之域名映射与免密码登录
校验域名映射0x03集群免密码登录配置1.生成三台服务器的秘钥2.配置公钥到authorized_keys文件3.聚合三台服务器的公钥到authorized_keys文件4.分发钥匙袋到slave1、
slave2
邵奈一
·
2020-07-13 13:48
安装与配置
复制粘贴玩大数据系列教程
大数据
复制粘贴玩转大数据系列专栏
hadoop大数据01---hadoop 的安装配置
hadoop集群搭建01--hadoop的安装配置三台机器Centos7192.168.2.37计算机名称master192.168.2.38计算机名称slave1192.168.2.39计算机名称
slave2
saga_gallon
·
2020-07-13 13:28
hadoop
+hbase
集群
集群多服务器,普通用户SSH访问方法
2.制作公钥私钥2.1登录master、slave1、
slave2
生成其公钥、私钥文件#登录master#切换到user目录下的.ssh文件夹:cd/home/user/.ssh#生成一个密码为空的公钥和私钥
逆風的薔薇
·
2020-07-13 04:15
MPI
&
集群
Redis系列(五)--主从复制
1.1、特点1、一个master可以有多个slave,slave下层也可以有
slave2
、一个slave只能有一个master3、数据流是单向的,
weixin_30800807
·
2020-07-12 07:16
centos7+hadoop-3.1.0搭建分布式集群超详细教程
目录一、新建虚拟机:二、连接XSHell三、修改主机名称和网络名称四、关闭防火墙五、关闭selinux六、jdk的安装与卸载七、hadoop的安装八、克隆九、配置slave1和
slave2
十、ssh免密登录十一
喬喬
·
2020-07-11 23:40
SSH免密登录(笔记)
三台主机,分别是Master,Slave1,
Slave2
,需要他们之间能够互相免密访问。
sbq63683210
·
2020-07-11 22:16
Spark
Hbase2.1.3分布式部署
我的Hadoop版本为2.7.6,jdk为1.8版本的,都和Hbase2.1.3兼容,部署在Cento7上,我将在五台虚拟机上测试部署(master1,master2,slave1,
slave2
,slave3
rongDang
·
2020-07-11 22:53
Hadoop
Linux服务器(主机)配置SSH互信---Warning: Permanently added '
slave2
,***' (ECDSA) to the list of known hosts警告
聊聊自己遇到的神坑,实在是哭笑不得,现将其理成笔记发布在博客上以供需要的小伙伴们参考Theauthenticityofhost'
slave2
(192.168.***)'can'tbeestablished.ECDSAkeyfingerprintisSHA256
Andy-ZHA
·
2020-07-11 20:10
大数据学习
服务器之间实现免密登录的简易教程
1、先在所有服务器上执行命令:ssh-keygen-tdsa-P''-f~/.ssh/id_dsamaster服务器slave1服务器
slave2
服务器2、而后在所有服务器上执行命令:cat/.ssh/
Python进阶者
·
2020-07-11 14:51
Hadoop2.7.5高可用zookeeper搭建
集群规划hadoopHA集群的搭建依赖zookeeper,所以选取三台当作zookeeper集群,这次准备了4台主机,分别是hadoopm,hadoopsm,slave1,
slave2
,其中hadoopm
zhbzhbzhbbaby
·
2020-07-10 14:43
大数据
Centos7下搭建大数据处理集群(Hadoop+Spark+Hbase+Hive+Zookeeper+Kafka+Flume)详细步骤
一.目录左侧按钮显示二.集群规划准备3台虚拟机,设置IP地址和hostname,一般的三台机器的集群为了明确表示主从关系,命名master,slave1,
slave2
,我这边直接命名为hp1,hp2,hp3
潜心_守道
·
2020-07-09 07:14
大数据
ubuntu下hadoop,spark配置
与安装第一台Ubuntu机器不同的几点是:第一点:我们把第二、三台Ubuntu机器命名为了Slave1、
Slave2
,如下图所示:创建完的
weixin_30515513
·
2020-07-08 13:30
大数据hadoop集群的搭建总结及步骤
关闭防火墙:systemctlstopfirewalld禁止防火墙开机启动:systemctldisablefirewalld安装虚拟机的时候需要配置好主机名和网络主机名:master,slave1,
slave2
夕阳下的独行者
·
2020-07-08 00:10
linux
SpringBoot 多数据源
实现1、建库建表首先,我们在本地新建三个数据库名分别为master,slave1,
slave2
,我们的目前就是写入操作都是在master,查询是slave1,
slave2
因此我们在上一篇也就是【SpringBoot2.0
java_陈序猿
·
2020-07-07 16:31
Springboot
多数据源
Springboot读写分离
windows系统下pycharm远程访问linux系统下jupyter notebook,并调用spark平台(四)spark平台搭建
三台linux系统机器,分别为192.168.88.177主机名master,192.168.88.178主机名
slave2
,192.168.88.179主机名slave3一,Sacla安装本例下载的是
lyn5284767
·
2020-07-07 15:45
Spark学习
hadoop
spark
机器学习
hadoop集群,mapreduce任务没有在所有slave节点上执行的问题
://1master:19888日志聚合的界面查看,也可以在运行时查看节点cpu使用情况本人使用yarn作为任务调度,两台slave,但是最终发现,要么全是slave1执行mapreduce,要么全是
slave2
lhyxcxy
·
2020-07-07 13:33
大数据实验总结
大数据实验总结大数据实验总结实验总要求基础环境心得体会实验总要求给五台主机,先后配置torque,mpich,mongodb,hadoop,zookeeper,hbasedtorque有主有从master:lkslave:
slave2
Volcano3511
·
2020-07-07 01:06
课程学习
大数据实验
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他