E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
slave2
服务器之间实现免密登录的简易教程
1、先在所有服务器上执行命令:ssh-keygen-tdsa-P''-f~/.ssh/id_dsamaster服务器slave1服务器
slave2
服务器2、而后在所有服务器上执行命令:cat~/.ssh
dcpeng
·
2020-07-06 14:00
服务器之间实现免密登录的简易教程
1、先在所有服务器上执行命令:ssh-keygen-tdsa-P''-f~/.ssh/id_dsamaster服务器slave1服务器
slave2
服务器2、而后在所有服务器上执行命令:cat~/.ssh
dcpeng
·
2020-07-06 14:00
Hadoop完全分布式环境搭建之生成ssh秘钥并配置
首先说明,我模拟hadoop集群,创建了三个节点,分别为master,slave1,
slave2
,他们在本文配置基本一样,请各位举一反三。
Alukar
·
2020-07-06 12:01
mapreduce运行内存及JVM配置错误running beyond physical
title:Hive1.2.1安装笔记date:2016/8/220:47:36tags:Hivecategories:大数据环境ubuntu16.044台机器的Hadoop2.7.2集群Mysql安装在
slave2
Skye_kh
·
2020-07-06 02:31
ERROR hive.HiveConfig: Could not load org.apache.hadoop.hive.conf.HiveConf. Make sure HIVE_CONF_DIR ...
/sqoopimport--connectjdbc:mysql://
slave2
:3306/mysql--usern
weixin_34348111
·
2020-07-06 01:21
使用shell脚本实现自动化部署HBASE集群
首先,要安装好hadoop1.0.4,本例中主节点的主机名为的master,从节点的主机名分别是slave1,
slave2
,slave3,用户名为hadoop,使用的hbase版本为hbase-0.94.6
weixin_34347651
·
2020-07-06 01:21
全国大学生大数据技能竞赛
SSH免密登录5.jdk安装6.集群分发6.1:scp(securecopy)安全拷贝6.2rsync远程同步工具7.安装Zookeeper8.hadoop安装9.HBase安装10构建数据仓库10.1在
slave2
Sparky*
·
2020-07-05 21:43
大数据
Spark +hadoop 完全分布式搭建 以及常见问题
ubuntu14.04serverhadoop2.7.4spark2.2.0java1.8scala2.12.3(搭建过程也是linux命令熟悉过程)先改下三台主机名称:主节点;server1,从节点slave1,
slave2
流風回雪_YZK
·
2020-07-05 16:45
hadoop
spark
ubuntu
ubuntu18.04 搭建hadoop完全分布式集群(Master、slave1、
slave2
)共三个节点
一、硬件配置以及操作系统:所需要的机器以及操作系统:一台macos笔记本、一台window笔记本(CPU双核四线程,内存8G),其中macos用于远程操作,window笔记本装有虚拟机,虚拟出3个ubuntu18.04系统(配置CPU1个线程2个,内存1.5G,硬盘分配每个70G),对于macos(可以用window机或者linux机)的配置没有要求使用vm创建3个ubuntu18.04系统,一个
sxjlinux
·
2020-07-05 13:51
java
为什么Hadoop集群中机器台数多反而执行速度慢?
这里假设集群中有slave1,
slave2
,slave3三个节点,其中slave3工作效率低。
sun_168
·
2020-07-05 13:55
hadoop
Redis主从、哨兵、持久化
主从复制:1Master可以拥有多个
slave2
多个slave可以连接同一个master,还可以连接到其他的slave3主从复制是不会阻塞master的,在同步数据时,master可以继续的处理client
pengwenrui
·
2020-07-05 01:43
redis
Redis主从复制、持久化、哨兵
(一)Redis集群的主从复制概念主从备份,防止主机宕机读写分离,分担master的任务任务分离,如从服务节点分担备份与计算工作主从复制特点1:master可以拥有多个
slave2
:多个slave可以连接同一个
TheOctopus
·
2020-07-04 07:57
Redis
使用三台虚拟机和Hadoop3.1.0搭建集群
虚拟机这里就不过多说了,网上教程一大把,这里使用的是ubuntu系统1、三台虚拟机启动后修改hostname使用一下命令sudogedit/etc/hostname,将三台虚拟机的分别修改为master,slave1,
slave2
Mr_wuliboy
·
2020-07-04 07:28
hadoop
【Hadoop篇07】Hadoop集群脚本编写
积极乐观的态度是解决任何问题和战胜任何困难的第一步Hadoop集群脚本编写编写分发文件脚本应用场景如下:比如有三台主机master1,slave1,
slave2
如果简历完全分布式的集群就需要将文件从master1
focusbigdata
·
2020-07-01 19:58
hadoop
mysql主宕机,主从故障切换(一主多从)
一:环境192.168.1.100master192.168.1.101slave1192.168.1.102slave2slave1,
slave2
都是连在master上。
雅冰石
·
2020-07-01 14:00
MySql
学习
Mysql
主从复制
CentOS7搭建Hadoop集群环境
前言CentOS7虚拟机搭建hadoop集群,共3个节点:master、slave1、
slave2
软件:java1.8hadoop2.6.03台虚拟机都装有CentOS7(最小化安装)系统,一台机命名为
Lzzwwen
·
2020-07-01 11:35
Hadoop
flume监听文件数据--发送到kafka中
(略,见前面内容)kafka安装:(略,见前面内容)创建kafkatopicbin/kafka-topics.sh--create--zookeepermaster:2181,slave1:2181,
slave2
冉小苏
·
2020-06-30 18:45
bigdata
搭建分布式Spark计算平台
CentOS7.2.主机名称IP地址master192.168.1.106slave1192.168.1.107slave2192.168.1.108其中master为hadoop的namenode,slave1和
slave2
zkf541076398
·
2020-06-30 18:03
Spark
【Hadoop篇07】Hadoop集群脚本编写
积极乐观的态度是解决任何问题和战胜任何困难的第一步Hadoop集群脚本编写编写分发文件脚本应用场景如下:比如有三台主机master1,slave1,
slave2
如果简历完全分布式的集群就需要将文件从master1
focusbigdata
·
2020-06-30 15:00
k8s之持续化存储卷nfs动态绑定
安装nfs服务这里安装在
slave2
一个节点上[root@k8s-slave2~]#yum-yinstallnfs-utilsrpcbind[root@k8s-slave2~]#cat/etc/exports
霍金181
·
2020-06-30 10:25
k8s
nfs
Caused by: java.net.NoRouteToHostException: No Route to Host from
slave2
/192.168.10.242 to master:1
[root@slave2logs]#tail-100yarn-root-nodemanager-slave2.log atorg.apache.hadoop.yarn.server.nodemanager.NodeStatusUpdaterImpl.serviceStart(NodeStatusUpdaterImpl.java:185) atorg.apache.hadoo
顺顺顺子
·
2020-06-30 01:26
【Hadoop篇02】Hadoop完全分布式环境搭建
优于别人,并不高贵,真正的高贵应该是优于过去的自己Hadoop完全分布式环境搭建编写分发文件脚本应用场景如下:比如有三台主机master1,slave1,
slave2
如果简历完全分布式的集群就需要将文件从
focusbigdata
·
2020-06-29 10:37
hadoop
关于IP地址与主机名映射的/etc/hosts文件配置
首先,在hadoop工作就像是一个社团帮派,master是老大,而slave1、
slave2
等就是master的小弟。
柘月十七
·
2020-06-29 09:40
hadoop
Linux
无痛搭建hadoop集群并运行Wordcount程序
目录前置准备查看本地网络信息查看网络连接状态更改网络信息更改主机名对虚拟机进行克隆得到slave1和
slave2
节点配置slave1和
slave2
的参数信息建立主机名到ip的映射配置ssh免密登录关闭防火墙与
Veritaswhs
·
2020-06-29 08:49
大数据
CentOS7+Ambria2.6.1.0+HDP2.6.4.0安装详细步骤
Ambria安装1.环境准备(在master,slave1,
slave2
,slave3)1.1.环境说明masterslave1slave2slave3主机名master.ambria.comslave1
LJiaWang
·
2020-06-28 22:53
linux
hadoop 集群 master无法免密登录
slave2
因为这集群是半年前配置好的,现在重新启动执行一些任务,发现ssh服务无法连通,但是
slave2
是可以免密登录master的,考虑到是公钥和私钥的问题,master想要免密登录
slave2
,那么
slave2
yelena_scr
·
2020-06-28 20:13
hadoo
ssh免
hadoop集
【Hadoop篇02】Hadoop完全分布式环境搭建
优于别人,并不高贵,真正的高贵应该是优于过去的自己Hadoop完全分布式环境搭建编写分发文件脚本应用场景如下:比如有三台主机master1,slave1,
slave2
如果简历完全分布式的集群就需要将文件从
focusbigdata
·
2020-06-28 11:00
ssh免密码登陆(三个节点master slave1
slave2
)详细带命令版
准备工作:首先修改三个节点的名称分别为masterslave1slave2。建议以vim/etc/sysconfig/network的方式修改修改三个节点的/etc/hosts文件如下形式:192.168.43.202master192.168.43.253slave1192.168.43.113slave2前面为各自机器对应的IP配置ssh免密码登录(三个节点m1、s1、s2)主节点配置:首先到
weixin_30240349
·
2020-06-27 15:53
kafka实操(创建主题,生产者,消费者组,查看消费偏移,删除主题)
启动Kafka运行环境启动zookeeper,在master、salve1和
slave2
上分别启动[root@masterbin]#.
阿雅Yage
·
2020-06-27 03:13
kafka
Intellij IDEA远程向hadoop集群提交mapreduce作业
IntellijIDEA2016.3.52、集群环境:虚拟机系统centos6.5、hadoop2.6.0,共三个节点,其中master节点为192.168.137.2,slave1:192.168.137.3,
slave2
yumiao13
·
2020-06-27 01:14
大数据平台
cacti监控mysql 主从复制
mysqlmysql主从复制5.1.1主机配置1台cacti server 10.10.54.159 3台msyql server master: 10.10.54.157 slave1:10.10.54.156
slave2
音乐喝啤酒99
·
2020-06-26 23:35
数据库
hive远程模式搭建
slave1192.168.200.129(hive服务端)slave2192.168.200.130(MySQL数据库存储metastore元数据)都要求已经安装jdk,hadoop参考连接部署mysql服务(
slave2
Bug.object
·
2020-06-26 17:16
hive
hadoop
大数据
数据库
centos
CDH安装脚本
/bin/bash#修改hosts名称和节点的ip地址hostname="master"master="192.168.1.7"slave1="192.168.1.8"
slave2
="192.168.1.9
101之歌
·
2020-06-26 04:56
大数据
hadoop Flume 操作实例(监控端口数据、实时读取本地文件到 HDFS、实时读取目录文件到 HDFS)
环境配置:LinuxUbuntu16.04系统hadoop2.7.2(一主master二从slave1、
slave2
)javajdk1.8.0_181Flume1.7.0flume环境配置教程:hadoopFlume
科大人
·
2020-06-25 12:25
Hadoop
Flume
总结
01_hadoop集群搭建
本文搭建了一个由四节点(master、slave1、
slave2
、slave3)构成的Hadoop完全分布式集群虚拟机安装:VMWareip分配:master内网IP:192.168.248.136slave01
平头哥2
·
2020-06-24 19:48
Redis之-哨兵模式原理
master服务器异常down机后,两个原有的slave1,
slave2
服务器接管服务,如slave1变成新的master服务器,
slave2
变成slave1的从库。
chanqi4859
·
2020-06-22 21:59
zookeeper的安装
zoo.cfg四个节点dataDir=/var/data/zookeeperserver.1=master:2888:3888server.2=slave1:2888:3888server.3=
slave2
tonyemail_st
·
2020-06-22 17:36
Centos7下部署ceph 12.2.1 (luminous)集群及RBD使用
原创,本文地址http://www.cnblogs.com/pcxie/p/7799372.html前言本文搭建了一个由三节点(master、slave1、
slave2
)构成的ceph分布式集群,并通过示例使用
bo o ya ka
·
2020-06-21 10:22
从0到1:搭建Hadoop集群
具体文稿还望移步CSDN:从0到1:搭建Hadoop集群软件:VMware,SecureCRT环境:centos首先是要在VMware中创建三个centos环境,分别作为master(主机),slave1(从机),
slave2
追逐Bingo彡
·
2020-04-14 03:35
Hive1.2.1安装笔记
title:Hive1.2.1安装笔记date:2016/8/220:47:36tags:Hivecategories:大数据环境ubuntu16.044台机器的Hadoop2.7.2集群Mysql安装在
slave2
Skye_kh
·
2020-04-06 18:25
Spark 开发环境搭建(二)-virtual box 虚拟机配置静态IP 和上网
1.设置机器名字为了方便集群中集群相互访问及辨识,我们把当前的机器名字修改为master,其他机器命名为slave1,
slave2
。
kakasyw
·
2020-04-04 06:19
redis笔记----主从复制(windows10)
我们需要将数据复制多份部署在多台不同的服务器上,即使有一台服务器出现故障其他服务器依然可以继续提供服务作用:数据备份扩展读性能(读写分离)复制方式:全量复制部分复制实现方式1、一主二扑A(B、C)一个Master两个
Slave2
Honey_Badger
·
2020-03-31 18:00
『 Hadoop』从零安装第五弹
如果成功在本机登录后,就在slave1和
slave2
上重复以上操作,直到
Sakura_P
·
2020-03-29 23:23
1.3.1搭建Hadoop前的准备
9428e443b7fd硬件环境设置参数列表:虚拟机一:192.168.110.220主机名:master虚拟机二:192.168.110.221主机名:slave1虚拟机三:192.168.110.222主机名:
slave2
寒暄_HX
·
2020-03-16 18:08
通过自动化脚本安装以及配置JDK
集群总共有三个节点,分别是:master(192.168.133.10)slave1(192.168.133.11)
slave2
(192.168.133.12)文件服务器(192.168.1.10)在master
JustCode
·
2020-03-16 00:45
zookeeper集群的搭建
安装过程本文选择了在slave1,
slave2
和slave3三台机器上安装将zookeeper解压到/usr/local目录下,并配置环境变量sudonano/
Davidham3
·
2020-03-14 04:19
CentOS Hadoop完全分布式集群搭建
etc/hosts192.168.31.xxxmaster192.168.31.xxxslaver1192.168.31.xxxslaver2集群ssh无密匙登录设置---在master,slave1,
slave2
SnorlaxSE
·
2020-03-12 13:47
CDH环境部署
VMware虚拟机克隆CentOS后网卡修改方法配置ssh免登录启动三台机器,分别修改机器名为master、slave1、
slave2
,重启系统[root@master~]#vim/etc/sysconfig
Solarzhou
·
2020-02-13 18:04
大数据之一:Hadoop2.6.5+centos7.5三节点大数据集群部署搭建
Hadoop虚拟环境创建虚拟机下一步设置虚拟机主机名和介质存放路径设置20G磁盘大小选择“自定义硬件”配置网络模式为NAT模式配置虚拟机启动镜像到这里,使用虚拟机克隆技术配置另外两台slave同理克隆
slave2
IT技术栈
·
2020-01-07 23:32
Hadoop
Hadoop
zookeeper安装遇到的error和解决方案
配置:全分布式(master、slave1、
slave2
均为虚拟机)CentOS7VM全分布式集群安装可参考资料:Hadoop,master和slave简单的分布式搭建centos7搭建hadoop2.7.3
glassyw
·
2019-12-25 22:28
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他