Hadoop4

Hadoop集群部署

目录1模板虚拟机环境准备1.1修改网卡配置文件扩展1.2修改主机名1.3在虚拟机中需要的基础文件包1.4关闭防火墙1.5创建Hadoop的账户及文件2模板虚拟机安装JDK3模板虚拟机安装Hadoop4克隆虚拟机
程序员储物箱·2023-12-26 12:23

搭建HBase分布式集群

0.PrerequisiteThereare3VMs-hadoop3/hadoop4/hadoop5forfully-distributedHBasecluster,thesetupplanlookslike
sun_xo·2023-10-21 07:23

Hadoop Single Node Cluster的安装

因为只有一台服务器，所以所有功能都在一台服务器中，安装步骤如下:1安装JDK2设定SSH无密码登入3下载安装Hadoop4设定Hadoop环境变数5Hadoop组态档设定6建立与格式化HDFS目录7启动
qclonle·2023-02-02 21:08

Win10的pycharm上通过pyspark访问服务器上的SPARK和HBASE

.*.4hadoop4hbase-env.xmlhbase.zookeeper.quorumhadoop1:2181,hadoop2:2181,hadoop3:2181,hadoop4:2181Windows10
木目范·2021-06-06 22:50

Deepin（Ubuntu通用）安装Hadoop伪分布环境（集成Hbase、Hive、MySQL、Spark、Scala）

Deepin或Ubuntu（我用的是虚拟机）安装Hadoop1、安装和配置ssh2、安装和配置Java（一定要安装Java11版本之前的，不然Spark和Scala会报错，我们安装Java8）3、安装Hadoop4
繁华尽头满是殇·2021-04-08 12:25

Kafka集群安装部署

downloads.html3.虚拟机准备(1).准备3台虚拟机(2).配置ip地址(3).配置主机名称(4).3台主机分别关闭防火墙4.安装jdk5.安装Zookeeper在hadoop2、hadoop3和hadoop4
Movle·2020-11-10 17:01

Hbase教程(三) Hbase集群安装

安装Hadoop集群环境安装，参见:http://blog.csdn.net/yuan_xw/article/details/511751711、启动Zookeeker服务：分别在Hadoop4、Hadoop5
_否极泰来_·2020-09-15 18:04

Kafka实战：消费者组案例

viconsumer.propertiesgroup.id=movle(2)再hadoop3、hadoop4上分别启动消费者./bi
Movle·2020-09-12 04:43

kudu upsert data api

htmlkudu对插入数据进行更新操作try{StringtableName="wyh_main";KuduClientclient=newKuduClient.KuduClientBuilder("hadoop4
@black·2020-09-11 20:45

在docker上部署centos+hadoop3.0分布式集群

/workerip地址使用docker默认的分配地址：master：主机名：hadoop2、ip地址：172.17.0.2slaver1：主机名：hadoop3、ip地址：172.17.0.3主机名：hadoop4
yangyunmmeng2002·2020-08-16 22:58

hadoop完全分布式文件系统集群搭建

文件系统中保存的文件的blocak在datanode中至少要有3份或3份以上的备份，备份不能放于同一个机架上，更不能放于同一台主机上），我这里使用的是4台，分别是hadoop1、hadoop2、hadoop3和hadoop4
weixin_30908941·2020-08-09 14:54

Hadoop 运行环境搭建（详细）

文章目录Hadoop运行环境搭建（重点）1、模板虚拟机环境准备2、克隆虚拟机3、在hadoop105安装JDK/hadoop4、Hadoop目录结构Hadoop运行环境搭建（重点）1、模板虚拟机环境准备
TANCHISE·2020-07-30 13:23

大数据软件之搭建完全分布式Hadoop

集群准备准备三台客户机（关闭防火墙、静态ip、主机映射、主机名称），主机名分别为Hadoop2，Hadoop3，Hadoop4（具体虚拟机安装步骤在我之前的博客有写到）安装jdk，配置环境变量（具体步骤在我之前的博客里也有写到
Clozzz·2020-07-27 15:47

Hadoop完全分布式环境搭建（实操）

文章目录1、环境准备1.1配置静态ip1.2修改主机名1.3配置主机映射2、安装jdk3、安装Hadoop4、完全分布式4.1集群准备4.2设置免密登录4.3修改配置文件五、启动集群启动集群六、时间同步
跳蛙pass·2020-07-15 09:32

Hadoop分布式集群搭建，以及ssh互通免密登录！

前面给大家讲的是hadoop伪分布式的搭建，今天给大家讲解下3台虚拟机的hadoop搭建.首先安装好3台虚拟机，命名为hadoop2,hadoop2,hadoop4都安装好jdk这就不用多说了，这里为了操作方便
天ヾ道℡酬勤·2020-07-14 03:42

ambari部署

本文使用三台centos6.5作为安装环境（目前测试验证结果为Ambari在centos6.5的版本上运行比较稳定），五台机器分别为hadoop1、hadoop2、hadoop3、hadoop4、hadoop5
mysharespaces·2020-07-12 17:22

hadoop、zookeeper完全分布式搭建，高可用集群搭建

一、hadoop完全分布式搭建1.准备3台虚拟机（关闭防火墙、静态ip,主机名称），主机名称分别为hadoop2、hadoop3、hadoop4（具体看其他文章）2.安装jdk，配置环境变量3.配置ssh
wfdsj·2020-07-12 15:23

Hadoop4个核心配置文件讲解

Hadoop4个核心配置文件core-site.xml，hdfs-site.xml，mapred-site.xml，yarn-site.xml配置讲解1.hdfs-site.xmldfs.replication
Yun---Sani·2020-07-12 10:44

4台虚拟机实现高可用Hadoop集群步骤

目录一、集群安装1、软件版本选择2、机器配置1）4台机器分配2）修改hosts3）免密登录3、软件安装1）安装jdk2）安装zookeeper3）安装hadoop4）小结二、启动集群1、启动zookeeper2
qql2011·2020-07-10 01:06

大数据学习笔记之Zookeeper（四）：Zookeeper实战篇（二）

ZooKeeper客户端：4.3.3创建子节点4.3.4获取子节点4.3.5判断znode是否存在4.3.6监听服务器节点动态上下线案例4.1分布式安装部署0）集群规划在hadoop2、hadoop3和hadoop4
Leesin Dong·2020-07-04 14:40

Hadoop分布式搭建

1.环境准备准备三台centos7虚拟机，设置静态IP(192.168.1.103,192.168.1.104,192.168.1.105)主机名称分别用hadoop3，hadoop4，hadoop5命名三台机器安装好
盲流子开发·2020-06-24 20:09

Hadoop集群搭载经历之hadoop配置

Hadoop环境配置效果1.各个服务器节点之间配置免密码登录（对自己也要配置）修改vi/etc/hosts添加自己三台服务器的ip以及相对应的主机名格式192.168.68.131hadoop4或者说hadoop4
GetIdea·2019-07-31 08:29

hadoop2.7.7安装和集群（适用hadoop3.1.2和docker容器）

准备hadoop2（master），Hadoop3，hadoop4，三台机器vi/etc/profile.d/hadoop.shexportJAVA_HOME=/usr/local/src/jdk1.8.0
海畅智慧·2019-06-03 00:00

Linux学习第四周：用户权限及正则表达式

及其内部文件的属组和其它用户均没有任何访问权限2、编辑/etc/group文件，添加组hadoop3、手动编辑/etc/passwd文件新增一行，添加用户hadoop，其基本组ID为hadoop组的id号；其家目录为/home/hadoop4
zhangdaifu·2018-09-07 17:14

Docker部署Hadoop集群

/workerip地址使用docker默认的分配地址：master：主机名：hadoop2、ip地址：172.17.0.2slaver1：主机名：hadoop3、ip地址：172.17.0.3主机名：hadoop4
大屁孩儿·2018-07-26 17:08

hadoop安装和SSH

/hadoop4、检查是否安装好：./bin/hadoopversionSSH安装：下载更新：yuminstallopenssh-server；登入本机：sshlocal
PeixinYe·2018-04-13 16:38

kafka集群搭建

命令行中键入以下命令：vi/etc/sysconfig/network把HOSTNAME修改为新的主机名"hadoop4"修
fantasticqiang·2018-02-25 22:51

基于NameNode HA的Hbase安装配置

安装配置服务器规划如下：服务角色\服务器10.124.151.18(hadoop1)10.124.151.19(hadoop2)10.124.151.20(hadoop3)10.124.151.22(hadoop4
贾己人·2017-12-10 21:47

Linux集群配置免密登录

在4台Linux（Centos）服务器中配置免密登录–>以主机名为hadoop1、hadoop2、hadoop3、hadoop4，用户均为hadoop，密码为hadoop1234为例（免密登录只针对以某个用户的身份登录某个节点
972579·2017-12-04 12:41

HBase 高可用搭建

一、节点规划hadoop1、hadoop2HMasterhadoop3、hadoop4、hadoop5HRegionServer二、配置环境变量export HBASE_HOME=/usr/local/
一语成谶灬·2017-11-10 10:12

Hadoop公开课：完全分布式脚本分析

libexec/hadoop-config.sh2)start-dfs.sh3)start-yarn.sh3)catlibexec/hadoop-config.shhadoop_conf_dir=etc/hadoop4
大数据部落·2017-08-01 16:21

Hadoop公开课：完全分布式脚本分析

libexec/hadoop-config.sh2)start-dfs.sh3)start-yarn.sh3)catlibexec/hadoop-config.shhadoop_conf_dir=etc/hadoop4
乐搏学院Learnbo·2017-08-01 16:59

hadoop2.6 HA部署

因为需要部署spark环境，特意重新安装了一个测试的hadoop集群，现将相关步骤记录如下：硬件环境：四台虚拟机，hadoop1~hadoop4，3G内存，60G硬盘，2核CPU软件环境：CentOS6.5
alexanda2000·2016-12-25 14:49

基于HBase0.98.13搭建HBase HA分布式集群

下面我们开始啦1、规划 1、主机规划NodeNameMasterZookeeperRegionServerhadoop1是是否hadoop2是是否hadoop3否是是hadoop4否是是hadoop5否是是
ljc520313·2016-06-19 23:00

Cloudera Hadoop4实战视频教程下载

下载地址：http://pan.baidu.com/s/1mgXyyrY密码：6p3d第00讲：Hadoop平台数据处理流程总览第一讲：ClouderaManager介绍与安装 第二讲：ClouderaManager详解 第三讲：CDH4.1介绍与环境搭建一 第四讲：CDH4.1环境搭建二 第五讲：Hadoop工作原理、调度策略 第六讲：Hadoop开发作业形式 第七讲：CM下CDH4.1集群高级
神的一生·2016-01-18 11:05

Cloudera Hadoop4视频教程下载

下载地址：http://pan.baidu.com/s/1mgXyyrY密码：6p3d第00讲：Hadoop平台数据处理流程总览第一讲：ClouderaManager介绍与安装第二讲：ClouderaManager详解第三讲：CDH4.1介绍与环境搭建一第四讲：CDH4.1环境搭建二第五讲：Hadoop工作原理、调度策略第六讲：Hadoop开发作业形式第七讲：CM下CDH4.1集群高级管理一第八讲
80后的童年2·2016-01-18 10:00

Hadoop 权威指南

一集群规范网络拓扑二集群的构建和安装1安装Java16及其以上2创建Hadoop用户3安装Hadoop4测试安装三SSH配置四Hadoop配置1配置管理2环境设置21内存22Java23系统日志文件24SSH
u011414200·2016-01-01 11:00

Scala pair RDD 统计均值，方差等

setAppName("hh") conf.setMaster("local[3]") valsc=newSparkContext(conf) valdata=sc.textFile("/home/hadoop4
power0405hf·2015-12-15 10:00

Hadoop2.2.0 手动切换HA环境搭建

　　　　ssh-copy-id -i hadoop5含义: 　　　　节点hadoop4上执行ssh-copy-id -i hadoop5的含义是把hadoop4上的公钥id_rsa.pub的内容追加到
·2015-11-11 06:45

zookeeper3.4.6的安装

再讲具体的步骤之前，需要说明的是，我安装zookeeper的集群是用到了五个节点：分别是hadoop1，hadoop2，hadoop3，hadoop4，hadoop5。也就是说要
·2015-10-27 13:06

Cloudera Hadoop4视频教程

ClouderaHadoop4实战课程百度网盘下载：链接：http://pan.baidu.com/s/1c0dO2n2密码：4mqi课程详细大纲列表:第一讲：ClouderaManager介绍与安装第二讲：ClouderaManager详解第三讲：CDH4.1介绍与环境搭建一第四讲：CDH4.1环境搭建二第五讲：Hadoop工作原理、调度策略第六讲：Hadoop开发作业形式第七讲：CM下CDH4
nwheydnwyefs·2015-09-05 08:00

Cloudera Hadoop4视频教程

ClouderaHadoop4实战课程百度网盘下载：链接：http://pan.baidu.com/s/1c0dO2n2密码：4mqi课程详细大纲列表:第一讲：ClouderaManager介绍与安装第二讲：ClouderaManager详解第三讲：CDH4.1介绍与环境搭建一第四讲：CDH4.1环境搭建二第五讲：Hadoop工作原理、调度策略第六讲：Hadoop开发作业形式第七讲：CM下CDH4
nwheydnwyefs·2015-09-05 08:00

Storm实验 -- DRPC的使用

1.修改所有节点的storm.yaml配置文件，设置drpcserver [grid@hadoop6~]$vimstorm-0.9.4/conf/storm.yaml drpc.servers: -"hadoop4"2
张超·2015-05-05 00:00

Hadoop4 利用VMware搭建自己的hadoop集群

前言:前段时间自己学习如何部署伪分布式模式的hadoop环境，之前由于工作比较忙，学习的进度停滞了一段时间，所以今天抽出时间把最近学习的成果和大家分享一下。本文要介绍的是如何利用VMware搭建自己的hadoop的集群。如果大家想了解伪分布式的大家以及eclipse中的hadoop编程，可以参考我之前的三篇文章。1.在Linux环境中伪分布式部署hadoop(SSH免登陆)，运行WordCount
Sky_YiBai·2015-02-01 13:00

搭建Hadoop2.5.2集群

环境：三台CentOS6.6虚拟机，机器名分别为hadoop4、hadoop5、hadoop6，通过桥接连网，互相可以ping通，均安装好JDK1.7，关闭iptables防火墙，创建好新用户并配置好ssh
张超·2014-12-31 23:00

hadoop1.1.2分布式安装（完备版）

   0简介：一共5个节点，hadoop0(namenode,jobtracker),hadoop1(secondnamenode),剩下hadoop2,hadoop3,hadoop4为datanode
chengjianxiaoxue·2014-11-19 16:00

hadoop2.5.1集群搭建：（一）搭建手工切换ha的hdfs集群

availibility)的HDFS集群 ----------------------------- namenode：hadoop1和hadoop2 datanode：hadoop3、hadoop4
yehao0716·2014-11-01 11:00

Hive 0.11.0 远程模式搭建

安装计划hadoop1   192.168.100.171   (hadoop2.2.0namenode)hadoop3   192.168.100.173   (hadoop2.2.0datanode)hadoop4
book_mmicky·2014-05-13 15:00

大数据迁移(简单案例)(41 )

CDHhadoop的版本中,一个命令就能完成上面的大数据迁移的所有事情.例如:现有的机器:hadoop1(n1:namenode)hadoop2(d1:datanode)hadoop3(d2:datanode)hadoop4
肖鋭·2014-05-11 20:00

hadoop简要测试安装

版本：hadoop-0.20.2master：hadoop1slave：hadoop2，hadoop3，hadoop4 一.准备：  installssh   installrsync ① 保证每台机器可以互相登陆
hrui911·2012-07-17 17:40
上一页 1 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他