RHadoop

Flink安装及使用

/flink sudochown-Rhadoop:hadoop./flink 修改配置文件Flink对于本地模式是开
crazy_scott·2018-12-04 00:00

Kerberos 常用命令

如下是相关命令，请参考：进入kadminkadmin.local/kadmin创建数据库kdb5_utilcreate-rHADOOP.COM-s启动kdc服务servicekrb5kdcstart启动
阿東哥©·2018-09-20 12:00

Linux安装hadoop 2.9.1(伪分布式模式 快速安装体验Hadoop hdfs)

选定一个目录解压，命令：tar-zxvfhadoop-2.9.1.tar.gz这里建议把hadoop-2.9.1文件夹重命名为hadoop把Hadoop文件夹复制到/usr/local/下命令:cp-rhadoop
橘子博客·2018-08-30 15:09

分布式视频转码系统的设计与完成（二）--Hadoop集群上ffmpeg的配置

：http://www.ffmpeg.org/download.htm在master上配置ffmpeg在/usr文件下打开终端sudomkdirffmpeg在/usr文件下打开终端sudochown-Rhadoop
CUGToda·2018-07-25 10:31

Hadoop2.6.0 + 云centos +伪分布式 --->只谈部署

3.0.3玩不好，现将2.6.0tar.gz上传到/usr,chmod-Rhadoop:hadophadoop-2.6.0，rm掉3.0.32.在/etc/profile中配置java的环境配置,hadoop
wxbo1·2018-07-23 22:11

CentOS 7中创软连接和scp命令

ln-s/home/hadoop/apps/zookeeper-3.4.10/usr/local/zookeeper（2）修改zookeeper软链接属主为hadoop使用root用户操作chown-Rhadoop
灿若星辰丶·2018-07-16 13:17

centos7安装hbase2.0.1的方法(在hadoop2.7.6和jdk1.8上)

hadoop-2.7.6选择hbase2.0.1版本的时候，去官网查看支持的hadoop版本tar-zxvfhbase-2.0.1-bin.tar.gzmvhbase-2.0.1hbase3、chwon-Rhadoop
hsg77·2018-07-13 21:35

Spark Standalone 单机

sudomkdir-p/colony/spark//创建spark安装目录$sudotar-zxvfspark-2.1.2-bin-hadoop2.7.tgz-C/colony/spark/$sudochown-Rhadoop
BlackTangerine·2018-06-24 13:04

Hadoop - Hadoop部署

一、解压Hadoop1、解压Hadoop到/home/hadoop/software中tar-zxvfhadoop-2.8.1.tar.gzchown-Rhadoop:hadoo
正经黑天鹅·2018-05-20 22:33

pid文件不存在解决方法

修改hadoop集群及hbase集群的pid文件存放位置1在集群各个节点的/var目录下面创建一个文件夹：sudomkdir-p/var/hadoop/pids,记得更改这个文件夹的权限，chown-Rhadoop
Eather_Lian·2018-04-20 15:04

hadoop安装和SSH

hadoop安装：1、到官网下载hadoop-x.x.x.tar.gz，不要下成src的了，wget（http://网址）;2、tar-zxf源目录-C解压目录3、在local目录下赋权：chown-Rhadoop
PeixinYe·2018-04-13 16:38

hadoop namenode启动不了怎么办？

，可以通过以下方法进行排查解决：翻看日志，寻找错误提示，并进行内容的改进，最后进行重启原因一：权限问题#查看日志cd/usr/local/hadoop/logs#发现权限问题，更改文件权限chown-Rhadoop
lmseo5hy·2018-01-04 14:47

从单节点的hadoop扩展到多节点。

搞定之后，利用CRT来进行从主节点无密登陆其他机器的操作命令ssh-copy-idhadoop-server-01登陆成功之后用远程传输，来把安装配置好的hadoop传输到其他节点命令scp-rhadoop
Yugi_2000·2017-06-15 14:00

Ubuntu下安装Java，安装Hadoop以及安装RHadoop

一、安装Java第一步：去Oracle官网下载Java，安装系统32位和64位要求下载相应版本。第二步：将下载下来的java进行解压，为方便将下载下来的java版本放在Downloads目录，推荐安装英文版Ubuntu系统，能避免很多bug。tar-zxvfjdk1.8.0_131第三步：配置java环境变量sudogedit/etc/profile第四步：在文件下方输入#JavaexportJA
Blackrosetian·2017-06-03 21:00

Hadoop大数据平台入门——第一个小程序WordCount

chown-Rhadoop:hadoophadoop文件夹就可以了。配置完成之后，我们我们还需要什么？1.需要在HDFS中保存有文件。2.需要一个程序jar包，
a60782885·2017-05-07 10:30

不同linux电脑(集群节点)上文件的拷贝

不同linux电脑上文件的拷贝从hadoop@datanode3上拷文件到lu@datanode1上:在lu@datanode1上输入命令:scp-rhadoop@datanode3:~/zkf/taxi
zhuimengforever·2017-04-05 13:36

Hive Join的几种方式

下面实验几种hive中常用到的join操作首先创建两个文件用于导入表中hadoop@master:~/17$catdata11,a2,b3,c4,d5,e8,u9,rhadoop@master:~/17
mustbesomebody·2017-03-18 15:35

编写完整spark程序（scala）

Spark中没有自带sbt，自行下载后安装在/usr/local/sbt中：sudomkdir/usr/local/sbtsudochown-Rhadoop/usr/local/sbt#此处的hadoop
hz82114280·2017-01-10 22:24

RHadoop实践系列之一:Hadoop环境搭建

第一篇Hadoop环境搭建部分，分为3个章节。Haddop环境准备Hadoop完全分步式集群搭建HDFS测试每一章节，都会分为”文字说明部分”和”代码部分”，保持文字说明与代码的连贯性。Haddop环境准备文字说明部分：首先环境准备，这里我选择了LinuxUbuntu操作系统12.04的64位版本，大家可以根据自己的使用习惯选择顺手的Linux。但JDK一定要用OracleSUN官方的版本，请从官
happyduoduo1·2016-07-01 16:00

完整配置hadoop的环境变量

修改hadoop解压文件名称：mvhadoop-2.4.1hadoop将hadoop安装目录的权限赋值为hadoop用户：chown-Rhadoop:hadoophadoop创建Hadoop数据目录，并赋予权限
liu145365·2016-05-24 20:45

Docker玩转Rhadoop

原文地址：http://wanghaisheng.github.io/2014/12/20/run-rhadoop-on-docker-cn/Docker玩转RHadoop网络上已经有了太多的RHadoop
jiabiao1602·2016-04-19 19:47

Spark 1.6.1分布式集群环境搭建

sudochown-Rhadoop:hadoopscala-2.11.8(3)修改环境变量文件.
JackieYeah·2016-04-14 22:00

Hive安装及使用攻略

hadoop的环境，请参考：让Hadoop跑在云端系列文章，RHadoop实践系列之一:Hadoop环境搭建下载:hive-0.9.0.tar.gz解压到：/hom
u010666884·2016-04-07 18:00

Hadoop常用笔记shell命令

文件名查看文件cdxxx/进入当前目录的xxx下shutdown-hnow关机ifconfig查看IP等相关信息Ctrl+Alt+F2切换图像/命令行exit切换用户 su切换rootclear清屏chown-Rhadoop
q383700092·2016-03-31 09:00

大数据环境搭建-之-hadoop 2.x分布式部署-集群配置

1、下载hadoop并解压2、为hadoop文件分配角色   chown-Rhadoop:hadoophadoop            组名：角色名  文件名3、ls-l查看详细信息 角色分配是否成功
1121827·2016-03-07 23:14

06_Hadoop配置伪分布式模式详解

配置vim/etc/sudoers文件，加入hadoopALL=(root)NOPASSWD:ALL    配置/opt文件夹的属主将/opt文件夹的属于由root:root改为hadoopsudo-Rhadoop
YouxiBug·2016-03-04 15:00

剖析阿里巴巴的云梯YARN集群技术使用

云梯YARN集群上既支持MapReduce，也支持Spark、MPI、RHive、RHadoop等计算模型。本文将详细介绍云梯YARN集群的技术实现与发展状况。MRv1与YA
沈洪·2016-01-30 10:26

zookeeper安装

opt下面root用户解压[root@masteropt]$tar-zxvfzookeeper-3.4.7.tar.gz-C/opt/app/修改用户及属组[root@masteropt]#chown-Rhadoop
八戒_o·2016-01-05 23:00

RHadoop和CDH整合实例（三）- RHive

五、RHive的安装及测试RHive依赖于Rserve，所有首先需要安装Rserve(在各个namenode上)，接下来在所有节点上启动Rserve：>sudoR >install.packages("Rserve") >q()>Rserve--RS-conf/usr/lib64/R/Rserv.conf#启动Rserve>sudonetstat-nltp|grepRserve#查看Rserv
cassie_huang89·2015-12-21 23:00

RHadoop和CDH整合实例（二）- rmr2及RJDBC

三、rmr2的安装和测试    rmr2是map/reduce程序执行的核心部分，需要依赖hadoop-streaming-XXX.jar。rmr2库需要依赖bitops和caTools两个库，而这两个库都不能直接通过R的install.packages()获得，需要先去cran上下载再安装，同样的，rmr2可以在https://github.com/RevolutionAnalytics/rmr
cassie_huang89·2015-12-21 23:00

RHadoop和CDH整合实例（一）- R及rhdfs

   最近需要在hadoop上集成R语言环境进行统计分析任务，考虑用到RHadoop。
cassie_huang89·2015-12-21 23:00

搭建hadoop伪分布

hadoop.f.dajiangtai.com/hadoop2.2/hadoop-2.2.0-x64.tar.gz0、创建用户 useradd�Cm hadoop1、下载hadoop并解压2、为hadoop文件分配角色   chown-Rhadoop
1121827·2015-12-14 22:01

搭建hadoop伪分布

hadoop.f.dajiangtai.com/hadoop2.2/hadoop-2.2.0-x64.tar.gz0、创建用户useradd–mhadoop1、下载hadoop并解压2、为hadoop文件分配角色chown-Rhadoop
1121827·2015-12-14 22:01

RHadoop计算平台搭建

 原创文章，转载请注明： 转载自www.cnblogs.com/tovin/p/3824554.html   本文基于CentOS6.4系统介绍基于RHadoop平台的搭建，Hadoop
·2015-11-13 14:06

RHadoop实践系列之一:Hadoop环境搭建

RHadoop实践系列之一:Hadoop环境搭建 RHadoop实践系列文章，包含了R语言与Hadoop结合进行海量数据分析。
·2015-11-12 19:13

RHadoop实践系列之二：RHadoop安装与使用

RHadoop实践系列之二：RHadoop安装与使用 RHadoop实践系列文章，包含了R语言与Hadoop结合进行海量数据分析。
·2015-11-12 19:13

配置RHadoop与运行WordCount例子

1、安装R语言环境 su -c 'rpm -Uvh http://download.fedoraproject.org/pub/epel/6/i386/epel-release-6-8.noarch.rpm' su -c 'yum install foo' yum list R-\* yum install R 2、安装RStudio Desktop和Server Desk
·2015-11-11 12:04

Nginx反向代理Websocket

nodejs-websocket-nginx/#comment-2998     AngularJS体验式编程系列文章 从零开始nodejs系列文章 Hadoop家族系列文章 RHadoop
·2015-11-11 05:37

Install RHadoop with Hadoop 2.2 – Red Hat Linux

Prerequisite Hadoop 2.2 has been installed (and the below installation steps should be applied on each of Hadoop node)   Step 1. Install R (by yum) [hadoop@c0046220 yum.repos.d]$ sudo yum
·2015-11-11 03:24

RHadoop教程翻译系列 _Mapreduce(1)_第一个Mapreduce任务

如果单从概念上来说，Mapreduce和R中的函数lapply, tapply并无差别，它们都是把元素转化成列，然后计算索引（Mapreduce中的键），最后合并成一个定义好的组合。首先，让我们看一个简单的lappy的例子。   small.ints = 1:1000 sapply(small.ints, function(x) x^2)   这个例子比较简单，只
·2015-11-09 12:28

在Cloudera Hadoop CDH上安装R及RHadoop（rhdfs、rmr2、rhbase、RHive）

RHadoop是由Revolution Analytics发起的一个开源项目，它可以将统计语言R与Hadoop结合起来。
·2015-11-06 08:41

hadoop yarn 配置

步骤一：上传hadoop-2.2.0.tar.gz并解压到/home/hadoop/yarn目录，此时在yarn目录中解压出hadoop-2.2.0目录sudochown-Rhadoop:hadoophadoop
guotong1988·2015-07-29 17:00

R语言与Hadoop和Hbase的联合使用

注：Hadoop环境及RHadoop的环境，请查看同系列前二篇文章，此文将不再介绍。1.环境准备及HBase安装文字说明部分：首先环境准备，这里我选择了LinuxUbuntu操作系统12.
openthings·2015-07-02 15:00

R语言为Hadoop注入统计血脉

RHadoop实践系列文章，包含了R语言与Hadoop结合进行海量数据分析。Hadoop主要用来存储海量数据，R语言完成MapReduce算法，用来替代Java的MapReduce实现。
sheshou2·2015-04-24 11:00

hadoop完全分布式安装配置

http://yntmdr.blog.51cto.com/3829621/1631908二、安装jdk三、解压hadoop压缩包tar-xfhadoop-2.6.0.tar.gz修改拥有者chown-Rhadoop
矩阵·2015-04-21 11:24

hadoop完全分布式安装配置

http://yntmdr.blog.51cto.com/3829621/1631908二、安装jdk三、解压hadoop压缩包tar-xfhadoop-2.7.1.tar.gz修改拥有者chown-Rhadoop
yntmdr·2015-04-13 18:22

Rhadoop安装

1.ubuntu，hadoop，R，jdk安装好2.下载Rhadoop项目的的三个包，rmr，hdfs，rHBase存放到Downloads/R。
cdsj·2015-03-12 10:00

RHadoop的技术性文章

前言写过几篇关于RHadoop的技术性文章，都是从统计的角度，介绍如何让R语言利用Hadoop处理大数据。今天决定反过来，从计算机开发人员的角度，介绍如何让Hadoop结合R语言，能做统计分析的事情。
danielinbiti·2015-02-10 13:00

RHadoop搭建(HBase)

*实验环境：**************************************************************************************hadoop集群（virtualBox虚拟机，CentOS6.4）hadoop1192.168.100.171（hadoopmaster、secondaryname、zookeeper、hbaseHMaster）ha
哭你吃完·2014-11-14 09:00

RHadoop搭建(HDFS+MapReduce)

*实验环境：*********************************************************************************hadoop集群（virtualBox虚拟机，CentOS6.4）hadoop1192.168.100.171（hadoopmaster、secondaryname、zookeeper、hbaseHMaster）hadoop2
哭你吃完·2014-11-14 09:00
上一页 1 2 3 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他