十、handoop平台搭建

1.下载handoop软件,通过ftp传到ubuntu
2.将handoop解压缩至/usr/local
tar xzvf hadoop 2.7.2.tar.gz -C /usr/local
3.将解压完的hadoop改名为hadoop
mv hadoop*** hadoop
4.配置环境变量
vim /etc/profile
在JAVA_HOME下一行加如下内容
export HADOOP_HOME=/usr/local/hadoop
在PATH后加如下内容(冒号分割)
:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
5.使环境变量生效
source /etc/profile
6.继续配置修改hadoop的运行环境
vim /usr/local/hadoop/etc/hadoop/hadoop-env.sh
修改以下内容
export JAVA_HOME=/usr/local/jdk
7.测试hadoop
在/usr/local/hadoop下新建目录input
mkdir /usr/local/hadoop/input
进入input目录,建立测试文件
vim info.txt
进入该文件,输入内容,保存退出(也可直接在input下输入命令 echo 后面跟文本内容 >info.txt)
回到input的上层目录
cd ..
输入如下命令
hadoop jar share/hadoop/mapreduce/sources/hadoop-mapreduce-examples-2.7.2-sources.jar org.apache.hadoop.examples.WordCount input output
进入output目录,输入cat part-r-00000命令查看结果

你可能感兴趣的:(十、handoop平台搭建)