一,
ubuntu-14.04.3-desktop-amd64(32位的总是报不能识别系统的jvm等错误)
至少1G内存
相关链接
[url]http://www.tuicool.com/articles/bmeUneM[/url]
二,
安装JDK [url]http://fulndon.iteye.com/blog/2276974[/url]
安装ssh和无密码登录
[url]http://blog.csdn.net/hackerwin7/article/details/28109073[/url]
使用shell下载
wget http://mirrors.hust.edu.cn/apache/hadoop/core/stable/hadoop-2.7.1.tar.gz
tar -zxvf hadoop-2.7.1.tar.gz
三,对hadoop2.7.1/etc/hadoop下的相关配置文件进行配置
[color=red]一 core-site.xml [/color]
hadoop.tmp.dir
file:/home/sijiu/program/hadoop/tmp
Abase for other temporary directories.
fs.defaultFS
hdfs://localhost:9000
[color=red]二 mapred-site.xml.template[/color]
mapred.job.tracker
localhost:9001
[color=red]三 hdfs-site.xml[/color]
dfs.replication
1
dfs.namenode.name.dir
file:/home/sijiu/program/hadoop/tmp/dfs/name
dfs.datanode.data.dir
file:/home/sijiu/program/hadoop/tmp/dfs/data
三, 运行
1.初始化HDFS系统
在hadop2.7.1目录下使用如下命令:
bin/hdfs namenode -format
2.开启 NameNode 和 DataNode 守护进程
使用如下命令开启:
sbin/start-dfs.sh,
[color=red]若启动时报找不到JAVA_HOME的错误,将JAVA_HOME的真实路径替换掉hadoop-env.sh中的${JAVA_HOME}[/color]
3.查看进程信息
使用如下命令查看进程信息
jps,正常可以看到namenode,datanode,secondarynamenode,jps四个进程
[color=red]遇到的问题:查看日志启动正常,但看到的进程不全,解决:重新格式化hdfs,切换到root用户(我曾用root用户启动过)结束hadoop运行[/color]
44.查看Web UI
在浏览器中输入 http://机器ip:50070