hadoop实战之伪分布式模式

本文地址:http://blog.csdn.net/kongxx/article/details/6891761

Hadoop可以在单节点上以所谓的伪分布式模式运行,此时每一个Hadoop守护进程都作为一个独立的Java进程运行,这种运行方式的配置和操作如下:

关于hadoop的安装和测试可以参考hadoop学习之安装与单机模式

这里仍假定${HADOOP_HOME}为位置是/data/fkong/hadoop-0.20.203.0

1. 修改hadoop配置

1.1 编辑${HADOOP_HOME}/conf/core-site.xml文件,内容修改如下:

1.2 编辑${HADOOP_HOME}/conf/hdfs-site.xml文件,内如修改如下:

1.3 编辑${HADOOP_HOME}/conf/mapred-site.xml文件,内如修改如下:

2. 设置linux上ssh是用户可以自动登录

3. 格式化一个新的分布式文件系统:

4. 执行hadoop

4.1 启动hadoop后台daemon

启动后可以通过以下w网页方式查看NameNode和JobTracker状态

4.2 复制文件到分布式文件系统上

4.3 运行测试

4.4 获取测试程序的执行结果

4.5 停止hadoop后台daemon











你可能感兴趣的:(hadoop)