hadoop如何找参数,并进行配置

1 hadoop节点说明

  1. 先说明下hadoop启动后的几个进程说明(后面有案例配置secondary namenode
    namenode,简写nn 名称节点,这个是老大
    datanode,简写dn,数据节点,这个是小弟,真正干活的
    secondary namenode,简写snn,第二名称节点,老二,如果老大挂了,老二会顶上去hadoop如何找参数,并进行配置_第1张图片

2 如何找参数

1.当我们要对hadoop进行配置时,我们怎么知道什么参数应该配置到哪个文件里呢?
第一步,打开官网,http://hadoop.apache.org,然后点击getting started
hadoop如何找参数,并进行配置_第2张图片
2.往下滑动,我们会看到左侧有个Configuration下面有些.xml文件
hadoop如何找参数,并进行配置_第3张图片
3.点击其中的core-default.xml,官网都给我们写的很清楚了,根据自己的需求进行配置即刻
hadoop如何找参数,并进行配置_第4张图片
4.可能又有小伙伴问,那么我怎么知道这些name和value应该配置到hadoop哪个配置文件里呢,我们看下面的图

所以,从上面的图,我们可以清晰的看出对应关系,下面通过案例演示一下

3 案例演示

下面我们要对secondary namenode的端口号进行修改,我们也不清楚secondary namenode的端口号配置应该在哪个文件里配置,那我们就先到core-default.xml里搜索下,搜索条件为secondary,因为我们是要修改第二节点的端口

在这里插入图片描述
从上面图可以看出,没有结果,那我们再点到hdfs-default.xml连接去搜索看看
hadoop如何找参数,并进行配置_第5张图片
从上图可以看到,我们在hdfs-default.xml地址下,找到了,默认端口为50090,我们看看默认端口是不是50090
hadoop如何找参数,并进行配置_第6张图片
下面我们先把hadoop先停止

sbin/stop-dfs.sh

然后编辑hdfs-site.xml
下图中为何配置成hadoop001,可以看我这个文章:https://blog.csdn.net/u010452388/article/details/97632518
hadoop如何找参数,并进行配置_第7张图片
重新启动hadoop
hadoop如何找参数,并进行配置_第8张图片
重新查看secondary namenode的端口号
hadoop如何找参数,并进行配置_第9张图片
从上图可以看出,我们已经修改secondary namenode的端口号了

你可能感兴趣的:(Hadoop)