简析Hadoop的三种运行模式

一、本地独立模式(单机模式)

       本地独立模式不进行任何配置,是Hadoop的默认工作模式。在这种模式下,Hadoop会完全运行在本地,Hadoop的所有组件,如NameNode、DataNode、ResourceManager、NodeManager等,都运行在同一个Java进程中。不需要与其他节点交互,不使用HDFS,也不加载任何Hadoop的守护进程。该模式主要用于开发调试MapReduce程序的。

二、伪分布模式

       伪分布模式下,Hadoop的各个组件都拥有一个单独的Java虚拟机,它们之间通过网络套接字通信。这种模式可以有效的产生一个具有完整功能的微型集群。

三、全分布模式

      全分布模式下,Hadoop分布在多台主机上,其中一些是通用的工作机,其余的是组件的专用机,如NameNode、ResourceManager。其实最理想的情况下是将NameNode、ResourceManager、SecondaryNameNode分开,在单独的专用主机上运行。但是这势必会增加成本,所以在集群较小的情况下,可以将这三个进程放在一台主机上。

你可能感兴趣的:(hadoop,hadoop,mapreduce)