Hadoop中的5个守护进程

 

要想检查守护进程是否正在运行，可以使用 jps 命令（这是用于 JVM 进程的 ps 实用程序）。

这个命令列出 5 个守护进程及其进程标识符。

namenode 是 Hadoop 中的主服务器，它管理文件系统名称空间和对集群中存储的文件的访问。

secondary namenode，它不是 namenode 的冗余守护进程，而是提供周期检查点和清理任务。

在每个 Hadoop 集群中可以找到一个 namenode 和一个 secondary namenode。

datanode 管理连接到节点的存储（一个集群中可以有多个节点）。每个存储数据的节点运行一个 datanode 守护进程。

每个集群有一个 jobtracker，它负责调度 datanode 上的工作。

每个 datanode 有一个 tasktracker，它们执行实际工作。

jobtracker 和 tasktracker 采用主-从形式，jobtracker 跨 datanode 分发工作，而 tasktracker 执行任务。

jobtracker 还检查请求的工作，如果一个 datanode 由于某种原因失败，jobtracker 会重新调度以前的任务。