深入理解 Hadoop

hdfs

启动 hadoop 集群模式时,在浏览器端输入hadoop0:50070可进入 hadoop 的 namenode 节点,点击【Browse the filesystem】进入 hdfs(hadoop 文件系统),学会查看文件系统为每一个文件或文件夹提供的信息:



每一列分别表示的信息为:Name:文件名,Type:文件类型(file、dir)、Size:文件大小(只有file才有大小)、副本数(也是只有file才有),Block Size(分块大小,只有文件才有)、Modification Time(修改时间)、Permission(权限)、Owner(所有者)、所在的组;

Hadoop 中的远程过程调用 RPC

hadoop 的伪分布式启动下,我们使用 JPS 查看当前运行的 Java 进程,如果启动成功,也就意味着启动如下的 Java 进程:


深入理解 Hadoop_第1张图片

NameNode、SecondaryNameNode、DataNode、JobTracker、TaskTracker,这些本质上意味都是 Java 进程,不仅如此,它们也是 RPC 的服务器端,它们的内部代码也会有RPC.getServer()。更多关于远程过程调用的知识,请参考 RPC(远程过程调用)原理及应用 。

你可能感兴趣的:(深入理解 Hadoop)