Hadoop集群硬件配置

【小集群】---少于20个工作节点的集群

双路四核 2.6GHz CPU*1

DDR3内存 24G

双千兆以太网网卡

SAS驱动器控制器

SATA II驱动器的JBOD配置*2


【中等规模集群】---300个节点

内存 48G


【大型集群】

内存 96G


【NameNode】

每维护一百万文件块需要消耗1GB内存

全部元数据必须都能放在内存,所以磁盘所需空间不超过内存大小


【SecondaryNameNode】

硬件需求与NameNode相同


【Jobtracker】

在内存里保存了最近100个(默认配置)运行在集群上的作业的元数据信息



你可能感兴趣的:(hadoop,硬件配置)