HDP 2.2 ( Hadoop 2.6 ) 集群的内存参数配置和参数调优 (Yarn/MapReduce2)
近期在根据集群上的各节点的物理机配置对集群的内存参数进行调整。因此较系统的学习了一下hadoop里对资源调配的各组件的相关参数的含义。作为示例的配置集群版本是2.6,hortonworks2.2.首先要理解,hadoop中yarn作为资源管理器,起到一个底层的控制调配运算资源的作用。yarn中资源的最小单位是container。一个container可以近似认为是一个运行的jvm。一个yarn集群