hive优化

hive优化总结

 1.当hive执行join内存溢出时，可以修改hive的配置文件hive-site.xml，增大内存，如下：mapred.child.java.opts-Xmx1024m2.hive默认建表时的路径也可以在hive-site.xml里配置，如下:hive.metastore.warehouse.dirvalue>/user/hive/warehousedescription>locationof
jiedushi·2011-09-22 16:00

hive优化

Hive针对不同的查询进行了优化，优化可以通过配置进行控制，本文将介绍部分优化的策略以及优化控制选项。列裁剪（ColumnPruning）在读数据的时候，只读取查询中需要用到的列，而忽略其他列。例如，对于查询：SELECTa,bFROMTWHEREeB.a 简单总结一下，mapjoin的使用场景：1.关联操作中有一张表非常小2.不等值的链接操作GroupByMap端部分聚合：并不是所有的聚合操作都
085567·2011-03-16 15:00
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他