Hive 有哪些地方可以进行压缩设置呢？

前言

在Hive作业执行过程中，job执行速度更多的是局限于I/O，而不是受制于CPU。如果是这样，通过文件压缩可以提高作业性能。然而，如果作业的执行速度受限于CPU的性能，那么压缩文件可能就不合适，因为文件的压缩和解压会比较耗时。当然确定适合集群最优压缩方式可以通过实验测试，然后衡量结果。

Map/Reduce输出压缩

在查询分析过程中，Map/Reduce的输出可以对任务输出进行压缩，既可以减少文件存储空间，又可以减少网络传输的数据量，加快数据在网络不同节点之间的传输速度，从而获得性能提升。
压缩设置如下：

set hive.exec.compress.output=true;
set mapred.output.compression.codec