TEZ安装试用

下载地址:http://apache.dataguru.cn/tez/0.7.0/
第一次使用maven编译 tez的时候到tez ui部分报错,google后发现有人遇到类似问题是因为maven版本的问题,
当时我使用的是最新的maven3.3,我尝试换到maven3.2.5,再编译后成功。
其他步骤参考:http://www.myexception.cn/open-source/1927193.html
hdfs dfs -mkdir /apps/
hdfs dfs -copyFromLocal /app/tezsrc/tez-dist/target/tez-0.7.0.tar.gz /apps/

我写了一个脚本用于在结点之间复制文件与文件夹
vi dist.sh

#this shell used to distribute file to slaves
filepath=$1
target=$2
for node in $(cat $HADOOP_HOME/etc/hadoop/slaves);
do
        echo "copy $filepath to $node:$target now ......"
        if [ ! -d $filepath ]; then
                scp  $filepath hadoop@$node:$target
        else
                scp -r $filepath hadoop@$node:$target
        fi
done;


使用方法:
sh dist.sh source target

可以在hive中配置使用tez。

你可能感兴趣的:(安装)