生成shell脚本删除hadoop中所有Pending的Job

需求:

由于job在提交的时候没有指定pool name导致了很多Pending的job,那么这些job需要批量kill掉

思路:

利用hadoop job -kill jobid,生成shell脚本批量删除。

实现:

生成shell:

hadoop job -list|grep 'NA'|awk '{print "hadoop job -kill " $1}'>killbatch.sh

执行shell:

./killbatch.sh

你可能感兴趣的:(shell脚本)