随手记录—查看已停止的spark job日志

最近发现有些spark job自己停了,一部分是因为环境资源原因一部分是因为程序本身的问题
如何查看已经停止的spark job日志:
通过yarn application -list或在yarn resource manager中查找到application的id,然后

yarn logs -applicationId application_1535505348755_0001 > log1.log

你可能感兴趣的:(随手记录—查看已停止的spark job日志)