【2019-07-31】jj场景下日志收集办法

运行完成的任务日志收集

运行结束的日志会自动归集到hdfs日志目录：/tmp/logs/*/logs/appid路径下，需要使用hdfs客户端进行日志收集。

1. 步骤一：
   首先在yarn上找到停止的任务的appid（可以），格式为applications_xxxxx_xxxx，状态为Finished
2. 步骤二：进入大数据客户端安装目录
   cd /opt/hadoopclient
3. 步骤三：加载客户端环境变量
   source bigdata_env
4. 步骤四：认证用户admin
   kinit admin
5. 步骤五：使用hdfs获取日志，存放到当前路径。（applications_xxxxx_xxxx，是我们首先获取到任务appid）
   hdfs dfs -get /tmp/logs/*/logs/applications_xxxxx_xxxx .