spark-sql手动动态指定控制台输出日志级别

转载来自:https://blog.csdn.net/xueba207/article/details/50436684/

搜了很多,还是这个靠谱,记录下

(1)首先配置好spark,hadoop,hive的权限,然后来到A用户,配置好环境变量

(2)把spark/conf/log4j.properties.template 复制到A用户家目录(改名为log4j.properties),修改:

为如下:

(3)启动spark-sql

spark-sql --conf "spark.driver.extraJavaOptions=-Dlog4j.configuration=file:///home/wkz/log4j.properties"

注意:file:///

(4)效果

spark-sql手动动态指定控制台输出日志级别_第1张图片

你可能感兴趣的:(大数据运维之spark日常)