Spark 在脚本中设置日志输出等级

在任务脚本中定义日志输出的等级,只输出WARN级别以上的日志

spark = SparkSession.builder.getOrCreate()
sc = spark.sparkContext
sc.setLogLevel("WARN")

你可能感兴趣的:(Spark 在脚本中设置日志输出等级)