172、Spark运维管理进阶之作业监控Spark Metrics系统以及自定义Metrics Sink
Spark有一套可配置的metrics系统,是基于CodaHaleMetrics类库实现的。该metrics系统允许用户将Spark的metrics统计指标上报到多种目标源(sink)中,包括http,jmx和csv文件。这个metrics系统是通过一个配置文件进行配置的,在$SPARK_HOME目录的conf目录下,用一个metrics.properties文件来配置。可以通过在spark-de