Prometheus+Grafana监控应用程序(process-exporter)

        Prometheus是一套开源的监控&报警&时间序列数据库的组合，Prometheus监控服务器的基础资源(如：内存、CPU、网络等资源)，也可以监控Kafka、MySQL、EMQ等消息中间件、日志监控，当然也可以监控某个进程(应用程序)或某几个进程(进程组)。

本文主要通过process-exporter 对进程进行监控，并介绍Process-exporter的使用说明。

Prometheus+Grafana的安装配置本文就不在累述，可参考： https://blog.csdn.net/skh2015java/article/details/102572363

process-exporter使用

        源码地址：https://github.com/ncabatoff/process-exporter

        下载地址：https://github.com/ncabatoff/process-exporter/releases/tag/v0.5.0

   process-exporter可以使用命令行参数也可以指定配置文件启动

  命令行常用的参数：

Usage of process-exporter:
  -children
        if a proc is tracked, track with it any children that aren't part of their own group (default true)
  -config.path string
        path to YAML config file
  -debug
        log debugging information to stdout
  -man
        print manual
  -namemapping string
        comma-separated list, alternating process name and capturing regex to apply to cmdline
  -once-to-stdout-delay duration
        Don't bind, just wait this much time, print the metrics once to stdout, and exit
  -procfs string
        path to read proc data from (default "/proc")
  -procnames string
        comma-separated list of process names to monitor
  -recheck
        recheck process names on each scrape
  -threads
        report on per-threadname metrics as well (default true)
  -version
        print version information and exit
  -web.listen-address string
        Address on which to expose metrics and web interface. (default ":9256")
  -web.telemetry-path string
        Path under which to expose metrics. (default "/metrics")

  

配置文件：

 选择要监视的进程并将它的分组，提供命令行参数或者使用YAML配置文件。

 

配置模板如下：

process_names:
  - matcher1
  - matcher2
  ...
  - matcherN

例如：监控所有的服务进程

 process_names:
  - name: "{{.Comm}}"
    cmdline:
    - '.+'

  

配置模板选项如下：

{{.Comm}} 包含原始可执行文件的basename，/proc//stat 中的换句话说，2nd 字段

{{.ExeBase}} 包含可执行文件的basename

{{.ExeFull}} 包含可执行文件的完全限定路径

{{.Username}} 包含有效用户的用户名

{{.Matches}} 映射包含应用命令行tlb所产生的所有匹配项

       process_names中的每个项目都必须包含一个或多个选择器(comm，exe或cmdline), 如果存在多个选择器，则它们必须全部匹配。 每个选择器都是一个字符串列表，用于与进程的comm，argv [0]匹配；对于cmdline，则是一个适用于命令行的正则表达式。 cmdline regexp使用Go语法。

     对于comm和exe，字符串列表是一个OR，这意味着与任何字符串匹配的任何进程都将添加到该项目的组中。

     对于cmdline，正则表达式列表为AND，表示它们都必须匹配。 正则表达式中的任何捕获组都必须使用？P 选项为捕获分配一个名称，该名称用于填充.Matches。

 例如：> ps -ef | grep redis  

 redis 771 1 0 Jun05 ? 00:45:49 /usr/bin/redis-server *:6379

{{.Comm}}	groupname="redis-server"	exe或者sh文件名称
{{.ExeBase}}	groupname="redis-server *:6379"	/
{{.ExeFull}}	groupname="/usr/bin/redis-server *:6379"	ps中的进程完成信息
{{.Username}}	groupname="redis"	使用进程所属的用户进行分组
{{.Matches}}	groupname="map[:redis]"	表示配置到关键字“redis”

 

 

 

 

 

 

安装使用process-exporter

  下载

wget https://github.com/ncabatoff/process-exporter/releases/download/v0.5.0/process-exporter-0.5.0.linux-amd64.tar.gz

  解压

tar -zxvf  process-exporter-0.5.0.linux-amd64.tar.gz

 创建配置文件process-conf.yaml

    touch process-conf.yaml

    并编写配置信息：(如监控进程名为test程序)

process_names:
  - name: "{{.Matches}}"
    cmdline:
    - 'test'

   后台启动：并指定配置文件process-conf.yaml

 nohup yourPath/process-exporter  -config.path process-conf.yaml > yourLogPath/ process-exporter.stdout 2>&1 &

   process-exporter默认会监听9256端口

 

    Prometheus配置文件中添加，并重启

- job_name: 'process'
    static_configs:
    - targets: ['localhost:9256']

    curl  localhost:9256/metrics |grep test

   可以看到test进程相关监控的指标

 

Grafana图表显示：

process-exporter对应的dashboard为：https://grafana.com/grafana/dashboards/249

 

Import即可

 

最终效果图如下：

 

可以看到可以监控 进程的数量，cpu，读写速率，所占内存。

 

感谢：

https://blog.csdn.net/qq_25934401/article/details/86512657

https://www.cnblogs.com/huandada/p/10431667.html