通过Grafana进行监控报警

加入到QQ群：839421316中进行讨论。

Grafana在版本4.0中加入了报警功能！但是在开源版本在某一些功能上会有一些限制和约束。

Grafana可以通过多种方式接收报警信息，如email,Slack,PagerDuty,Telegram和webhook等。在这篇文章中，我们只测试使用email来发送报警信息。需要注意的是，如果配置邮件报警，需要在Grafana的配置文件中配置SMTP的相关信息。如果使用的Docker安装，则需要修改镜像。也可以直接修改当前运行的Docker容器。获取容器ID可以通过 “# docker ps” 命令。 当获取到容器ID后，通过以下命令进入到容器中：

# docker exec -it CONTAINER_ID /bin/bash

在进入终端后，可以查看到配置文件/etc/grafana/grafana.ini。在这个配置文件中，SMTP的配置大概如下所示：

[smtp]
enabled = true
host = Servername:port
user = "<>"
password = "XXXXYYYYY"
;cert_file =
;key_file =
skip_verify = true
from_address = "[email protected]"
from_name = Grafana

[emails]
welcome_email_on_sign_up = false
templates_pattern = emails/*.html

按照上面的配置完成后，需要重新启动容器让配置生效：

# docker restart grafana_containerID

重启完容器后，进入到grafana 的web界面，在Grafana 图标的下拉列表中，选择Alerting进入报警配置面板。

以下为报警配置页面：

如果需要多个邮箱接收报警信息，每个邮箱之间通过“;”进行分隔。

配置完成后，点击测试“Send Test"按钮测试邮件发送。
如果配置是正确的，可以收到类似以下的邮件。

以上，已经配置好Grafana,并且可以接收到测试的邮件。如果没有收到邮件，则需要检查SMTP的配置文件是否正确。
接下来，需要配置针对某一个指标进行报警。进入到面板，打开需要报警的监控项。进入到编辑页面，选择Alert tab。选择"Create Alert"。 在"Alert Config" 中，可以修改报警检查频率，触发条件等。