Clickhouse学习笔记(14)—— Clickhouse监控

ClickHouse 运行时会将一些个自身的运行状态记录到众多系统表中,如下所示:

Clickhouse学习笔记(14)—— Clickhouse监控_第1张图片

为了直观方便地监控ck的运行情况,使用Prometheus + Grafana 的组合来进行监控

Prometheus 负责收集各类系统的运行指标;Grafana 负责可视化

 

Prometheus&Grafana 的安装

Prometheus安装

下载地址:Download | Prometheus

下载完成后上传安装包并解压:(安装版本:2.26.0)

tar -zxvf prometheus-2.26.0.linux-amd64.tar.gz -C /opt/module

接下来修改配置文件:

Clickhouse学习笔记(14)—— Clickhouse监控_第2张图片

在 scrape_configs 配置项下添加配置:

#添加 ClickHouse 监控配置
 - job_name: clickhouse-hadoop104
 static_configs:
 - targets: ['hadoop104:9363']

1、global 配置块:控制 Prometheus 服务器的全局配置

        ➢ scrape_interval:配置拉取数据的时间间隔,默认为 1 分钟。

        ➢ evaluation_interval:规则验证(生成 alert)的时间间隔,默认为 1 分钟。

2、rule_files 配置块:规则配置文件

3、scrape_configs 配置块:配置采集目标相关, prometheus 监视的目标。Prometheus 自身的运行信息可以通过 HTTP 访问,所以 Prometheus 可以监控自己的运行数据

        ➢ job_name:监控作业的名称

        ➢ static_configs:表示静态目标配置,就是固定从某个 target 拉取数据

        ➢ targets :指定监控的目标 ,其实就是从哪儿拉取数据 。

在本示例中,Prometheus 会从http://hadoop104:9090/metrics 上拉取数据。

配置完成后启动: nohup /opt/module/prometheus-2.26.0/prometheus --config.file=/opt/module/prometheus-2.26.0/prometheus.yml > /opt/module/prometheus-2.26.0/prometheus.log 2>&1 &

启动完成通过http://hadoop104:9090/打开web端

在Status-Targets中可以看到配置的采集目标:

Clickhouse学习笔记(14)—— Clickhouse监控_第3张图片

Grafana 安装

下载路径:Download Grafana | Grafana Labs

下载完成后上传至服务器并解压:(版本:7.5.2)

tar -zxvf grafana-7.5.2.linux-amd64.tar.gz -C /opt/module/

解压完成后无需配置,直接启动即可:

nohup /opt/module/grafana-7.5.2/bin/grafana-server web > /opt/module/grafana-7.5.2/grafana.log 2>&1 &

启动成功打开web端:http://hadoop104:3000

默认用户名和密码都是admin,第一次登录可以修改密码,也可跳过

Clickhouse学习笔记(14)—— Clickhouse监控_第4张图片

ClickHouse 配置

修改/etc/clickhouse-server/config.xml

Clickhouse学习笔记(14)—— Clickhouse监控_第5张图片

打开注释即可

注意:endpoint中配置的是clickhouse监控数据的路径

port要与Prometheus配置文件中的port统一:

配置完成后重启服务,然后打开web端:http://hadoop104:9363/metrics

可以看到以下供Prometheus采集用的数据:

Clickhouse学习笔记(14)—— Clickhouse监控_第6张图片

Grafana 集成 Prometheus

添加数据源

Clickhouse学习笔记(14)—— Clickhouse监控_第7张图片

选择Prometheus数据源,然后进行配置

Clickhouse学习笔记(14)—— Clickhouse监控_第8张图片

配置完成后保存并返回即可

添加监控

通过https://grafana.com/dashboards来下载模板

Clickhouse学习笔记(14)—— Clickhouse监控_第9张图片

下载好json文件后,可以导入到自己的面板中

Clickhouse学习笔记(14)—— Clickhouse监控_第10张图片

Clickhouse学习笔记(14)—— Clickhouse监控_第11张图片

你可能感兴趣的:(数据库,大数据,clickhouse,学习,笔记,数据库,大数据)