容器化 | 构建 RadonDB MySQL 集群监控平台

上一篇文章我们演示了如何《在 S3 备份恢复 RadonDB MySQL 集群数据》，本文将演示在 KubeSphere[1] 中使用 Prometheus[2] + Grafana[3] 构建 MySQL 监控平台，开启所需监控指标。

背景

Prometheus 基于文本的暴露格式，已经成为云原生监控领域事实上的标准格式。

RadonDB MySQL 监控引擎基于 Prometheus MySQLd Exporter[5] 定义。通过 mysqld-exporter 抓取 RadonDB MySQL 服务指标，再通过接入第三方应用平台实现监控指标可视化。

准备工作

已准备可用 Kubernetes 或 KubeSphere 集群
已部署 RadonDB MySQL 集群《部署文档》
RadonDB MySQL Kubernetes 版本 2.1.0+

部署步骤

步骤 1: 配置 serviceMonitor

serviceMonitor 开启后将自动绑定 mysqld_exporter 与 Prometheus。

serviceMonitor 参数包含如下字段：

serviceMonitor:
  enabled: true
  ## Additional labels for the serviceMonitor. Useful if you have multiple prometheus operators running to select only specific ServiceMonitors
  # additionalLabels:
  #   prometheus: prom-internal
  interval: 10s
  scrapeTimeout: 3s
  # jobLabel:
  # targetLabels:
  # podTargetLabels:
  namespaceSelector:
    any: true
  selector:
    matchLabels:
      app.kubernetes.io/managed-by: mysql.radondb.com
      app.kubernetes.io/name: mysql

您可以在 charts/mysql-operator/values.yaml 文件中配置 serviceMonitor。

新部署 Operator 时， serviceMonitor.enabled 默认为 true，表示默认开启。
已部署 Operator 2.1.0 以下版本的集群，需重新部署 Operator。

步骤 2: 配置 metricsOpts

metricsOpts 是 CRD mysqlclusters.mysql.radondb.com 中定义 RadonDB MySQL 集群监控的参数，可通过配置mysql_v1alpha1_mysqlcluster.yaml 文件中参数值开启监控服务。

metricsOpts 参数包含如下字段：

metricsOpts:
    enabled: false  
    image: prom/mysqld-exporter:v0.12.1

    resources:
      requests:
        cpu: 10m
        memory: 32Mi
      limits:
        cpu: 100m
        memory: 128Mi

metricsOpts.enabled 默认为 false，需手动设置为 true。

设置 metricsOpts.enabled 为 true，开启集群监控功能；
设置资源参数值，定义监控容器资源配额大小；

文件参数修改完成后，使用如下指令应用配置，部署/更新集群回显信息如下：

$ kubectl apply -f config/sample/mysql_v1alpha1_mysqlcluster.yaml
cluster.mysql.radondb.com/sample created/configured

查看监控服务

通过客户端查看

您可以通过如下指令查看集群监控服务和 serviceMonitor 信息。

$ kubectl get service,servicemonitor

$ kubectl describe servicemonitor

预期效果

$ kubectl get service,servicemonitor
NAME                             TYPE        CLUSTER-IP      EXTERNAL-IP   PORT(S)    AGE
service/mysql-operator-metrics   ClusterIP   10.96.242.205           8443/TCP   3h25m
service/sample-follower          ClusterIP   10.96.2.234             3306/TCP   21h
service/sample-leader            ClusterIP   10.96.30.238            3306/TCP   21h
service/sample-metrics           ClusterIP   10.96.7.222             9104/TCP   3h24m
service/sample-mysql             ClusterIP   None                    3306/TCP   21h

NAME                                                              AGE
servicemonitor.monitoring.coreos.com/demo-mysql-operator          3h25m

$ kubectl describe servicemonitor demo-mysql-operator 
Name:         test-radondb-mysql-metrics
Namespace:    default
Labels:       app=test-radondb-mysql
              app.kubernetes.io/managed-by=Helm
              app.kubernetes.io/vendor=kubesphere
              chart=radondb-mysql-1.0.0
              heritage=Helm
              release=test
Annotations:  kubesphere.io/creator: admin
API Version:  monitoring.coreos.com/v1
Kind:         ServiceMonitor
......
Spec:
  Endpoints:
    Interval:        1m
    Path:            /metrics
    Port:            metrics
    Scheme:          http
    Scrape Timeout:  10s
......