系统监控——prometheus(普罗米修斯)的部署

一、prometheus简介

prometheus 是一套开源的系统监控报警框架。

1、优点

• 强大的多维度数据模型
• 灵活而强大的查询语句（PromQL）：在同一个查询语句，可以对多个 metrics 进行乘法、加法、连接、取分数位等操作。
• 易于管理： Prometheus server 是一个单独的二进制文件，可直接在本地工作，不依赖于分布式存储。
• 高效：平均每个采样点仅占 3.5 bytes，且一个 Prometheus server 可以处理数百万的 metrics。
• 使用 pull 模式采集时间序列数据，这样不仅有利于本机测试而且可以避免有问题的服务器推送坏的 metrics。
• 可以采用 push gateway 的方式把时间序列数据推送至 Prometheus server 端
• 可以通过服务发现或者静态配置去获取监控的 targets。
• 有多种可视化图形界面。
• 易于伸缩。

2、组件

Prometheus 生态圈中包含了多个组件，其中许多组件是可选的：

• Prometheus Server: 用于收集和存储时间序列数据。
• Client Library：客户端库，为需要监控的服务生成相应的 metrics 并暴露给 Prometheus server。当 Prometheus server 来 pull 时，直接返回实时状态的 metrics。
• Push Gateway: 主要用于短期的 jobs。由于这类 jobs 存在时间较短，可能在 Prometheus 来 pull 之前就消失了。为此，这次 jobs 可以直接向 Prometheus server 端推送它们的 metrics。这种方式主要用于服务层面的 metrics，对于机器层面的 metrices，需要使用 node exporter。
• Exporters: 用于暴露已有的第三方服务的 metrics 给 Prometheus。
• Alertmanager: 从 Prometheus server 端接收到 alerts 后，会进行去除重复数据，分组，并路由到对收的接受方式，发出报警。常见的接收方式有：电子邮件，pagerduty，OpsGenie, webhook 等。

3、架构

从这个架构图，也可以看出 Prometheus 的主要模块包含， Server, Exporters, Pushgateway, PromQL, Alertmanager, WebUI 等。
它大致使用逻辑是这样：

• Prometheus server 定期从静态配置的 targets 或者服务发现的 targets 拉取数据。
• 当新拉取的数据大于配置内存缓存区的时候，Prometheus 会将数据持久化到磁盘（如果使用 remote storage 将持久化到云端）。
• Prometheus 可以配置 rules，然后定时查询数据，当条件触发的时候，会将 alert 推送到配置的 Alertmanager。
• Alertmanager 收到警告的时候，可以根据配置，聚合，去重，降噪，最后发送警告。
• 可以使用 API， Prometheus Console 或者 Grafana 查询和聚合数据。

二、环境包准备

1、下载最新版的服务端prometheus和客户端node_exporter

• 服务端：https://prometheus.io/download/#prometheus

• 客户端：https://prometheus.io/download/#node_exporter
  
  2、下载GO语言环境包

wget https://storage.googleapis.com/golang/go1.8.3.linux-amd64.tar.gz

三、安装运行

• 服务端

1、解压go语言包并将其添加至环境变量

tar -C /usr/local -zxf go1.8.3.linux-amd64.tar.gz
echo "export PATH=$PATH:/usr/local/go/bin" >>  /etc/profile
source  /etc/profile  ##更新环境

2、解压Prometheus安装包并建立软链接

tar -zxf prometheus-2.28.1.linux-amd64.tar.gz -C /usr/local/
ln -sv /usr/local/prometheus-2.28.1.linux-amd64/ /usr/local/Prometheus

3、编辑prometheus配置文件

• 修改监听地址为本机9090端口，新增节点端口9100

vim /usr/local/prometheus-2.28.1.linux-amd64/prometheus.yml

4、后台运行prometheus

/usr/local/Prometheus/prometheus --config.file=/usr/local/Prometheus/prometheus.yml &

• 客户端

5、解压node_exporter，并移动至/usr/local目录

tar -zxvf node_exporter-1.2.2.linux-amd64.tar.gz -C /usr/local/
mv /usr/local/node_exporter-1.2.2.linux-amd64/ /usr/local/node_exporter

6、后台运行node_exporter

/usr/local/node_exporter/node_exporter &

四、网页访问

curl 172.25.36.1:9090

查看监控的两个目标

查看其中一个目标的信息

五、安装图形化界面

• 任意主机下载部署（本次选择server2主机）

1、下载grafana的最新版
下载地址：https://grafana.com/grafana/download

wget https://dl.grafana.com/oss/release/grafana-8.1.0-1.x86_64.rpm

2、下载应用，并启动

sudo yum install grafana-8.1.0-1.x86_64.rpm -y
systemctl enable grafana-server
systemctl start grafana-server

3、访问

访问 IP + Port，grafana 默认的启动 port 是 3000，初始账号和密码都是 admin

访问出错，不知如何解决，如有大佬了解，希望留言提醒，谢谢！