1、Prometheus部署

1、Prometheus简介

Prometheus是一套开源的系统监控和报警框架，灵感源自Google的Borgmon监控系统。2012年SoundCloud的Google员工创造了Prometheus，并作为社区开源项目进行开发。2015年该项目正式发布。2016年Prometheus加入云原生计算基金会（Cloud Native Computing Foundation），成为受欢迎度仅次于Kubernetes的项目。

Prometheus具有以下特性：
多维的数据模型（基于时间序列的Key、Value键值对）
灵活的查询和聚合语言PromQL
提供本地存储和分布式存储
通过基于HTTP的Pull模型采集时间序列数据
可利用Pushgateway（Prometheus的可选中间件）实现Push模式
可通过动态服务发现或静态配置发现目标机器
支持多种图表和数据大盘

2、部署Prometheus

1、系统环境

CentOS Linux release 7.5.1804 (Core)

IP地址	端口	版本
10.10.35.130	9090	Centos7.5

2、下载安装包

promethus两个官方下载路径：
https://prometheus.io
https://github.com/prometheus
根据实际情况到官网或者github下载安装包。
Prometheus的基本架构如下图：

基本架构图.png

从上图可以看到，整个 Prometheus 可以分为四大部分，分别是：

Prometheus 服务器

Prometheus Server 是 Prometheus组件中的核心部分，负责实现对监控数据的获取，存储以及查询。

NodeExporter 业务数据源

业务数据源通过 Pull/Push 两种方式推送数据到 Prometheus Server。

AlertManager 报警管理器

Prometheus 通过配置报警规则，如果符合报警规则，那么就将报警推送到 AlertManager，由其进行报警处理。

可视化监控界面

Prometheus 收集到数据之后，由 WebUI 界面进行可视化图标展示。可以通过自定义的 API 客户端进行调用数据展示，也可以直接使用 Grafana 解决方案来展示。

3、安装Prometheus

开始安装
1.解压安装包到指定目录，并设置软链接，查看版本

tar -zxvf prometheus-2.25.0.linux-amd64.tar.gz -C /data
ln -sv /data/prometheus-2.25.0.linux-amd64 /usr/local/prometheus
cd /usr/local/prometheus/
./prometheus --version

2.prometheus.yml配置文件注释

# my global config
global:
  # 设置抓取数据的时间间隔，间隔设置为每15秒一次。
  scrape_interval:     15s
  # 设定抓取数据的超时时间
  scrape_timeout: 15s
  # 设置规则刷新，每15秒刷新一次规则。
  evaluation_interval: 15s

# 监控报警配置（需要额外安装 alertmanager组件
alerting:
  alertmanagers:
  - static_configs:
    # 设定alertmanager和prometheus交互的接口，即alertmanager监听的ip地址和端口，后续再配置
    #- targets: ["xxx.xxx.xxx.xxx:9093"]

# 报警规则文件
rule_files:
  # - "first_rules.yml"

#Prometheus与抓取模块交互的接口配置
scrape_configs:
  # job一定要全局唯一, 采集 Prometheus 自身的 metrics
  - job_name: 'prometheus'
    static_configs:
    - targets: ['10.10.35.130:9090']
#后续可配置文件自动发现功能，初次安装可以修改localhost为实际服务器IP地址

3.添加用户，后期用此账号启动服务

groupadd prometheus
useradd -g prometheus -s /sbin/nologin prometheus

4.建立数据目录,存放Prometheus数据，并授权

mkdir /usr/local/prometheus/data
chown -Rf prometheus:prometheus /data/prometheus-2.25.0.linux-amd64

5.设置启动服务

cat > /usr/lib/systemd/system/prometheus.service << 'EOF'
[Unit]
Description=Prometheus
Documentation=https://prometheus.io/
After=network.target
 
[Service]
# Type设置为notify时，服务会不断重启
Type=simple
User=prometheus
# --storage.tsdb.path是可选项，默认数据目录在运行目录的./dada目录中
ExecStart=/usr/local/prometheus/prometheus --config.file=/usr/local/prometheus/prometheus.yml --storage.tsdb.path=/usr/local/prometheus/data
Restart=on-failure
 
[Install]
WantedBy=multi-user.target
EOF

6.启动prometheus

systemctl daemon-reload
systemctl enable prometheus --now

Prometheus启动参数说明
--config.file -- 指明prometheus的配置文件路径
--web.enable-lifecycle -- 指明prometheus配置更改后可以进行热加载
--storage.tsdb.path -- 指明监控数据存储路径
--storage.tsdb.retention --指明数据保留时间

7.浏览器访问Prometheus自带的url
浏览器打开 IP:9090/targets 访问Prometheus，查看监控的节点

2.png

点击Endpoint中的地址，会显示当前服务器获取监控的信息。

3.png

Prometheus部署完成

4、安装Node_exporter

Node_exporter收集机器的系统数据，这里采用prometheus官方提供的exporter，除node_exporter外，官方还提供consul，memcached，haproxy，mysqld等exporter，具体可查看官网。所有被监控节点都需要安装Node_exporter，默认端口 9100

wget https://github.com/prometheus/node_exporter/releases/download/v1.0.1/node_exporter-1.0.1.linux-amd64.tar.gz

tar -zxvf node_exporter-1.0.1.linux-amd64.tar.gz -C /usr/local/
cd /usr/local/
mv node_exporter-1.0.1.linux-amd64 node_exporter

当然如果是用户节点也需要创建prometheus用户

groupadd prometheus
useradd -g prometheus -s /sbin/nologin prometheus
chown -Rf prometheus:prometheus /usr/local/node_exporter

设置node_exporter systemd启动单元

cat > /usr/lib/systemd/system/node_exporter.service << 'EOF'
[Unit]
Description=node_exporter
Documentation=https://prometheus.io/
After=network.target
 
[Service]
Type=simple
User=prometheus
ExecStart=/usr/local/node_exporter/node_exporter
Restart=on-failure
 
[Install]
WantedBy=multi-user.target
EOF

systemctl enable node_exporter --now

修改prometheus配置文件添加节点
vim /usr/local/prometheus/prometheus.yml
在文件尾部新增对其它节点的监控配置

 - job_name: 'manager'
    static_configs:
    - targets: ['192.168.3.55:9100']

重启服务
systemctl restart prometheus.service
浏览器打开 IP:9090/targets 访问Prometheus，即能看见添加的节点。

5、基于文件的服务自动发现

Prometheus也提供了服务发现功能，可以从consul，dns，kubernetes，file等等多种来源发现新的目标。其中最容易配置的是从文件自动发现服务。配置了基于file_sd_configs的文件自动发现，添加完服务之后并不需要重启prometheus服务。所以当监控主机数量很多的时候，可以帮助我们解决很多棘手的问题。

1、修改prometheus.yml 配置文件，设置文件自动发现
vi /usr/local/prometheus/prometheus.yml

- job_name: 'nodes'
file_sd_configs:
- refresh_interval: 10s
files:
- "/usr/local/prometheus/config/*.yml"

图片.png

2、创建服务发现文件

mkdir /usr/local/prometheus/config
vi /usr/local/prometheus/test.yml

- targets:
  - 10.10.35.16:9100
  labels:
    app: "Apache-Tomcat" 
    instance: "10.10.35.170"    
    service: node_exporter

保存即可，prometheus会自动去读取config/目录下的yml文件。

3、浏览器打开 IP:9090/targets 访问Prometheus，选择Targets，即能看见基于文件自动发现的节点。