Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统

说到分布式日志存储系统,大家肯定对ELKEFK这些工具并不陌生。可是它们都基于Elasticsearch存储,搭建复杂,耗资源,上手难。所以,个人非常推崇Grafana Labs开源的Loki 轻量级日志聚合分析系统

Loki使用标签来作为索引,而不是对全文进行检索,所以在搜索上会有一定的局限性。但是,也能满足我们的需求。搭建Loki,我们需要安装三个组件,promtail收集日志到LokiLoki日志存储中心,Grafana作为UI展示。

安装方式有多种,我选择了二进制安装方式。二进制文件可以去https://github.com/grafana/loki/releases/下载,需要下载Lokipromtail,我这里安装的是次新版本 2.7.5

1、安装包

2、创建loki的数据目录(注意目录的属主与权限)

3、安装软件

4、配置loki服务端配置文件

Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统_第1张图片

5、启动loki服务进程

Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统_第2张图片

6、配置promtail客户端采集服务配置文件

Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统_第3张图片

7、启动promtail采集进程

Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统_第4张图片

8、安装Grafana(略)

9、loki对接grafana

添加一个Loki的数据源

Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统_第5张图片

Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统_第6张图片

接下来,还有一个关键参数一定要加。在Header上添加X-Scope-OrgID参数,参数值根据实际情况填写,默认tenant1,然后点击[Save&test]

Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统_第7张图片

接下来,我们去查询收集到的日志

Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统_第8张图片

选择 loki 作为 grafana的展示数据源,labels 输入LogQL的表达式  如:{job="mysql-log"} , /data/mysql/mysql3306/logs/mysql.err 动态的被promtail+loki+grafana 采集展示

Loki采集Mysql errorlog,你值得拥有的错误日志聚合系统_第9张图片

至此,来体验你自己的轻量级日志聚合系统吧 

你可能感兴趣的:(mysql性能优化,数据库,mysql)