使用LNMP搭建zabbix并对接elasticsearch

安装zabbix-server

添加zabbix存储库

rpm -ivh https://repo.zabbix.com/zabbix/4.0/rhel/7/x86_64/zabbix-release-4.0-1.el7.noarch.rpm
yum -y install yum-utils
yum-config-manager --enable rhel-7-server-optional-rpm

安装zabbix-server zabbix-web

yum install zabbix-server-mysql
yum install zabbix-web-mysql

安装MySQL5.7数据库

卸载mariadb包

rpm -qa |grep mariadb    #查看当前安装的mariadb的包
rpm -e --nodeps mariadb-libs-5.5.52-1.el7.x86_64     #卸载mariadb的包

下载并解压MySQL源码包

wget https://dev.mysql.com/get/archives/mysql-5.7/mysql-5.7.21-linux-glibc2.12-x86_64.tar.gz  #从官网下载源码包
tar -xzvf  mysql-5.7.21-linux-glibc2.12-x86_64.tar.gz     #解压源码包
mv  mysql-5.7.21-linux-glibc2.12-x86_64  /usr/local/mysql

创建MySQL用户并对MySQL文件进行授权

groupadd mysql   --创建mysql用户组
useradd -r -g mysql mysql     --创建mysql用户并添加到mysql用户组中
chown -R mysql.mysql mysql/  --将mysql目录访问权限赋为myql用户

创建MySQL配置文件

cat >>/etc/my.cnf  <

将MySQL加入环境变量

echo 'PATH=/usr/local/mysql/bin:$PATH' >>/etc/profile      #将MySQL二进制文件加入环境变量
ln -s usr/local/mysql/support-files/mysql.server /usr/local/mysql/bin/    将MySQL的启动文件软连接到MySQL的环境变量中

进入数据库并创建zabbix数据库以及创建授权用户

mysql>  create database zabbix character set utf8 collate utf8_bin;
mysql> grant all privileges on zabbix.* to zabbix@localhost identified by 'zabbix';
mysql> flush privileges;

编辑zabbix-server配置文件

修改以下参数为创建数据库时的信息,并重启zabbix-server
vim /etc/zabbix/zabbix_server.conf

DBName=zabbix
DBHost=192.168.179.132
DBUser=zabbix
DBPassword=zabbix
systemctl enable zabbix-server
systemctl start zabbix-server

启动的时候启动失败,查看系统日志,查找关键词

usr/sbin/zabbix_server: error while loading shared libraries: libmysqlclient.so.18: cannot open shared object file: No such file or directory

原来是缺少一个文件,yum安装解决
yum -y install mysql-libs

将初始数据导入MySQL中

zcat /usr/share/doc/zabbix-server-mysql*/create.sql.gz | mysql -uzabbix -p zabbix

安装Nginx

关掉防火墙和selinux

systemctl stop firewalld
systemctl disable firewalld
sed -i 's/SELINUX=enforcing/SELINUX=disable/g' /etc/selinux/config

安装依赖

yum -y install wget vim lsof lrzsz pcre-devel zlib-devel make gd-devel libjpeg-devel libpng-devel libxml2-devel bzip2-devel libcurl-devel libmcrypt libmcrypt-devel mcrypt mhash net-snmp-devel
yum -y install gcc bison bison-devel openssl-devel readline-devel libedit-devel sqlite-devel freetype freetype-devel libevent-devel mysql-devel

配置Nginx的yum仓库

cat >>/etc/yum.repos.d/nginx.repo <

启动Nginx

nginx -t  测试配置是否有错
systemctl start nginx
systemctl enable nginx

安装PHP

添加PHP用户

useradd -s /sbin/nologin php-fpm

安装PHP依赖库

yum install -y gcc gcc-c++ make zlib zlib-devel pcre pcre-devel libjpeg libjpeg-devel libpng libpng-devel freetype freetype-devel libxml2 libxml2-devel glibc glibc-devel glib2 glib2-devel bzip2 bzip2-devel ncurses ncurses-devel curl curl-devel e2fsprogs e2fsprogs-devel krb5 krb5-devel openssl openssl-devel openldap openldap-devel nss_ldap openldap-clients openldap-servers

编译安装php

wget http://mirrors.sohu.com/php/php-7.2.6.tar.gz
tar zxvf php-7.2.6.tar.gz
cd php-7.2.6
./configure --prefix=/usr/local/php --with-config-file-path=/usr/local/php/etc --enable-fpm --with-fpm-user=php-fpm --with-fpm-group=php-fpm --with-mysql=mysqlnd  --with-pdo-mysql=mysqlnd --with-mysqli=mysqlnd --with-libxml-dir --with-gd --with-jpeg-dir --with-png-dir --with-freetype-dir --with-iconv-dir --with-zlib-dir --with-mcrypt --enable-soap --enable-gd-native-ttf --enable-ftp --enable-mbstring --enable-exif --disable-ipv6 --with-pear --with-curl --enable-bcmath --enable-mbstring --enable-sockets --with-gd --with-libxml-dir=/usr/local --with-gettext
make && make install
echo $? #每执行完上条命令就运行一下,如果返回0,则执行成功
cp php.ini-production /usr/local/php/etc/php.ini

更改PHP配置文件

sed -i 's/post_max_size = 8M/post_max_size = 32M/g' /usr/local/php/etc/php.ini
sed -i 's/upload_max_filesize = 2M/upload_max_filesize = 50M/g' /usr/local/php/etc/php.ini
sed -i 's/;date.timezone =/date.timezone =PRC/' /usr/local/php/etc/php.ini
sed -i 's/max_execution_time = 30/max_execution_time = 600/g' /usr/local/php/etc/php.ini
sed -i 's/max_input_time = 60/max_input_time = 600/g' /usr/local/php/etc/php.ini
sed -i 's/memory_limit = 128M/memory_limit = 256M/g' /usr/local/php/etc/php.ini

启动php-fpm

cp /usr/local/php/etc/php-fpm.conf.default /usr/local/php/etc/php-fpm.conf
cp /usr/local/php/etc/php-fpm.d/www.conf.default  /usr/local/php/etc/php-fpm.d/www.conf
/usr/local/php/sbin/php-fpm -c /usr/local/php/etc/php.ini -y /usr/local/php/etc/php-fpm.conf

vim phpinfo.php

测试是否能连接nginx,这里出现一个错误,访问动态页面一直显示文件没有发现,修改nginx配置文件的PHP脚本路径变量和修改文件权限后一直没有用,后来我将路径的变量去掉,添加网站真实路径后解决

安装zabbix-agent

yum install zabbix-agent
vim /etc/zabbix/zabbix-agentd.conf     #Server和ServerActive分别代表zabbix的被动模式和主动模式,这里都填server端的IP
最后一行是开启脚本采集数据

安装zabbix-web

将zabbix的php源文件拷贝到网站目录上

cp -r /usr/share/zabbix/.* /usr/share/nginx/html/

修改nginx配置

egrep -v '(^.*#|^$)' /etc/nginx/conf.d/default.conf

server {
    listen       80;
    server_name  192.168.179.132;
    access_log  /var/log/nginx/host.access.log  main;
    location / {
       root   /usr/share/nginx/html;
       index  index.html index.htm index.php;
    }
    error_page  404              /404.html;
    location ~ \.php$ {
        root           html;
        fastcgi_pass   127.0.0.1:9000;
        fastcgi_index  index.php;
        fastcgi_param  SCRIPT_FILENAME  /usr/share/nginx/html$fastcgi_script_name;
        include        fastcgi_params;

    }
}

重启nginx访问会报这个错

百度之后得知是权限不足引起的,运行一下命令可以解决,这里一定要777,不然到时候安装完成不能创建配置文件

chmod -R 777 /etc/zabbix/web

在访问浏览器的时候不出图,请教我学长之后得出是因为nginx上配置了图片缓存,去掉缓存解决

访问192.168.179.132/index.php安装zabbix-web



安装完成可能会遇到连接不上zabbix-server的错误,查看zabbix-server日志如下,这个解决方法有两种,第一种就是创建一个mysql.sock然后重启mysql服务器

mkdir /var/lib/mysql
ln -s /tmp/mysql.sock /var/lib/mysql/mysql.sock

第二种就是编辑zabbix_server.conf文件,将DBSocket修改为自己数据库的mysql.sock,然后重启 zabbix_server

监控zabbix 本机的CPU idle

监控CPU idle
基本就是图形界面,创建监控项之前先测试一下key值是否可用,当然需要安装zabbix_get工具,使用yum install zabbix-get来安装

zabbix_get -s 192.168.179.132 -k system.cpu.util[all,idle,avg1]

自建模板监控磁盘IO

监控磁盘IO利用的工具是iostat
yum install -y sysstat

首先zabbix-agent端要开启允许脚本收集监控数据

编辑zabbix-agent的配置文件
vim /etc/zabbix/zabbix_agentd.d/userparameter.conf

UserParameter=disk.status[*],/usr/local/zabbix/scripts/disk-status.sh $1

编写收集脚本

vim /usr/local/zabbix/scripts/disk-status.sh

#!/bin/bash 
if [ $# -ne 1 ];then
        echo "Follow the script name with an argument" 
fi

case $1 in

        rrqm)
                iostat -dxk 1 1|grep -w sda |awk '{print $2}'
                ;;
        wrqm)
                iostat -dxk 1 1|grep -w sda |awk '{print $3}'
                ;;
        rps)
                iostat -dxk 1 1|grep -w sda|awk '{print $4}'
                ;;
        wps)
                iostat -dxk 1 1|grep -w sda |awk '{print $5}'
                ;;
        rKBps)
                iostat -dxk 1 1|grep -w sda |awk '{print $6}'
                ;;
        wKBps)
                iostat -dxk 1 1|grep -w sda |awk '{print $7}'
                ;;
        avgrq-sz)
                iostat -dxk 1 1|grep -w sda |awk '{print $8}'
                ;;
        avgqu-sz)
                iostat -dxk 1 1|grep -w sda |awk '{print $9}'
                ;;
        await)
            iostat -dxk 1 1|grep -w sda|awk '{print $10}'
                ;;
        svctm)
                iostat -dxk 1 1|grep -w sda |awk '{print $13}'
                ;;
        util)
                iostat -dxk 1 1|grep -w sda |awk '{print $14}'
                ;;
        *)
                echo -e "\e[033mUsage: sh $0 [rrqm|wrqm|rps|wps|rKBps|wKBps|avgqu-sz|avgrq-sz|await|svctm|util]\e[0m"
esac

touch +x /usr/local/zabbix/scripts/disk-status.sh #给脚本添加执行权限

打开zabbix-web,创建模板

浏览器打开192.168.179.132/index.php
依次点击配置——>模板——>创建模板
添加模板名称以及群组,最后点击添加

创建应用集

在创建的模板上点击创建应用集,名字最好与磁盘io相关

创建监控项

这里所有的数据类型都是浮点数

创建图形

这需要为每一个监控项都创建图形

为需要监控的主机链接模板

点击需要监控的主机,然后单击模板,为主机添加模板链接

解决图形名字乱码问题

可以看到我收集到的图形是乱码的
首先查看zabbix字体目录,它定义的路径是“fonts”,它是一个相对路径,绝对路径为/usr/share/zabbix/fonts,
vim /usr/share/zabbix/include/defines.inc.php //搜索ZBX_FONTPATH

而字体文件为“ZBX_GRAPH_FONT_NAME”所定义的“graphfont”,它是一个文件,绝对路径为/usr/share/zabbix/fonts/graphfont.ttf
我们可以从Windows系统中选择一个中文字体然后放到zabbix的字体目录下
Windows字体目录位于C:\Windows\Fonts下,找到仿宋常规字体将他拷入zabbix字体目录下
然后修改PHP文件,将字体文件修改为simsong

安装elastic6.1

下载源码包并解压,修改es配置

yum install java    #elastic需要安装Java依赖
curl -L -O https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.1.4.tar.gz
tar -xvf elasticsearch-6.1.4.tar.gz

vim /root/elasticsearch-6.1.4/config/elasticsearch.yml #主要修改es的一些配置信息

启动过程出现的报错

[WARN ][o.e.b.BootstrapChecks    ] [PWm-Blt] max file descriptors [4096] for elasticsearch process is too low, increase to at least [65536]

解决办法:
vim /etc/security/limits.conf

* soft nofile 65536
* hard nofile 131072
* soft nproc 2048
* hard nproc 4096
[WARN ][o.e.b.BootstrapChecks    ] [PWm-Blt] max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]

解决办法:
vim /etc/sysctl.conf
vm.max_map_count=655360
修改完成执行命令:
sysctl -p
cd elasticsearch-6.1.4/bin
这里不能使用root用户运行elastic,可以自己新建一个普通用户,还要把目录授予普通用户权限
./elasticsearch
然后我们可以打开浏览器输入192.168.179.133:9200可以查看es的状态,或者可以装一个head插件

安装head插件

安装node.js

这里我采用的源码安装,其实二进制安装是比较简单的,但我执行到最后node的二进制文件无法执行,因此只能源码安装,时间有点长,打了两局王者荣耀才装完

yum groupinstall "Development Tools"    #安装编译必要的工具
wget https://nodejs.org/dist/v8.11.4/node-v8.11.4.tar.gz  #下载node的源码包
tar -zxvf node-v8.11.4.tar.gz             #解压源码包
cd node-v8.11.4
./configure && make && make install             #执行编译安装
echo $?    #查看执行结果,输出0表示安装成功

node.js默认安装路径在/usr/local/bin/目录下

安装grunt

grunt是基于Node.js的项目构建工具,可以进行打包压缩、测试、执行等等的工作,head插件就是通过grunt启动
npm install -g grunt-cli

下载并安装head插件

git clone git://github.com/mobz/elasticsearch-head.git       #克隆head插件仓库
cd elasticsearch-head/
npm install          #执行完会报一些错误,不要管执行下一条命令就会解决
npm install [email protected] --ignore-scripts

修改elasticsearch的配置

vim /elasticsearch/elasticsearch-6.4.0/config/elasticsearch.yml

http.cors.enabled: true                                    # elasticsearch中启用CORS
http.cors.allow-origin: "*"                                 # 允许访问的IP地址段,* 为所有IP都可以访问

启用head插件并在浏览器上打开

npm run start #启动head插件
在浏览器输入http://192.168.179.133:9100/ 即可使用head插件

使用es存储zabbix的历史数据

修改/etc/zabbix/zabbix_server.conf

添加如下内容

HistoryStorageURL=192.168.179.133:9200
HistoryStorageTypes=str,text,log,uint,dbl
HistoryStorageDateIndex=1

修改/etc/zabbix/web/zabbix.conf.php

添加如下内容

global $DB, $HISTORY;
$HISTORY['url']   = 'http://192.168.179.133:9200';
// Value types stored in Elasticsearch.
$HISTORY['types'] = ['str', 'text', 'log','uint','dbl'];

修改完成后重启zabbix,并查看zabbix是否有数据

systemctl restart zabbix-server

至此,es收集zabbix历史数据完成


希望各位关注下我的微信公众号“没有故事的陈师傅”

转载于:https://blog.51cto.com/12970189/2334124

你可能感兴趣的:(大数据,php,运维)