4.hdfs ha脚本检测failover时，发送邮件预警
1) 脚本
#!/bin/bash
NN1_HOST=""
NN1_STATE=""
NN1_HOSTNAME=""
NN2_HOST=""
NN2_STATE=""
NN2_HOSTNAME=""
HDFS_DIR=/home/hadoop/app/hadoop/bin/
HDFS_LOGS_DIR=/home/hadoop/app/hadoop/logs
## 通过 dfs.nameservices 获取集群名称
CLUSTER_NAME=`$HDFS_DIR/hdfs getconf -confKey dfs.nameservices`
## 通过 dfs.ha.namenodes.${ha_name} 获取namenode的名称
HA_HOSTNAME=`$HDFS_DIR/hdfs getconf -confKey dfs.ha.namenodes.${CLUSTER_NAME}`
# 循环两个namenode, 注意这里做了一个把逗号换位换行的操作
for node in $(echo ${HA_HOSTNAME//,/ }); do
## 获取 namenode的状态
STATUS=`$HDFS_DIR/hdfs haadmin -getServiceState $node`
## NN1_SERVICEID, NN1_SERVICESTATE, NN1_HOSTNAME 保存了 active状态的主机名, 状态(active), 带hdfs端口的主机+PORT(例如nn1:8020)
if [ "$STATUS" == "active" ];then
NN1_HOST="$node"
NN1_STATE="active"
NN1_HOSTNAME=`$HDFS_DIR/hdfs getconf -confKey dfs.namenode.rpc-address.${CLUSTER_NAME}.$node`
## NN2_SERVICEID, NN2_SERVICESTATE, NN2_HOSTNAME 保存了 standby状态的主机名, 状态(standby), 带hdfs端口的主机+PORT(例如nn2:8020)
elif [ "$STATUS" == "standby" ];then
NN2_HOST="$node"
NN2_STATE="standy"
NN2_HOSTNAME=`$HDFS_DIR/hdfs getconf -confKey dfs.namenode.rpc-address.${CLUSTER_NAME}.$node`
else
echo "unknown status"
fi
done
## 把 "${NN1_HOSTNAME} ${NN1_SERVICEID} ${NN1_SERVICESTATE}" 的信息重定向到 HDFS_HA.log, 注意这个操作是重写,
## 所以HDFS_HA.log 的第一行必然是 active 状态的 信息, 而"${NN2_HOSTNAME} ${NN2_SERVICEID} ${NN2_SERVICESTATE}"
## 是追加到 HDFS_HA.log, 所以 总是 standby状态的信息, 总之, 第一行: active, 第二行: standby
echo "${NN1_HOST}" "${NN1_STATE}" "${NN1_HOSTNAME}" > $HDFS_LOGS_DIR/HA_STATE.log
echo "${NN2_HOST}" "${NN2_STATE}" "${NN2_HOSTNAME}" >> $HDFS_LOGS_DIR/HA_STATE.log
## 判断 HDFS_HA_LAST.log 文件是否存在, 如果存在执行 if的逻辑, 不存在, 第一次会往下执行, cat HDFS_HA.log > HDFS_HA_LAST.log, 把
## HDFS_HA.log 重定向到 HDFS_HA_LAST.log中
## 判断文件是否存在且不为空
if [ -s $HDFS_LOGS_DIR/HA_LAST_STATE.log ];then
## 如果 HDFS_HA_LAST.log 文件存在, 取文件的第一列, 并且取最前面一行, 它保留的是上一次 active的 主机名
LAST_NN1=`head -1 $HDFS_LOGS_DIR/HA_LAST_STATE.log | awk -F ' ' '{print $1}'`
NOW_NN1=${NN1_HOST}
## 将上一次 active 主机名和 最新的 active 主机作比较, 如果两者不等, 说明发生了 active 主机的切换,
## 从而发送邮件到 邮箱
if [[ "${LAST_NN1}" != "${NOW_NN1}" ]];then
echo -e "`date "+%Y-%m-%d %H:%M:%S"` actvie namanode chanaged!" >> $HDFS_LOGS_DIR/HA_STATE_RECORD.log
echo "send a mail"
echo -e "`date "+%Y-%m-%d %H:%M:%S"` : namenode from ${LAST_NN1} change to ${NOW_NN1}, Please to check namenode log." | mail \
-r "From: alertAdmin <[email protected]>" \
-s "Warn: CDH HDFS HA Failover!." ${EMAIL}
else
echo "no change"
fi
fi
cat $HDFS_LOGS_DIR/HA_STATE.log > $HDFS_LOGS_DIR/HA_LAST_STATE.log
测试 -s参数
if [ -s test_empty.txt ]; then
echo "file exist and content is not empty"
else
echo "file exist but content is empty"
fi
创建一个空文件
第一次执行输出
向文件中追加内容
再次执行
3. 测试邮件发送:
首先获取 namode节点的转态
将 nn1, nn2做ha切换
执行脚本
到邮箱查看
发现已经有邮件了