大数据之LibrA数据库系统告警处理(ALM-12018 内存使用率超过阈值)

告警解释

系统每30秒周期性检测内存使用率,并把实际内存使用率和阈值相比较。内存使用率默认提供一个阈值范围。当检测到内存使用率超出阈值范围时产生该告警。

平滑次数为1,主机内存使用率小于或等于阈值时,告警恢复;平滑次数大于1,主机内存使用率小于或等于阈值的90%时,告警恢复。

告警属性

告警ID

告警级别

可自动清除

12018

严重

告警参数

参数名称

参数含义

ServiceName

产生告警的服务名称。

RoleName

产生告警的角色名称。

HostName

产生告警的主机名。

Trigger Condition

系统当前指标取值满足自定义的告警设置条件。

对系统的影响

业务进程响应缓慢或不可用。

可能原因
  • 内存配置无法满足业务需求。内存使用率达到上限。
  • SUSE 12.X操作系统中,系统自带的free命令版本较低,计算出的内存使用率不能如实反映真实的使用情况。
处理步骤

SUSE 12.X下处理方法。

  1. 登录任意节点,执行cat /etc/*-release命令查看当前操作系统是否为SUSE 12.X。

    • 是,执行步骤 2。
    • 否,执行步骤 4。

  2. 执行cat /proc/meminfo | grep Mem命令,查看当前操作系统内存实际使用情况。

    MemTotal: 263576192 kB 
    MemFree: 198283116 kB 
    MemAvailable: 227641452 kB

  3. 计算内存实际使用率,内存使用率 = 1–(MemAvailable/MemTotal)。

    • 若内存实际使用率低于70%,则参考《管理员指南》的“阈值配置”章节,手动关闭监控转告警开关。
    • 若内存实际使用率高于70%,则执行步骤 4。

对系统进行扩容。

  1. 打开FusionInsight Manager页面,在告警列表中,单击此告警所在行,在告警详情中,查看该告警的主机地址。
  2. 使用PuTTY工具,以root用户登录告警所在主机。
  3. 执行命令free -m | grep Mem\: | awk '{printf("%s,", ($3-$6-$7) * 100 / $2)}',查看系统当前内存使用率。
  4. 若内存使用率超过阈值,对内存进行扩容。具体操作请参考《FusionInsight HD 容量调整指导书》。
  5. 等待5分钟,检查该告警是否恢复。

    • 是,处理完毕。
    • 否,执行步骤 9。

收集故障信息。

  1. 在主集群的FusionInsight Manager界面,单击“系统设置 > 日志下载”。
  2. 在“服务”下拉框中勾选“OmmServer”,单击“确定”。
  3. 设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后10分钟,单击“下载”。

你可能感兴趣的:(数据库,服务器,网络)