大数据之LibrA数据库系统告警处理（ALM-12027 主机PID使用率超过阈值）

告警解释

系统每30秒周期性检测PID使用率，并把实际PID使用率和阈值进行比较，PID使用率默认提供一个阈值。当检测到PID使用率超出阈值时产生该告警。

平滑次数为1，主机PID使用率小于或等于阈值时，告警恢复；平滑次数大于1，主机PID使用率小于或等于阈值的90%时，告警恢复。

告警属性

告警ID	告警级别	可自动清除
12027	严重	是

告警参数

参数名称	参数含义
ServiceName	产生告警的服务名称。
RoleName	产生告警的角色名称。
HostName	产生告警的主机名。
Trigger Condition	系统当前指标取值满足自定义的告警设置条件。

对系统的影响

无法分配PID给新的业务进程，业务进程不可用。

可能原因

• 节点同时运行的进程过多，需要扩展pid_max值。
• 系统环境异常。

处理步骤

扩展pid_max值。

1. 打开FusionInsight Manager页面，在实时告警列表中，单击此告警。在“告警详情”区域，获取告警所在主机IP地址。
2. 使用PuTTY工具，以root用户登录告警所在主机。
3. 执行命令cat /proc/sys/kernel/pid_max，查看系统当前运行的PID最大值pid_max。
4. 若PID使用率超过阈值，将pid_max值增大一倍，执行命令echo 新pid_max值 > /proc/sys/kernel/pid_max。

   示例：echo 65536 > /proc/sys/kernel/pid_max

5. 等待5分钟，检查该告警是否恢复。
   • 是，处理完毕。
   • 否，执行步骤 6。

检查系统环境是否异常。

1. 联系操作系统维护人员，检查操作系统是否存在异常。
   • 是，恢复操作系统故障，执行步骤 7。
   • 否，执行步骤 8。

2. 等待5分钟，检查该告警是否恢复。
   • 是，处理完毕。
   • 否，执行步骤 8。

收集故障信息。

1. 在主集群的FusionInsight Manager界面，单击“系统设置 > 日志下载”。
2. 在“服务”下拉框中勾选“所有服务”，单击“确定”。
3. 设置日志收集的“开始时间”和“结束时间”分别为告警产生时间的前后30分钟，单击“下载”。