主机逻辑磁盘占用率超过阈值

发布时间:  2014-10-25 浏览次数:  164 下载次数:  1
问题描述
FCportal上面报:ALM-15.1000036 主机逻辑磁盘占用率超过阈值,告警目录为:/var/log和/tmp/disk/log。排查后发现/var/log/目录下面date_last_bakup文件中的值被修改导致,由上一次备份时间被修改为itor:send导致日志转储失败。
告警信息
主机逻辑磁盘占用率超过阈值
处理过程
1、使用root账号登陆到告警的CAN节点,执行df –h指令查看/var/log和/tmp/disk/log两个磁盘目录的使用率均为86%。查看/var/log目录下面有wtmp.*,userCommand.*,lastlog.*等日志,如图1所示。cd /var/log/Manage_CNA02目录查看日志只是备份到7月25号,最近20天左右的日志没有备份。

                                                                                               图1
2、查看/var/log目录下面date_last_bakup文件的内容,发现为itor:send,如图2所示,正常情况下应该为上一次转储日志的时间,如图3(测试环境截图)

                                                               图2

                                                                           图3
3、执行如下指令:mv date_last_bakup /home指令将date_last_bakup文件移到/home目录下面。等到下一个备份时间点的时候在/var/log目录下面会自动生成一个新的date_last_bakup文件。再次df –h查看/var/log和/date_last_bakup占用率是否恢复到85%以下。
根因
/var/log目录下面date_last_bakup文件的内容被修改为itor:send导致
解决方案
执行指令mv date_last_bakup /home指令将date_last_bakup文件移到/home目录下面。等到下一个备份时间点的时候在/var/log目录下面会自动生成一个新的date_last_bakup文件
建议与总结

END