VNX:由于 /nas/http/logs/error_log未正确修剪,/nas 分区已填满
摘要: CS-平台-MasterControl-EMERGENCY-6-守护程序-HttpErrorlog-微调器-意外退出-状态-256-ifexit-1-exitstatus-1-ifsignal-0-termsig-0-ifstop-0-stopsig-0-ifdump-0
本文适用于
本文不适用于
本文并非针对某种特定的产品。
本文并非包含所有产品版本。
症状
由于守护程序 HttpErrorlog Trimmer
意外退出,控制台上的 Nas 分区填满守护程序 HttpErrorlog 微调程序
意外退出,控制台上的 Nas 分区填满守护程序 HttpErrorlog 微调程序
原因
守护程序 HttpErrorlog 修整程序意外退出,导致 /nas/http/logs/error_log 快速填满,而不修整旧日志。这将导致 /nas 分区完全填满。
[root@VNX5300-CS logs]# cd /nas/log/
[root@VNX5300-CS log]# nas_logviewer sys_log |grep -i trimmer
Nov 24 22:20:16 2016:CS_PLATFORM:MasterControl:EMERGENCY:6:::::D aemon HttpErrorlog 修剪器意外退出(状态 = 256); ifexit=1, exitstatus=1, ifsignal=0, termsig=0, ifstop=0, stopsig=0, ifdump=0.
Jan 6 04:07:45 2017:CS_PLATFORM:MasterControl:EMERGENCY:6:::::D aemon HttpErrorlog Trimmer 意外退出(状态 = 256);ifexit=1, exitstatus=1, ifsignal=0, termsig=0, ifstop=0, stopsig=0, ifdump=0.
Jan 7 04:12:14 2017:CS_PLATFORM:MasterControl:EMERGENCY:6:::::D aemon HttpErrorlog Trimmer 意外退出(状态 = 256);ifexit=1, exitstatus=1, ifsignal=0, termsig=0, ifstop=0, stopsig=0, ifdump=0.
Jan 8 04:16:30 2017:CS_PLATFORM:MasterControl:EMERGENCY:6:::::D aemon HttpErrorlog Trimmer 意外退出(状态 = 256);ifexit=1, exitstatus=1, ifsignal=0, termsig=0, ifstop=0, stopsig=0, ifdump=0.
Jan 9 04:20:34 2017:CS_PLATFORM:MasterControl:EMERGENCY:6:::::D aemon HttpErrorlog Trimmer 意外退出(状态 = 256);ifexit=1, exitstatus=1, ifsignal=0, termsig=0, ifstop=0, stopsig=0, ifdump=0
[root@VNX5300-MAD-CS log]# nas_logviewer /nas/log/sys_log |grep -i “/nas filling up”
Nov 24 23:03:01 2016:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[28707]:FS /dev/hda5 装载在 /nas 填满上(100%,最大值 = 90%)。
Jan 9 04:03:02 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[3399]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
Jan 9 05:03:01 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[870]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
Jan 9 06:03:01 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[31397]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
Jan 9 07:03:01 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[29006]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
Jan 9 08:03:01 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[27077]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
Jan 9 09:03:01 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[24549]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
[root@VNX5300-CS logs]# cd /nas/log/
[root@VNX5300-CS log]# nas_logviewer sys_log |grep -i trimmer
Nov 24 22:20:16 2016:CS_PLATFORM:MasterControl:EMERGENCY:6:::::D aemon HttpErrorlog 修剪器意外退出(状态 = 256); ifexit=1, exitstatus=1, ifsignal=0, termsig=0, ifstop=0, stopsig=0, ifdump=0.
Jan 6 04:07:45 2017:CS_PLATFORM:MasterControl:EMERGENCY:6:::::D aemon HttpErrorlog Trimmer 意外退出(状态 = 256);ifexit=1, exitstatus=1, ifsignal=0, termsig=0, ifstop=0, stopsig=0, ifdump=0.
Jan 7 04:12:14 2017:CS_PLATFORM:MasterControl:EMERGENCY:6:::::D aemon HttpErrorlog Trimmer 意外退出(状态 = 256);ifexit=1, exitstatus=1, ifsignal=0, termsig=0, ifstop=0, stopsig=0, ifdump=0.
Jan 8 04:16:30 2017:CS_PLATFORM:MasterControl:EMERGENCY:6:::::D aemon HttpErrorlog Trimmer 意外退出(状态 = 256);ifexit=1, exitstatus=1, ifsignal=0, termsig=0, ifstop=0, stopsig=0, ifdump=0.
Jan 9 04:20:34 2017:CS_PLATFORM:MasterControl:EMERGENCY:6:::::D aemon HttpErrorlog Trimmer 意外退出(状态 = 256);ifexit=1, exitstatus=1, ifsignal=0, termsig=0, ifstop=0, stopsig=0, ifdump=0
[root@VNX5300-MAD-CS log]# nas_logviewer /nas/log/sys_log |grep -i “/nas filling up”
Nov 24 23:03:01 2016:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[28707]:FS /dev/hda5 装载在 /nas 填满上(100%,最大值 = 90%)。
Jan 9 04:03:02 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[3399]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
Jan 9 05:03:01 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[870]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
Jan 9 06:03:01 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[31397]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
Jan 9 07:03:01 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[29006]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
Jan 9 08:03:01 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[27077]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
Jan 9 09:03:01 2017:CS_PLATFORM:ADMIN:CRITICAL:24:::::d skMon[24549]:FS /dev/hda5 装载在 /nas 填满上(98% 时,最大值 = 90%)。
解决方案
执行 find 命令以检查是否是 /nas/http/logs/error_log导致此问题。
示例:
[root@VNX5300-CS nasadmin]# find /nas -xdev -size +5M | xargs ls -lh | sort -n -k5-rw-r
--r-- 1 root root 685M Jan 9 09:58 /nas/http/logs/error_log
find /nas -xdev -size +5M | xargs ls -lh | sort -n -k5
解决方法:
1. 清空 /nas/http/logs/error_log 以立即释放 /nas
[root@VNX5300-CS logs]# cd /nas/http/logs/ [root@VNX5300-CS logs]
# echo “”>
error_log2.Make sure /nas partition is below 90%
[root@VNX5300-CS logs]# df -h /nas
Filesystem Size Used Avail Use% Mounted on
/dev/hda5 2.0G 1.2G 734M 62% /nas
3. Verify the /nas/http/logs/error_log size are not be increase.
[root@VNX5300-MAD-CS log]# cd /nas/http/logs/
[root@VNX5300-MAD-CS logs]# ls -la err*
-rw-r--r-- 1 root root 41198 Jan 9 10:09 error_log-rw-r
--r-- 1 root root 533417 Jan 9 04:20 error_log.1.gz-rw-r
--r-- 1 root root 555765 Jan 8 04:16 error_log.2.gz-rw-r
--r-- 1 root root 579574 Jan 7 04:12 error_log.3.gz
如果是这样,则重新启动(故障切换,然后故障恢复)控制台,如下所示:
[nasadmin@VNX5300-CS log]$ su - root
[root@VNX5300-MAD-CS log]# reboot
4./nas 分区应稳定,并且现在的使用率低于 90%。
示例:
[root@VNX5300-CS nasadmin]# find /nas -xdev -size +5M | xargs ls -lh | sort -n -k5-rw-r
--r-- 1 root root 685M Jan 9 09:58 /nas/http/logs/error_log
find /nas -xdev -size +5M | xargs ls -lh | sort -n -k5
解决方法:
1. 清空 /nas/http/logs/error_log 以立即释放 /nas
[root@VNX5300-CS logs]# cd /nas/http/logs/ [root@VNX5300-CS logs]
# echo “”>
error_log2.Make sure /nas partition is below 90%
[root@VNX5300-CS logs]# df -h /nas
Filesystem Size Used Avail Use% Mounted on
/dev/hda5 2.0G 1.2G 734M 62% /nas
3. Verify the /nas/http/logs/error_log size are not be increase.
[root@VNX5300-MAD-CS log]# cd /nas/http/logs/
[root@VNX5300-MAD-CS logs]# ls -la err*
-rw-r--r-- 1 root root 41198 Jan 9 10:09 error_log-rw-r
--r-- 1 root root 533417 Jan 9 04:20 error_log.1.gz-rw-r
--r-- 1 root root 555765 Jan 8 04:16 error_log.2.gz-rw-r
--r-- 1 root root 579574 Jan 7 04:12 error_log.3.gz
如果是这样,则重新启动(故障切换,然后故障恢复)控制台,如下所示:
[nasadmin@VNX5300-CS log]$ su - root
[root@VNX5300-MAD-CS log]# reboot
4./nas 分区应稳定,并且现在的使用率低于 90%。
受影响的产品
VNX/VNXe产品
VNX VG10, VNX VG2, VNX VG50, VNX VG8, VNX1 Series, VNX2 Series, VNX5200, VNX5300, VNX5400, VNX5500, VNX5600, VNX5700, VNX5800, VNX7500, VNX7600, VNX8000, VNX/VNXe文章属性
文章编号: 000065245
文章类型: Solution
上次修改时间: 06 11月 2025
版本: 4
从其他戴尔用户那里查找问题的答案
支持服务
检查您的设备是否在支持服务涵盖的范围内。