Avamar：由於 Data Domain 容量問題，檢查點失敗並出現結果MSG_ERR_DDR_ERROR

Summary: 資料收集中的 Data Domain （DD） 空間使用量已超過 100% 的閾值，導致 Avamar 檢查點失敗並發生MSG_ERR_DDR_ERROR。

This article applies to This article does not apply to This article is not tied to any specific product. Not all product versions are identified in this article.
Check out other resources

Symptoms

排定和手動檢查點都會因MSG_ERR_DDR_ERROR而失敗。

例如：

status.dpn
Mon Aug 19 13:33:53 WEST 2019  [AV-XXX] Mon Aug 19 12:33:53 2019 UTC (Initialized Wed Feb 11 12:42:51 2015 UTC)
Node   IP Address     Version   State   Runlevel  Srvr+Root+User Dis Suspend Load UsedMB Errlen  %Full   Percent Full and Stripe Status by Disk
0.0     10.xxx.x.xx  19.1.0-38  ONLINE fullaccess mhpu+0hpu+0hpu   1 false   0.3 0 31802 52675327  11.8%  12%(onl:4148) 11%(onl:4133) 11%(onl:4135) 11%(onl:4140)  11%(onl:4138) 11%(onl:4147)
Srvr+Root+User Modes = migrate + hfswriteable + persistwriteable + useraccntwriteable

System ID: XXXXXXXX@00:1E:67:87:C4:6B

All reported states=(ONLINE), runlevels=(fullaccess), modes=(mhpu+0hpu+0hpu)
System-Status: ok
Access-Status: full

Checkpoint failed with result MSG_ERR_DDR_ERROR : cp.20190819054530 started Mon Aug 19 06:45:31 2019 ended Mon Aug 19 06:58:24 2019, completed 24840 of 24841 stripes
Last GC: finished Mon Aug 19 05:21:35 2019 after 20m 58s >> recovered 71.89 MB (MSG_ERR_DDR_ERROR)
Last hfscheck failed with result MSG_ERR_DDR_ERROR : started Mon Aug 19 05:34:23
注意：如上例所示，這可能不僅限於檢查點。
 
 

Data Domain 記錄 （/usr/local/avamar/var/ddrmaintlogs/ddrmaint.log） 會報告「I/O 錯誤“：

grep -i Error /usr/local/avamar/var/ddrmaintlogs/ddrmaint.log|grep -v -i "Error not set"
Aug 19 05:15:50 av-XXX ddrmaint.bin[49665]: Error: <4710>Datadomain garbage collect operation failed.
Aug 19 05:34:18 av-XXX ddrmaint.bin[52434]: Warning: Calling DDR_CREATE_SNAPSHOT returned result code:5009 message:I/O error
Aug 19 05:34:18 av-XXX ddrmaint.bin[52434]: Error: cp-create::execute_create_checkpoint - Failed to create checkpoint for avamar-XXXXXXX to snapshot cp.20190819042140 on ddXXX, DDR result code: 5009, desc: I/O error
Aug 19 05:34:18 av-XXX ddrmaint.bin[52434]: Error: <4760>Datadomain checkpoint create operation failed.

Cause

Data Domain （DD） 空間已達到容量。

這可以通過執行以下操作來驗證：

1.連線至 Data Domain。使用 Avamar：如何視需要存取 Data Domain 系統作為參考。

2.檢查是否有任何警示：

alerts show current
Id      Post Time                  Severity   Class        Object          Message
-----   ------------------------   --------   ----------   -------------   ----------------------------------------------------------------------------
p0-87   Fri Aug 16 21:55:33 2019   CRITICAL   Filesystem   FilesysType=2   EVT-SPACE-00004: Space usage in Data Collection has exceeded 100% threshold.
-----   ------------------------   --------   ----------   -------------   ----------------------------------------------------------------------------
There is 1 active alert.
 

3.執行 "df" 命令：

df
Active Tier:
Resource           Size GiB   Used GiB   Avail GiB   Use%   Cleanable GiB*
----------------   --------   --------   ---------   ----   --------------
/data: pre-comp           -       15.1           -      -                -
/data: post-comp    30731.1    30608.8       122.3   100%             13.1
/ddvar                 49.1        8.7        37.9    19%                -
/ddvar/core           158.3        0.1       150.2     0%                -
----------------   --------   --------   ---------   ----   --------------
 * Estimated based on last cleaning of 2019/07/15 06:04:40.

Cloud Tier
Resource           Size GiB   Used GiB   Avail GiB   Use%   Cleanable GiB
----------------   --------   --------   ---------   ----   -------------
/data: pre-comp           -       19.0           -      -               -
/data: post-comp   33487.7*       20.4     33467.4     0%             0.0
----------------   --------   --------   ---------   ----   -------------
* Post-comp size is based on CLOUDTIER-CAPACITY license and might not be same as the cloud storage.

Total:
Resource           Size GiB   Used GiB   Avail GiB   Use%   Cleanable GiB
----------------   --------   --------   ---------   ----   -------------
/data: pre-comp           -       34.1           -      -               -
/data: post-comp    33829.9       36.4     33793.4     0%             0.0
/ddvar                 49.1        8.7        37.9    19%               -
/ddvar/core           158.3        0.1       150.2     0%               -
----------------   --------   --------   ---------   ----   -------------

Resolution

1.在 Data Domain 上：

一個。檢查檔案系統清理狀態：

filesys clean status
 

輸出範例：

未執行清理：

Cleaning finished at 2019/08/19 21:37:46
 

正在執行清理：

Cleaning started at 2019/08/19 06:00:02: phase 3 of 6 (pre-enumeration)
  1.6% complete,     0 GiB free; time: phase  1:26:05, total  1:48:11
 

b.如果正在執行清理，請等待清理完成，然後使用 df 命令檢查容量。

c. 如果未執行清理，請檢查檔案系統清理排程：

filesys clean show schedule
 

範例輸出：

Filesystem cleaning is scheduled to run "Tue" at "0700".
 

d. 如果需要，請啟動手動文件系統清理，並使用”fileysys clean watch" 命令，如以下輸出所示。

filesys clean start
Cleaning started.  Use 'filesys clean watch' to monitor progress.
 
注意：如果在檔案系統清理之後問題仍然存在，請聯絡 Data Domain 檔案系統工程師以取得協助。
 
 

2.在 Avamar 上：

一個。解決 Data Domain 上的容量問題後，請執行手動檢查點：

mccli checkpoint create --override_maintenance_scheduler
注意：mccli 命令需要較長的時間才能完成，但包含管理主控台伺服器 （MCS） 備份 （亦即排清）。
 

b.監視直到完成，並驗證它是否成功。

c. 在下一個維護時段監控格線，以確認所有 Avamar 維護工作 （檢查點、檢查點驗證、 (hfscheck) 並且垃圾回收已成功完成。

Additional Information

如果在清理檔案系統後出現問題，則需要洽詢 Data Domain 檔案系統工程師。

Affected Products

Avamar

Products

Avamar, Avamar Server
Article Properties
Article Number: 000046232
Article Type: Solution
Last Modified: 23 Jul 2025
Version:  6
Find answers to your questions from other Dell users
Support Services
Check if your device is covered by Support Services.