Data Domain：数据收集中的空间使用量已超过阈值

ddboost@prdctdd50# alerts show current
Id      Post Time                  Severity   Class        Object          Message
-----   ------------------------   --------   ----------   -------------   ----------------------------------------------------------------------------
p0-69   Fri Jun  2 20:36:00 2017   CRITICAL   Filesystem   FilesysType=2   EVT-SPACE-00004: Space usage in Data Collection has exceeded 100% threshold.
-----   ------------------------   --------   ----------   -------------   ----------------------------------------------------------------------------
There is 1 active alert.
ddboost@prdctdd50# df -kh
 
Active Tier:
Resource           Size GiB    Used GiB   Avail GiB   Use%   Cleanable GiB*
----------------   --------   ---------   ---------   ----   --------------
/data: pre-comp           -   1678028.9           -      -                -
/data: post-comp   165663.3    165663.3         0.0   100%          28605.6
/ddvar                 47.2        10.5        34.3    23%                -
/ddvar/core           984.3       368.6       565.7    39%                -
----------------   --------   ---------   ---------   ----   --------------

• 备份没有过期，并且 DD 包含许多旧文件。
• DD 包含大量小文件。
• DD 是集合复制的源。
• Mtree 快照保存着数据。
• 巨大的复制滞后性导致数据在清理过程中未遭到清理。
• 用户已最大程度地将数据接收到 DD 中。

按照以下步骤对问题进行故障诊断。

1. 查看是否有大量可清理的空间大小。如果有，请开始手动清理，以便回收空间。

2. 备份没有过期。DD 包含许多旧文件。

• 检查备份软件中设置的当前保留策略。
• 在“File Distribution”部分查看最新的自动支持日志。

文件分发

-----------------
59,343 files in 243 directories

                          Count                         Space
               -----------------------------   --------------------------
         Age         Files       %    cumul%        GiB       %    cumul%
   ---------   -----------   -----   -------   --------   -----   -------
       1 day         1,486     2.5       2.5     6447.1     0.9       0.9
      1 week         7,477    12.6      15.1    74390.0    10.1      11.0
     2 weeks        12,183    20.5      35.6    94039.1    12.8      23.7
     1 month        13,050    22.0      57.6   134241.0    18.2      41.9
    2 months         3,432     5.8      63.4   111922.9    15.2      57.1
    3 months         2,417     4.1      67.5    51673.8     7.0      64.1
    6 months         2,562     4.3      71.8   154479.7    21.0      85.1
      1 year         2,806     4.7      76.5    35099.5     4.8      89.8
    > 1 year        13,930    23.5     100.0    74979.7    10.2     100.0
   ---------   -----------   -----   -------   --------   -----   -------

• 如果您最近更改了策略，则可能存在使用旧保留策略接收的文件。从备份软件手动使旧备份过期。
• 如果保留策略和文件分发符合预期，请继续操作。

3. DD 包含大量小文件。

Data Domain 文件系统旨在将接收的数据分段为 4 KB 至 12 KB 的数据段，以便对这些数据段进行重复数据消除。大小在 12 KB 以下的文件可能在 DD 上占用比正常存储更多的空间。如果有许多文件大小为 10 KB 或更小，这可能会影响存储使用情况。

在 DD 的自动支持日志中检查此项。小文件的直方图位于“File Distribution”部分中：

                          Count                         Space
               -----------------------------   --------------------------
        Size         Files       %    cumul%        GiB       %    cumul%
   ---------   -----------   -----   -------   --------   -----   -------
       1 KiB             8     0.0       0.0        0.0     0.0       0.0
      10 KiB        32,792    25.1      25.1        0.2     0.0       0.0
     100 KiB        32,774    25.1      50.2        2.0     0.0       0.0
     500 KiB        10,607     8.1      58.3        2.3     0.0       0.0
       1 MiB         1,653     1.3      59.6        1.2     0.0       0.0
       5 MiB         8,036     6.2      65.7       17.5     0.0       0.0
      10 MiB         2,377     1.8      67.6       15.6     0.0       0.0
      50 MiB         6,680     5.1      72.7      152.1     0.0       0.0
     100 MiB         1,153     0.9      73.5       72.1     0.0       0.0
     500 MiB           517     0.4      73.9      120.5     0.0       0.0
       1 GiB           322     0.2      74.2      233.4     0.0       0.0
       5 GiB         1,432     1.1      75.3     3767.4     0.2       0.2
      10 GiB           581     0.4      75.7     4416.6     0.2       0.4
      50 GiB        23,715    18.2      93.9   606656.4    28.3      28.7
     100 GiB         3,999     3.1      96.9   272684.4    12.7      41.4
     500 GiB         3,456     2.6      99.6   982062.1    45.8      87.2
   > 500 GiB           536     0.4     100.0   268000.0    12.5      99.7
   ---------   -----------   -----   -------   --------   -----   -------

如果这是原因，则 Dell Technologies 推荐设置备份过程，以使小文件极少被接收。更改备份方法，将所有小文件纳入到一个较大的归档（例如，.tar 或.gz 文件），然后才将它们写入 DD。

4. Mtree 快照保存着数据。

• 检查是否有任何旧的未过期或已过期的快照保存着数据。对于所有 Mtree，请运行以下命令：

# snapshot list mtree /data/col1/<Mtree_name>

• 如果发现任何仍然存在并保存着数据的旧快照，则检查是否可以使这些快照过期。如果可以，那么使快照过期。

# snapshot expire <snapshot_name> mtree /data/col1/<Mtree_name>

• 开始并停止清理以删除这些过期的快照：

# filesys clean start
# filesys clean stop

• 验证是否为其快照刚过期的 Mtree 删除快照：

# snapshot list mtree /data/col1/<Mtree_name>

• 如果快照仍然存在，请遵循 Data Domain：MTree_replication 快照未被删除。

5. 巨大的复制滞后性导致数据在清理过程中未被删除。

• 通过运行以下命令，检查 DD 中是否配置了任何复制：

# replication show config

• 通过运行以下命令，检查 DD 中是否存在复制滞后警报或同步截止时间警报：

# alerts show current

• 在命令的输出中检查是否有任何可清理的空间大小：

# df

• 如果存在巨大的复制滞后性，请断开配对，并开始清理以索要 DD 中的空间。完成后，再次重新同步该复制。
• 请参阅 Data Domain - 中断并重新同步目录复制，以中断并重新同步目录复制。

6. 用户已最大程度地将数据接收到 DD 中。

如果上述所有原因似乎都未发生在此处，则 DD 中的空间已填满且达到最大容量，并且用户必须向 DD 中添加更多存储空间。

有关更多信息，请参阅此视频：