Data Domain: Wykorzystanie miejsca podczas zbierania danych przekracza próg

ddboost@prdctdd50# alerts show current
Id      Post Time                  Severity   Class        Object          Message
-----   ------------------------   --------   ----------   -------------   ----------------------------------------------------------------------------
p0-69   Fri Jun  2 20:36:00 2017   CRITICAL   Filesystem   FilesysType=2   EVT-SPACE-00004: Space usage in Data Collection has exceeded 100% threshold.
-----   ------------------------   --------   ----------   -------------   ----------------------------------------------------------------------------
There is 1 active alert.
ddboost@prdctdd50# df -kh
 
Active Tier:
Resource           Size GiB    Used GiB   Avail GiB   Use%   Cleanable GiB*
----------------   --------   ---------   ---------   ----   --------------
/data: pre-comp           -   1678028.9           -      -                -
/data: post-comp   165663.3    165663.3         0.0   100%          28605.6
/ddvar                 47.2        10.5        34.3    23%                -
/ddvar/core           984.3       368.6       565.7    39%                -
----------------   --------   ---------   ---------   ----   --------------

• Kopie zapasowe nie wygasają, a DD zawiera wiele starych plików.
• DD zawiera ogromną liczbę małych plików.
• DD jest źródłem replikacji kolekcji.
• Migawki MTree przechowują dane.
• Duże opóźnienie replikacji powodują, że dane nie zostają wyczyszczone podczas czyszczenia.
• Użytkownik przyswoił dane w DD na maksymalnym poziomie.

Aby rozwiązać ten problem, wykonaj następujące czynności:

1. Sprawdź, czy rozmiar plików do usunięcia jest duży. Jeśli tak, rozpocznij ręczne usuwanie, aby odzyskać miejsce.

2. Kopie zapasowe nie wygasają. DD zawiera wiele starych plików.

• Sprawdź bieżące zasady przechowywania ustawione w oprogramowaniu do tworzenia kopii zapasowych.
• Sprawdź w sekcji Dystrybucja plików najnowsze dzienniki automatycznej obsługi.

Dystrybucja plików

-----------------
59,343 files in 243 directories

                          Count                         Space
               -----------------------------   --------------------------
         Age         Files       %    cumul%        GiB       %    cumul%
   ---------   -----------   -----   -------   --------   -----   -------
       1 day         1,486     2.5       2.5     6447.1     0.9       0.9
      1 week         7,477    12.6      15.1    74390.0    10.1      11.0
     2 weeks        12,183    20.5      35.6    94039.1    12.8      23.7
     1 month        13,050    22.0      57.6   134241.0    18.2      41.9
    2 months         3,432     5.8      63.4   111922.9    15.2      57.1
    3 months         2,417     4.1      67.5    51673.8     7.0      64.1
    6 months         2,562     4.3      71.8   154479.7    21.0      85.1
      1 year         2,806     4.7      76.5    35099.5     4.8      89.8
    > 1 year        13,930    23.5     100.0    74979.7    10.2     100.0
   ---------   -----------   -----   -------   --------   -----   -------

• Jeśli zasady zostały niedawno zmienione, mogą pojawić się pliki, które są przyswajane według starych zasad przechowywania. Wygaś stare kopie zapasowe ręcznie w oprogramowaniu do tworzenia kopii zapasowych.
• Jeśli zasady przechowywania i dystrybucja plików są zgodnie z oczekiwaniami, przejdź dalej.

3. DD zawiera ogromną liczbę małych plików.

System plików Data Domain jest przeznaczony do segmentowania danych do przyswojenia w segmentach od 4 KB do 12 KB w celu ich deduplikacji. Pliki o rozmiarze poniżej 12 KB mogą potencjalnie zajmować więcej miejsca na DD niż w normalnej pamięci masowej. Jeśli istnieje wiele plików o wielkości 10 KB lub mniejszych, może to wpłynąć na wykorzystanie pamięci masowej.

Sprawdź to w dziennikach autoobsługi DD. Histogram małych plików znajduje się w obszarze Dystrybucja plików:

                          Count                         Space
               -----------------------------   --------------------------
        Size         Files       %    cumul%        GiB       %    cumul%
   ---------   -----------   -----   -------   --------   -----   -------
       1 KiB             8     0.0       0.0        0.0     0.0       0.0
      10 KiB        32,792    25.1      25.1        0.2     0.0       0.0
     100 KiB        32,774    25.1      50.2        2.0     0.0       0.0
     500 KiB        10,607     8.1      58.3        2.3     0.0       0.0
       1 MiB         1,653     1.3      59.6        1.2     0.0       0.0
       5 MiB         8,036     6.2      65.7       17.5     0.0       0.0
      10 MiB         2,377     1.8      67.6       15.6     0.0       0.0
      50 MiB         6,680     5.1      72.7      152.1     0.0       0.0
     100 MiB         1,153     0.9      73.5       72.1     0.0       0.0
     500 MiB           517     0.4      73.9      120.5     0.0       0.0
       1 GiB           322     0.2      74.2      233.4     0.0       0.0
       5 GiB         1,432     1.1      75.3     3767.4     0.2       0.2
      10 GiB           581     0.4      75.7     4416.6     0.2       0.4
      50 GiB        23,715    18.2      93.9   606656.4    28.3      28.7
     100 GiB         3,999     3.1      96.9   272684.4    12.7      41.4
     500 GiB         3,456     2.6      99.6   982062.1    45.8      87.2
   > 500 GiB           536     0.4     100.0   268000.0    12.5      99.7
   ---------   -----------   -----   -------   --------   -----   -------

Jeśli to jest przyczyną, firma Dell Technologies zaleca skonfigurowanie procedury tworzenia kopii zapasowych w taki sposób, aby małe pliki były przyswajane rzadko. Zmień metodę tworzenia kopii zapasowej tak, aby uwzględnić wszystkie małe pliki w jednym większym archiwum (np. .tar lub .gz) przed zapisem ich w DD.

4. Migawki MTree przechowują dane.

• Sprawdź, czy istnieją stare, niewygasłe lub wygasłe migawki przechowujące dane. Dla wszystkich MTree uruchom następujące polecenie:

# snapshot list mtree /data/col1/<Mtree_name>

• Jeśli istnieją tam jakiekolwiek stare migawki przechowujące dane, sprawdź, czy można je wycofać. Jeśli tak, wycofaj te migawki.

# snapshot expire <snapshot_name> mtree /data/col1/<Mtree_name>

• Rozpocznij i zatrzymaj czyszczenie, aby usunąć te wygasłe migawki:

# filesys clean start
# filesys clean stop

• Sprawdź, czy migawki dla struktur MTree, dla których właśnie wygasły migawki, są usunięte:

# snapshot list mtree /data/col1/<Mtree_name>

• Jeśli migawka nadal istnieje, postępuj zgodnie z instrukcjami Data Domain: Migawka MTree_replication nie jest usuwana.

5. Duże opóźnienie replikacji powoduje, że dane nie są usuwane podczas czyszczenia.

• Sprawdź, czy w DD skonfigurowano replikację, uruchamiając polecenie:

# replication show config

• Sprawdź, czy w DD występuje alert dotyczący opóźnienia replikacji lub synchronizacji w czasie, uruchamiając polecenie:

# alerts show current

• Sprawdź, czy w danych wyjściowych polecenia są pliki w rozmiarze do czyszczenia:

# df

• Jeśli występuje duże opóźnienie replikacji, rozłącz parę i rozpocznij czyszczenie, aby zdobyć miejsce w DD. Po zakończeniu ponownie zsynchronizuj replikację.
• Zapoznaj się z Data Domain – replikacja przerwania i ponownej synchronizacji katalogu w celu przerwania i ponownej synchronizacji replikacji katalogu.

6. Użytkownik przyswoił dane w DD na maksymalnym poziomie.

Jeśli wszystkie powyższe przyczyny wydają się tu nie pojawiać, oznacza to, że przestrzeń w DD jest maksymalnie zapełniona, a użytkownik musi dodać więcej pamięci do DD.

Aby uzyskać więcej informacji, zapoznaj się z tym filmem: