Data Domain: Využití místa při sběru dat překročilo prahovou hodnotu

ddboost@prdctdd50# alerts show current
Id      Post Time                  Severity   Class        Object          Message
-----   ------------------------   --------   ----------   -------------   ----------------------------------------------------------------------------
p0-69   Fri Jun  2 20:36:00 2017   CRITICAL   Filesystem   FilesysType=2   EVT-SPACE-00004: Space usage in Data Collection has exceeded 100% threshold.
-----   ------------------------   --------   ----------   -------------   ----------------------------------------------------------------------------
There is 1 active alert.
ddboost@prdctdd50# df -kh
 
Active Tier:
Resource           Size GiB    Used GiB   Avail GiB   Use%   Cleanable GiB*
----------------   --------   ---------   ---------   ----   --------------
/data: pre-comp           -   1678028.9           -      -                -
/data: post-comp   165663.3    165663.3         0.0   100%          28605.6
/ddvar                 47.2        10.5        34.3    23%                -
/ddvar/core           984.3       368.6       565.7    39%                -
----------------   --------   ---------   ---------   ----   --------------

• Platnost záloh nevyprší a systém DD obsahuje velké množství starých souborů.
• Systém DD obsahuje příliš mnoho malých souborů.
• Systém DD je zdroj replikace sběru.
• Snapshoty MTree uchovávají data.
• Velká prodleva replikace způsobuje, že při čištění nedojde k odstranění dat.
• Uživatel importoval data do systému DD na maximální úrovni.

Problém vyřešíte pomocí níže uvedeného postupu.

1. Zkontrolujte, zda je k dispozici velké množství vymazatelného místa. Pokud ano, spusťte ruční čištění, abyste znovu uvolnili místo.

2. Nedochází k vypršení platnosti zálohování. Systém DD tak obsahuje příliš mnoho starých souborů.

• Zkontrolujte aktuální zásady uchovávání nastavené v softwaru pro zálohování.
• Nejnovější protokoly automatické podpory naleznete v části Distribuce souborů.

Distribuce souborů

-----------------
59,343 files in 243 directories

                          Count                         Space
               -----------------------------   --------------------------
         Age         Files       %    cumul%        GiB       %    cumul%
   ---------   -----------   -----   -------   --------   -----   -------
       1 day         1,486     2.5       2.5     6447.1     0.9       0.9
      1 week         7,477    12.6      15.1    74390.0    10.1      11.0
     2 weeks        12,183    20.5      35.6    94039.1    12.8      23.7
     1 month        13,050    22.0      57.6   134241.0    18.2      41.9
    2 months         3,432     5.8      63.4   111922.9    15.2      57.1
    3 months         2,417     4.1      67.5    51673.8     7.0      64.1
    6 months         2,562     4.3      71.8   154479.7    21.0      85.1
      1 year         2,806     4.7      76.5    35099.5     4.8      89.8
    > 1 year        13,930    23.5     100.0    74979.7    10.2     100.0
   ---------   -----------   -----   -------   --------   -----   -------

• Pokud byla zásada nedávno změněna, mohou být k dispozici soubory, které se řídí podle staré zásady uchovávání. Proveďte ruční ukončení platnosti starých záloh ze zálohovacího softwaru.
• Pokud zásady uchovávání a distribuce souborů funguje očekávaným způsobem, pokračujte dále.

3. Systém DD obsahuje příliš mnoho malých souborů.

Systém souborů Data Domain je navržen tak, rozčlenil data do 4kB až 12kB segmentů, aby bylo možné tyto segmenty deduplikovat. Soubory o velikosti do 12 kB mohou v systému DD zabrat více místa, než kdyby byly uloženy v normálním úložišti. Pokud je k dispozici mnoho souborů o velikosti 10 KB nebo menší, může to mít vliv na využití úložiště.

Zkontrolujte to v protokolech automatické podpory systému DD. Histogram malých souborů najdete v části Distribuce souborů:

                          Count                         Space
               -----------------------------   --------------------------
        Size         Files       %    cumul%        GiB       %    cumul%
   ---------   -----------   -----   -------   --------   -----   -------
       1 KiB             8     0.0       0.0        0.0     0.0       0.0
      10 KiB        32,792    25.1      25.1        0.2     0.0       0.0
     100 KiB        32,774    25.1      50.2        2.0     0.0       0.0
     500 KiB        10,607     8.1      58.3        2.3     0.0       0.0
       1 MiB         1,653     1.3      59.6        1.2     0.0       0.0
       5 MiB         8,036     6.2      65.7       17.5     0.0       0.0
      10 MiB         2,377     1.8      67.6       15.6     0.0       0.0
      50 MiB         6,680     5.1      72.7      152.1     0.0       0.0
     100 MiB         1,153     0.9      73.5       72.1     0.0       0.0
     500 MiB           517     0.4      73.9      120.5     0.0       0.0
       1 GiB           322     0.2      74.2      233.4     0.0       0.0
       5 GiB         1,432     1.1      75.3     3767.4     0.2       0.2
      10 GiB           581     0.4      75.7     4416.6     0.2       0.4
      50 GiB        23,715    18.2      93.9   606656.4    28.3      28.7
     100 GiB         3,999     3.1      96.9   272684.4    12.7      41.4
     500 GiB         3,456     2.6      99.6   982062.1    45.8      87.2
   > 500 GiB           536     0.4     100.0   268000.0    12.5      99.7
   ---------   -----------   -----   -------   --------   -----   -------

Pokud je tohle příčina, společnost Dell Technologies doporučuje nastavit proces zálohování tak, aby malé soubory byly importovány jen výjimečně. Změňte metodologii zálohování tak, aby se všechny malé soubory před zápisem do systému DD zahrnuly do jednoho většího archivu (například do souboru .tar nebo .gz).

4. Snapshoty MTree uchovávají data.

• Zkontrolujte, zda jsou k dispozici staré snapshoty s nevypršenou či vypršenou platností, které uchovávají data. U všech oddílů MTree spusťte příkaz:

# snapshot list mtree /data/col1/<Mtree_name>

• Pokud naleznete staré snapshoty, které jsou stále k dispozici a uchovávají data, zkontrolujte, zda lze ukončit jejich platnost. Pokud ano, učiňte tak.

# snapshot expire <snapshot_name> mtree /data/col1/<Mtree_name>

• Spuštěním a ukončením čištění odstraňte tyto snapshoty s vypršenou platností:

# filesys clean start
# filesys clean stop

• Ověřte, zda došlo k odstranění snapshotů, jejichž platnost byla ukončena u oddílů Mtree:

# snapshot list mtree /data/col1/<Mtree_name>

• Pokud jsou snapshoty stále k dispozici, postupujte podle pokynů v části Data Domain: Při replikaci MTree nelze odstranit snapshot.

5. Velká prodleva replikace způsobuje, že při čištění nedojde k odstranění dat.

• Spuštěním následujícího příkazu zkontrolujte, zda je v systému DD nakonfigurována nějaká replikace:

# replication show config

• Spuštěním následujícího příkazu zkontrolujte, zda se v systému DD zobrazuje výstraha ohledně prodlevy replikace nebo synchronizace v čase:

# alerts show current

• Ve výstupu následujícího příkazu zkontrolujte, zda je k dispozici nějaké vymazatelné místo:

# df

• Pokud dochází k velké prodlevě replikace, zrušte párování a spusťte čištění, aby se v systému DD uvolnilo místo. Po dokončení znovu synchronizujte replikaci.
• Informace o přerušení a opětovné synchronizaci replikace adresáře najdete v článku Data Domain – Přerušení a opětovná synchronizace replikace adresáře.

6. Uživatel importoval data do systému DD na maximální úrovni.

Pokud nedochází k žádným výše uvedeným příčinám, pak je kapacita systému DD zcela zaplněná a uživatel musí do systému DD přidat další úložiště.

Další informace naleznete v tomto videu: