Data Domain: U řešení Data Domain Virtual Edition (DDVE) nasazeného v cloudu (ATOS) může dojít k zaplnění úložiště místních metadat.

Data Domain Virtual Edition (DDVE) je čistě softwarové úložné zařízení, které může být nasazeno místně nebo v cloudu. ATOS (Active Tier on Object Storage) je jiný název pro řešení DDVE nasazené v cloudu.
Místně řešení DDVE podporuje nástroj VMware, Hyper-V, KVM a VxRail.
V cloudu běží software Data Domain Virtual Edition v následujících umístěních:

• Amazon Web Services (AWS) (cloud a cloudové prostředí Gov)
• Azure (cloud a cloudové prostředí Gov)
• Cloud VMware na cloudových platformách AWS
• Google Cloud Platform (GCP)

Řešení DDVE v cloudu není to stejné jako cloudová vrstva. Cloudová vrstva je odlišný produkt, který lze nasadit pouze na místní hardwarové systémy DD a řešení DDVE.
Pokud řešení DDVE nasazené v cloudu zaplní své úložiště místních metadat, zobrazí se následující výstraha:

EVT-SPACE-00004: Space usage in metadata storage has exceeded 100% threshold.

Řešení DDVE nasazené v cloudu (ATOS) podporuje dva typy úložiště dat:

• Blokové úložiště (používá se pro data a metadata nebo metadata v systémech DDVE s povoleným úložištěm objektů, tzv. ATOS).
• Úložiště Hot Blob se také označuje jako úložiště objektů (používá se jenom pro data).

Disky metadat v řešení DDVE nasazeném systémem ATOS se zaplní následujícím: Index, odkazy na segmenty LP, kontejnery CMETA (metadata) a data správce adresáře (DM)
Většina nasazení používá (úložiště Hot Blob nebo úložiště objektů), protože se jedná o aktuální doporučení pro cloudová nasazení. Všechna data se zapisují pomocí úložiště objektů, ale 10 % místa je definováno jako blokové úložiště pro metadata systému souborů DD. Určení velikosti místních metadat je spekulace založená na velikosti licencované kapacity. V době nasazení se odhaduje 10% využití metadat pro 10násobný faktor deduplikace. Systém DDVE se 100% využitím úložiště metadat nemůže přijímat zálohy.

V následujících případech může řešení DDVE vyčerpat prostor v úložišti místních metadat:

• Odstranění duplicit je vyšší než 10x, a proto jsou požadavky na metadata vyšší než to, co bylo nasazeno ve velikosti metadat (výchozí 10 %).
• Velký počet snapshotů nebo staré snapshoty mohou zvětšit velikost metadat

U řešení ATOS DDVE, které fungují jako cíle pro replikaci souborů (řízené klonování CCR / replikace spravovaných souborů MFR), může být zaznamenáno větší množství metadat:

• Pokud se nereplikují všechny základní soubory, bude mít cílové řešení ATOS DDVE vyšší využití metadat.
• V tomto scénáři replikace plně nevyužívá optimalizací Virtual Synthetics, protože jako taková potřebuje více místa pro ukládání metadat.
• Tento typ problému byl zaznamenán v NW CCR, kde se nezdá, že by byly replikovány všechny základní soubory. To způsobí, že cíl bude mít vyšší využití metadat.

Řešením tohoto problému by bylo přidat další disky jako místní úložiště metadat.

Rozšíření velikosti disku s metadaty umožňují pouze řešení AWS a Azure, pokud už byl přidělen maximální povolený počet disků. Kapacita metadat pro existující disky s metadaty se může zvýšit o 1TiB přírůstky. To neplatí pro první disk s metadaty. Podrobnosti naleznete v části „Rozšíření úložiště metadat“ v příručce.

• Průvodce instalací a správou systému PowerProtect DD Virtual Edition 7.x ve službě Azure Cloud
• Průvodce instalací a správou systému PowerProtect DD Virtual Edition 7.x ve službě Amazon Web Services

DŮLEŽITÉ INFORMACE PŘI PŘIDÁVÁNÍ DISKŮ PRO METADATA:

• Použití disků pro metadata různých velikostí vytváří nerovnováhu indexu.
• Každý disk pro metadata přidaný do aktivní vrstvy by měl mít vlastní skupinu ploten, o to se obvykle postará software. Maximální známý počet skupin ploten je 16.
• Pokud překročíte maximální počet skupin ploten (16), disky pro metadata budou mít stejnou skupinu ploten. Operace I/O u disků ve stejných skupinách ploten probíhají postupně.
• Doporučené velikosti najdete v příručce, většinou doporučujeme přírůstek 1 TiB, v závislosti na poskytovateli cloudu jsou však možné i vyšší velikosti.
• Rozšiřte pouze disky metadat u řešení AWS a Azure. Rozšířením disků metadat u libovolného poskytovatele se poškodí řešení DDVE nebo bude rozšířený prostor nevyužitý.

1. Zkontrolujte využití metadat. Pokud dosáhlo 100 %, potřebuje více přiřazených disků.

   • Níže je uvedený příklad, některé výstupy se mohou lišit v závislosti na poskytovateli cloudu, viz Příručka k instalaci a správě:
   • Zobrazí využití metadat.

   # filesys show space tier active local-metadata
   --------------------------
   Active Tier: local-metadata usage
   Size GiB   Used GiB   Avail GiB     Use%
   --------   --------   ---------   ------
     1293.0     1291.5         1.5   100.0%             -> We can see Metadata space is full.
   --------   --------   ---------   ------

2. Proces přidávání dalších disků metadat se liší v závislosti na poskytovateli cloudu. Viz jednotlivé příručky poskytovatele cloudu ve spodní části.

   • Zobrazí použité disky.

   # disk show hardware
   ------------------
   Disk   Slot        Manufacturer/Model     Firmware   Serial No.   Capacity    Type
          (pci/idx)                                                                  
   ----   ---------   --------------------   --------   ----------   ---------   -----
   dev1   -/a         Virtual BLOCK Device   n/a        (unknown)    250.0 GiB   BLOCK  -> DDOS Disk
   dev2   -/b         Virtual BLOCK Device   n/a        (unknown)    10.0 GiB    BLOCK  -> NVRAM disk
   dev3   -/c         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
   dev4   -/d         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
   ----   ---------   --------------------   --------   ----------   ---------   -----
   4 drives present.

   1. Přejděte do konzole AWS/GCP/AZURE a přidejte úložiště do řešení DDVE. V tomto případě je přidán disk o velikosti 1 TiB. Je označen jako dev5 a nezapomeňte, že nesmíte rozšiřovat ani manipulovat s žádným z ostatních stávajících disků.
      PŘÍRUČKY pro řešení DDVE v cloudu (Níže jsou zveřejněny pouze příspěvky pro řešení DDVE V4)
      Příručka k instalaci a správě řešení DDVEV4 na platformě Microsoft Azure.
      https://support.emc.com/docu91981_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Azure-Installation-and-Administration-Guide.pdf?language=en_US
      Řešení DDVEV4 na platformě Google Cloud Platform (GC)
      https://support.emc.com/docu91982_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Google-Cloud-Platform-(GCP)-Installation-and-Administration-Guide.pdf?language=en_US
      Příručka k instalaci a správě řešení DDVE4 ve webových službách Amazon (AWS)
      https://support.emc.com/docu91980_Data_Domain_Virtual_Edition_4.0_with_DD_OS_6.2.0.10_in_Amazon_Web_Services_(AWS)_Installation_and_Administration_Guide.pdf?language=en_US
      UPOZORNĚNÍ: V době čtení tohoto článku mohou existovat nové a aktualizované příručky k instalaci či správě.
   2. V této fázi se předpokládá, že byl přidán nový disk o velikosti 1 TiB, který se na výstupu zobrazí jako disk dev5.

      # disk show hardware
      ------------------
      Disk   Slot        Manufacturer/Model     Firmware   Serial No.   Capacity    Type
             (pci/idx)                                                                  
      ----   ---------   --------------------   --------   ----------   ---------   -----
      dev1   -/a         Virtual BLOCK Device   n/a        (unknown)    250.0 GiB   BLOCK  -> DDOS Disk
      dev2   -/b         Virtual BLOCK Device   n/a        (unknown)    10.0 GiB    BLOCK  -> NVRAM disk
      dev3   -/c         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
      dev4   -/d         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
      dev5   -/e         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Newly added disk for metadata, unused.
      ----   ---------   --------------------   --------   ----------   ---------   -----

   3. Přidejte nový disk do aktivní vrstvy, v tomto případě se jedná o disk dev5:

      # storage add tier active dev5

      UPOZORNĚNÍ: Přidání dalších disků pro místní metadata řešení DDVE ATOS z rozhraní příkazového řádku může vést k tomu, že se zobrazí zpráva „Local storage size exceeds the maximum required metadata capacity for this configuration“:

      ** Local storage size exceeds the maximum required metadata capacity for this configuration.
      Do you want to continue? (yes|no) [no]:

      Řešení pak naleznete v níže uvedeném článku:
      Data Domain: Chyba „Local storage size exceeds the maximum required metadata capacity for this configuration“.
   4. Rozšiřte systém souborů.

      # filesys expand

3. Potvrďte, že na systém souborů, který byl kvůli nedostatku místa pro metadata pouze ke čtení, lze nyní zapisovat.

   • Zkontrolujte, zda zálohy nyní fungují správně.
   • Zkontrolujte, zda byla příchozí replikace obnovena a zda se zobrazuje provoz.

Tento obsah je přeložený do dalších jazyků:

• https://downloads.dell.com/TranslatedPDF/PT-BR_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/ZH-CN_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/ES_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/DE_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/FR_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/IT_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/JA_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/NL_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/KO_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/RU_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/PT_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/SV_KB537488.pdf

• Rozšíření systému souborů lze provést online.
• Využití metadat je přímo úměrné faktoru odstranění duplicit. Úlohy s vysokými faktory odstranění duplicit vytvářejí větší indexy, takže požadavky na metadata jsou vyšší.
• Staré a velké snapshoty uchovávají data a také zvyšují faktor deduplikace a způsobují, že systému dříve dojdou metadata.
• Existují pouze pokyny k požadavkům na metadata pro nasazení, jedná se o 10 % kapacity disků s metadaty a předpokládají 10násobný koeficient deduplikace. Vyšší poměry odstranění duplicit vyžadují více disků s metadaty.
• Podpora DD nemá pokyny k požadavkům na úložiště místních metadat pro faktory deduplikace vyšší než 10x. Disky s metadaty doporučujeme přidávat v přírůstcích po 1 TiB, dokud nebude dosaženo rovnováhy mezi používáním systému souborů a metadat.
• Není známa žádná metoda, jak předpovědět budoucí využití metadat na základě potenciálních faktorů deduplikace.
• K nevyváženosti indexu může dojít také na discích stejné velikosti. Nejčastějším důvodem by bylo, že nové disky zaznamenaly přírůstky po téměř úplném zaplnění metadat. Starší disky stále obsahují většinu struktur metadat a je požadováno více operací I/O. Když vyprší platnost starších dat, metadata by se měla vyvážit mezi disky.