Data Domain: Skydistribuert (ATOS) Data Domain Virtual Edition (DDVE) kan gå tom for lagring av lokale metadata

Data Domain Virtual Edition (DDVE) er et programvarebasert lagringsverktøy som kan implementeres enten lokalt eller i nettskyen. Active Tier on Object Storage (ATOS) er et annet navn på skydistribuert DDVE.
I stedet støtter DDVE VMware, Hyper-V, KVM og VxRail.
I nettskyen kjører Data Domain Virtual Edition i:

• Amazon Web Services (AWS) (sky og gov sky)
• Azure (sky og gov-sky)
• VMware Cloud på AWS-nettskyplattformer
• Google Cloud-plattformen (GCP)

DDVE på nettsky er ikke det samme som et nettskynivå. Cloud Tier er et annet produkt som bare kan implementeres på lokale maskinvare-DD-er og DDVE-er.
Hvis en DDVE som distribueres i skyen, fyller opp lagringen av lokale metadata, sendes følgende varsel:

EVT-SPACE-00004: Space usage in metadata storage has exceeded 100% threshold.

DDVE distribuert på Cloud (ATOS) støtter to typer datalagring:

• Blokklagring (brukes til data og metadata, eller metadata på objektlagringsaktiverte DDVEer aka ATOS).
• Hot Blob-lagring er også kjent som objektlagring (brukes bare for data)

Metadatadisker på en ATOS-distribuert DDVE fylles ut med: Indeks, LP-segmentreferanser, CMETA-beholdere (metadata) og DM-data
(Directory Manager)De fleste distribusjoner bruker (Hot Blob eller Object Storage), da det er den nåværende anbefalingen for Cloud Deployments. Alle dataene skrives ved hjelp av Object Storage, men 10 % av plassen er definert som blokklagring for DD Filesystem-metadataene. Størrelsen på de lokale metadataene er en spekulasjon basert på størrelsen på den lisensierte kapasiteten. Ved implementeringstidspunktet er 10 % metadatabruk beregnet for en dedupliseringsfaktor på 10x. En DDVE med 100 % metadatalagring kan ikke innta sikkerhetskopier.

På grunn av følgende scenarier kan DDVE gå tom for lagringsplass for lokale metadata:

• Dedupliseringen er høyere enn 10x, som sådan er metadatakravene høyere enn det som ble distribuert i metadatastørrelse (standard 10%).
• Et stort antall eller gamle øyeblikksbilder kan øke metadatastørrelsen

En større mengde metadata kan bli lagt merke til i ATOS DDVEer som fungerer som destinasjoner for filreplikering (kontrollert klonereplikering CCR / Managed File Replication MFR):

• Hvis ikke alle basisfiler er replikert, har mål-ATOS DDVE høyere bruk i metadata.
• I dette scenariet Replikering er IKKE å dra full nytte av Virtual Synthetics optimaliseringer, som sådan trenger mer plass til å lagre metadata.
• Denne typen problem ble lagt merke til i NW CCR, der det ikke ser ut til at alle basisfilene ble replikert. Dette fører til at målet har en høyere metadatabruk.

Løsningen på dette problemet ville være å legge til flere disker / s som lokal metadatalagring.

Bare AWS og Azure tillater utvidelse av diskstørrelse for metadata når maksimalt tillatt antall disker allerede er tildelt. Metadatakapasiteten for eksisterende metadatadisker kan øke intervallene på 1 TiB. Dette gjelder ikke den første metadatadisken. Hvis du vil ha mer informasjon, kan du se delen Utvide metadatalagring i veiledningsdokumentet.

• PowerProtect DD Virtual Edition 7.x i installasjons- og administrasjonsveiledningen for Azure-sky
• Installasjons- og administrasjonsveiledning for PowerProtect DD Virtual Edition 7.x på Amazon Web Services

VIKTIG INFORMATINO NÅR DU LEGGER TIL DISKER FOR METADATA:

• Bruk av metadatadisker av ulik størrelse skaper en indeksubalanse.
• Hver metadatadisk som legges til det aktive nivået, skal ha sin egen spindelgruppe, programvaren gjør dette automatisk. Maksimalt kjent antall spindelgrupper er 16.
• Hvis man går over maks antall spindelgrupper (16), vil metadatadiskene ha samme spindelgruppe. I/O mot disker på de samme spindelgruppene er sekvensiell.
• Se håndboken for de anbefalte størrelsene, de fleste anbefaler en økning på 1 TiB, høyere størrelser er mulig avhengig av skyleverandøren.
• Utvid bare metadatadisker for AWS og Azure. Utvidelse av metadatadisker i en hvilken som helst leverandør gjør DDVE ubrukelig med korrupsjon, eller at den utvidede plassen er ubrukt.

1. Gjennomgå metadatabruken, hvis den nådde 100%, trenger den flere disker tilordnet.

   • Eksemplet nedenfor er angitt, noen utganger kan variere avhengig av skyleverandøren, se installasjons- og administratorhåndboken:
   • Vis metadatabruken

   # filesys show space tier active local-metadata
   --------------------------
   Active Tier: local-metadata usage
   Size GiB   Used GiB   Avail GiB     Use%
   --------   --------   ---------   ------
     1293.0     1291.5         1.5   100.0%             -> We can see Metadata space is full.
   --------   --------   ---------   ------

2. Prosessen med å legge til flere metadatadisker varierer avhengig av skyleverandøren, se hver av håndbøkene for skyleverandøren nederst.

   • Vis hvilke disker som brukes.

   # disk show hardware
   ------------------
   Disk   Slot        Manufacturer/Model     Firmware   Serial No.   Capacity    Type
          (pci/idx)                                                                  
   ----   ---------   --------------------   --------   ----------   ---------   -----
   dev1   -/a         Virtual BLOCK Device   n/a        (unknown)    250.0 GiB   BLOCK  -> DDOS Disk
   dev2   -/b         Virtual BLOCK Device   n/a        (unknown)    10.0 GiB    BLOCK  -> NVRAM disk
   dev3   -/c         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
   dev4   -/d         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
   ----   ---------   --------------------   --------   ----------   ---------   -----
   4 drives present.

   1. Gå til AWS/GCP/AZURE-konsollen, og legg til lagringsplass i DDVE. I dette tilfellet legges det til en 1TiB-disk. Det blir sett på som dev5, og husk å ikke utvide eller berøre noen av de andre eksisterende diskene.
      HÅNDBØKER for DDVE på Cloud (bare lagt ut nedenfor for DDVE V4)
      Brukerhåndbok for installasjon og administrasjon av DDVEV4 på Microsoft Azure.
      
      https://support.emc.com/docu91981_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Azure-Installation-and-Administration-Guide.pdf?language=en_US DDVEV4 på Google Cloud Platform(GC)
      https://support.emc.com/docu91982_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Google-Cloud-Platform-(GCP)-Installation-and-Administration-Guide.pdf?language=en_US
      DDVE4 på Amazon Web Services (AWS), installasjons- og administratorhåndbok
      https://support.emc.com/docu91980_Data_Domain_Virtual_Edition_4.0_with_DD_OS_6.2.0.10_in_Amazon_Web_Services_(AWS)_Installation_and_Administration_Guide.pdf?language=en_US
      OBS: Nye og oppdaterte installasjons- eller administratorhåndbøker kan eksistere når du leser denne artikkelen.
   2. På dette stadiet forutsatt at en ny 1 TiB disk ble lagt til, er dette sett på utdataene som disk dev5.

      # disk show hardware
      ------------------
      Disk   Slot        Manufacturer/Model     Firmware   Serial No.   Capacity    Type
             (pci/idx)                                                                  
      ----   ---------   --------------------   --------   ----------   ---------   -----
      dev1   -/a         Virtual BLOCK Device   n/a        (unknown)    250.0 GiB   BLOCK  -> DDOS Disk
      dev2   -/b         Virtual BLOCK Device   n/a        (unknown)    10.0 GiB    BLOCK  -> NVRAM disk
      dev3   -/c         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
      dev4   -/d         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Currently used for Metadata
      dev5   -/e         Virtual BLOCK Device   n/a        (unknown)    1.0 TiB     BLOCK  -> Newly added disk for metadata, unused.
      ----   ---------   --------------------   --------   ----------   ---------   -----

   3. Legg til den nye disken på aktivt nivå. dev5 for dette eksemplet:

      # storage add tier active dev5

      OBS: Hvis du legger til flere disker i en lokal DDVE ATOS-metadata fra CLI kan produsere, mottas meldingen "Lokal lagringsstørrelse overskrider den maksimalt nødvendige metadatakapasiteten for denne konfigurasjonen":

      ** Local storage size exceeds the maximum required metadata capacity for this configuration.
      Do you want to continue? (yes|no) [no]:

      Se deretter artikkelen nedenfor for oppløsning:
      Data Domain: Lokal lagringsstørrelse overskrider maksimal nødvendig metadatakapasitet for denne konfigurasjonen.
   4. Utvid filsystemet.

      # filesys expand

3. Bekreft at FS som var skrivebeskyttet på grunn av mangel på metadataplass, nå kan skrives til.

   • Sjekk at sikkerhetskopier nå fungerer bra
   • Kontroller at den innkommende replikeringen er gjenopptatt og at trafikk kan sees.

Dette innholdet er oversatt til andre språk:

• https://downloads.dell.com/TranslatedPDF/PT-BR_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/ZH-CN_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/ES_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/DE_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/FR_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/IT_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/JA_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/NL_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/KO_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/RU_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/PT_KB537488.pdf
• https://downloads.dell.com/TranslatedPDF/SV_KB537488.pdf

• Filsystemutvidelsen kan gjøres online.
• Bruk av metadata er direkte proporsjonal med dedupliseringsfaktoren. Arbeidsbelastninger med høye dedupliseringsfaktorer oppretter større indekser, slik at metadatabehovet er høyere.
• Gamle og store øyeblikksbilder inneholder data, og øker også dedupliseringsfaktoren, og fører til at systemet går tom for metadata tidligere.
• Det finnes bare retningslinjer for metadatakrav for distribusjon. Disse er 10 % av kapasiteten på metadatadisker, og antar en dedupliseringsfaktor på 10x. Høyere dedupliseringsforhold krever flere metadatadisker.
• DD-støtte har ikke retningslinjer for lagringskrav for lokal metadata for høyere dedupliseringsfaktorer enn 10x. Metadatadisker anbefales å legges til i intervaller på 1 TiB til det oppnås en balanse mellom filsystembruk og metadatabruk.
• Det finnes ingen kjent metode for å forutsi fremtidig metadatabruk basert på potensielle dedupliseringsfaktorer.
• Indeksubalanse kan også forekomme på disker av samme størrelse. Den vanligste årsaken vil være at nye disker har blitt økt etter at metadata er nesten fulle. De eldre diskene inneholder fortsatt de fleste metadatastrukturene, og det blir bedt om mer I/O. Når eldre data er utløpt, bør metadataene balansere seg selv mellom diskene.