Data Domain: 클라우드에서 배포된 (ATOS) DDVE(Data Domain Virtual Edition)의 로컬 메타데이터 스토리지가 부족할 수 있음
Summary: 클라우드 배포(ATOS) DDVE(Data Domain Virtual Edition)의 로컬 메타데이터 스토리지가 부족할 수 있습니다.
Symptoms
DDVE(Data Domain Virtual Edition)는 온프레미스 또는 클라우드에 배포할 수 있는 소프트웨어 전용 스토리지 어플라이언스입니다. ATOS(Active Tier on Object Storage)는 클라우드 배포 DDVE의 또 다른 이름입니다.
온프레미스에서 DDVE는 VMware, Hyper-V, KVM 및 VxRail을 지원합니다.
클라우드에서 Data Domain Virtual Edition은 다음과 같은 환경에서 실행됩니다.
- AWS(Amazon Web Services)(클라우드 및 Gov 클라우드)
- Azure(클라우드 및 Gov 클라우드)
- VMware Cloud on AWS 클라우드 플랫폼
- GCP(Google Cloud Platform)
DDVE on Cloud는 Cloud Tier와 동일하지 않습니다. Cloud Tier는 온프레미스 하드웨어 DD 및 DDVE에만 배포할 수 있는 별개의 제품입니다.
클라우드에 배포된 DDVE가 로컬 메타데이터 스토리지를 가득 채우면 다음 알림이 표시됩니다.
EVT-SPACE-00004: Space usage in metadata storage has exceeded 100% threshold.
Cause
클라우드에 배포된 DDVE(ATOS)는 두 가지 유형의 데이터 스토리지를 지원합니다.
- 블록 스토리지(데이터 및 메타데이터 또는 오브젝트 스토리지가 활성화된 DDVE의 메타데이터(ATOS)에 사용됨)
- 오브젝트 스토리지라고도 하는 Hot Blob 스토리지(데이터에만 사용됨)
ATOS 배포 DDVE의 메타데이터 디스크는 다음으로 채워집니다. 인덱스, LP 세그먼트 참조, CMETA(메타데이터) 컨테이너 및 DM(Directory Manager) 데이터
클라우드 배포에 대한 현재 권장 사항이므로 대부분의 배포에서 Hot Blob 또는 오브젝트 스토리지를 사용하고 있습니다. 모든 데이터는 오브젝트 스토리지를 사용하여 기록되지만 공간의 10%는 DD 파일 시스템 메타데이터를 위한 블록 스토리지로 정의됩니다. 로컬 메타데이터의 크기는 라이선스가 부여된 용량의 크기를 기준으로 추측한 것입니다. 배포 시 10배의 중복 제거 계수에 대해 10%의 메타데이터 사용량이 예상됩니다. 메타데이터 스토리지 사용량이 100%인 DDVE는 백업을 수집할 수 없습니다.
다음과 같은 시나리오로 인해 DDVE에 로컬 메타데이터 스토리지 공간이 부족할 수 있습니다.
- 메타데이터 요구 사항이 배포된 메타데이터 크기(기본값 10%)보다 높기 때문에 중복 제거가 10배보다 높습니다.
- 스냅샷이 많거나 오래된 경우 메타데이터 크기가 커질 수 있습니다.
파일 복제의 대상 역할을 하는 ATOS DDVE(Controlled Clone Replication CCR/Managed File Replication MFR)에서 더 많은 양의 메타데이터가 발견될 수 있습니다.
- 모든 기본 파일이 복제되지는 않는 경우 대상 ATOS DDVE의 메타데이터 사용량이 더 높습니다.
- 이 시나리오에서 복제는 메타데이터를 저장하는 데 더 많은 공간이 필요하기 때문에 가상 통합 최적화를 최대한 활용하지 않습니다.
- 이러한 유형의 문제는 NW CCR에서 발견되었으며 모든 기본 파일이 복제되지 않은 것 같습니다. 이로 인해 대상의 메타데이터 사용량이 높아집니다.
Resolution
이 문제의 해결 방법은 디스크를 로컬 메타데이터 스토리지로 추가하는 것입니다.
허용되는 최대 디스크 수가 이미 할당된 경우 AWS와 Azure만 메타데이터 디스크 크기 확장을 허용합니다. 기존 메타데이터 디스크의 메타데이터 용량은 1TiB 단위로 증가할 수 있습니다. 첫 번째 메타데이터 디스크에는 해당되지 않습니다. 자세한 내용은 가이드 문서의 "메타데이터 스토리지 확장" 섹션을 참조하십시오.
- Azure 클라우드 내 PowerProtect DD Virtual Edition 7.x 설치 및 관리 가이드
- Amazon Web Services 기반 PowerProtect DD Virtual Edition 7.x 설치 및 관리 가이드
메타데이터용 디스크를 추가할 때 중요한 정보:
- 크기가 다른 메타데이터 디스크를 사용하면 인덱스 불균형이 발생합니다.
- 활성 계층에 추가된 각 메타데이터 디스크에는 자체 스핀들 그룹이 있어야 하며, 소프트웨어에서 이 작업을 자동으로 수행합니다. 알려진 최대 스핀들 그룹 수는 16개입니다.
- 최대 스핀들 그룹 수(16개)를 초과하면 메타데이터 디스크가 동일한 스핀들 그룹이 됩니다. 동일한 스핀들 그룹의 디스크에 대한 I/O는 순차적입니다.
- 권장 크기는 설명서를 참조하십시오. 대부분의 경우 1TiB 단위가 권장되며, 클라우드 공급업체에 따라 더 큰 크기가 가능합니다.
- AWS 및 Azure에 대한 메타데이터 디스크만 확장합니다. 공급업체에서 메타데이터 디스크를 확장하면 DDVE가 손상되어 사용할 수 없게 되거나 확장된 공간이 사용되지 않게 됩니다.
-
메타데이터 사용량을 검토하고 100%에 도달하면 더 많은 디스크를 할당해야 합니다.
- 아래의 예가 제공되며, 일부 출력은 클라우드 공급업체에 따라 다를 수 있습니다. 자세한 내용은 설치 및 관리 설명서를 참조하십시오.
- 메타데이터 사용량을 표시합니다.
# filesys show space tier active local-metadata -------------------------- Active Tier: local-metadata usage Size GiB Used GiB Avail GiB Use% -------- -------- --------- ------ 1293.0 1291.5 1.5 100.0% -> We can see Metadata space is full. -------- -------- --------- ------
-
메타데이터 디스크를 추가하는 프로세스는 클라우드 공급업체에 따라 다릅니다. 하단의 각 클라우드 공급업체 설명서를 참조하십시오.
- 사용된 디스크를 표시합니다.
# disk show hardware ------------------ Disk Slot Manufacturer/Model Firmware Serial No. Capacity Type (pci/idx) ---- --------- -------------------- -------- ---------- --------- ----- dev1 -/a Virtual BLOCK Device n/a (unknown) 250.0 GiB BLOCK -> DDOS Disk dev2 -/b Virtual BLOCK Device n/a (unknown) 10.0 GiB BLOCK -> NVRAM disk dev3 -/c Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata dev4 -/d Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata ---- --------- -------------------- -------- ---------- --------- ----- 4 drives present.
- AWS/GCP/Azure 콘솔로 이동하여 DDVE에 스토리지를 추가합니다. 이 경우 1TiB 디스크가 추가됩니다. dev5로 표시되며, 다른 기존 디스크를 확장하거나 건드리지 않아야 합니다.
DDVE on Cloud 설명서(DDVE V4에 대해서만 아래에 게시됨)
DDVEV4 on Microsoft Azure 설치 및 관리 설명서
https://support.emc.com/docu91981_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Azure-Installation-and-Administration-Guide.pdf?language=en_US
DDVEV4 on GC(Google Cloud Platform)
https://support.emc.com/docu91982_Data-Domain-Virtual-Edition-4.0-with-DD-OS-6.2.0.10-in-Google-Cloud-Platform-(GCP)-Installation-and-Administration-Guide.pdf?language=en_US
DDVE4 on AWS(Amazon Web Services), 설치 및 관리 설명서
https://support.emc.com/docu91980_Data_Domain_Virtual_Edition_4.0_with_DD_OS_6.2.0.10_in_Amazon_Web_Services_(AWS)_Installation_and_Administration_Guide.pdf?language=en_US주의: 이 문서를 읽을 당시 신규 및 업데이트된 설치 또는 관리 설명서가 존재할 수 있습니다. - 이 단계에서 새 1TiB 디스크가 추가되었다고 가정하면 출력에 디스크 dev5로 표시됩니다.
# disk show hardware ------------------ Disk Slot Manufacturer/Model Firmware Serial No. Capacity Type (pci/idx) ---- --------- -------------------- -------- ---------- --------- ----- dev1 -/a Virtual BLOCK Device n/a (unknown) 250.0 GiB BLOCK -> DDOS Disk dev2 -/b Virtual BLOCK Device n/a (unknown) 10.0 GiB BLOCK -> NVRAM disk dev3 -/c Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata dev4 -/d Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Currently used for Metadata dev5 -/e Virtual BLOCK Device n/a (unknown) 1.0 TiB BLOCK -> Newly added disk for metadata, unused. ---- --------- -------------------- -------- ---------- --------- -----
- 활성 계층에 새 디스크를 추가합니다(이 예에서는 dev5).
# storage add tier active dev5
주의: CLI에서 DDVE ATOS 로컬 메타데이터에 디스크를 더 추가하면 "로컬 스토리지 크기가 이 구성에 필요한 최대 메타데이터 용량을 초과합니다"라는 메시지가 나타납니다.** Local storage size exceeds the maximum required metadata capacity for this configuration. Do you want to continue? (yes|no) [no]:
그러면 해결 방법은 아래 문서를 참조하십시오.
Data Domain: 로컬 스토리지 크기가 이 구성에 필요한 최대 메타데이터 용량을 초과합니다. - 파일 시스템을 확장합니다.
# filesys expand
-
메타데이터 공간 부족으로 인해 읽기 전용이었던 FS에 이제 쓰기가 가능한지 확인합니다.
- 이제 백업이 제대로 작동하는지 확인합니다.
- 수신 복제가 재개되었고 트래픽이 표시될 수 있는지 확인합니다.
Additional Information
이 콘텐츠는 다음과 같은 기타 언어로 번역되어 있습니다.
- https://downloads.dell.com/TranslatedPDF/PT-BR_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/ZH-CN_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/ES_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/DE_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/FR_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/IT_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/JA_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/NL_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/KO_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/RU_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/PT_KB537488.pdf
- https://downloads.dell.com/TranslatedPDF/SV_KB537488.pdf
- 파일 시스템 확장은 온라인으로 수행할 수 있습니다.
- 메타데이터 사용량은 중복 제거 계수에 정비례합니다. 중복 제거 계수가 높은 워크로드는 더 큰 인덱스를 생성하므로 메타데이터 요구가 더 높아집니다.
- 오래된 대용량 스냅샷은 데이터를 보존하고 중복 제거 계수도 증가시켜 시스템의 메타데이터가 더 빨리 소진되도록 합니다.
- 배포를 위한 메타데이터 요구 사항 가이드라인만 있으며, 이는 메타데이터 디스크의 용량의 10%이고 10배의 중복 제거 계수를 가정합니다. 중복 제거 비율이 높을수록 더 많은 메타데이터 디스크가 필요합니다.
- DD 지원에는 10배보다 높은 중복 제거 계수에 대한 로컬 메타데이터 스토리지 요구 사항 지침이 없습니다. 메타데이터 디스크는 파일 시스템 사용량과 메타데이터 사용량 간의 균형에 도달할 때까지 1TiB 단위로 추가하는 것이 좋습니다.
- 잠재적인 중복 제거 계수를 기반으로 향후 메타데이터 사용량을 예측하는 알려진 방법은 없습니다.
- 인덱스 불균형은 동일한 크기의 디스크에서도 발생할 수 있습니다. 가장 일반적인 이유는 메타데이터가 거의 가득 찬 후 새 디스크가 증가했기 때문입니다. 오래된 디스크는 여전히 대부분의 메타데이터 구조를 유지하며 더 많은 I/O가 요청됩니다. 오래된 데이터가 만료되면 메타데이터가 디스크 간에 균형을 이루어야 합니다.