PowerScale: Var Bölüm Genişletme Sorunları

Geçerli Isilon Küme Üzerinde Analiz aracı (IOCA) komut dosyası, aşağıdakilerle ilgili aşağıdaki uyarıları oluşturur: /var Bölüm:

System Partition Free Space                       FAIL
  CRITICAL: The following nodes have /var mirrors of different sizes: 1-10
  INFO: Please reference KB 000213248 (https://www.dell.com/support/kbdoc/000213248) for further information.
  INFO: For more information refer to KB article 000041465 found at https://www.dell.com/support/kbdoc/000041465.

Alternatif olarak şöyle de olabilir:

Mirror Status                                     FAIL
  CRITICAL: The mirror pair for var1 appear to be in the same fault domain on nodes: 1-10.
  CRITICAL: The following nodes have /var mirrors of different sizes: 1-10
  INFO: Please open a Technical Support Service Request and reference this failure within the description.
  INFO: Please refer to KB 000213248 (https://www.dell.com/support/kbdoc/en-us/000213248) for further information.

Aksi takdirde sürücü veya kızak değiştirme prosedürü sırasında Gen6 veya Gen6 MLK düğümünde panik oluşabilir.

Düğüm açıldığında /var/log/messages Düğüm dosyasında aşağıdakine benzer hatalar ve panik mesajları gösterilir:

(da21:pmspcbsd0:0:22:0): pccb 0xfffffe8543174480, ccb 0xfffff80e31347000: ccbStatus 3, scsiStatus 5 
(da22:pmspcbsd0:0:23:0): pccb 0xfffffe8543151fe0, ccb 0xfffff807c4753000: ccbStatus 3, scsiStatus 5 
(da21:pmspcbsd0:0:22:0): WRITE(10). CDB: 2a 00 00 04 dd 44 00 00 04 00 
(da21:pmspcbsd0:0:22:0): CAM status: CCB request aborted by the host 
(da22:pmspcbsd0:0:23:0): WRITE(10). CDB: 2a 00 00 04 dd 44 00 00 04 00 
(da21:pmspcbsd0:0:22:0): Retrying command, 3 more tries remain 
(da22:pmspcbsd0:0:23:0): CAM status: CCB request aborted by the host 
(da21:pmspcbsd0:0:22:0): pccb 0xfffffe8543151fe0, ccb 0xfffff80e31347000: ccbStatus 3, scsiStatus 2 
(da22:pmspcbsd0:0:23:0): Retrying command, 3 more tries remain 
(da21:pmspcbsd0:0:22:0): cam_periph_error: SSQ_LOST removing device ccb 0xfffff80e31347000 status 0x8 flags 0x2 
(da22:pmspcbsd0:0:23:0): pccb 0xfffffe8543151fe0, ccb 0xfffff807c4753000: ccbStatus 3, scsiStatus 2 
(da21:pmspcbsd0:0:22:0): Invalidating pack 
(da22:pmspcbsd0:0:23:0): cam_periph_error: SSQ_LOST removing device ccb 0xfffff807c4753000 status 0x8 flags 0x2 
(da22:pmspcbsd0:0:23:0): Invalidating pack 
(da21:pmspcbsd0:0:22:0): removing device entry 
(da21:pmspcbsd0:0:22:0): Periph destroyed 
panic @ time 1681142660.493, thread 0xfffffe874ee12000: mirror/var1: all devices failed (read, offset 1304707072, length 0) 
time = 1681142660 
cpuid = 3, TSC = 0x5e76342b8e8e59 
Panic occurred in module kernel loaded at 0xffffffff80200000: 

Stack: -------------------------------------------------- 
kernel:g_mirror_worker+0x251f 
kernel:fork_exit+0x82 
-------------------------------------------------- 
Disabling swatchdog 
Dumping stacks (40960 bytes)

9.2.1.16 ve üzeri, 9.4.0.6 ve üzeri ve 9.5.0.0 ve üzeri sürümlerde OneFS, yükseltme sırasında /var bölüm boyutunu 2 GB'a genişletir. Genişletme işlemi bu mesajların veya olayların tetiklenmesine neden olabilir.

Yansıma çiftinin aynı hata etki alanında olmasıyla ilgili mesaj Gen6 ve Gen6 MLK düğümlerine (A200, A2000, A300, A3000, H400, H500, H600, H5600, H700, H7000, F800 ve F810) özgüdür. Genişletme, bölüm hata etki alanlarını düzgün bir şekilde doğrulayamaz ve her iki bölümü de /var Aynı sürücü kızağındaki sürücülere yansıtma. Bu, takılı için her iki ayna da kızak çıkarıldığında düğümün paniğine neden olur /var bölümü kızaktadır.

Her ikisi de mirror/var0 veya mirror/var1 aktif olarak hizmet vermektedir /var herhangi bir zamanda bölüm yansıtma. Örnekteki panik mesajından şunu görüyoruz: /mirror/var1 aktif aynaydı. Bakıyorum gmirror status ve isi devices drive list düğüm için komut çıktıları:

Truncated status Komut çıktısı:

gmirror status
     mirror/var1  COMPLETE  da14p3 (ACTIVE) <<<<
                            da13p3 (ACTIVE) <<<<

Komutta drive list Komut çıktısı:

isi devices drive list
Lnn  Location  Device    Lnum  State   Serial       Sled
---------------------------------------------------------
21   Bay  1    /dev/da1  15    L3      xxxxxxxxxxxx N/A
21   Bay  2    /dev/da2  16    L3      xxxxxxxxxxxx N/A
21   Bay  A0   /dev/da5  12    HEALTHY xxxxxxxx     A
21   Bay  A1   /dev/da4  13    HEALTHY xxxxxxxx     A
21   Bay  A2   /dev/da3  14    HEALTHY xxxxxxxx     A
21   Bay  B0   /dev/da8  9     HEALTHY xxxxxxxx     B
21   Bay  B1   /dev/da7  10    HEALTHY xxxxxxxx     B
21   Bay  B2   /dev/da6  11    HEALTHY xxxxxxxx     B
21   Bay  C0   /dev/da11 6     HEALTHY xxxxxxxx     C
21   Bay  C1   /dev/da10 7     HEALTHY xxxxxxxx     C
21   Bay  C2   /dev/da9  8     HEALTHY xxxxxxxx     C
21   Bay  D0   /dev/da14 3     HEALTHY xxxxxxxx     D <<<<
21   Bay  D1   /dev/da13 4     HEALTHY xxxxxxxx     D <<<<
21   Bay  D2   /dev/da12 5     HEALTHY xxxxxxxx     D
21   Bay  E0   /dev/da17 0     HEALTHY xxxxxxxx     E
21   Bay  E1   /dev/da16 1     HEALTHY xxxxxxxx     E
21   Bay  E2   /dev/da15 2     HEALTHY xxxxxxxx     E
---------------------------------------------------------

Bu örnekte, /mirror/var1 D0 ve D1 sürücüleri üzerine inşa edilmiştir. D kızağı kümeden çıkarıldığında, düğüm kızağa erişilememesi nedeniyle panikledi. /var dosya sistemi.

VAR bölümlerinin farklı boyutları, OneFS 9.x çalıştıran tüm Isilon veya PowerScale düğüm tiplerini etkileyebilir. Genişletme için /var yalnızca etkin /var sistemdeki bölüm. Bilinen Son İyi (LKG) bölümü orijinal boyutunda kalır. Etkin ise /var Bölüm %50'den fazla genişletilir ve doldurulur. Bu durum, bölümün bakım için döndürülmesi gerekiyorsa sorunlara neden olabilir.

Bu sorunun kümedeki bir LKG bölümünü etkileyip etkilemediğini belirlemek için aşağıdaki komutu kullanın:

# isi_for_array -sX 'gmirror list var0 var1' | grep -A20 mirror | egrep "var|Media"

Example:

lab-1# isi_for_array -sX 'gmirror list var0 var1' | grep -A20 mirror | egrep "var|Media"
lab-1: 1. Name: mirror/var0
lab-1:    Mediasize: 2147479552 (2.0G)
lab-1:    Mediasize: 2147483648 (2.0G)
lab-1:    Mediasize: 2147483648 (2.0G)
lab-2: 1. Name: mirror/var0
lab-2:    Mediasize: 2147479552 (1.0G) <<<<
lab-2:    Mediasize: 2147483648 (1.0G) <<<<
lab-2:    Mediasize: 2147483648 (1.0G) <<<<
lab-3: 1. Name: mirror/var0
lab-3:    Mediasize: 2147479552 (2.0G)
lab-3:    Mediasize: 2147483648 (2.0G)
lab-3:    Mediasize: 2147483648 (2.0G)
lab-4: 1. Name: mirror/var0
lab-4:    Mediasize: 2147479552 (2.0G)
lab-4:    Mediasize: 2147483648 (2.0G)
lab-4:    Mediasize: 2147483648 (2.0G)
....

Aygıtlardan herhangi biri (1,0 G) boyutuyla geri gelirse etkilenir.

Yukarıdaki örnekte, lab-2'nin var0 Bölümler etkilenir ve düzeltilmesi gerekir. Şunun için komutu yeniden çalıştırın: var1 de etkilenip etkilenmediğini belirlemek için küme genelinde.

ERROR DOMAIN ISSUE ONLY için kalıcı düzeltme aşağıdaki kod sürümlerindedir:

• OneFS 9.5.0.6 
• 9.4.0.16 
• 9.2.1.25 

Farklı boyuttaki /var bölümleri için kalıcı düzeltme üzerinde çalışılıyor. Sorunu çözmek için komut dosyası sürecini izleyin. Yükseltme yapamıyorsanız komut dosyası uygulanan süreci izleyin.
 
Komut dosyasını kullanmak için:

1. Komut dosyasını ve md5 dosyasını kümeye indirin. Dosyaları kümedeki /ifs/data/Isilon_Support dizinine kopyalayın ve md5 karmasının md5 dosyasındaki karmayla eşleştiğini doğrulayın:

Lab-1# mv var_mirror_repair.sh /ifs/data/Isilon_Support/
Lab-1# mv var_mirror_repair.md5 /ifs/data/Isilon_Support/
Lab-1# md5 /ifs/data/Isilon_Support/var_mirror_repair.sh
MD5 (/ifs/data/Isilon_Support/var_mirror_repair.sh) = 0881afeeb39fdaf02e2a90d784e4ed21
Lab-1# # cat /ifs/data/Isilon_Support/var_mirror_repair.md5
0881afeeb39fdaf02e2a90d784e4ed21

2. Karma eşleşmiyorsa komut dosyasını FTP sitesinden indirin ve kümeye yeniden kopyalayın. Karma eşleşirse aşağıdaki komutu kök olarak çalıştırın:

lab-1# sh /ifs/data/Isilon_Support/var_mirror_repair.sh

3. Komut dosyasının çalışması genellikle 5-10 dakika sürer. Büyük (30+ düğüm) veya meşgul kümelerde daha uzun sürebilir. Komut dosyası tamamlandığında, başarılı olup olmadığını veya sorun olup olmadığını bildirir.

Komut dosyasını başlattığınızda aşağıdaki çıktıyı görürsünüz:

Lab-1# sh /ifs/data/Isilon_Support/var_mirror_repair.sh
Full output can be found at:
 /ifs/data/Isilon_Support/var_mirror_repair.FULL_CLUSTER.2023-10-19T092522.csv

Status: 0/4 Nodes checked, 0/4 var0 partitions, 0/4 var1 partitions

Komut dosyası ilerledikçe Durum satırı güncellenir:

Status: 4/4 Nodes checked, 4/4 var0 partitions, 4/4 var1 partitions

Komut dosyası başarıyla tamamlandığında aşağıdakileri görürsünüz:

Status: 4/4 Nodes checked, 4/4 var0 partitions, 4/4 var1 partitions

No issues were identified.

Moving files to: var_mirror_repair.2023-10-19T092522.d
Bundle Location: var_mirror_repair.2023-10-19T092522.tgz

Bu, etkilenen tüm düğümlerin onarıldığını ve komut dosyasında herhangi bir sorun olmadığını gösterir. Alınan çıktı bu örnekten farklıysa Dell Destek ekibiyle iletişime geçin ve paket konumundaki çıktıyı ve günlük dosyalarını sağlayın.