VNX: Dahili kontrol noktası yenilemesi sırasında CIFS sunucusuyla bağlantısı kesilen istemciler

Büyük Dizinler
Nasdirtool, etkilenen üretim dosya sistemlerinin tek bir dizinde

500.000'den fazla dosya içeren birden fazla dizin içerdiğini doğruladı Gönderen: nasdirtool çıktı:
.....
/root_vdm_5/Applications/Appstorage/Images,95616,1458761 <=== 95MB boyutu ve 1.4 milyon dosya
/root_vdm_6/Production/SubDirectory2/REP,150731,2104554 <=== 150MB boyut ve 2.1 milyon dosya



Kaynak taraftaki dizide çoğaltma için kullanılan dahili kontrol noktalarının güncellenmesi sırasında bazı CIFS İstemcilerinin VNX CIFS Sunucusu ile bağlantısı kesiliyor.

Diğer paylaşımlardaki diğer CIFS İstemcileri ve NFS İstemcileri normal şekilde çalışıyor.

Veri taşıyıcıda yüksek CPU kullanımı sıklıkla görülebilir, dizinlerin içeriğinin ne kadar büyük olduğuna bağlı olarak veri taşıyıcı CPU kullanımı %100'e ulaşabilir.  


[nasadmin@VNX-CS0 tmp]$ server_stats server_2 -i 60
server_2 CPU Network Network dVol dVol
Timestamp Util In Out Read Write
% KiB/s KiB/s KiB/s KiB/s
10:41:25 99 16123 62578 61912 28048
10:42:25 98 4242 63170 62433 9793
10:43:25 99 2935 46987 48618 8918
10:44:25 99 7499 45901 46373 13019
10:45:25 99 4564 47836 48018 9625
10:46:25 98 3973 52316 52167 9035
10:47:25 98 9777 60167 55127 16238
10:48:25 97 18513 76583 70269 26258
10:49:25 98 11885 43789 43595 17238
10:50:25 99 17868 55491 52966 21029
10:51:25 99 8171 43491 43013 11961
10:52:25 99 8835 50947 50328 13369


Olay sırasında alınan bir ağ yakalaması, istemciden sunucuya TCP iletişiminin düzgün çalıştığını ancak CIFS Sunucusunun sorunu SMB Protokol Düzeyinde yaşayan belirli istemciye yanıt vermediğini ve bunun sonucunda istemci zaman aşımına neden olduğunu gösterdi.

Çoğaltma için kullanılan kaynak taraf Dosya sistemi, tek bir dizinde 500.000'den fazla dosya içeren dizinler içerir. Dosya Sürümü için EMC VNX OE de belgelendiği gibi, tek bir dizinde 500.000'den fazla dosya olması performans sorunlarına neden olur.

Sorun sırasında veri taşıyıcı günlüğünden aşağıdaki olaylar kaydedilir:

2016-08-12 12:58:40: SMB: 6:[VDM2] Quota:getFsAndLock for Thread 1SMB415 aborted (client WINCLIENT01 disconnected)
2016-08-12 12:58:49: SMB: 6:[VDM2] Quota:getFsAndLock for Thread 1SMB034 aborted (client WINCLIENT02 disconnected)

2016-08-12 13:09:29: SMB: 6:[VDM2] Quota:getFsAndLock for Thread 1SMB356 aborted (client WINCLIENT03 disconnected)
2016-08-12 13:09:29: SMB: 6:[VDM2] Quota:İş Parçacığı 1SMB358 için getFsAndLock iptal edildi (istemci WINCLIENT04 bağlantısı kesildi)



Data mover günlüğü, sorunun dahili çoğaltma kontrol noktası yenilemesine

karşılık geldiğini gösteriyor Bu kaynak tarafı dizisinde
kontrol noktası yenilemesi için normal hızlı FS duraklaması örneği 2016-08-19 12:33:39: 26042826752: SVFS: 6: pause() request: fsid:1103
2016-08-19 12:33:39: 26042826752: SVFS: 6: fsid:1103
   
üzerinde duraklatma yapıldı Bu durumda bazı işlemler duraklamayı
geciktiriyor 2016-08-19 12:42:36: 26042826752: SVFS: 6: fsid:1103'te pause() istendi...

2016-08-19 12:45:17: 26041909248: SMB: 6:[VDM2] Quota:getFsAndLock for Thread 1SMB396 aborted (client WINCLIENT01 disconnected)
2016-08-19 12:45:26: 26041909248: SMB: 6:[VDM2] Quota:getFsAndLock for Thread 1SMB478 aborted (client WINCLIENT02 disconnected)
...
2016-08-19 13:00:47: 26041909248: SMB: 6:[VDM2] Quota:getFsAndLock for Thread 1SMB298 aborted (client WINCLIENT03 disconnected)
2016-08-19 13:00:52: 26042826752: SVFS: 6: fsid:1103'te

duraklatma yapıldı Kaynak tarafı Dahili Kontrol Noktası yenilemesi Yukarıdaki yukarıdaki duraklatma, normal olmayan davranışı gösterir. Duraklamanın bu kadar uzun sürmesine neyin sebep olduğunu doğrulamak için bir güç paniği yapıldı ve panik döküm dosyasının analizi, dosya sisteminin tek bir dizinde milyonlarca dosya içeren dizinler içerdiğini doğruladı.

Üretim dosya sistemine yeni bir alt dizin yapısı yerleştirilmelidir. Sorunlu dizinlerdeki dosyalar, tek bir dizinde 500.000 dosyayı geçmeyecek şekilde yeni dizinler arasında dağıtılmalıdır. Orijinal sorunlu dizinler daha sonra VNX Yöneticisi tarafından silinmelidir.

   

Kılavuz/Şartname	Maksimum test edilen değer	Yorum
Dizin başına dosya sayısı	500,000	Bu sayının aşılması performans sorunlarına neden olur.