PowerFlex SDS Proses Kararsızlığı G/Ç Hatasına Neden Oluyor
Summary: SDS sistemden boşaltılmadığı için SDS sürekli olarak yanıt vermiyor ve bu da G/Ç hatalarına neden oluyor.
This article applies to
This article does not apply to
This article is not tied to any specific product.
Not all product versions are identified in this article.
Symptoms
MDM olaylarında, olası uygulama ve SDC raporlama G/Ç hatalarıyla birlikte tekrarlanan SDS bağlantısının kesilmesi (tekrarlayan ayrıştırma) gözlemlenebilir. MDM olaylarında SDS kararsızlığı gözlenir:
# grep ee9b4eb200000002 events.txt | egrep -v "(OSC|SDC_CON|SDC_DISC)" 4284507 2020-10-26 23:38:02.330 SDS_RECONNECTED INFO SDS: sds-********v004 (ID ee9b4eb200000002) reconnected 4284546 2020-10-26 23:38:17.103 SDS_RECONNECTED INFO SDS: sds-********v004 (ID ee9b4eb200000002) reconnected 4284674 2020-10-26 23:40:12.318 SDS_RECONNECTED INFO SDS: sds-********v004 (ID ee9b4eb200000002) reconnected
SDC'nin SDS ile bağlantısı kesiliyor, örneğin ESXi'den:
vmkernel.0:2020-10-27T04:01:01.193Z cpu56:66319)WARNING: [14896504445] Disconnected from SDS with ID ee9b4eb200000002 vmkernel.0:2020-10-27T04:01:02.296Z cpu32:66320)WARNING: [14896505547] Connected to SDS with ID ee9b4eb200000002 vmkernel.0:2020-10-27T04:01:18.232Z cpu35:66319)WARNING: [14896521482] Disconnected from SDS with ID ee9b4eb200000002 vmkernel.0:2020-10-27T04:01:19.332Z cpu35:66319)WARNING: [14896522582] Connected to SDS with ID ee9b4eb200000002 vmkernel.0:2020-10-27T04:01:34.769Z cpu53:66320)WARNING: [14896538017] Disconnected from SDS with ID ee9b4eb200000002
SDC'de G/Ç hatası görünüyor:
2020-10-27T03:38:02.752Z cpu32:66313)WARNING: ScaleIO mapVolIO_ReportIOErrorIfNeeded:491 :[14895126141] IO-ERROR Type TEST_AND_SET. comb: 55880098015. offsetInComb 2721096. SizeInLB 1. SDS_ID 0. Comb Gen 4619. Head Gen 4b30. StartLB ad48. 2020-10-27T03:38:02.752Z cpu32:66313)WARNING: ScaleIO mapVolIO_ReportIOErrorIfNeeded:512 :Vol ID 0x735105ff0000001c. Last vol network error status NOT_CONN(4) Reason (ABORTED) RC (ABORTED) Retry count (5) chan (0) . . . 2020-10-27T04:08:20.234Z cpu35:66313)WARNING: ScaleIO netCon_IsKaNeeded:3761 :CON 0x439dc29f6700 didn't receive message for 30 iterations. Marking as down 2020-10-27T04:08:20.234Z cpu18:66894)WARNING: ScaleIO netSock_RcvIntrn:1920 :Error: Failed to receive 128 data PTR 0x439dc29f5efc socket 0x439dc29f6418 2020-10-27T04:08:20.234Z cpu33:66806)WARNING: ScaleIO netSock_RcvIntrn:1920 :Error: Failed to receive 128 data PTR 0x439dc29f817c socket 0x439dc29f8698 2020-10-27T04:08:20.234Z cpu0:66879)WARNING: ScaleIO netSock_RcvIntrn:1920 :Error: Failed to receive 128 data PTR 0x439dc29f6a7c socket 0x439dc29f6f98 2020-10-27T04:08:20.234Z cpu23:66319)WARNING: [14896943442] Disconnected from SDS with ID ee9b4eb200000002 2020-10-27T04:08:23.246Z cpu37:65868)Res6: 2346: All helpers quiesced (12 cancelled) for vol 'SD4W21AVxFlexCU03': 1280 LFBCs, 20/1 buckets allocated (4 KB), 1 flush, 0 helpers
Tekrarlanan SDS kesintileri ve yeniden bağlantıları meydana gelirse KB de açıklanan sorun büyük olasılıkla meydana gelmektedir. Aşağıdaki örnekte, bir NVDIMM donanım (HW) sorunu, bir SIGBUS hatasına (hatalı bellek erişimi) yol açar ve sinyal 7 ile bir SDS çökmesine neden olur. Uzm.0:
26/10 23:37:55.305617 Termination due to signal 7. PID 2601 Faulting address 0x7efb85004000. errno 0 26/10 23:37:55.306321 Writing backtraces for all UMTs: 26/10 23:38:10.132585 Termination due to signal 7. PID 99889 Faulting address 0x7f5485004000. errno 0 26/10 23:38:10.133167 Writing backtraces for all UMTs:
Ileti:
Oct 26 23:37:55 kernel: mce: Uncorrected hardware memory error in user-access at 3d84e04440 Oct 26 23:37:55 kernel: MCE 0x3d84e04: Killing sds-3.0.1000.20:2601 due to hardware memory corruption Oct 26 23:37:55 kernel: MCE 0x3d84e04: dax page page recovery: Recovered Oct 26 23:37:55 kernel: sds-3.0.1000.20:4006 conflicting memory types 3d84e04000-3d84e05000 uncached-minus<->write-back Oct 26 23:37:55 kernel: reserve_memtype failed [mem 0x3d84e04000-0x3d84e04fff], track uncached-minus, req uncached-minus Oct 26 23:37:55 kernel: Could not invalidate pfn=0x3d84e04 from 1:1 map Oct 26 23:37:56 sh: abrt-dump-oops: Found oopses: 1 Oct 26 23:37:56 sh: abrt-dump-oops: Creating problem directories Oct 26 23:37:56 sh: abrt-dump-oops: Not going to make dump directories world readable because PrivateReports is on Oct 26 23:37:56 systemd: Configuration file /opt/nsr/admin/networker.service is marked executable.
Cause
- Yazılım (SW) veya HW hatası, SDS işleminin yanıt vermemesine ve MDM bağlantısının kesilmesine neden olur.
- SDS, çökme sonrasında kurtarılır ve bu SDS'yi MDM'nin bakış açısından ve SDC dahil olmak üzere diğer tüm sistem bileşenleri için genel kullanılabilir olarak işaretleyen "yeniden yapılandırma aşamasını" geçer.
- 15 saniye sonra SDC, G/Ç'yi (varsayılan) yeniden dener ve bu sırada SDS, "1" noktasında açıklandığı gibi tekrar yanıt vermez.
- Zaman aşımına uğrayan G/Ç başarısız olur ve SDC uygulaması bir G/Ç Hatası bildirir.
- Bu SDS sistemden tahliye edilene kadar "2"→"4" adımları tekrar tekrar gerçekleşebilir.
Resolution
Sistem tasarlandığı şekilde çalışmaktadır.
Seçenek 1:
SDS'yi kümeden kaldırın. Bir SDS'yi kapalı kalma süresine gerek kalmadan istediğiniz zaman kaldırabilirsiniz. Kaldırma işlemi sırasında, ilişkili veriler farklı düğümlere çoğaltılır. Kaldırma işlemi asenkrondur ve uzun sürebilir.
SDS kararsızlığına neden olan donanım ve yazılım sorunlarını giderin ve SDS'yi kümeye iade edin.
Seçenek 2:
Sistemi izleyin ve SDS benzer koşullar altında dalgalanmaya başlarsa SDS'de aşağıdaki komutu çalıştırarak SDS hizmetini durdurun:
Not: SDS hizmetinin durdurulması, yeniden oluşturma işlemini tetikler. Sorun çözüldükten sonra SDS de aşağıdaki komutu çalıştırarak SDS hizmetini yeniden başlatın:
Seçenek 1:
SDS'yi kümeden kaldırın. Bir SDS'yi kapalı kalma süresine gerek kalmadan istediğiniz zaman kaldırabilirsiniz. Kaldırma işlemi sırasında, ilişkili veriler farklı düğümlere çoğaltılır. Kaldırma işlemi asenkrondur ve uzun sürebilir.
Not: Disk bölümleri bu SDS'nin kapasitesini kullanıyorsa ve kullanılabilir boş alanın yetersiz olması nedeniyle kapasite değiştirilemiyorsa, kaldırma işlemi başarısız olur.
SDS kararsızlığına neden olan donanım ve yazılım sorunlarını giderin ve SDS'yi kümeye iade edin.
Seçenek 2:
Sistemi izleyin ve SDS benzer koşullar altında dalgalanmaya başlarsa SDS'de aşağıdaki komutu çalıştırarak SDS hizmetini durdurun:
/opt/emc/scaleio/sds/bin/delete_service.sh
Not: SDS hizmetinin durdurulması, yeniden oluşturma işlemini tetikler. Sorun çözüldükten sonra SDS de aşağıdaki komutu çalıştırarak SDS hizmetini yeniden başlatın:
/opt/emc/scaleio/sds/bin/create_service.sh
Additional Information
PowerFlex Yazılımı sürüm 4.0 için bu tür olaylara karşı dayanıklılık planlanmaktadır.
Affected Products
PowerFlex rack, VxRackArticle Properties
Article Number: 000181511
Article Type: Solution
Last Modified: 07 May 2026
Version: 3
Find answers to your questions from other Dell users
Support Services
Check if your device is covered by Support Services.