Dell Technologies VxRail: Suuri suorittimen kiista NSX-reunasolmussa.

Summary: Dell Technologies VxRail: Suuri suorittimen kiista NSX-reunasolmussa. On selvitettävä, mikä aiheuttaa suorittimen suuren käytön nsx-reunasolmussa.

This article applies to This article does not apply to This article is not tied to any specific product. Not all product versions are identified in this article.
Check out other resources

Symptoms

ESXi-solmussa on suuri suorittimen ongelma, erityisesti NSX-reunasolmussa.
Jos käynnistät tämän Edge-solmun ja siinä on käytössä EcMP (Equal cost Multipath), suorittimen suuri kiista löytyy seuraavasta reunasolmusta ja paljon verkkoliikennettä. Alkuperäinen versio palautuu normaaliksi.
Itse reunasolmussa on normaali kuormitus eikä tiettyä verkkosijaintia voida hylätä.


Cause

Tämä johtuu suorittimen suuresta käytöstä ja jonkin edge-virtuaaliverkkokortin korkeasta verkkoliikenteestä.

Suorittimen käytön vertailu:

Viallinen reuna 
 xxx    27  454.64  471.21   43.19 2307.95    7.32   13.72  334.52    2.67    0.00    0.00    0.00
Hyvä reuna   
 xxx    27  240.09  225.96   20.80 2507.98    6.72    8.39  443.93    1.71    0.00    0.00    0.00


Suorittimen suoritusprosenttien vertailu:

Viallinen reuna 
  ID      GID NAME             NWLD   %USED    %RUN    %SYS   %WAIT %VMWAIT    %RDY   %IDLE  %OVRLP   %CSTP  %MLMTD  %SWPWT
16580792 16580792 xxx            27  454.64  471.21   43.19 2307.95    7.32   13.72  334.52    2.67    0.00    0.00    0.00
   
Hyvä reuna 
  ID      GID NAME             NWLD   %USED    %RUN    %SYS   %WAIT %VMWAIT    %RDY   %IDLE  %OVRLP   %CSTP  %MLMTD  %SWPWT
10908367 10908367 xxx            27  240.09  225.96   20.80 2507.98    6.72    8.39  443.93    1.71    0.00    0.00    0.00


RX:n ja TX:n verkkoporttien vertailu: 
PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/s  MbTX/s   PSZTX    PKTRX/s  MbRX/s   PSZRX %DRPTX %DRPRX
50331714 2666974:xxx.eth2               vmnic2 DvsPortset-1        519615.172729.88  688.00  128623.96  694.32  707.00   0.00   0.00
50331715 2666974:xxx.eth1               vmnic3 DvsPortset-1        76622.01  523.06  894.00  230747.221126.70  640.00   0.00   0.00
50331716 2666974:xxx.eth0               vmnic6 DvsPortset-1        51422.12  168.87  430.00  312557.221691.50  709.00   0.00   0.00
PORT-ID USED-BY                         TEAM-PNIC DNAME              PKTTX/s  MbTX/s   PSZTX    PKTRX/s  MbRX/s   PSZRX %DRPTX %DRPRX
50331744 1752165:xxx.eth2               vmnic3 DvsPortset-1        42856.22  238.49  729.00   50329.21  262.45  683.00   0.00   0.00
50331745 1752165:xxx.eth1               vmnic7 DvsPortset-1        22069.93   91.24  541.00   20044.33   96.35  630.00   0.00   0.00
50331746 1752165:xxx.eth0               vmnic2 DvsPortset-1        27771.00  169.72  801.00   23548.13  144.95  806.00   0.00   0.00

Pakettikohtainen vertailu:

Viallinen reuna 
    "rxqueue": { "count": 4, "details": [
    {"intridx": 0, "pps": 30175, "mbps": 203.9, "errs": 0.0},
    {"intridx": 1, "pps": 17175, "mbps": 61.1, "errs": 0.0},
    {"intridx": 2, "pps": 15626, "mbps": 51.4, "errs": 0.0},
    {"intridx": 3, "pps": 14596, "mbps": 57.4, "errs": 0.0} ]},
  "txqueue": { "count": 4, "details": [
    {"intridx": 0, "pps": 121634, "mbps": 828.2, "errs": 0.0},
    {"intridx": 1, "pps": 105483, "mbps": 708.5, "errs": 0.0},
    {"intridx": 2, "pps": 137687, "mbps": 1087.9, "errs": 0.0},
    {"intridx": 3, "pps": 116488, "mbps": 831.6, "errs": 0.0} ]},

Hyvä reuna 
    "rxqueue": { "count": 4, "details": [
    {"intridx": 0, "pps": 22388, "mbps": 115.1, "errs": 0.0},
    {"intridx": 1, "pps": 54248, "mbps": 497.1, "errs": 0.0},
    {"intridx": 2, "pps": 67004, "mbps": 650.2, "errs": 0.0},
    {"intridx": 3, "pps": 22688, "mbps": 118.8, "errs": 0.0} ]},
  "txqueue": { "count": 4, "details": [
    {"intridx": 0, "pps": 21222, "mbps": 125.0, "errs": 0.0},
    {"intridx": 1, "pps": 46125, "mbps": 384.3, "errs": 0.0},
    {"intridx": 2, "pps": 22771, "mbps": 131.7, "errs": 0.0},
    {"intridx": 3, "pps": 29040, "mbps": 162.0, "errs": 0.0} ]},


Tietyn edge-solmun vnic-verkkokortin verkkoliikenne on suurta. Tietty sovellus, joka aiheuttaa suurta liikennettä, tallennetaan edge-virtuaalikoneeseen, joka toimii yhdyskäytävänä.
Alla on lopulliset wireshark-tiedot.

WireShark_Output.png



 
 
 

Resolution

Korjaa ongelma seuraavasti:
  • Jos tietty sovellus jää kiinni suuren verkkoliikenteen luomisesta tietyssä portissa, ota yhteys sovellustiimiin.
  • Tarkista verkkokomponenttien rakenne, jotta tietyissä solmuissa ei synny suuria liikennemääriä.

Selvitä ongelman syy seuraavalla vianmäärityksen työnkululla.

1. Ota edge node -suunnittelutila käyttöön, jotta voit tallentaa järjestelmän kuormituksen ja suorittaa yläreunan juuritilassa. 
/home/secureall/secureall/sem/WEB-INF/classes/GetSpockEdgePassword.sh edge-xx (edge-xx could be found on nsx manager GUI)
logon console of edge node with admin->enable>debug engineeringmode enable->st en-> 

2. Tallenna ESXi-solmun esxtop-tiedot. Parhaan tuloksen voi verrata normaalia reunasolmua käyttävässä ESXi-solmussa ja ongelmallista reunasolmua käyttävässä ESXi-solmussa.
 
V. esxtop : suorita siirretyssä ESXi-isännässä.
B. esxtop ja n: suorita siirretyssä ESXi-isännässä.
C. esxtop suoritinydintä kohden käyttämällä ongelmallisen virtuaalikoneen nykyistä GID-merkkiä. Hae GID-arvo, paina E-näppäintä ja syötä GID-numero.
D. Tarkastele kaikkia kyseiseen edge vm:ään liittyviä tietoja.

3. Tarkista tilastotiedot suorittamalla net stats. Tarkista tuloksen Packet per Second -tilastot ja vertaa niitä normaalissa reunasolmussa käyttävään ESXi-solmuun.
  
'net-stats -A -t WwQqihVvh -i 5 -n 2' - run on the migrated ESXi host and got following high figure
  "txqueue": { "count": 4, "details": [
    {"intridx": 0, "pps": 121634, "mbps": 828.2, "errs": 0.0},
    {"intridx": 1, "pps": 105483, "mbps": 708.5, "errs": 0.0},
    {"intridx": 2, "pps": 137687, "mbps": 1087.9, "errs": 0.0},
    {"intridx": 3, "pps": 116488, "mbps": 831.6, "errs": 0.0} ]},

4. Selvitä Wireshark-verkko-ohjelmistolla, mikä sovellus loi eniten liikennettä.
 
A. Hae ESXi-isännän komentotulkin ESG-virtuaalikoneen switchport-tiedot komennolla net-stats -l. Merkitse kyseisen edge-virtuaalikoneen verkkokortin kytkinportit muistiin. Siten tiedät, minkä tyyppistä liikennettä tämä virtuaalinen verkkokortti kulkee.
 
B. Tallenna kaikkien liittyvien switchport-porttien pakettikuvaus yksi kerrallaan minuutiksi ja .pcap-tiedostoon. Muuta määritysten mukaan. 
pktcap-uw --switchport  --capture VnicTx,VnicRx -o /vmfs/volumes//.pcap

5. Aseta kaikki collect.pcap-pakettitiedot wiresharkiin, jotta raportti saadaan aikajärjestykseen. Selvitä portti, josta suurin osa liikenteestä tuli, tutustumalla sen lähde- ja kohde-IP-osoitteeseen.

6. ECMP-ympäristössä on kuormitusliikennettä. Se on kiinnitetty reunasolmuun ECMP-hajautusarvolla. Se siirretään toiseen ESG:hen, jos ESG ladataan tai otetaan uudelleen käyttöön. Sen jälkeen ESG, johon tämä liikenne siirretään, alkaa ilmoittaa suorittimen suuresta käytöstä.
Liikenne jaetaan oletuksena kaikkien ECMP-parien kesken sen sisäisen hajautusalgoritmin perusteella, joka käyttää kahta tuples(srcIP+dstIP) -algoritmia. Siten kaikkia portin TCP/1556-liikennettä ei ole kiinnitetty tiettyyn reunaan.
Esimerkissä tähän reunaan on kiinnitetty suuri varmuuskopiointiliikenne, jonka vuoksi ESXi tarjoaa ESG-virtuaalikoneeseen lisää suoritinsyklejä kyseiselle liikenteelle. Siksi suorittimen käyttöaste on suuri ESXi/vCenter-tasolla, mutta ESG:n vieraskäyttöjärjestelmässä suorittimen käyttöaste on normaali. Tämä on siis yleisesti myös normaalia toimintaa.

Affected Products

VxRail Appliance Family, VxRail Appliance Series
Article Properties
Article Number: 000202066
Article Type: Solution
Last Modified: 16 May 2023
Version:  3
Find answers to your questions from other Dell users
Support Services
Check if your device is covered by Support Services.