ECS: xDoctor RAP153: ECS-solmujen yhteysraja (1000) saavutettu, ei uutta yhteyttä
Summary: Sovellusten lukeminen ja kirjoittaminen ECS:ään ei pysty muodostamaan lisää kantaliitäntöjä. Joissakin tilanteissa tämä ongelma voi aiheuttaa sen, että tiedot eivät ole käytettävissä, jos sovellus avaa liikaa yhteyksiä, jotka ylittävät oletusarvoiset yhteysrajat. ...
Symptoms
Sovellus ei pysty muodostamaan uusia verkkoyhteyksiä HTTPs-pyynnöille.
Cause
ECS-solmuilla on 1 000 yhteyden solmukohtainen rajoitus. Jos tämä raja ylittyy, dataheadsvc Näyttää seuraavan virheen:
169.xxx.2.9 2021-02-24T21:13:08,792 [qtp85102332-247-acceptor-1@4fda771a-TrafficMetricsNetworkTrafficServerConnector@49de2cc4{HTTP/1.1,[http/1.1]}{10.xxx.xxx.xxx:9020}] INFO ConnectionLimit.java (line 177) Connection Limit(1000) reached for [TrafficMetricsNetworkTrafficServerConnector@49de2cc4{HTTP/1.1,[http/1.1]}{10.xxx.xxx.xxx:9020}, TrafficMetricsNetworkTrafficServerConnector@4e293c35{SSL,[ssl, http/1.1]}{10.xxx.xxx.xxx:9021}]
Saat lisätietoja jäsentämällä lokit svc_log laskeaksesi merkinnät "Yhteysraja (1000) saavutettu" viimeisen 30 minuutin aikana.
Komennot:
# svc_log dataheadsvc "Connection Limit(1000) cleared" -start "30 minutes ago" -sh -st minute # svc_log dataheadsvc "Connection Limit(1000) cleared" -start "24 hour ago" -sh -st hour
Esimerkki:
admin@node1:~># svc_log dataheadsvc "Connection Limit(1000) cleared" -start "30 minutes ago" -sh -st minute
svc_log v1.0.24 (svc_tools v1.8.6.0) Started 2021-02-26 18:47:10
Running on nodes: <All nodes>
Time range: 2021-02-24 21:00:00 - 2021-02-24 21:30:59
Filter string(s): 'Connection Limit(1000) cleared'
Show nodename(s): True
Search reclaim logs (if any): False
Count of message occurrences per minute:
# Log
Time Entries
------------------------------
2021-02-24 21:01:xx 0
2021-02-24 21:02:xx 0
2021-02-24 21:03:xx 0
2021-02-24 21:04:xx 41
2021-02-24 21:05:xx 134
2021-02-24 21:06:xx 8
2021-02-24 21:07:xx 10
2021-02-24 21:08:xx 11
2021-02-24 21:09:xx 0
2021-02-24 21:10:xx 0
2021-02-24 21:11:xx 0
2021-02-24 21:12:xx 412
2021-02-24 21:13:xx 650
2021-02-24 21:14:xx 0
2021-02-24 21:15:xx 0
2021-02-24 21:16:xx 0
2021-02-24 21:17:xx 0
2021-02-24 21:18:xx 0
2021-02-24 21:19:xx 0
2021-02-24 21:20:xx 0
2021-02-24 21:21:xx 0
2021-02-24 21:22:xx 0
2021-02-24 21:23:xx 0
2021-02-24 21:24:xx 0
2021-02-24 21:25:xx 0
2021-02-24 21:26:xx 0
2021-02-24 21:27:xx 0
2021-02-24 21:28:xx 0
2021-02-24 21:29:xx 0
2021-02-24 21:30:xx 0
Total: 1266
Resolution
Tämä ongelma liittyy yleensä sovelluksen tapaan avata ja sulkea verkkoyhteyksiä. Käyttäjän sovelluksen tai kuormituksentasauksen tulisi käsitellä yhteydet ja sulkea yhteydet, kun ne on valmis. Sovelluksen tulisi aina yrittää ratkaista ongelma omalta osaltaan ennen ECS:n muuttamista, koska se kuormittaa ECS:ää enemmän.
Voit tunnistaa ongelman käyttämällä netstat tapahtuman aikana saadaksesi IP-osoitteet, jotka ovat muodostaneet yhteyksiä.
Komento:
# sudo ss | grep 9020
Esimerkki:
admin@ecsnode1:~> sudo ss | grep 9020 ESTAB 0 0 [::ffff:10.xx.xxx.71]:9020 [::ffff:10.xxx.xxx.9]:56134
Jos haluat nähdä yhteyksien määrän nykyisessä ajassa, käytä tätä komentoa:
admin@ecsnode1:~> sudo ss -tn sport = :9020 | wc -l