Dell Unity: CAVA-servern gick offline och återhämtade sig intermittent
Summary: CAVA-servern gick offline och återställdes intermittent: "Viruskontrollservern xx.xx.xx.xx har stött på ett fel och fungerar inte längre. (Fel: ERROR_AUTH 64)" :: Category=AnvΣndarkomponent=DART_VC "Viruskontrollservern xx.xx.xx.xx är online." :: Category=Användarkomponent=DART_VC. ...
Symptoms
Problemet uppstod på Unity-kod 4.4.0.1536311042 och Windows Server 2016.
Problembeskrivning:
-
Kunden konfigurerade CAVA, de fick nedanstående fel intermittent att CAVA-servern gick offline och kom tillbaka online inom några sekunder.
Följande felloggar visas i EMCSystemLogFile.log"2018-12-28T02:18:22.331Z" "n1988006_spa" "Kittyhawk_safe" "26056" "unix/spa/root" "ERROR" "13:10510021" :: "The virus checker server xx.xx.xx.xx has encountered an error and is no longer operational.(Error: ERROR_AUTH 64)" :: Category=User Component=DART_VC "2018-12-28T02:18:41.486Z" "n1988006_spa" "Kittyhawk_safe" "26056" "unix/spa/root" "NOTICE" "13:1051001d" :: "Virus checker server xx.xx.xx.xx is online." :: Category=User Component=DART_VC "2018-12-28T02:35:42.361Z" "n1988006_spa" "Kittyhawk_safe" "26056" "unix/spa/root" "ERROR" "13:10510021" :: "The virus checker server xx.xx.xx.xx has encountered an error and is no longer operational.(Error: ERROR_AUTH 64)" :: Category=User Component=DART_VC "2018-12-28T02:35:51.678Z" "n1988006_spa" "Kittyhawk_safe" "26056" "unix/spa/root" "NOTICE" "13:1051001d" :: "Virus checker server xx.xx.xx.xx is online." :: Category=User
Samma felmeddelanden rapporterades också i c4_safe_ktrace.log som:
2018/12/28-21:32:25.865594 115K 7F86FEB3E709 sade:VC: 3:33:[Rick] The virus checker server 160.46.85.196 has encountered an error and is no longer operational.(Error: ERROR_AUT 2018/12/28-21:32:25.865596 0 7F86FEB3E709 sade:VC: 3:33:[Rick] H 64) 2018/12/28-21:32:25.865617 19 7F8790D83702 sade:SOCK_STREAM: 3:[core] T_DISCON_REQ: (fd=0x1a0, NS=0) ShutdownStream() request UNSUPPORTED! 2018/12/28-21:32:25.865622 4 7F8790D83702 sade:SOCK_STREAM: 3:[core] T_DISCON_REQ: (fd=0x1a0, NS=0) Handling as DisconnectCloseStream()! -- 2018/12/28-21:32:53.272520 0 7FC1D8ADC70A std:PSMSYS:PSMSYS:psmDataAreaClose(1:13): PENDED... 2018/12/28-21:32:55.127022 1.8M 7F86FEB3E702 sade:VC: 5:29:[Rick] Virus checker server 160.46.85.196 is online. 2018/12/28-21:32:55.128201 1177 7F8790DC7704 sade:SOCK_STREAM: 3:[core] T_DISCON_REQ: (fd=0x1cb, NS=0) ShutdownStream() request UNSUPPORTED! 2018/12/28-21:32:55.128206 3 7F8790DC7704 sade:SOCK_STREAM: 3:[core] T_DISCON_REQ: (fd=0x1cb, NS=0) Handling as DisconnectCloseStream()!
-
Felet inträffade slumpmässigt utan något visst mönster. Det verkar som om CAVA-tjänsten inte påverkas.
-
KB#462457 följdes upp, men vi såg ingen tidsförskjutning mellan CAVA-server/Unity/Windows DC-server.
-
Nätverksspårningar visar att CAVA-servern skickade FSCTL_VALIDATE_NEGOTIATE_INFO Ioctl-begäran men att Unity inte svarade och kopplade från TCP-anslutningen.
När problemet uppstod skickade CAVA-servern en FSCTL_VALIDATE_NEGOTIATE_INFO Ioctl-begäran, men Unity svarade inte och slutförde anslutningen.# Bra exempel
5817 0.433916 CAVA_IP CIFS_IP SMB2 156 Tree Connect Request Tree: \\rick\CHECK$ 5820 0.433983 CIFS_IP CAVA_IP SMB2 138 Tree Connect Response 5823 0.434164 CAVA_IP CIFS_IP SMB2 212 Ioctl Request FSCTL_VALIDATE_NEGOTIATE_INFO 5826 0.434217 CIFS_IP CAVA_IP SMB2 194 Ioctl Response FSCTL_VALIDATE_NEGOTIATE_INFO <=========== good case
# Exempel på dåliga fall
1806 0.096779 CAVA_IP CIFS_IP SMB2 156 Tree Connect Request Tree: \\rick\CHECK$ 1807 0.096854 CIFS_IP CAVA_IP SMB2 138 Tree Connect Response 1818 0.097124 CAVA_IP CIFS_IP SMB2 212 Ioctl Request FSCTL_VALIDATE_NEGOTIATE_INFO 1820 0.097200 CIFS_IP CAVA_IP TCP 54 445 52006 [FIN, ACK] Seq=85 Ack=261 Win=304 Len=0 <=========== bad case
-
Det här problemet skulle påverka CIFS-datakopiering som att använda emcopy för att försöka migrera data från VNX till Unity.
De kör flera kopior samtidigt, och ibland misslyckas olika kopior varje gång med felet.Client OS : Microsoft (build 9200) TH000 : 02:28:08 : ERROR (53) : unable get server info from \\cifsserver.exmaple.net
Cause
Det här är ett problem eftersom Unity måste verifiera informationen med den första anslutningen, inte med den bundna anslutningen. Och det orsakar kundproblem.
Resolution
Detta är problemet bara med SMB-versionen 3.0.2, även om de byter till 3.1 eller 2.1 fungerar det. Och även i 3.0.2 har de en lösning.
Alternativ lösning: Dislabe Multichannel på Windows-server eller CAVA-server
Kör PowerShell som administratör och gör sedan följande:
PS C:\windows\system32> Get-SmbClientConfiguration ConnectionCountPerRssNetworkInterface : 4 DirectoryCacheEntriesMax : 16 DirectoryCacheEntrySizeMax : 65536 DirectoryCacheLifetime : 10 DormantFileLimit : 1023 EnableBandwidthThrottling : True EnableByteRangeLockingOnReadOnlyFiles : True EnableInsecureGuestLogons : False EnableLargeMtu : True EnableLoadBalanceScaleOut : True EnableMultiChannel : True EnableSecuritySignature : True ExtendedSessionTimeout : 1000 FileInfoCacheEntriesMax : 64 FileInfoCacheLifetime : 10 FileNotFoundCacheEntriesMax : 128 FileNotFoundCacheLifetime : 5 KeepConn : 600 MaxCmds : 50 MaximumConnectionCountPerServer : 32 OplocksDisabled : False RequireSecuritySignature : False SessionTimeout : 60 UseOpportunisticLocking : True WindowSizeThreshold : 8 PS C:\windows\system32> Set-SmbClientConfiguration -EnableMultiChannel $false Confirm Are you sure you want to perform this action? Performing operation 'Modify' on Target 'SMB Client Configuration'. [Y] Yes [A] Yes to All [N] No [L] No to All [S] Suspend [?] Help (default is "Y"): yes PS C:\windows\system32> Get-SmbClientConfiguration ConnectionCountPerRssNetworkInterface : 4 DirectoryCacheEntriesMax : 16 DirectoryCacheEntrySizeMax : 65536 DirectoryCacheLifetime : 10 DormantFileLimit : 1023 EnableBandwidthThrottling : True EnableByteRangeLockingOnReadOnlyFiles : True EnableInsecureGuestLogons : False EnableLargeMtu : True EnableLoadBalanceScaleOut : True EnableMultiChannel : False EnableSecuritySignature : True ExtendedSessionTimeout : 1000 FileInfoCacheEntriesMax : 64 FileInfoCacheLifetime : 10 FileNotFoundCacheEntriesMax : 128 FileNotFoundCacheLifetime : 5 KeepConn : 600 MaxCmds : 50 MaximumConnectionCountPerServer : 32 OplocksDisabled : False RequireSecuritySignature : False SessionTimeout : 60 UseOpportunisticLocking : True WindowSizeThreshold : 8