Avamar: Data Domain-integrering: Replikeringen rapporterar felet "Slut på strömmar"

I en Avamar-miljö som är integrerad med Data Domain (DD) slutförs replikeringen delvis med följande undantag som visas i loggarna: 

2019-07-01 17:02:14 avtar Info <41435>: - Data Domain configured in Stand-Alone mode.
2019-07-01 17:02:14 avtar Info <40206>: Setting default storage unit to 'avamar-1315232775' for handle 2
2019-07-01 17:02:14 avtar Info <41440>: Data Domain handle:2 capabilities:0x0020021B
2019-07-01 17:02:14 avtar Info <10609>: Data Domain Destination login to ddxxxx.net complete
2019-07-01 17:02:15 avtar Info <42385>: id:1 Range-Replication selected because it is supported since DDOS 6.0 (container.1.cdsf)
2019-07-01 17:02:15 avtar Info <40160>: - Establishing a connection to the Data Domain system with basic authentication (Connection mode: A:0 E:0).
..
2019-07-01 17:02:18 avtar Info <40160>: - Establishing a connection to the Data Domain system with basic authentication (Connection mode: A:0 E:0).
2019-07-01 17:02:21 avtar Error <0000>: Replication failed - id: 3, unexpected exception caught: ddr_replthread:3:replicateSlice: ddp_filecopy_status failed
[179027] [140372932351744] Mon Jul 1 17:02:21 2019
ddp_filecopy_status() failed, start_offset[0], length[20971520], Err: 5539-filecopy operation failed (nfs: Out of Streams)
[179027] [140372932351744] Mon Jul 1 17:02:19 2019
ddp_filecopy_stop() failed, Err: 5004-nfs filecopy stop failed (nfs: No such file or directory)
...
[179027] [140372992386816] Mon Jul 1 17:02:15 2019
ddp_access() failed, Path avamar-1437556709/STAGING/09a1003e41e2a0d9e3333cf9fbb3345e0b665a0e/BACKUP-01974498BF0587FFD2EC4A97BD201139F29D9516-1D52F902DDF23FC, mode 0 Err: 5004-nfs lookup failed (nfs: No such file or directory)
[179027] [140372992386816] Mon Jul 1 17:02:14 2019
ddp_access() failed, Path avamar-1315232775/STAGING/09a1003e41e2a0d9e3333cf9fbb3345e0b665a0e/BACKUP-01974498BF0587FFD2EC4A97BD201139F29D9516-1D52F902DDF23FC, mode 0 Err: 5004-nfs lookup failed (nfs: No such file or directory)
..

2019-07-01 17:02:29 avtar Info <40176>: - Multi-stream restore summary (current 0, max active 0, max cloned 0, total cloned 0, ddr handle 2): 
2019-07-01 17:02:29 avtar FATAL <0000>: Replication failed
2019-07-01 17:02:29 avtar FATAL <40009>: DDR encountered errors.
2019-07-01 17:02:29 avtar Info <9772>: Starting graceful (staged) termination, DDR_ERROR event received (fatal severity) (wrap-up stage)
2019-07-01 17:02:29 avtar Info <0000>: Entering the 'final' phase of termination, DDR_ERROR need to exit)
2019-07-01 17:02:29 avtar Info <40176>: - Multi-stream restore summary (current 0, max active 0, max cloned 0, total cloned 0, ddr handle 2): 
2019/07/01-14:02:29.25907 [avtar] INTERNAL ERROR: <0001> assert error (result == MSG_ERR_NONE), /local/jenkins/workspace/server_rollup_hotfix_SLES11-64/src/avtar/ade/adelib/interfaceade.cpp line 396
2019-07-01 17:02:29 avtar Info <5675>: Replicated 0 of 78 backups (0 errors) for client "ddxxxx.net"
2019-07-01 17:02:29 avtar Error <6655>: Replicate interrupted.
2019-07-01 17:02:29 avtar Info <7925>: Restored 940.4 KB from selection(s) with 6.000 GB in 1 files
2019-07-01 17:02:29 avtar Info <6090>: Restored 940.4 KB in 0.34 minutes: 159.9 MB/hour (174 files/hour)

Anslutningen mellan både Avamar- och källdatadomänen och käll- och måldatadomänerna hade redan verifierats (med ping, ssh och telnet (eller curl) på portarna 111, 2049, 2051, 2052).

En enda replikgrupp var med flera (4+) klienter.

I replikgruppen var "max-concurrent-processes" inställt på fyra, som replikerade fyra klienter samtidigt.

Detta resulterade i ett större antal strömmar mellan käll- och måldatadomänerna än vad som var tillgängligt.

1. Det maximala antalet strömmar bör kontrolleras på både Data Domain-källan och målet genom att köra följande kommando på respektive Data Domain:

ddboost@dd# ddboost streams show active

--------- Active Streams -------- --------- Soft Limits -------- - Hard Limit -
Name Read Write Repl-out Repl-in Read Write Repl Combined Combined
----------------- ---- ----- -------- ------- ---- ----- ---- -------- --------------
avamar-xxxxx 0 0 0 0 - - - - -
----------------- ---- ----- -------- ------- ---- ----- ---- -------- --------------
DD System Stream Limits: read=6 write=35 repl-in=20 repl-out=18 combined=30

2. Jämför det högsta tillåtna antalet med den faktiska strömaktiviteten som i repl-in eller repl-out på mål respektive källa DD.

Kunskapsbasartikeln Data Domain: Antal strömmar som stöds för DDOS 6.0 har också en lista över antal strömmar som stöds per modell. Den här artikeln innehåller även länkar till tidigare DDOS-versioner 4.0 till 5.7.

3. Granska max-concurrent-processes och maximalt antal Data Domain-replikeringsströmmar.

• Om klienterna replikeras i alfabetisk ordning:

  • De fyra klienterna replikeras samtidigt och skapar 24 strömmar (6 som standard per klient)
  • Standardvärdet kan ändras med hjälp av frihandsflaggan "[avtar]ddr-repl-max-parallel-streams" med ett värde på 1-29 i användargränssnittet.
• Om klienterna replikeras parallellt (poolbaserad replikering) finns det ytterligare en inställning "Maximalt antal Data Domain-replikeringsströmmar" för att styra hur många strömmar per klient.

Som bästa praxis för resursanvändning och -hantering bör du se till att klienterna är indelade i mer än en replikgrupp.

• Värdet på "max-streams" motsvarar "Maximalt antal samtidiga processer" i användargränssnittet.
• Värdet på "max-ddr-streams" motsvarar "Maximalt antal Data Domain-replikeringsströmmar" i användargränssnittet.