Avamar: A replicação falha com INTERNAL CYCLE ERROR
Sammanfattning: A replicação do Avamar falha com o erro avtar <5445>: ERRO DE CICLO INTERNO: resposta incorreta no DST_ADD_DATA repldata: ADD_HASH_DATA=2 e "MSG_ERR_INVALID_PARAMETERS"
Symptom
Uma grade do Avamar pode apresentar problemas ao replicar backups de um ou mais clients.
Esta situação específica foi encontrada num sistema VSphere Data Protection (VDP). A coluna vdp-client-activity.log fornece as seguintes informações:
2016-10-03 04:11:03 avtar Info <6654>: Replicating backup 244, Label "somebackup-1475002800005", 26.27 GB
2016-10-03 04:16:01 avtar Info <8688>: Status 2016-10-03 04:16:01, 26.00 GB (0 bytes, 0.00% new) 638MB 0% CPU client04_UATRUr8adn0H5ZysJuc9xw#244::/VMFiles/1/
2016-10-03 04:16:04 avtar Info <7694>: Server(vdp05.customer.com) not responding (possible network congestion?) (300 seconds)
2016-10-03 04:16:04 avtar Info <7694>: Server(vdp06.customer.com) not responding (possible network congestion?) (300 seconds)
2016-10-03 04:21:01 avtar Info <8688>: Status 2016-10-03 04:21:01, 26.00 GB (0 bytes, 0.00% new) 638MB 0% CPU client04_UATRUr8adn0H5ZysJuc9xw#244::/VMFiles/1/
2016-10-03 04:21:03 avtar Error <5445>: INTERNAL CYCLE ERROR: bad response in repldata DST_ADD_DATA: ADD_HASH_DATA=2 serial=114 seq=0 flags=R:N:1 kind=7 rsp=MSG_ERR_INVALID_PARAMETERS
2016-10-03 04:16:04 avtar Info <7694>: Server(vdp05.customer.com) not responding (possible network congestion?) (300 seconds)
2016-10-03 04:16:04 avtar Info <7694>: Server(vdp06.customer.com) not responding (possible network congestion?) (300 seconds)
2016-10-03 04:47:43 avtar Info <7694>: Server(vdp05.customer.com) not responding (possible network congestion?) (300 seconds)
Orsak
As mensagens repetidas "possível congestionamento da rede" não significam necessariamente que há um problema de conectividade. Eles indicam que a grade de destino não está respondendo da maneira esperada.
A mensagem de erro fornece mais informações informando que há um problema com as solicitações de grades de origem para ADD_DATA ao VDP de destino "DST_ADD_DATA: ADD_HASH_DATA=2."
Durante a investigação desse problema, não foi possível identificar a causa raiz do problema. "MSG_ERR_INVALID_PARAMETERS" no entanto, a frase-chave INTERNAL CYCLE ERROR é indicativa de possível corrupção de cache do cliente.
Upplösning
O método a seguir pode ser usado para resolver esse comportamento.
(Se esse problema ocorrer repetidamente, entre em contato com a equipe de suporte da Dell Technologies.)
1. Faça uma lista dos clients cujos backups falharam com os erros descritos acima.
2. Copie o grupo de replicação existente para criar um grupo de replicação de "teste". Como alternativa, modifique temporariamente um grupo de replicação existente e certifique-se de que ele contenha apenas os clients com problemas.
3. Criar ou editar o arquivo /usr/local/avamar/var/client/avtar.cmd na grade de origem.
4. Adicione a entrada '--nocache' para o arquivo.
Isso impede que os trabalhos de replicação aproveitem os arquivos de cache do client.
Se o cache do client estiver corrompido, não usá-los poderá determinar se eles são a causa da falha de replicação.
5. Execute o trabalho de replicação que contém os "clients problemáticos" e permita que ele seja concluído.
Se a replicação falhar, este artigo não se aplicará e mais investigações serão necessárias.
Se a replicação for bem-sucedida, os caches do client deverão ser regenerados para os clients problemáticos.
6. Para regenerar os caches do client:
um. Editar /usr/local/avamar/var/client/avtar.cmd outra vez.
b. Remova o '--nocache' entrada e substituí-lo por '--clearcache'.
7. Execute novamente o grupo de replicação de teste para que os caches do client sejam criados novamente. Aguarde até que o trabalho seja concluído.
8. Exclua o avtar.cmd Arquivar ou editar usr/local/avamar/var/client/avtar.cmd e remova o '--clearcache' entrada.
9. Reverta para a configuração original do grupo de replicação, que contém todos os clients que devem ser replicados.
10. Permitir que a replicação agendada seja executada normalmente. Agora, os clients cujos caches foram regenerados devem ser replicados.