Avamar: A criação do checkpoint da máquina virtual falhou e será ignorada do backup

Os backups do Hyper-V de VMs que usam snapshot consistente com aplicativos no conjunto de dados podem falhar com erros semelhantes aos seguintes:

avhypervvss Error <43426>: Checkpoint creation for Virtual machine 'AVAMARPROD01v<GUID>' has failed and will be skipped from backup. For details, please check 'winclustersvc.log'.
avhypervvss Error <43426>: Checkpoint creation for Virtual machine 'DELLVM<GUID>' has failed and will be skipped from backup. For details, please check 'winclustersvc.log'.

Do winclustersvc.log , os seguintes erros podem ser exibidos:

O arquivo de log está localizado no C:\Program Files\avs\var no nó ativo do serviço DELL Avamar Backup Agent.
(O nó ativo que possui esse serviço pode ser determinado a partir da ferramenta Gerenciamento de cluster de failover.)

winclustersvc ERROR<0000>: Failed to execute CreateSnapshot method: Failed to create checkpoint on collection 'AvamarBackup_HVSVR02-03-app-20220503000228-0' (AEE36BC1-A2AD-4682-A71A-80B127A6839F).
winclustersvc ERROR<0000>: Failed to execute CreateSnapshot method: Not found .

Essas falhas de criação de checkpoint poderão ocorrer se o Hyper-V Manager não conseguir criar checkpoints de produção para as VMs afetadas. Os checkpoints de produção são equivalentes ao snapshot consistente com aplicativos para backups do Hyper-V)

As VMs podem ter seus gravadores VSS (Volume Shadowcopy Service, serviço de cópias de sombra de volume) em estado de falha. 

As VMs podem não ter espaço livre em disco suficiente disponível em seus volumes individuais para criar o snapshot do VSS. Qualquer lugar de 10% a 20% de capacidade livre em cada um dos volumes de disco rígido é aconselhável.

As VMs afetadas podem não ter as atualizações e os patches mais recentes do Integration Services ou do sistema operacional (SO) Windows.

Se muitos VMs apresentarem falha com esses erros, os servidores host ou nós de cluster poderão não ser atualizados com as atualizações mais recentes do sistema operacional Windows. Isso pode causar falha nos backups consistentes com aplicativos e consistentes com falhas.

1. Teste a VM fazendo checkpoints manuais usando o Hyper-V Manager e selecionando somente checkpoints de produção usando as seguintes configurações:

IMPORTANTE:  Desmarque a opção "Create standard checkpoints". Isso força o Hyper-V Manager a criar checkpoints de produção em vez de checkpoints padrão. Os checkpoints de produção simulam backups do Avamar Hyper-V usando snapshot consistente com aplicativos.

Se a criação de checkpoint usando o Gerenciador do Hyper-V não conseguir usar Produção ou Padrão, entre em contato com o suporte da Microsoft, se necessário. 

Se o checkpoint de produção falhar, edite as configurações, altere para a opção Checkpoints padrão e repita o procedimento.

Se a criação do checkpoint de produção falhar, mas o checkpoint padrão funcionar, crie um conjunto de dados e uma política separados e faça backup das VMs usando o nível de snapshot consistente em caso de falhas no conjunto de dados. O snapshot consistente em caso de falhas está correlacionado à criação de checkpoint padrão usando o Hyper-V Manager.

2. Faça log-in nas VMs com falha e abra o prompt de comando do PowerShell ou do Windows. Execute o seguinte comando para verificar o estado dos gravadores VSS:

vssadmin list writers

Se eles estiverem em um estado de falha, reinicie os serviços relevantes ou reinicialize as VMs para colocar os gravadores em um bom estado.

Referência:  https://campus.barracuda.com/product/ISBKB/doc/93197282/the-vss-writer-is-in-a-bad-state/ (Link externo)

3. Faça log-in nas VMs com falha e verifique se os volumes de disco rígido têm pelo menos 10 a 15% de espaço livre em disco.

Acesse Ferramentas Administrativas do Windows -> Gerenciamento do Computador -> Gerenciamento de Disco -> Volume de disco -> Clique com o botão direito do mouse -> Selecione Propriedades -> Guia Cópias de sombra -> Configurações.

Se o limite da área de armazenamento estiver configurado, aumente o tamanho máximo, se necessário. Ou altere-o para "Sem limite", pois os snapshots do VSS criados usando o plug-in do Avamar são temporários:

4. Verifique se os serviços de integração nas máquinas virtuais Windows estão atualizados. Para sistemas operacionais Windows Server 2016 e 2019, isso é feito usando o recurso Windows Update.  

Para Windows Server 2012 e 2012 R2, isso pode ser feito manualmente: https://www.zubairalexander.com/blog/how-to-update-integration-services-in-windows-server-2012-r2/ (Link externo)

5. Verifique se todos os nós de cluster do Hyper-V têm as atualizações mais recentes do sistema operacional Windows. Isso pode ser verificado usando o recurso Windows Update.

6. Remova todos os checkpoints órfãos na VM. Os checkpoints órfãos que sobraram de um backup do Avamar têm a sintaxe"AvamarBackup_<<Avamar policy name>>-<<snapshot consistency level>>-<<backup job timestamp>>"

Exemplo:

Esses são os checkpoints de "recuperação" criados durante o backup do Avamar, mas que apresentaram falha ao mesclar novamente os arquivos VHDX (Virtual Hard Disk v2) pai. Eles não podem ser excluídos usando os métodos normais no Gerenciador do Hyper-V.

Clicar com o botão direito do mouse no checkpoint NÃO tem a opção "Delete Checkpoint".

Para excluir os checkpoints de recuperação do Avamar, realce o checkpoint no Hyper-V Manager e pressione a tecla Del (Delete) no teclado. O checkpoint de recuperação órfão é mesclado no arquivo VHDX principal:

No entanto, a exclusão manual dos checkpoints do Avamar pode falhar com uma mensagem aberta "A operação não pode ser executada enquanto o objeto estiver em seu estado atual". 

Nesse cenário, consulte o seguinte artigo para obter procedimentos e scripts detalhados para remover checkpoints obsoletos e vmgroups em todos os nós do cluster: Windows Server: O Hyper-V Live Migration pode falhar como resultado dos checkpoints de recuperação.t de checkpoints de recuperação

7. Aplique os hotfixes mais recentes para a versão do plug-in VSS do Avamar Hyper-V que está sendo usado. O seguinte artigo fornece os números de hotfix e locais para download: Falha no backup incremental de RCT do Avamar Hyper-V com "Falha ao obter extensões de RCT para o arquivo de disco" ou "Falha na criação do ponto de referência para máquina virtual"

(Caso contrário, as VMs podem não conseguir fazer snapshots/checkpoints consistentes com aplicativos.)

8. Crie uma política e um conjunto de dados separados para as VMs problemáticas, edite o conjunto de dados e altere o nível do snapshot de "aplicativo" para "travamento".

Artigo relacionado: Avamar: Os backups do Hyper-V 2016 falham "A criação do checkpoint da máquina virtual falhou e será ignorada do backup