RecoverPoint: O grupo de consistência entra em estado de erro devido a "SYM failed to find snapset"
Summary: RecoverPoint: O grupo de consistência entra em estado de erro devido a [SYM failed to find snapset]
Symptoms
O link de um CG cai em um erro devido a [SYM failed to find snapset], forçando todo o grupo a um estado ativado sem transferência.
Error: Um ou mais links de cg_name de grupo são definidos para replicar snapshots e ocorreu um erro no processo de replicação baseada em snapshot. Os seguintes erros foram recebidos do armazenamento:
Link = cg_name->cg_name_copy, error = [SYM failed to find snapset]
Sintomas encontrados em logs:
/files/home/kos/storage/result.log
ActiveXioArrayHelper_AO_IMPL::xioRefreshConsistentSnapshotFromDevice_i: xioRefreshConsistentSnapshotFromDevice Failed with res.faultString() = SYM failed to find snapset res.arrayRvCode() = e_API_FAILURE printCommand: methodName = sym.SystemRemoveSnapSet format = ((ssi)(ssi)(ssi)i) numArgs = 10 buffer = (( 0065ff5a961b41979c64b1998bf9xxxx xms 1 )( xxxxxb824ee14c94b5f708ced17f3b85 XIO-HO-C01 1 )( 6fbb339729954axxxxxxxxxx 1 ) 19558 ) XioConnection::executeCommand: Command execution fail. methodName = sym.SystemRemoveSnapSet m_client = 0x7f502dxxxxx server = 0x7f5xxxxxxxx URL: http://172.xx.xxx.xxx:11111/RPC2 this = 0x7f5030165xxxxx CleanEnvAndReturnRV: Operation failed. rv.faultString() = RPC failed at server. snapset_not_found env.fault_code = -500 XioArrayHelper: RPC failed at server. snapset_not_found, called from function: xioDeleteConsistentSnapshot:3212
/files/home/kos/control/result.log
2018/10/17 10:12:50.135 - #1 - 5040/4313 - WorkManager: GroupCopy(206327186 SiteUID(0x228e3ecc2dxxxxxx) 0): Action refreshArrayConsistentSnapshot failed! value.arrayRvCode() = e_API_FAILURE value.errorStrings() = [SYM failed to find snapset] 2018/10/17 10:12:50.550 - #2 - 5040/4313 - StateChange: lastComputedPipeTargetsMap. copy=GroupCopy(2063271xxx SiteUID(0x228e3ecc2xxxxxxx) 0) to copy= GlobalCopy(SiteUID(0x31ba0c434a00xxxxx) 0) pipe target=PT_CLOSED, reason=No exposed snap to replicate -> PT_CLOSED, reason=Array error
Cause
Devido a um desalinhamento entre o XtremIO e o XMS, o RecoverPoint recebe entradas anteriores do XMS quando recupera a lista atual de snapshots que devem ser descartados.
Ocasionalmente, um valor inesperado é recebido e, em vez do snapshot anterior, que deve ser descartado e usado para exclusão, é usado como o snapshot atual. Isso faz com que o snapshot real seja excluído.
Por isso, as chamadas do array começam a falhar para o grupo associado ao snapshot que foi excluído, o que faz com que o link da cópia entre no estado de erro [SYM failed to find snapset], porque o link do grupo está inativo, todo o CG cai em um estado de erro de ativado sem transferência.
Resolution
Solução temporária:
- Desative o CG e habilite-o novamente
- Altere o t_xioPeriodicalSnapCleanupGatherInterval de ajuste de 600000 para 600000000 (x1000) em todos os RPAs de produção. Essa alteração faz com que a ferramenta de limpeza seja executada uma vez por semana, em vez de a cada 10 minutos, e reduz a probabilidade de encontrar o problema.
Resolução:
Uma correção para esse problema está disponível no XtremIO 4.0.27-1, XMS 6.2.1-36.
Additional Information
Configurações afetadas:
RecoverPoint Classic com o array XtremIO (antes do XtremIO 4.0.27-1, XMS 6.2.1-36)