Avamar-klient: IDPA Linux-klientsikkerhedskopiering af afbildning fuldføres med undtagelse på grund af problem med stilstand
Summary: Sikkerhedskopieringsklienter til Linux-afbildning mislykkes med sikkerhedskopiering fuldført med undtagelse Fejlkode 10020
Symptoms
Sikkerhedskopieringen af Linux-afbildningen til IDPA-systemet er "fuldførelse med undtagelse" på grund af problemet med at gå i stå.
I dette eksempel var vm'en den interne ACM vm, der følger med IDPA-løsningen.
Fra VMware linux-afbildningsloggen for sikkerhedskopien kan følgende ses:
avvcbimage Info <40726>: VM Config Info: VMX version 4(F), ctk enabled(T), fault tolerant (F), Guest OS SUSE Linux Enterprise 12 (64-bit), Cloud UUID = NoUUID. version=9
avvcbimage Info <40727>: VM Guest Info: GuestOS Family = linuxGuest, Guest Full Name = SUSE Linux Enterprise 12 (64-bit), Guest OS State = running, Tools Running = guestToolsRunning, Tools Version Status = guestToolsUnmanaged
avvcbimage Info <42650>: Creating snapshot 'Avamar-<epoch_time><client_id>', quiesceFS=1
avvcbimage Info <41136>: SnapshotManager: createSnapshot for vmMoref = vm-21
avvcbimage Info <42182>: SnapshotManager: POST to /snapshotmanager/vm/vm-21/action/createSnapshot, payload({
"snapshotName": "Avamar-<epoch_time><client_id>",
"snapshotDesc": "Created by Avamar workorder Management_VM_Backup-Management_VM_Backup-<epoch > on <date>",
"quiesceFileSystem": "true"
...
avvcbimage Warning <19733>: vSphere Task failed (quiesce, snapshot error=45): 'An error occurred while saving the snapshot: Failed to quiesce the virtual machine.'.
avvcbimage Error <17775>: Snapshot 'Avamar-<epoch_time><client_id> ' creation for VM '[vsanDatastore] DataProtection-ACM/DataProtection-ACM.vmx' task creation encountered a quiesce problem
avvcbimage Warning <40710>: The VM could not be quiesced prior to snapshot creation and this backup will not be used as a base for subsequent CBT backups if successful.
avvcbimage Warning <40711>: Consider using the pre-freeze and post-thaw scripts to facilitate VM quiescing
avvcbimage Warning <41146>: This error might caused by the pre-freeze script returning a non-zero error code.
...
Når det første snapshot mislykkes, fortsætter sikkerhedskopieringen ved at tage et andet snapshot, men med quiesce-funktionen deaktiveret.
avvcbimage Info <14631>: VM Disk Consolidation for '[vsanDatastore] DataProtection-ACM/DataProtection-ACM.vmx' task still in progress, sleep for 3 sec
avvcbimage Info <42650>: Creating snapshot 'Avamar-<epoch_time><client_id>', quiesceFS=0
avvcbimage Info <41136>: SnapshotManager: createSnapshot for vmMoref = vm-21
avvcbimage Info <42182>: SnapshotManager: POST to /snapshotmanager/vm/vm-21/action/createSnapshot, payload({
"snapshotName": "Avamar-<epoch_time><client_id>",
"snapshotDesc": "Created by Avamar workorder Management_VM_Backup-Management_VM_Backup-<epoch> on <date>",
"quiesceFileSystem": "false"
Sikkerhedskopieringen afsluttes, men vises som fuldført med undtagelse (kode 10020)
I arbejdsordreloggen (.alg) ses følgende:
2019-04-03 00:12:42 Management_VM_Backup-Management_VM_Backup-<epoch>Warning <0000>: Workorder "Management_VM_Backup-Management_VM_Backup-epoch" non-zero exit status 'code 170: completed with errors, client log should be examined'
Cause
-
Hvis du vil se, hvad der får stilstanden til at mislykkes, skal du indstille fejlfindingslogføringen for vmtools.
Følg trinnene i https://kb.vmware.com/s/article/1007873til at indstille fejlfindingslogføring på gæsteoperativsystemet og derefter genstarte VMware-værktøjer.
-
Lav en ny sikkerhedskopi for at genskabe quiesce-fejl.
-
Gennemse logfiler med fejlfindingsværktøjer (oplysninger om quiesce skal være i vmsvc-loggen og have præfikset [vmbackup]).
I dette eksempel skyldtes problemet en delvist slettet mappe /var/log/brs. Denne mappe kunne ikke fjernes helt, fordi baggrundsprocessen stadig havde mappen åben. Denne delvist slettede mappe forhindrer Linux-filsystemet i at stoppe med at reagere med ioctls-funktioner.
[ debug] [vmbackup] Submitted backup start task.
[ debug] [vmbackup] *** VmBackupSyncDriverStart
[ debug] [vmsvc] SyncDriver: Skipping remote filesystem, name=systemd-1, mntpt=/proc/sys/fs/binfmt_misc.
[ debug] [vmsvc] SyncDriver: Calling backend 0.
[ debug] [vmsvc] SyncDriver: Freezing using Linux ioctls...
[ debug] [vmsvc] SyncDriver: opening path '/var/lib/named/proc'.
[ debug] [vmsvc] SyncDriver: freezing path '/var/lib/named/proc'.
[ debug] [vmsvc] SyncDriver: freeze on '/var/lib/named/proc' returned: 95 (Operation not supported)
[ debug] [vmsvc] SyncDriver: opening path '/var/log/logbundles'.
[ debug] [vmsvc] SyncDriver: freezing path '/var/log/logbundles'.
[ debug] [vmsvc] SyncDriver: successfully froze '/var/log/logbundles'.
[ debug] [vmsvc] SyncDriver: opening path '/var/log/brs (deleted)'.
[ debug] [vmsvc] SyncDriver: failed to open '/var/log/brs (deleted)': 2 (No such file or directory)
[ warning] [vmbackup] Error freezing filesystems.
Resolution
En nærmere undersøgelse af mappen /var/log/brs kan se problemer med at åbne denne mappe fra andre kommandoer. Ligesom lsof og stat også viser problem.
IDPA-ACM:/var/log # lsof|grep brs lsof: WARNING: can't stat() xfs file system /var/log/brs (deleted) Output information may be incomplete. IDPA-ACM:/var/log # ls -al drwxr-xr-x 0 root root 6 Feb 27 2018 brs
Den virtuelle ACM-maskine blev genstartet for at dræbe ACM-processen i baggrunden. Efter genstart blev mappen /var/log/brs genskabt af ACM-processen, og sikkerhedskopieringen kunne fuldføres uden yderligere problemer.
IDPA-ACM:/var/log # ls -al drwxr-xr-x 2 root root 6 Apr 15 10:30 brs
Additional Information
Sørg for at følge ovenstående KB for at fjerne fejlfindingslogføring for vmtools på klienten og genstarte vmtools-tjenesten.