Avamar: MCS tar emot meddelanden om att minnet är slut
Sammanfattning: Avamar Management Console-servern (MCS) tar emot meddelanden om att minnet är slut på grund av en stor NVRAM-fil från en virtuell maskin.
Symptom
Schemalagda VMware-säkerhetskopieringar och fysiska säkerhetskopieringar verkar inte svara.
De kan visas som pågående i fönstret Avamar Administrator Activity, men utan att förloppsbyte ändras.
Management Console-servern (MCS) rapporterar ett tillstånd om "slut på minne" och användargränssnittet kan vara långsamt att svara.
VMware-klienter checkar inte in under långa perioder.
Orsak
Vid säkerhetskopiering av virtuella maskiner läser MCS in NVRAM-filer (Non-Volatile Random-Access Memory) i sin javaheap för att läsa BIOS-konfigurationen.
NVRAM-filen finns på samma plats där VMware *.vmdk filer som finns i datalagret.
Ibland växer NVRAM-filen, som vanligtvis bara är några kB stor (mindre än 10 kB), till cirka eller över 1 MB.
Detta är tillräckligt för att orsaka MCS javaheap för att få slut på minnet.
Upplösning
1. Logga in på Avamar-verktygsnoden och läs in administratörsnycklarna. Instruktioner om hur du laddar nycklar finns i Avamar: Logga in på en Avamar-server och läs in olika nycklar.
2. Kontrollera om javaheap är redan inställd på 1,5 GB, vilket betecknas med "-Xmx1536m" i utdata nedan:
ps -elf | grep java | grep mcserver
0 S admin 13623 1 2 76 0 - 556102 - 16:54 pts/0 00:10:16
/usr/java/jre1.6.0_22/bin/java -Xmx1536m -XX:MaxPermSize=256m -server -ea -cp
.:/usr/local/avamar/lib/mcserver.jar:/usr/local/avamar/lib/asn_server.jar:/usr/local/avamar/lib/mail.jar:/usr/local/avamar/lib/activation.jar:/usr/local/avamar/lib/xercesImpl.jar:/usr/local/avamar...<snip>...
6.1.23.jar:/usr/local/avamar/lib/jetty-util-6.1.23.jar:/usr/local/avamar/lib/servlet-api-2.5.jar:/usr/local/avamar/lib/jsp-api-2.1.jar:/usr/local/avamar/lib/jsp-
3. Kontrollera om meddelanden om "OutOfMemory" rapporteras i loggen (på grund av potentiellt stort NVRAM):
grep -hi "OutOfMemoryError\|VMware" /usr/local/avamar/var/mc/server_log/mcserver.log*
Exception in thread "Thread-191" java.lang.OutOfMemoryError: Java heap space
at java.util.Arrays.copyOf(Unknown Source)
at java.io.ByteArrayOutputStream.write(Unknown Source)
at
com.avamar.mc.vmware.VmwareVirtualMachineFiles.readVmFile(VmwareVirtualMachineFiles.java:386)
at
com.avamar.mc.vmware.VmwareVirtualMachineFiles.getVirtualMachineFile(VmwareVirtualMachineFiles.java:109)
at
com.avamar.mc.vmware.VmwareVirtualCenter.getVirtualMachineFile(VmwareVirtualCenter.java:902)
at
com.avamar.mc.vmware.VmwareService.getNvramFileContent(VmwareService.java:2596)
at com.avamar.mc.wo.JobScheduler._gotVmWork(JobScheduler.java:530)
at com.avamar.mc.wo.JobScheduler.gotVmWork(JobScheduler.java:327)
at com.avamar.mc.wo.DPNScheduler.gotVmWork(DPNScheduler.java:144)
4. Kontrollera vilka klienter som har det stora NVRAM-minnet:
grep "nvramContent\=\"null\"" mcserver.log.*
Det här exemplet på utdatarapporter "Company_1_Email-PDB-rapporter""nvramContent="null"':
FINE: MCS to Client(10.n.n.64:39270) Response: <workorder work="backup" type="work" ack="yes" cid="8580a6233796c72a4a73b89f0d2ae5fb644fcbd0" sync="bg"
wid="NFSSQLCluster-1350439200070" pid="vmimagew" pidnum="3016" msgver="5" sessionid="c61b498fdf57eaca6cadc760a3b7fbf6f7e89aea"
targetCid="bae291d2ba3d3e3ea77d5394bcaa60da3a072463" targetUUID="500faaf4-8f4b-b5f2-1744-1277d19a79cf" vcCid="3a25059a880e1d22b981c5815858d3dc95312621"
time="1350442682" customaction="" ><targetlist><path name="[nas_datastore_03] Company_1_Email-PDB/Company_1_Email-PDB.vmdk" backup="true" diskCapacity="85899345920">
</path><path name="[nas_datastore_03_sqldb] Company_1_Email-PDB/Company_1_Email-PDB.vmdk" backup="true" diskCapacity="171798691840"></path>
<path name="[nas_datastore_03_sqllogs] Company_1_Email-PDB/Company_1_Email-PDB.vmdk" backup="true" diskCapacity="32212254720"></path></targetlist><directives>
<flag type="string" name="encrypt" value="proprietary" /> <flag type="string" name="encrypt-strength" value="cleartext" /> <flag type="string" name="expire"
value="1353034800" /> <flag type="string" name="retention-type" value="daily,weekly,monthly,yearly"
....
"TRUE"scsi0:2.deviceType = "scsi-hardDisk"scsi0:2.present = "TRUE"scsi0:2.redo = ""migrate.hostlog = "
./Company_1_Email-PDB-b5986b60.hlog"scsi0:0.ctkEnabled = "TRUE"ctkEnabled = "TRUE"sched.scsi0:1.shares = "normal"
ethernet1.virtualDev = "vmxnet3"ethernet1.pciSlotNumber = "192"ethernet1.startConnected = "TRUE"
ethernet1.allowGuestConnectionControl = "TRUE"ethernet1.features = "1"ethernet1.wakeOnPcktRcv = "TRUE"
ethernet1.addressType = "vpx"ethernet1.generatedAddress = "00:00:56:8f:3f:b1"ethernet1.networkName = "
VM Network - 117"ethernet1.present = "TRUE"" nvramContent="null" prevBackup="null" snapshotDesired="always" prevSnapName="null" >
</vmInfo><vmDiskInfoList numDisks="3" > <vmDiskInfo capacityInKB="83886080" vmdkFilename="[nas_datastore_03] Company_1_Email-PDB/Comany_1_Email-PDB.vmdk"
vmdkBaseFile="[nas_datastore_03] Company_1_Email-PDB/Comany_1_Email-PDB.vmdk" ordinal="1" srcOrdinal="-1" label="Hard disk 1" diskKey="2000"
datastoreUrl="ds:///vmfs/volumes/e4b3f733-24646679/" datastore="nas_datastore_03"
nvramcontent värde, så alla instanser måste granskas.
5. När klienten, eller klienterna, med det stora NVRAM-minnet har identifierats i loggarna:
A. Starta om klienten så att den kan skapa en ny NVRAM-fil.
B. Om problemet uppstår för samma klient skapar du en tjänstebegäran hos Dell Technologies tekniska supportteam.
6. Om felmeddelandet kvarstår, se Avamar: Symptom Kod 22402 - Beskrivning: Det gick inte att spara konsolens serverdata till servern (lösningssökväg) för ytterligare felsökning.