PowerFlex: Replikoinnin uudelleenalustus replikointikatkon jälkeen
Summary: Replikoinnin yhtenäisyysryhmä voidaan poistaa eri syistä, ja replikointi lähde- ja kohdesivustojen välillä pysähtyy. Yhteinen perusta kaikissa tapauksissa on päiväkirjakapasiteetin päättyminen. ...
Symptoms
Komentoriviltä löytyy varoitussanomia, joissa lukee "volumes in broken replication consistency groups".
# scli --query_all_replication_pairs
query_all_replication_pairs returned 0 Replication Pairs.
WARNING: The System contains 2 volumes in broken replication consistency groups
# scli --query_all_replication_consistency_groups
Protection Domain aef4ce8300000000 Name: RHEL7-PD
WARNING: The Protection Domain contains 2 volumes in broken replication consistency groups
Replication Consistency Group (RCGs) -tilassa on käyttöliittymässä seuraava virhe "Järjestelmä poisti RCG:t".

Näiden lokitiedostojen tarkoituksena on mahdollistaa replikoinnin sujuva uudelleenalustus sivustojen välillä. Lokitiedostojen avulla replikointiprosessi käynnistetään nopeasti uudelleen, kun katkoksen syy on ratkaistu.
Cause
Esimerkkejä syistä, jotka voivat aiheuttaa replikointikatkon:
a. Pitkä verkkovika lähde- ja kohdepaikkojen
välilläb. Lähde- tai kohdepaikkojen kapasiteetin äkillinen väheneminen esimerkiksi tietojen käytettävyysskenaariossa
Kun replikointi on katkaistu, MDM poistaa automaattisesti kaikki replikoinnin yhtenäisyysryhmät (RCG) lähde- ja kohdesivustojen väliltä. Lisäksi se luo replikointilokitiedostoja, jotka sisältävät kaikki poistettuihin RCG:ihin liittyvät tiedot.
Resolution
a. Etsi automaattisen generoinnin replikoinnin katkolokitiedostot ensisijaisen MDM:n alta seuraavassa muodossa
Automaattinen DeletedOnEndOfJournalCapacityRplCg_<RCG_ID>_<RCG_name>
Esimerkki:
# cd /opt/emc/scaleio/mdm/logs
# ls -l AutoDelete*
-rw-r--r-- 1 root root 953 Apr 14 12:15 AutoDeletedOnEndOfJournalCapacityRplCg_4ca1bc9600000000_Rep_Beta1
b. Varmista, että replikoinnin katkeamisen aiheuttanut ongelma on korjattu
c. Alusta replikointi uudelleen jommallakummalla seuraavista kahdesta menetelmästä: Komentosarjan käyttäminen tai manuaalisesti.
Komentosarjan käyttäminen:
-
Luo yksi tiedosto, jossa on kaikki tarvittavat komennot automaattisesti luoduista lokitiedostoista, jotta replikointi voidaan alustaa uudelleen
Esimerkki:
for i in `ls /opt/emc/scaleio/mdm/logs/AutoDeletedOnEndOfJournalCapacity*`;do sed -e '1,/Recreation CLIs/d' $i >> full_replication_restore_$(date +%s); done -
Tiedoston ja sen sisällön vahvistaminen
Esimerkki:
[root@112AX-7 logs]# cat full_replication_restore_1587387678 scli --add_replication_consistency_group --replication_consistency_group_name rcg_sanity --destination_system_object_id 416af83800000000 --protection_domain_id b3dd0a5900000000 --remote_protection_domain_id 4ff0744e00000000 --rpo 60 --target_volume_access_mode no_access scli --add_replication_pair --replication_consistency_group_name rcg_sanity --source_volume_id 0da61f0d00000003 --destination_volume_id 1981bbaf00000005 --copy_type full scli --add_replication_consistency_group --replication_consistency_group_name rcg_SANITY2 --destination_system_object_id 416af83800000000 --protection_domain_id b3dd0a5900000000 --remote_protection_domain_id 4ff0744e00000000 --rpo 60 --target_volume_access_mode no_access scli --add_replication_pair --replication_consistency_group_name rcg_SANITY2 --source_volume_id 0da61f2500000000 --destination_volume_id 1981bbb000000006 --copy_type full scli --add_replication_consistency_group --replication_consistency_group_name rcg_sanity3 --destination_system_object_id 416af83800000000 --protection_domain_id b3dd0a5900000000 --remote_protection_domain_id 4ff0744e00000000 --rpo 60 --target_volume_access_mode no_access scli --add_replication_pair --replication_consistency_group_name rcg_sanity3 --source_volume_id 0da61f2600000001 --destination_volume_id 1981bbb100000007 --copy_type full [root@112AX-7 logs]# -
Määritä luotu tiedosto suoritettavaksi, kirjaudu ensisijaiseen MDM:ään järjestelmänvalvojana ja suorita luotu tiedosto.
Esimerkki:
# scli --login --username admin --password xxxxxxxxxx Logged in. User role is SuperUser. System ID is xxxxxxxxxxxxxxx # # chmod +x full_replication_restore_1587387678 ; ./full_replication_restore_1587387678 Successfully created Replication Consistency Group rcg_sanity. Object ID 357a6c4f00000001 Successfully created the Pair, ID = a1f1819900000001 Successfully created Replication Consistency Group rcg_SANITY2. Object ID 357a6c5300000003 Successfully created the Pair, ID = a1f1819a00000002 Successfully created Replication Consistency Group rcg_sanity3. Object ID 357a6c5500000005 Successfully created the Pair, ID = a1f1819b00000003 - Replikoinnin onnistumisen varmistaminen suorittamalla
-
scli --query_all_replication_consistency_groups scli --query_all_replication_pairs
-
Manuaalisesti:
-
Tarkista, että jokaisella automaattisesti poistetulla RCG:llä on automaattisesti luotu lokitiedosto:
Esimerkki:
# ls /opt/emc/scaleio/mdm/logs/AutoDeletedOnEndOfJournalCapacity* /opt/emc/scaleio/mdm/logs/AutoDeletedOnEndOfJournalCapacityRplCg_357a454600000001_rcg_sanity /opt/emc/scaleio/mdm/logs/AutoDeletedOnEndOfJournalCapacityRplCg_357a6c4b00000002_rcg_SANITY2 /opt/emc/scaleio/mdm/logs/AutoDeletedOnEndOfJournalCapacityRplCg_357a6c4c00000003_rcg_sanity3 -
Toista seuraavat vaiheet jokaiselle tiedoston osalta edellä vaiheessa 1
a. Tarkista, että komentoriviliittymän komennot on luotu, ja varmista, että komentoriviliittymissä on tarvittavat tiedotEsimerkki:
#cat AutoDeletedOnEndOfJournalCapacityRplCg_357a6c4900000001_rcg_sanity REPLICATION CONSISTENCY GROUP LocalId:357a6c4900000001 RemoteId:4ca1e3ab00000001 Name:rcg_sanity PeerMdmId:416af83800000000 RpoSeconds:60 Direction:LOCAL_TO_REMOTE DRState:NONE DeletionDecisionTime:20/04 08:37:35 DeletionReason:AUTOMATIC_ON_END_OF_CAPACITY FailureDomainId:b3dd0a5900000000 RemoteFailureDomainId:4ff0744e00000000 PAIR 0 LocalId:a1f1819600000001 RemoteId:2dfad1c100000001 LocalVolumeId:0da61f0d00000003 LocalVolumeName:test1 RemoteVolumeId:1981bbaf00000005 RemoteVolumeName:test1 Recreation CLIs: scli --add_replication_consistency_group --replication_consistency_group_name rcg_sanity --destination_system_object_id 416af83800000000 --protection_domain_id b3dd0a5900000000 --remote_protection_domain_id 4ff0744e00000000 --rpo 60 --target_volume_access_mode no_access scli --add_replication_pair --replication_consistency_group_name rcg_sanity --source_volume_id 0da61f0d00000003 --destination_volume_id 1981bbaf00000005 --copy_type fullb. Suorita kaikki komennot, jotka näkyvät "Virkistyskomentoriviliittymät" -osassa
Esimerkki:
# scli --add_replication_consistency_group --replication_consistency_group_name rcg_sanity --destination_system_object_id 416af83800000000 --protection_domain_id b3dd0a5900000000 --remote_protection_domain_id 4ff0744e00000000 --rpo 60 --target_volume_access_mode no_access Successfully created Replication Consistency Group rcg_sanity. Object ID 357a6c4f00000001 [root@112AX-7 logs]# scli --add_replication_pair --replication_consistency_group_name rcg_sanity --source_volume_id 0da61f0d00000003 --destination_volume_id 1981bbaf00000005 --copy_type full Successfully created the Pair, ID = a1f1819900000001 [root@112AX-7 logs]# -
Replikoinnin onnistumisen varmistaminen suorittamalla
-
scli --query_all_replication_consistency_groups scli --query_all_replication_pairs
-