PowerFlex: Ponowne inicjowanie replikacji po przerwie replikacji
Summary: Grupa spójności replikacji może zostać usunięta z różnych powodów, a replikacja między lokacjami źródłowymi i docelowymi zostanie zatrzymana. Wspólną przesłanką dla wszystkich spraw jest zakończenie możliwości Dziennika. ...
Symptoms
W wierszu polecenia możemy znaleźć komunikaty ostrzegawcze o treści "woluminy w uszkodzonych grupach spójności replikacji".
# scli --query_all_replication_pairs
query_all_replication_pairs returned 0 Replication Pairs.
WARNING: The System contains 2 volumes in broken replication consistency groups
# scli --query_all_replication_consistency_groups
Protection Domain aef4ce8300000000 Name: RHEL7-PD
WARNING: The Protection Domain contains 2 volumes in broken replication consistency groups
W interfejsie użytkownika stan grup spójności replikacji (RCG) zawiera następujący błąd "Grupy spójności replikacji zostały usunięte przez system".

Celem tych plików dziennika jest umożliwienie płynnej ponownej inicjalizacji replikacji między lokacjami. Pliki dziennika służą do szybkiego ponownego uruchomienia procesu replikacji po usunięciu przyczyny awarii.
Cause
Przykłady przyczyn, które mogą spowodować przerwę replikacji:
a. Awaria długiej sieci między lokacją
źródłową i docelowąb. Nagły spadek pojemności w lokacjach źródłowych lub docelowych — na przykład w scenariuszu niedostępności danych (DU)
Po przerwaniu replikacji rozwiązanie MDM automatycznie usunie wszystkie grupy spójności replikacji (RCG) między lokacją źródłową i docelową. Generuje również pliki dziennika replikacji, które zawierają wszystkie informacje związane z usuniętymi grupami RPG.
Resolution
a. Znajdź automatycznie generowane pliki dziennika przerwania replikacji w podstawowym MDM w następnym formacie —
Automatyczne DeletedOnEndOfJournalCapacityRplCg_<RCG_ID>_<RCG_name>
Przykład:
# cd /opt/emc/scaleio/mdm/logs
# ls -l AutoDelete*
-rw-r--r-- 1 root root 953 Apr 14 12:15 AutoDeletedOnEndOfJournalCapacityRplCg_4ca1bc9600000000_Rep_Beta1
b. Sprawdź, czy problem, który spowodował przerwanie replikacji, został rozwiązany.
c. Zainicjuj replikację ponownie przy użyciu jednej z dwóch następujących metod: Za pomocą skryptu lub ręcznie.
Korzystanie ze skryptu:
-
Wygeneruj jeden plik, który zawiera wszystkie odpowiednie polecenia z automatycznie wygenerowanych plików dziennika, aby ponownie zainicjować replikację
Przykład:
for i in `ls /opt/emc/scaleio/mdm/logs/AutoDeletedOnEndOfJournalCapacity*`;do sed -e '1,/Recreation CLIs/d' $i >> full_replication_restore_$(date +%s); done -
Sprawdź, czy plik został pomyślnie utworzony i czy jest jego zawartość
Przykład:
[root@112AX-7 logs]# cat full_replication_restore_1587387678 scli --add_replication_consistency_group --replication_consistency_group_name rcg_sanity --destination_system_object_id 416af83800000000 --protection_domain_id b3dd0a5900000000 --remote_protection_domain_id 4ff0744e00000000 --rpo 60 --target_volume_access_mode no_access scli --add_replication_pair --replication_consistency_group_name rcg_sanity --source_volume_id 0da61f0d00000003 --destination_volume_id 1981bbaf00000005 --copy_type full scli --add_replication_consistency_group --replication_consistency_group_name rcg_SANITY2 --destination_system_object_id 416af83800000000 --protection_domain_id b3dd0a5900000000 --remote_protection_domain_id 4ff0744e00000000 --rpo 60 --target_volume_access_mode no_access scli --add_replication_pair --replication_consistency_group_name rcg_SANITY2 --source_volume_id 0da61f2500000000 --destination_volume_id 1981bbb000000006 --copy_type full scli --add_replication_consistency_group --replication_consistency_group_name rcg_sanity3 --destination_system_object_id 416af83800000000 --protection_domain_id b3dd0a5900000000 --remote_protection_domain_id 4ff0744e00000000 --rpo 60 --target_volume_access_mode no_access scli --add_replication_pair --replication_consistency_group_name rcg_sanity3 --source_volume_id 0da61f2600000001 --destination_volume_id 1981bbb100000007 --copy_type full [root@112AX-7 logs]# -
Utwórz wygenerowany plik wykonywalny, a następnie zaloguj się jako administrator do głównego MDM i uruchom utworzony plik.
Przykład:
# scli --login --username admin --password xxxxxxxxxx Logged in. User role is SuperUser. System ID is xxxxxxxxxxxxxxx # # chmod +x full_replication_restore_1587387678 ; ./full_replication_restore_1587387678 Successfully created Replication Consistency Group rcg_sanity. Object ID 357a6c4f00000001 Successfully created the Pair, ID = a1f1819900000001 Successfully created Replication Consistency Group rcg_SANITY2. Object ID 357a6c5300000003 Successfully created the Pair, ID = a1f1819a00000002 Successfully created Replication Consistency Group rcg_sanity3. Object ID 357a6c5500000005 Successfully created the Pair, ID = a1f1819b00000003 - Sprawdź, czy replikacja została utworzona pomyślnie, uruchamiając polecenie
-
scli --query_all_replication_consistency_groups scli --query_all_replication_pairs
-
Ręcznie:
-
Sprawdź, czy każda automatycznie usunięta grupa RCG ma automatycznie wygenerowany plik dziennika:
Przykład:
# ls /opt/emc/scaleio/mdm/logs/AutoDeletedOnEndOfJournalCapacity* /opt/emc/scaleio/mdm/logs/AutoDeletedOnEndOfJournalCapacityRplCg_357a454600000001_rcg_sanity /opt/emc/scaleio/mdm/logs/AutoDeletedOnEndOfJournalCapacityRplCg_357a6c4b00000002_rcg_SANITY2 /opt/emc/scaleio/mdm/logs/AutoDeletedOnEndOfJournalCapacityRplCg_357a6c4c00000003_rcg_sanity3 -
Powtórz kolejne kroki dla każdego pliku na liście w kroku 1 powyżej
a. Sprawdź, czy polecenia interfejsu wiersza polecenia zostały wygenerowane i czy zawiera odpowiednie informacje w obszarze Odtwarzanie CLIPrzykład:
#cat AutoDeletedOnEndOfJournalCapacityRplCg_357a6c4900000001_rcg_sanity REPLICATION CONSISTENCY GROUP LocalId:357a6c4900000001 RemoteId:4ca1e3ab00000001 Name:rcg_sanity PeerMdmId:416af83800000000 RpoSeconds:60 Direction:LOCAL_TO_REMOTE DRState:NONE DeletionDecisionTime:20/04 08:37:35 DeletionReason:AUTOMATIC_ON_END_OF_CAPACITY FailureDomainId:b3dd0a5900000000 RemoteFailureDomainId:4ff0744e00000000 PAIR 0 LocalId:a1f1819600000001 RemoteId:2dfad1c100000001 LocalVolumeId:0da61f0d00000003 LocalVolumeName:test1 RemoteVolumeId:1981bbaf00000005 RemoteVolumeName:test1 Recreation CLIs: scli --add_replication_consistency_group --replication_consistency_group_name rcg_sanity --destination_system_object_id 416af83800000000 --protection_domain_id b3dd0a5900000000 --remote_protection_domain_id 4ff0744e00000000 --rpo 60 --target_volume_access_mode no_access scli --add_replication_pair --replication_consistency_group_name rcg_sanity --source_volume_id 0da61f0d00000003 --destination_volume_id 1981bbaf00000005 --copy_type fullb. Uruchom wszystkie polecenia wyświetlane w sekcji "Recreation CLIs"
Przykład:
# scli --add_replication_consistency_group --replication_consistency_group_name rcg_sanity --destination_system_object_id 416af83800000000 --protection_domain_id b3dd0a5900000000 --remote_protection_domain_id 4ff0744e00000000 --rpo 60 --target_volume_access_mode no_access Successfully created Replication Consistency Group rcg_sanity. Object ID 357a6c4f00000001 [root@112AX-7 logs]# scli --add_replication_pair --replication_consistency_group_name rcg_sanity --source_volume_id 0da61f0d00000003 --destination_volume_id 1981bbaf00000005 --copy_type full Successfully created the Pair, ID = a1f1819900000001 [root@112AX-7 logs]# -
Sprawdź, czy replikacja została utworzona pomyślnie, uruchamiając polecenie
-
scli --query_all_replication_consistency_groups scli --query_all_replication_pairs
-