MFE SRDF-HC: Сессия SDDF зависает после восстановления после поездки группы ConGroup
Summary: Сессия SDDF (Symmetrix Differential Data Facility) останавливается после восстановления после разрыва канала.
Symptoms
Error message: GDDS233E GDDR MSC SDDF Reset for group msc-groupname
delayed - (0919201821441111 - 45635.85 seconds ago)
Тестирование режима срабатывания ConGroup в среде SRDF/STAR путем удаления связей между двумя площадками во взаимосвязи SRDF/S. Географически распределенный аварийный перезапуск (GDDR) с контролем среды.
Ссылки отбрасываются дважды. После первого разрыва канала и срабатывания ConGroup сессии SDDF успешно восстанавливались. После второго удаления сессия SDDF завершается сбоем и выдается сообщение GDDS233E. Это сообщение указывает на то, что ротация сессий SDDF остановилась.
Последовательность происходящих событий приведена в разделе примечаний.
Cause
После сбоя канала обработка сессии SDDF в среде SRDF/STAR или SRDF/SQAR прекращается из-за неверной логики программы. Несоответствие счетчиков, которые должны обновляться синхронно, не обновляется, что приводит к циклу опроса.
Resolution
Временное решение
- Чтобы ротация сессий SDDF была возможна, необходимо перезапустить среду MSC.
Окончательное решение
- Для исправления этой проблемы в Mainframe Enablers 8.3 были разработаны SF83083 временного исправления программы (PTF) и SR83049 PTF. Их можно скачать на веб-сайте онлайн-поддержки Dell EMC.
- Для устранения этой проблемы в Mainframe Enablers 8.2 были разработаны PTF SF82142 и PTF SR82088. Их можно скачать на веб-сайте онлайн-поддержки Dell EMC.
- Для устранения этой проблемы в Mainframe Enablers 8.1 были разработаны PTF SF81137 и PTF SR81096. Их можно скачать на веб-сайте онлайн-поддержки Dell EMC.
Additional Information
Проблема воссоздана в лабораторной среде Dell, и отображается следующая последовательность событий.
Каналы отключаются в середине RESET SDDF для сессий 2. Сообщения SCF1543E и SCF1523E указывали на проблему. Сбой RESET с кодом ошибки 87. Код ошибки 87 является нормальным в данной ситуации и указывает на сбой удаленной команды.
06.58.03 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
06.58.03 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
06.58.03 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
06.58.03 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
06.58.03 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
06.58.03 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
06.58.03 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 00000052 IS 06:58:03.00
06.58.03 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
06.58.03 STC01813 SCF1347I MSC - GROUP=PISTAR_DC1 PROCESS_FC07-ALL BOXES CLOSED WINDOW
06.58.04 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'10581800'
06.58.04 STC01813 SCF1497I MSC - GROUP=PISTAR_DC1 Perform STAR SDDF RESET for Session 2
06.58.04 STC01813 SCF1501I MSC - GROUP=PISTAR_DC1 (0C00A,01) PERFORM SDDF FUNCTION FOR SDDF J02
06.58.04 STC01813 SCF1514I MSC - GROUP=PISTAR_DC1 (0C00A,01) RESET SDDF SESSION 2
06.58.05 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'10581800'
06.58.05 STC01813 SCF1499I MSC - GROUP=PISTAR_DC1 DONE PERFORMING SDDF FUNCTION
06.58.06 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'10581800'
06.58.18 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
06.58.18 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
06.58.18 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
06.58.18 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
06.58.18 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
06.58.18 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
06.58.18 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 00000053 IS 06:58:18.00
06.58.18 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
06.58.18 STC01813 SCF1347I MSC - GROUP=PISTAR_DC1 PROCESS_FC07-ALL BOXES CLOSED WINDOW
06.58.18 STC01813 SCF1499I MSC - GROUP=PISTAR_DC1 DONE PERFORMING SDDF FUNCTION
06.58.19 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'10583300'
06.58.33 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
06.58.33 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
06.58.33 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
06.58.33 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
06.58.33 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
06.58.33 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
06.58.33 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 00000054 IS 06:58:33.04
06.58.33 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
06.58.33 STC01813 SCF1347I MSC - GROUP=PISTAR_DC1 PROCESS_FC07-ALL BOXES CLOSED WINDOW
06.58.33 STC01813 SCF1499I MSC - GROUP=PISTAR_DC1 DONE PERFORMING SDDF FUNCTION
06.58.34 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'10584800'
06.58.34 STC01813 SCF1534E MSC - GROUP=PISTAR_DC1 (0C00A,01) GLOBAL SDDF RESET FAILURE
06.58.34 STC01813 SCF1532E MSC - GROUP=PISTAR_DC1 (0C00A,01) ERROR = (87) FOR DEVICE (1044)
06.58.48 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
06.58.48 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
06.58.48 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
06.58.48 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
06.58.48 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
06.58.48 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
06.58.48 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 00000055 IS 06:58:48.00
06.58.48 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
06.58.48 STC01813 SCF1347I MSC - GROUP=PISTAR_DC1 PROCESS_FC07-ALL BOXES CLOSED WINDOW
06.58.48 STC01813 SCF1499I MSC - GROUP=PISTAR_DC1 DONE PERFORMING SDDF FUNCTION
06.58.49 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'10590300'
06.59.03 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
06.59.03 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
06.59.03 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
06.59.03 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
06.59.03 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
06.59.03 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
06.59.03 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 00000056 IS 06:59:03.00
06.59.03 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
06.59.03 STC01813 SCF1347I MSC - GROUP=PISTAR_DC1 PROCESS_FC07-ALL BOXES CLOSED WINDOW
06.59.04 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'10591800'
06.59.04 STC01813 SCF1497I MSC - GROUP=PISTAR_DC1 Perform STAR SDDF ACTIVATE for Session 2
06.59.04 STC01813 SCF1501I MSC - GROUP=PISTAR_DC1 (0C00A,01) PERFORM SDDF FUNCTION FOR SDDF J02
06.59.04 STC01813 SCF1516I MSC - GROUP=PISTAR_DC1 (0C00A,01) ACTIVATE SDDF SESSION 2
06.59.04 STC01813 SCF1560I MSC - GROUP=PISTAR_DC1 (0C00A,01) GOT THE FOLLOWING ERROR
06.59.04 STC01813 SCF1325E MSC - SAI ERROR FOR VID=SDDFACTI R15=24 EMCRC=28 EMCRS=135 EMCRCX=X'17873206',
MD/ACTIVATE_SDDF_SESSION
. . . . . . . . . .
Ротация SDDF по-прежнему завершается сбоем с ошибкой системного вызова удаленного вызова 87.
Когда каналы снова включаются, первый RESET сессии 2, по-видимому, завершен, но для этого требуется только одно переключение цикла. Для завершения в нормальной ситуации требуется четыре цикла. По-видимому, ротация сеансов продолжается в обычном режиме.
07.00.18 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
07.00.18 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
07.00.18 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
07.00.18 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
07.00.18 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
07.00.18 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
07.00.18 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 0000005B IS 07:00:18.00
07.00.18 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
07.00.18 STC01813 SCF1347I MSC - GROUP=PISTAR_DC1 PROCESS_FC07-ALL BOXES CLOSED WINDOW
07.00.19 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'11003300'
07.00.19 STC01813 SCF1497I MSC - GROUP=PISTAR_DC1 Perform STAR SDDF RESET for Session 2
07.00.19 STC01813 SCF1501I MSC - GROUP=PISTAR_DC1 (0C00A,01) PERFORM SDDF FUNCTION FOR SDDF J02
07.00.19 STC01813 SCF1514I MSC - GROUP=PISTAR_DC1 (0C00A,01) RESET SDDF SESSION 2
07.00.20 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'11003300'
07.00.20 STC01813 SCF1499I MSC - GROUP=PISTAR_DC1 DONE PERFORMING SDDF FUNCTION
07.00.21 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'11003300'
07.00.33 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
07.00.33 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
07.00.33 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
07.00.33 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
07.00.33 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
07.00.33 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
07.00.33 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 0000005C IS 07:00:33.02
07.00.33 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
07.00.33 STC01813 SCF1347I MSC - GROUP=PISTAR_DC1 PROCESS_FC07-ALL BOXES CLOSED WINDOW
07.00.34 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'11004800'
07.00.34 STC01813 SCF1497I MSC - GROUP=PISTAR_DC1 Perform STAR SDDF ACTIVATE for Session 2
07.00.34 STC01813 SCF1501I MSC - GROUP=PISTAR_DC1 (0C00A,01) PERFORM SDDF FUNCTION FOR SDDF J02
07.00.34 STC01813 SCF1516I MSC - GROUP=PISTAR_DC1 (0C00A,01) ACTIVATE SDDF SESSION 2
В следующий раз, когда сессия 2 будет СБРОШЕНА, она никогда не завершится. Сеанс 1 завершается успешно
07.02.33 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
07.02.33 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
07.02.33 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
07.02.33 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
07.02.33 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
07.02.33 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
07.02.33 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 00000064 IS 07:02:33.00
07.02.33 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
07.02.33 STC01813 SCF1347I MSC - GROUP=PISTAR_DC1 PROCESS_FC07-ALL BOXES CLOSED WINDOW
07.02.34 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'11024800'
07.02.34 STC01813 SCF1497I MSC - GROUP=PISTAR_DC1 Perform STAR SDDF RESET for Session 2
07.02.34 STC01813 SCF1501I MSC - GROUP=PISTAR_DC1 (0C00A,01) PERFORM SDDF FUNCTION FOR SDDF J02
07.02.34 STC01813 SCF1514I MSC - GROUP=PISTAR_DC1 (0C00A,01) RESET SDDF SESSION 2
07.02.35 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'11024800'
07.02.35 STC01813 SCF1499I MSC - GROUP=PISTAR_DC1 DONE PERFORMING SDDF FUNCTION
07.02.36 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'11024800'
07.02.48 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
07.02.48 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
07.02.48 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
07.02.48 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
07.02.48 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
07.02.48 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
07.02.48 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 00000065 IS 07:02:48.05
07.02.48 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
07.02.48 STC01813 SCF1347I MSC - GROUP=PISTAR_DC1 PROCESS_FC07-ALL BOXES CLOSED WINDOW
07.02.48 STC01813 SCF1499I MSC - GROUP=PISTAR_DC1 DONE PERFORMING SDDF FUNCTION
07.02.49 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'11030300'
07.03.03 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
07.03.03 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
07.03.03 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
07.03.03 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
07.03.03 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
07.03.03 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
07.03.03 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 00000066 IS 07:03:03.00
07.03.03 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
07.03.03 STC01813 SCF1347I MSC - GROUP=PISTAR_DC1 PROCESS_FC07-ALL BOXES CLOSED WINDOW
07.03.03 STC01813 SCF1499I MSC - GROUP=PISTAR_DC1 DONE PERFORMING SDDF FUNCTION
07.03.04 STC01813 SCF1454I MSC - GROUP=PISTAR_DC1 NEXT WAKE UP AT X'11031800'
07.03.18 STC01813 SCF1345I MSC - GROUP=PISTAR_DC1 MOTHER TASK FUNCTION TIMER
07.03.18 STC01813 SCF1343I MSC - GROUP=PISTAR_DC1 PROCESS_FC04-TIME FOR SWITCH
07.03.18 STC01813 SCF1382I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC04-CAN WE SWITCH?
07.03.18 STC01813 SCF1344I MSC - GROUP=PISTAR_DC1 PROCESS_FC05-ALL BOXES CAN SWITCH
07.03.18 STC01813 SCF1383I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC05-OPEN AND SWITCH
07.03.18 STC01813 SCF1346I MSC - GROUP=PISTAR_DC1 PROCESS_FC06-ALL BOXES OPENED WINDOW AND CYCLE SWITCHED
07.03.18 STC01813 SCF1564I MSC - GROUP=PISTAR_DC1 TIME OF DAY FOR CYCLE 00000067 IS 07:03:18.00
07.03.18 STC01813 SCF1384I MSC - GROUP=PISTAR_DC1 (0C00A,05) PROCESS_FC06-CLOSE WINDOW
ВЫПОЛНЕНО ВЫПОЛНЕНИЕ СЕАНСА SDDF продолжается без дальнейшей ротации SDDF до тех пор, пока MSC не будет отключен.