Dell Unity: eVE 장애로 인한 SP 롤링 재부팅

실수로 /var/lib/docker/devicemapper/metadata에 "ls"라는 잘못된 파일이 생성되었습니다.

SP가 /EMC/C4Core/log/start_c4.log(또는 SP가 서비스 모드인 경우 /mnt/ssdroot/EMC/C4Core/log/start_c4.log)에서 eVE 오류가 발생한 경우 점진적 재부팅을 시작합니다.

Mon Aug  7 21:51:41 UTC 2017 CF: iwd: fully started in 0 seconds
Mon Aug  7 21:54:05 UTC 2017 CF: HA: eVE: Error: job cf.eVE stopped
Mon Aug  7 21:54:05 UTC 2017 CF: HA: eVE: stopping
Mon Aug  7 21:54:06 UTC 2017 CF: HA: eVE: Error: failed to stop eVE
Mon Aug  7 21:54:11 UTC 2017 c4_shutdown.sh: called with "-f"

SP의 /EMC/CEM/log/eVE/eVE_startup.log에 따르면 Docker가 실행되고 있지 않습니다.

Mon Aug  7 21:49:05 2017 /EMC/Platform/bin/eVE.pl: Cannot proceed. Docker service is not running
Mon Aug  7 21:49:05 2017 /EMC/Platform/bin/eVE.pl: Cannot proceed. Docker service is not running
Mon Aug  7 21:49:06 2017 /EMC/Platform/bin/eVE.pl: Cannot proceed. Docker service is not running

/var/log/messages에 따르면 디바이스 파일 "ls"를 로드할 수 없기 때문에 Docker 서비스가 실패했습니다.

2017-08-07T21:41:09+00:00 self docker[18109]: time="2017-08-07T21:41:09.996387324Z" level=error msg="[graphdriver] prior storage driver \"devicemapper\" failed: devmapper: Failed to load device files:Error looking up device ls:Unknown device ls"
2017-08-07T21:41:09+00:00 self docker[18109]: time="2017-08-07T21:41:09.996422502Z" level=fatal msg="Error starting daemon: error initializing graphdriver: devmapper: Failed to load device files:Error looking up device ls:Unknown device ls"
2017-08-07T21:41:10+00:00 self systemd[1]: docker.service: main process exited, code=exited, status=1/FAILURE

1. /var/lib/docker/devicemapper/metadata에서 문제가 있는 파일을 제거합니다.

   rm -f /var/lib/docker/devicemapper/metadata/ls

2. 부팅 복구 카운터를 비웁니다.

   svc_rescue_state -c

3. SP를 재부팅합니다.

   svc_shutdown -r