Windows용 PowerPath Powerpath for windows 6.1 Microsoft 장애 조치 클러스터 리소스가 볼륨을 확장 하는 동안 오프 라인으로 전환 되었습니다.

LUN 확장을 XtremIO 사용 하 여 수행 했습니다. 

Microsoft 장애 조치 클러스터 리소스가 실패 하 고 XtremIO 스토리지에서 볼륨을 확장 하 고 호스트 측에서 확장을 완료 하기 전에 오프 라인으로 전환 되었습니다.
Microsoft 클러스터 마스터는 예약 SCSI을 유지 하지만 오프 라인으로 전환 되 고 SCSI 예약 릴리즈를 수신 하는 XtremIO 수신 된 후 즉시 릴리즈를 승인 합니다. 확장 중인 Lun을 확인 하는 즉시, 통신 오류가 발생 하 여 노드가 클러스터 운영 체제 버전에서 제거 됩니다

. Microsoft Windows Server 2012 Standard
Dell EMC PowerPath 버전 6.1 (build 295)

모든 경로는 오류 없이 활성 상태로 유지 됩니다. 

시스템 이벤트 로그
10/16/2017 11:34:48 PM ERROR 번호가 xxxxxxx-activ 7034 서비스 제어 관리자 SQL Server (XXXXX) 서비스가 예기치 않게 종료 되었습니다. 이 작업은 1 번 수행 했습니다.
10/16/2017 11:34:22 PM 정보 번호가 XXXXXXX-.. activ 7036 서비스 제어 관리자 XXXXX (SQL Server Agent) 서비스가 중지 된 상태가 되었습니다.
10/16/2017 11:34:20 PM 오류 번호가 XXXXXXX-.. activ 1069 Microsoft-Windows-클러스터 된 역할 ' SQL Server (XXXXX) '에서 ' 물리 디스크 ' 유형의 FailoverCluste 클러스터 리소스 ' XXXXX '이 (가) 실패 했습니다.
10/16/2017 11:34:20 PM 오류 번호가 xxxxxxx 기반-.. activ 1038 Microsoft Windows-이 노드에서 클러스터 디스크 ' XXXXX '의 FailoverCluste 소유권이 예기치 않게 손실 되었습니다. 검증 a Configuration wizard
10/16/2017 11:34:17 PM WARNING 번호가 xxxxxxx를 실행 합니다-.. activ 140 Microsoft-Windows-Ntfs 시스템에서 데이터를 트랜잭션 로그로 플러시하지 못했습니다. 볼륨 손상은 다음과 같이 발생할 수 있습니다. O:, 장치 이름: \Ddevdiskvolu
10/16/2017 11:34:17 PM Warning 번호가 xxxxxxx-.. activ 151 disk 디스크 1의 용량이 변경 되었습니다.
10/16/2017 11:34:17 PM 경고 번호가 XXXXXXX-.. activ 151 disk 디스크 1의 용량이 변경 되었습니다.
10/16/2017 11:34:17 PM 경고 번호가 XXXXXXX-.. activ 151 disk 디스크 1의 용량이 변경 되었습니다.
10/16/2017 11:34:16 PM 경고 번호가 XXXXXXX-.. activ 151 disk 디스크 1의 용량이 변경 되었습니다.
10/16/2017 11:34:16 PM 경고 번호가 XXXXXXX-.. activ 151 disk 디스크 1의 용량이 변경 되었습니다.
10/16/2017 11:34:15 PM 경고 번호가 XXXXXXX-.. activ 151 disk 디스크 1의 용량이 변경 되었습니다.
10/16/2017 11:27:30 PM 정보 번호가 XXXXXXX-.. activ 7036 서비스 제어 관리자 Windows module Installer 서비스를 중지 된 상태로 전환 했습니다.

시스템 이벤트 로그
11/13/2017 10:41:22 PM 오류 번호가 xxxxxxx-.. activ 1069 Microsoft-Windows-클러스터 된 역할 ' StorageTest '에서 ' 물리 디스크 ' 유형의 FailoverCluste 클러스터 리소스 ' 클러스터 디스크 1 '이 (가) 실패 했습니다. 리소스 및 역할에 대한 장애 정책에 따라 클러스터 서비스는 이 노드에서 리소스를 온라인으로 전환하거나 그룹을 클러스터의 다른 노드로 이동한 다음 다시 시작할 수 있습니다. Failover Cluster Manager 또는 ClusterResource Windows PowerShell cmdlet을 사용 하 여 리소스 및 그룹 상태를 확인 합니다.
11/13/2017 10:41:22 PM 오류 번호가 XXXXXXX-.. activ 1038 Microsoft Windows-이 노드에서 클러스터 디스크 ' 클러스터 디스크 1 '의 FailoverCluste 소유권이 예기치 않게 손실 되었습니다. 구성 유효성 검사 마법사를 실행 하 여 스토리지 구성을 확인 합니다.
11/13/2017 10:41:22 PM 경고 번호가 XXXXXXX-.. activ 140 Microsoft-Windows-Ntfs 시스템에서 데이터를 트랜잭션 로그로 플러시하지 못했습니다. 볼륨 손상은 다음과 같이 발생할 수 있습니다. X:, 장치 이름: 디바이스 HarddiskVolume17 (없는 장치를 지정 했습니다.)
11/13/2017 10:41:22 PM 경고 번호가 XXXXXXX-.. activ 151 disk 디스크 17의 용량이 변경 되었습니다.
11/13/2017 10:41:22 PM 경고 번호가 XXXXXXX-.. activ 151 disk 디스크 17의 용량이 변경 되었습니다.
11/13/2017 10:41:22 PM 경고 번호가 XXXXXXX-.. activ 151 disk 디스크 17의 용량이 변경 되었습니다.

클러스터 로그
00001364.000013 f0:: 2017/11/13-22:41:22.599 INFO [RES] 물리 디스크: PNPDEBUG: reset notification handle 0x35b73da0
00001364.000013 f0:: 2017/11/13-22:41:22.599 INFO [RES] 물리 Disk: PNPDEBUG: UnregisterDeviceNotification handle 0000001D35B73DA0
00001364.000013 f0:: 2017/11/13-22:41:22.599 INFO [RES] 물리 디스크: N \\? \STORAGE # Volume # {7b3fcfa4-c894-11e7-93ff-0025b505a19f} #0000000000100000 # {53f5630d-b6bf-11d0-94f2-00a0c91efb8b} Volume 사라졌습니다
00001364.000013 f0:: 2017/11/13-22:41:22.599 INFO [RES] 물리 디스크: PnpRemoveVolume: 볼륨 제거 \\? \STORAGE # Volume # {7b3fcfa4-c894-11e7-93ff-0025b505a19f} #0000000000100000 # {53f5630d-b6bf-11d0-94f2-00a0c91efb8b}
00001364.00002404:: 2017/11/13-22:41:22.600 INFO [RES] 물리 디스크 < 클러스터 디스크 1 >: N HardDiskpSetPnpUpdateTimePropertyWorker: 상태
0000008ac. 000036d0:: 2017/11/13-22:41:22.600 INFO [보석] Node 3: Gid 7190
00001364.00005034:: 2017/11/13-22:41:22.600 INFO [RES] 물리 디스크를 사용 하 여 1 개의 메시지를 일괄 처리 된 보석 메시지로 보냅니다. 하드 디스크 Pisdiskcsv: IOCTL_DISK_GET_CLUSTER_INFO: 디바이스 \Ddedev17\cde0, IsClustered 1 IsCsv 0 InMaintenance 0
00001364.00005034:: 2017/11/13-22:41:22.600 ERR [RES] 물리 디스크: Device \Device\Harddisk17\ClusterPartition1, status 0xc0000034
00001364.00005034:: 2017/11/13-22:41:22.600 ERR [RES] 물리 디스크를 열지 못했습니다. HarddiskpIsPartitionHidden: device \Device\Harddisk17\ClusterPartition1, status 2
00001364.00005034:: 2017/11/13-22:41:22.600 ERR [RES] 물리 디스크 < 클러스터 디스크 1 >: HardDiskpGetVolumeInfo: 디스크 17 파티션 1이 숨김 상태 인지 알 수 없음 2
00001364.00005034:: 2017/11/13-22:41:22.600 ERR [RES] 물리 디스크 < 클러스터 디스크 1 >: PnpUpdateDiskConfigThread: Volume info status 2
000008ac를 가져오지 못했습니다. 000023e8:: 2017/11/13-22:41:22.602 info [NM] 클라이언트 주소 fe80:: 6d90:4572: db28:58f7에서 요청을 받았습니다.
00001364.000024 d8:: 2017/11/13-22:41:22.946 ERR [RES] 물리 디스크 < 클러스터 디스크 1 >: IsAlive 온전성 검사가 실패 했습니다. 보류 중인 IO가 완료 되 고 상태가 1117입니다.
00001364.000024 d8:: 2017/11/13-22:41:22.946 ERR [RES] 물리 디스크 < 클러스터 디스크 1 >: IsAlive 온전성 검사가 실패 했습니다. 보류 중인 IO가 완료 되 고 상태가 1117입니다.
00001364.000024 d8:: 2017/11/13-22:41:22.946 WARN [RHS] 리소스 클러스터 디스크 1 IsAlive에서 장애가 발생 했음을 나타냅니다.

PowerPath 6.1 코드에서 간헐적인 버그로 인해 문제가 발생 합니다. PRI (영구 예약에서) 로드 밸런싱의 변경으로 인해 LUN 확장 중에 클러스터 디스크 오류가 발생 합니다.

해결 방법: 이 문제를 해결 하려면 PowerPath 6.3 이상으로 업그레이드 하십시오. PowerPath for Windows는 다음 웹 링크에서 다운로드할 수 있습니다. 
https://support.emc.com/products/1781
해결 방법: 업그레이드를 수행할 수 없는 경우, 활성 경로를 사용 하 여 Hba의 절반으로 줄어든 LUN 확장을 수행 하 여 문제를 해결할 수 있습니다. 여전히 위험이 있습니다.

1. 명령 프롬프트에서 ' powermt display bus '를 실행 합니다. 그러면 hba 번호와 타겟 관계가 표시 됩니다.
2. Run ' powermt set mode = standby hba = < hba # > dev = < dev > ' 명령을 실행 합니다. 이 명령을 사용 하면 입출력을 사용 하 여 경로 절반을 특정 디바이스에 전송할 수 있습니다. 따라서 하나의 초기자 HBA 활성 상태로 유지 되 고 다른 초기자는 2 개의 Hba만 사용 하는 것으로 간주 됩니다.
3. 계획 된 대로 LUN을 확장 합니다.
4. ' Powermt set mode = active hba = < hba # > dev = < dev > ' 명령을 실행 하 여 기본 상태를 복원 합니다.

참고: 이 문제를 조사 하는 동안 2 개의 버그가 발견 되었습니다. 

1. PowerPath 6.1: 클러스터 PRI (영구 예약) 명령의 로드 밸런싱 
2. PowerPath 6.1: 보고서 Lu 데이터 변경 UA에서 버스 재검색을 가져오지 못했습니다.

이러한 문제가 발생 하면 장애 조치 클러스터 및 Microsoft 독립 실행형 서버를 Microsoft 하는 다른 증상이 발생할 수 있습니다.
예를 들어 씬 프로비저닝 임계값을 초과 하는 경우 또는 어떠한 이유로 든 데이터 변경 사항 (예: LU의 좋지 않은 이름 변경)으로 인해 이러한 장애를 처리 하는 Windows 문제가 발생할 수 있습니다.