Isilon OneFS: 이벤트 알림: Node Offline - Event ID: 200010001, 300010003, 399990001, 900160001, 910100006, 400150007

이벤트

"Node Offline" 이벤트 알림을 받습니다. 이벤트 ID: 200010001.

"Node Offline" 이벤트는 클러스터의 다른 노드에서 노드를 오프라인으로 보고할 때 생성됩니다. 이 이벤트는 노드에서 내부 링크가 손실된 경우에도 생성될 수 있습니다.

메모: 노드가 켜지지 않은 경우 'Isilon 노드의 전원을 껐다가 켜고 드레이닝하는 방법'을 수행합니다.

세부 정보

다음 조건 중 하나가 true인 경우:

• 하나 이상의 노드가 재부팅되었습니다.
• 하나 이상의 노드 전원이 꺼져 있습니다.
• 노드에 백엔드 네트워크(IB(InfiniBand)) 연결이 없습니다. 백엔드 연결이란 다른 노드와 통신할 수 있는 노드의 기능을 의미합니다.
• 노드가 그룹에 참여할 수 없습니다.

응답

문제 해결을 시작하기 전에 이벤트가 클러스터의 유지 보수와 관련이 없는지 확인합니다. 진행 중인 유지 보수가 없음을 확인한 후 다음 문제 해결을 진행합니다.

노드가 재부팅된 경우

1. 노드에 대한 SSH 연결을 열고 "root" 계정을 사용하여 로그인합니다.
2. 다음 명령을 실행하여 노드가 클러스터에 다시 연결되었는지 확인합니다.
   
   isi status
   
   isi status 명령은 다음과 유사한 출력을 반환합니다. 노드가 클러스터에 다시 연결되면 Health 열에 D(Down)가 표시되지 않습니다.
    
                      상태 처리량(bps) HDD 스토리지 SSD 스토리지
   ID |IP 주소 |다스르 |  In Out 합계 | 중고 / 크기 |중고 / 사이즈
   -------------------+-----+-----+-----+-----+-----------------+-----------------
   1|10.111.183.10 | 확인 | 115케이| 220케이| 335케이| 531M/ 10T(< 1%)|    (SSD 없음)
     2|10.111.183.11 | 확인 |    0|    0|    0| 519M / 10T (< 1 %) |    (SSD 없음)
     3|10.111.183.12 | 확인 |    0|  26케이|  26케이| 521M / 10T (< 1 %) |    (SSD 없음)
   -------------------+-----+-----+-----+-----+-----------------+-----------------
   클러스터 합계:          | 115케이| 246케이| 361케이| 1.5G/ 31T(< 1%)|    (SSD 없음)
   
        상태 필드: D = Down, A = Attention, S = Smartfailed, R = Read-Only
   
    
3. 다음 명령을 실행하여 가동 시간을 확인합니다.
   
   uptime
   
   다음과 유사한 출력이 표시됩니다.
   
   8:41PM up 10 mins, 1 user, load averages: 0.08, 0.18, 0.14
   
   노드가 최근에 재부팅된 경우 가동 시간이 분 단위로 비교적 짧습니다.
    
4. 다음 명령을 실행하여 로그를 수집하고 분석을 위해 Isilon 기술 지원에 보냅니다.
   
   isi_gather_info

다운 노드의 외부 IP 주소를 ping할 수 있는 경우

1. 노드의 상태 확인:
   1. 노드에 대한 SSH 연결을 열고 "root" 계정을 사용하여 로그인합니다.
   2. 다음 명령을 실행합니다.
      
      ifconfig |grep -A4 ib1
      
      ifconfig 명령은 내부 인터페이스가 활성 상태임을 나타내는 다음 상태를 리턴해야 합니다.
       
      ib1 : 플래그 = 8843<업, 브로드캐스트, 실행 중, 심플렉스, 멀티캐스트> 메트릭 0 MTU 2004
      lladdr 0.15.1b.0.10.bd.4c.77
      inet 172.10.111.200 넷마스크 0xffffff00 브로드캐스트 1.10.111.255 영역 1
      미디어: Infiniband 자동 선택
      상태: 활성
      
       
2. 상태가 비활성인 경우 다음을 확인하십시오.
   1. IB 카드의 포트에 대한 작동 표시등이 켜져 있습니까, 아니면 꺼져 있습니까?
      • 표시등이 꺼져 있으면 b 단계로 이동합니다.
   2. IB 케이블이 노드와 IB 스위치에 단단히 연결되어 있습니까?
      • 그렇지 않은 경우 노드와 스위치에 케이블을 다시 연결합니다.
   3. IB 스위치의 전원이 켜져 있습니까?
      • 그렇지 않은 경우 전원을 켭니다.
   4. 노드를 육안으로 검사하여 전원 표시등이 켜져 있는지 확인합니다.

노드가 꺼져 있는 경우

1. 노드를 켜 봅니다.
    

   
   참고: 문제 해결에 도움이 될 수 있는 정보를 캡처하기 위해 부팅할 때 모니터링할 노드에 대한 직렬 액세스를 설정할 수 있는 경우 가장 좋습니다. 자세한 내용은 Isilon: 노드의 관리 포트에 연결하는 방법

2. 노드가 켜지면 노드가 클러스터에 다시 연결되었는지 확인합니다.
   1. 클러스터의 다른 노드에 대한 SSH(Secure Shell) 연결을 열고 root 계정을 사용하여 로그인합니다.
   2. 다음 명령을 실행하여 노드가 클러스터에 다시 연결되어 있는지 확인합니다.
      
      isi status
      
      isi status 명령은 다음과 유사한 출력을 반환합니다. 노드가 클러스터에 다시 연결되면 Health 열에 D(Down)가 표시되지 않습니다.
       
                         상태 처리량(bps) HDD 스토리지 SSD 스토리지
      ID |IP 주소 |다스르 |  In Out 합계 | 중고 / 크기 |중고 / 사이즈
      -------------------+-----+-----+-----+-----+-----------------+-----------------
      1|10.111.183.10 | 확인 | 115케이| 220케이| 335케이| 531M/ 10T(< 1%)|    (SSD 없음)
        2|10.111.183.11 | 확인 |    0|    0|    0| 519M / 10T (< 1 %) |    (SSD 없음)
        3|10.111.183.12 | 확인 |    0|  26케이|  26케이| 521M / 10T (< 1 %) |    (SSD 없음)
      -------------------+-----+-----+-----+-----+-----------------+-----------------
      클러스터 합계:          | 115케이| 246케이| 361케이| 1.5G/ 31T(< 1%)|    (SSD 없음)
      
           상태 필드: D = Down, A = Attention, S = Smartfailed, R = Read-Only
      
       
   3. 노드가 클러스터에 다시 연결되는 경우 다음 명령을 실행하여 로그를 수집하고 분석을 위해 Isilon 기술 지원에 보냅니다.
      
      isi_gather_info
       
   4. 노드가 클러스터에 다시 연결되지 않으면 다음 섹션으로 진행합니다.
3. 노드가 켜지지 않으면 회로 차단기가 작동하고 전원 콘센트가 활성 상태인지 확인합니다.
4. 노드에 전원이 공급되지 않는 경우 전원 공급 장치 문제를 해결합니다.
5. 노드가 꺼져 있고 전원이 공급되는 경우 Isilon 기술 지원에 문의하여 문제 해결에 대한 도움을 받으십시오.

노드의 전원이 켜져 있지만 클러스터에 다시 연결되지 않은 경우

1. SSH(Secure Shell) 세션을 통해 원격 액세스를 설정해 봅니다. SSH 세션이 실패하는 경우 직렬 콘솔을 통해 원격 액세스를 설정해 봅니다.
2. SSH 세션이나 직렬 콘솔이 응답하지 않는 경우 SSH 세션이나 직렬 콘솔에서 CTRL+T를 누릅니다.
3. CTRL+T를 누르면 출력이 생성되고 출력을 기록한 다음 Isilon 기술 지원에 장애 분석을 요청하십시오.
4. 노드가 응답하지 않는 경우 전원 버튼을 세 번 누른 다음 5분 동안 노드의 전원이 꺼지기를 기다립니다.
5. 노드의 전원이 꺼지지 않으면 노드의 전원이 꺼질 때까지 전원 버튼을 길게 누릅니다.
6. 전원 버튼을 다시 눌러 노드를 켭니다.
7. 노드 전원이 켜지고 로그인 프롬프트가 반환되면 "root" 계정을 사용하여 로그인합니다.
8. 다음 명령을 실행하여 로그를 수집하고 분석을
   
   위해 Isilon 기술 지원 부서에 전송isi_gather_info
    
9. 노드가 클러스터에 다시 연결되지 않는 경우 Isilon 기술 지원에 문의하여 문제 해결에 대한 도움을 받으십시오.