[MIP-238] NIC Uplink 후 Heartbeat 통신이 되지 않음

Owned by 이명식
Last updated: 2015/11/17 by 양희덕
2 min read

Subject
NIC Uplink 후 Heartbeat 통신이 되지 않음.
APPLIES TO:
MCCS version: 3.5.3
OS: Windows 2003 x64 Standard Edition SP2
APPs:
Disk Type: 


SYMPTOMS
고객사인 중앙일보에서 Heartbeat NIC이 Downlink -> Uplink 후 Heartbeat이 제게 되지 못한 증상이 발견 되었습니다.
- MCCS / Windows Log 분석
1. 13/05/02-10:39:46 : Public NIC을 통한 Heartbeat 통신 끊김 (고객사 네트워크 속성 수정)
2. 13/05/02-10:40:26 : Heartbeat NIC을 통한 Heartbeat 통신 끊김 (고객사 네트워크 속성 수정)
3. 13/05/02-10:40:26 : Public NIC을 통한 Ping 통신 재게
4. 13/05/02-10:40:26 : Heartbeat NIC을 통한 Ping 통신 재게
5. 13/05/02-10:40:26 : 장애 상태였던 원격 노드가 정상 상태로 재연결 되어 JN108의 MCCS Engine 재시작.
6. 13/05/02-10:40:32 : Heartbeat NIC을 통한 Heartbeat 통신 재게
7. 13/05/02-10:41:11 : Public NIC을 통한 Heartbeat 통신 재게
8. 13/05/02-10:41:48 : Heartbeat NIC을 통한 Heartbeat 통신 끊김
13-05-02-10:41:47 : Intel(R) I350 Gigabit Network Connection #3n100Mbps 전이중으로 네트워크 링크가 설정되었습니다. (JN0107의 Windows Log)
13-05-02-10:41:49 : Intel(R) I350 Gigabit Network Connection #2n100Mbps 전이중으로 네트워크 링크가 설정되었습니다. (JN0108의 Windows Log)
Heartbeat NIC이 양서버 모두 Uplink 되었으나 Heartbeat이 재게 되지 못함.
9. 13/05/15-04:52:11 : Public NIC을 통한 Heartbeat 통신 끊김 (고객사 케이블 정리 작업)
10.13/05/15-04:52:36 : NetworkCard (Public NIC) 장애로 MCCS가 RG Offline 수행.
11.13/05/15-04:55:17 : Public NIC을 통한 Ping 통신 재게
12.13/05/15-04:55:18 : Heartbeat NIC을 통한 Ping 통신 재게
13.13/05/15-04:55:16 : 장애 상태였던 원격 노드가 정상 상태로 재연결 되어 JN107의 MCCS Engine 재시작.
14.13/05/15-04:55:28 : 양 서버의 MCCS가 FirstStart Mode가 아니므로 AutoStart 명령은 수행 되지 않음. (RG Offline 상태)
15 13/05/15-05:55:33 ~ 13/05/15-06:07:22 : RG를 Online을 목적으로 서버를 수차례 재부팅. (운영 미숙으로 인한 Action)
15.13/05/15-06:07:22 : 운영자에 의한 RG Online"

CAUSE


SOLUTION
Fixed 3.6.0