[MIP-209] mirror disk failover 실패함
Subject
mirror disk failover 실패
APPLIES TO:
"Fujitsu RX600S5(CPU:4 socket quad core 1.87Ghz, RAM:8GB), window2003 std r2 sp2
EverRunHA 7.1.2에 mccs3.1 wd구성"
SYMPTOMS
system failover 시 mirror disk monitoring 이상증상 발생
1 discharge1 서버 system failover 로 인해 discharge2서버에서 리소스 그룹 online 시도
2. ip assign, mirror_D 확인 중 아래 로그 발생
11/04/30-04:03:41,323 | ror_DAgent | rDiskAgent: 98 | INFO | 리소스 온라인 시도 [Mirror_D]
11/04/30-04:03:44,214 | D:\ | ror.Volume: 518 | INFO | D: 미러 상태 변경(MIRRORING => NO_MIRROR)
11/04/30-04:03:44,323 | D:\ | ror.Volume: 160 | INFO | D: 미러 롤 변경(Target => None)
11/04/30-04:03:46,526 | ror_DAgent | rDiskAgent: 167 | INFO | 볼륨 'D'에 대한 switchover flag 삭제
11/04/30-04:05:35,964 | .160.160.1 | inkMonitor: 253 | INFO | 링크 상태 변경 [160.160.160.1 : FAULTED->UNLINKED]
11/04/30-04:05:35,964 | .150.150.1 | inkMonitor: 253 | INFO | 링크 상태 변경 [150.150.150.1 : FAULTED->UNLINKED]
11/04/30-04:05:38,104 | D:\ | ror.Volume: 160 | INFO | D: 미러 롤 변경(None => Target)
=> mirror_D 의 상태가 source로 적용이 되어 online이 되어야 하나, target으로 설정되어 online을 하지 못함
11/04/30-04:05:43,214 | D:\ | ror.Volume: 518 | INFO | D: 미러 상태 변경(NO_MIRROR => MIRROR_RESYNCING)
11/04/30-04:05:43,308 | D:\ | ror.Volume: 518 | INFO | D: 미러 상태 변경(MIRROR_RESYNCING => MIRRORING)
11/04/30-04:05:43,308 | D:\ | ror.Volume: 499 | INFO | D: 볼륨 상태. 미러 볼륨 페일오버 기능 활성화.
11/04/30-04:05:50,401 | ror_DAgent | MirrorUtil: 844 | WARN | 볼륨 상태 대기시간 초과 [D:, Source, 120]
=>mirror timeout
11/04/30-04:05:50,417 | ror_DAgent | rDiskAgent: 182 | WARN | 볼륨은 페일오버하였으나 잠긴 상태임
11/04/30-04:05:57,229 | ror_DAgent | rDiskAgent: 366 | WARN | D: 볼륨이 잠겨있지 않음. 미러 볼륨 페일오버 기능 비활성화.
11/04/30-04:05:58,011 | ror_DAgent | ateMachine: 367 | ERROR | 리소스 상태 변경 [Mirror_D - 장애]
11/04/30-04:05:58,011 | up_Task_RG | oupManager:1507 | ERROR | 그룹 온라인 명령 실패 [Task_RG]
CAUSE
"SE2 측에서 Everun VM 으로 구축해서 테스트 환경을 만들어 줌.
만들어진 테스트 환경에서 동일 증상 재현안됨.
포스코 포스트립에서도 많은 테스트 후에도 재현 안됨.
SE2 장영환 과장과 상의 후 H/W 문제로 잠정 결론.
"
SOLUTION
"H/W 오류로 인해서 발생했다고 잠정 결론 됨.
재현 할 수 있는 방법 없음.
H/W 변경 후 증상 발생하지 않음"