LostSaga 한국 서비스 장애보고

• 장애발생
• 원인파악
• 1 차 대처
• 오류보고
• 2 차 대처
2012-07-28 김지훈

• 장 애 발 생
: 7 월 28 일 9 시 23 분 장 애 발 생 . 전 체 서 버 가 다 운 이 되 었 음 .

• 원 인 파 악
: 로 그 분 석 결 과 DB 장 비 와 dbagent 와 의 접 속 이 끊 긴 것 을 확 인 함 .
- 1 차 현 상 : 03:50.07 디 비 연 결 오 류 현 상 발 생
- 2 차 현 상 : 05:33.52 디 비 연 결 오 류 현 상 발 생
- 3 차 현 상 : 09:22.32 디 비 연 결 오 류 -> dbagent 프 로 세 스 다 운 .

• 1 차 대 처
: 빠 르 게 로 그 를 분 석 하 고 원 인 파 악 . DB 와 의 연 결 끊 김 문 제 로 DBAgent 프 로 세 스 가
죽었다고 판단. 빠르게 서비스를 정상 복구해야 한다고 생각 . 서비스를 띄우기로 함 .
전 체 서 버 재 부 팅 후 게 임 프 로 세 스 를 시 작 . ( 10:07.52 : 작 업 자 권 대 윤 )

• 오 류 보 고
: DBAgent 로 그 확 인 한 결 과 간 혈 적 으 로 DB 장 비 와 연 결 이 끊 김 현 상 을 발 견 .
이 벤 트 로 그 확 인 한 결 과 ls_dbagent 가 중 단 되 었 음 을 확 인 . ( 09:23.05 )
게 임 서 버 Bug 로 그 확 인 한 결 과 09:23 분 경 DBAgent 로 패 킨 전 송 실 패 확 인 .
게 임 서 버 Critical 로 그 확 인 결 과 게 임 서 버 와 DBAgent 연 결 끊 김 확 인 .
DBAgent Dump 폴 더 확 인 결 과 파 일 은 남 아 있 으 나 안 에 내 용 이 없 는 것 확 인 .

• 2 차 대 처
: DB 장 비 상 태 확 인 ( 작 업 자 이 재 우 )
DBAgent 로 그 를 주 기 적 으 로 확 인 하 여 DB 와 의 연 결 끊 김 현 상 이 있 는 지 확 인 .