LostSaga 한국 서비스 장애보고

1. 장애발생
2. 분석
3. 대처
4. 점검
2012-09-24 신영욱

1. 장애발생
: 9 월 20 일 16 시 23 분경 한대의 게임서버 다운발생
이후 4 차례 서버 다운이 발생(12 번 서버 1 번, 24 번 서버 4 번)

2. 분석
: 로그나 덤프가 없이 서버가 종료되어 코드를 토대로 분석
수정된 내역 중 의심되는 코드와 패치가 된 로그라이브러리를 위주로 분석함
- 로그라이브러리 이전으로 롤백
- 추가된 로그 중에 잘못된 인자값을 입력하는 부분주석 처리

3. 대처
: 20 일 오후 7 시부터 9 시까지 서버 다운발생이 없어 21 일 오전 9 시 임시점검
시간에 로그 라이브러리의 문제점이 되는 부분을 수정해서 패치함, 이후 잘못 로그를 남기는
코드를 발견하여 2 차 패치에 수정함

4. 점검
: 21 일 오전 9 시에 점검 후 오후 8 시 55 분에 서버 다운이 한차례 더 발생하여 2 차 수정분을
22 일 오전 5 시에 패치함. 이후 서버다운 현상이 발생하지 않음