2019.10.10 21:05

[복구 완료] 서버 장애 복구 완료되었습니다.

조회 수 35879 추천 수 521 댓글 487

안녕하세요, 시스템 모니터입니다.


부하 테스트하다가 실수로 메인 데이터베이스 서버 하드 용량을 가득 채워서 메인 데이터베이스 장애가 발생했습니다.

장애 탐지 시스템에 의해 메인 데이터베이스 서버가 서비스에서 자동 중지되고, 비상 서버가 자동으로 작동하면서 서비스가 돌아가고 있으며, 비상 서버는 사양이 메인 서버 만큼 좋지 않고 메인 서버에 다시 데이터 복제하는 과정 때문에 서비스가 느리며 종종 장애가 발생하고 있습니다.


최대한 빠르게 메인 데이터베이스 서버로 복구하도록 하겠습니다.


관련 사항으로 불편 끼쳐 드려서 죄송합니다.


[상황 진행]

2019-10-10 20:10: 하드 용량을 실수로 가득 채워서 메인 데이터베이스 날려버림

-> 비상 서버로 서비스 돌리고 있으며 메인 데이터베이스 복구 중

2019-10-10 22:54: 메인 데이터베이스 서버 복구 완료

2019-10-10 23:01: 상황 종료


[요약]

- 시모 바보

- 테스트하다가 실수함 -> 비상 서버 돌리면서 메인 서버 복구 중(서비스는 작동중이지만 느림)

-> 2019-10-10 22:54 복구 완료


글 목록
분류 제목 글쓴이 날짜 조회 추천
11월 7일 22:10 ~ 22:35 서버 장애 및 이후 일시적인 이상 현상 복구 40 운영진시스템모니터 2019.11.08 1204 -18
11월 11일 월요일 오전 05:00 시에 네트워크 장비 교체 및 업그레이드 작업 예정입니다. 223 운영진시스템모니터 2019.11.02 22434 16
데이터베이스 장애 처리 및 업데이트 작업 진행 6 운영진시스템모니터 2019.10.19 378 -11
[복구 완료] 서버 장애 복구 완료되었습니다. 487 운영진시스템모니터 2019.10.10 35879 -764
서버 안정화 작업 진행 완료 159 운영진시스템모니터 2019.08.19 30787 50
최근 주기적으로 발생한 일시 서버 장애에 대해 대응중 170 운영진시스템모니터 2019.08.19 23869 133
서버 응급 커널 교체 작업 및 부팅 작업 완료 113 운영진시스템모니터 2019.08.10 4508 -13
서버 회선 장애 복구에 대해 공지합니다 86 첨부파일 운영진시스템모니터 2019.05.05 21982 132
[해결완료] 서버에 회선 공급하는 통신사 장애가 발생 63 운영진시스템모니터 2019.03.03 24825 156
2018년 6월 23일 새벽 3:10 부터 3:30 장애 발생했습니다. 8 첨부파일 운영진시스템모니터 2018.06.23 478 -6
일시적 서버 장애 및 관련 복구 작업 완료되었습니다. 3 운영진시스템모니터 2018.02.07 2403 8
3월 8일 오전 9:30에 서버 메인보드 교체 예정입니다. 37 운영진시스템모니터 2017.03.03 5871 28
서버 이전 후 장애 복구되었습니다. 95 첨부파일 운영진시스템모니터 2016.08.27 16000 156
새벽 4시~ 아침 11:30 까지 발생한 접속 장애 복구했습니다. 21 운영진시스템모니터 2016.05.23 4977 44
게시판 목록 페이징 이전 1 다음
/ 1