시스템 모니터입니다.
2019년 7월 26일 22:41~23:11 근처에 친선경기 이후에 에펨코리아 역사상 가장 높은 동시 접속자인 47,216 명이 사이트 접속하면서,
짧은 서버 장애가 여러 차례 발생했습니다.
주말 및 월요일에 계속 관련 부분에 대해 분석을 진행하고, 다행히 장애 원인을 성공적으로 찾아서 서부 부하 개선 작업을 진행하고 방금 적용했습니다.
해당 일시적인 장애 원인에 대해 분석을 한 결과, https://www.fmkorea.com/2027403449 글에 역대 최고의 단기간 빠른 추천 러쉬가 발생하면서,
추천이 중복이 되지 않고 안전하게 되도록 했던 소스 코드 부분으로 인해 추천 적용이 밀리는 병목 현상이 발생했습니다.
그로 인해 애플리케이션 서버의 최대 동시 처리 가능한 행위 수가 밀린 추천이 모두 적용되기 전 까지 100% 고갈 되면서 일시적인 오류들이 발생했습니다.
물론 그 외에 모든 부하 수치가 올라갔지만 이번에 결정적으로 오류가 발생한 이유는 위와 같습니다.
그래서 해당 추천 처리하는 소스 코드 튜닝 작업을 진행했고, 해당 성능 개선 업데이트로 인해 평상시에도 추천 및 비추천이 조금 빨라진 것을 느낄 수 있을 것이라는 기대가 있습니다.
아울러, 애플리케이션 서버의 내부 소프트웨어 버전도 최선으로 변경해서 성능 개선 작업을 추가적으로 진행할 예정이고, 서버 하드웨어 업그레이드도 진행할 예정입니다.
그 외에 최근의 사이트 업데이트 내역에 대해 공지합니다
- 일반 게시판에서 검색할 때 검색어가 강조 표시되며, 글 내용에도 노란색으로 강조 표기가 됨
- PC에서 임시 저장 기능 UI 개선, 같은 글 임시 저장 2번 안되던 불편함 개선(여러 번 저장 가능하도록), 임시 저장된 글 삭제 더 쉽게 가능하도록 수정
- 모바일에 임시 저장 기능 추가
- 아이폰에서 글 쓰기, 댓글 쓰기, 칸 입력할 때 화면 확대되던 불편함 해결(확대 안되도록)
- 포텐 메인 화면처럼 사이트 메인 화면도 포텐 텍스트 형식 누를 수 있게 UI 개선
- 익명 게시판에서 IP 바꾸면 자기 글 추천 가능했던 버그 수정
- 익명 게시판에서 닉네임 일부 검색되던 버그 수정
- 여러 기타 성능 튜닝 작업
[요약]
- 최근 동시 접속자 기록인 47,216 명 도달 후 발생한 일시적 서버 부하 장애 문제 원인 찾아서 개선 작업함
- 열심히 사이트 업데이트 중