2021.02.17 15:49

포텐 신규 서버 세팅 완료

조회 수 192470 추천 수 2884 댓글 1043

시스템 모니터입니다.


최근에 장애가 많았는데, 이유는 신규 서버 추가, 테스트, 여러 튜닝 때문입니다.

방금 신규 서버 세팅 완료했습니다.

중고 장비에 비해 신규 장비가 고장날 확률이 초창기에 높은데, 고장만 안 나면 이론상 기존에 비해 서비스가 안정화되었을 것 입니다.


질문) 

서버 왜 이래? 시모 일하냐?

서버 샀지?


답변)

최근에는 일을 하고 있어서 장애 나는 것으로 전에 공지한 것 처럼 대부분의 에펨코리아 장애는 하드웨어 문제 보다는 소프트웨어 문제입니다.

물론 전에 하드웨어가 대량으로 고장나면서 장애가 발생한 적도 있긴 합니다.

이번에 파일 서버 용량이 차서 95 TB 이상 고성능 기업용 SSD 기반의 용량 증설을 오늘 새벽에 완료했고,

데이터베이스 서버로 AMD EPYC 128 코어 + 기업용 nvme 드라이브를 어제 추가했으며,

웹 서버로 함께 AMD EPYC 128 코어 + 기업용 nvme 드라이브를 어제 추가했습니다.

데이터베이스는 한대가 고장나더라도 10초 이내에 사이트 전체가 자동 복구되는 고가용성 세팅을 완료하고 테스트했습니다(어제 장애 일부가 관련 세팅 및 테스트). 즉, 망치로 데이터베이스 서버 한대 뽀개도 사이트가 10초 이내에 복구됩니다.

다만, 파일, 캐싱 서버, 네트워크 장비들은 고강용성 세팅이 어렵거나 비용 문제로 실패했습니다(어제 장애 일부가 관련 테스트 실패). 장애 발생하면 제가 수동으로 고쳐야 하는 경우들입니다. 현실적인 범위로 사이트 안정성을 구축하고 있으며, 완벽하게 만들려고 하면 오히려 복잡해서 장애가 늘어나는 경우도 많은 것 같습니다(어제 장애가 대부분 그런 경우 ^^;;). 엄밀히 따지면 억대 넘는 솔루션을 사서 적용하면 해결되겠지만, 그것 보다는 차라리 클라우드로 통채로 미래에 옮기는 것이 나을 것 같습니다. 지금의 경우 직접 운영이 몇 배로 저렴해서, 비용 문제를 포함해서 대부분의 서버 인프라는 직접 운영중이지만 클라우드 이전도 미래에 고려중이긴 합니다.


원래 과거에 4~5년 이상 사용하려고 구매했던 파일 서버 용량이 1년안에 가득 차서, 이번에 서버 자원을 크게 확장했습니다.


관련 파란색이 용량 차는 모습:

용량이왤케빨리차.png

[요약]

- 현실적으로 최고 사양의 고성능 서버 정말로 샀고, 세팅 및 튜닝 때문에 최근 며칠간 불안정 했음

- 파일 서버 용량이 가득 차고있었는데, 어제 크게 확장함

- 일을 안해서가 아니라 일을 해서 장애남 ;;


글 목록
제목 글쓴이 날짜 조회
알림 [공식 입장]펨코에 좌표 찍기 하지 마시길 바랍니다 1470 포텐 운영진시스템모니터 00:02 398117
알림 쪽지 및 스크랩 검색 지원 추가, 사이트 업데이트 658 첨부파일 포텐 운영진시스템모니터 2021.04.10 103416
알림 정치인 닉네임 금지 규정 완화 1215 운영진시스템모니터 2021.03.27 123324
알림 사이트 속도 개선 패치 적용 442 포텐 운영진시스템모니터 2021.03.26 97978
알림 avi, wmv, asf, mkv 동영상 파일 지원 확대 310 포텐 운영진시스템모니터 2021.03.25 51615
알림 최근 여러 운영진 비판에 대한 답변입니다 2310 포텐 운영진시스템모니터 2021.03.10 204064
알림 LH글 관련 제재 통계, 차단 해지 364 운영진시스템모니터 2021.03.06 25421
알림 운영 관련 근거 없는 허위 소문, 성향 몰이 강력대응 및 입장문 1794 포텐 운영진독고 2021.03.05 144426
알림 핫딜 게시판 제휴 링크 관련 공지 273 포텐 운영진시스템모니터 2021.03.03 67085
알림 신규 서버 세팅 완료 1043 첨부파일 포텐 운영진시스템모니터 2021.02.17 192470
알림 설 기프티콘 및 잉여력 이벤트, 서버 업그레이드 1211 포텐 운영진시스템모니터 2021.02.10 120207
알림 포텐 상단 화제순 기능 테스트중 469 첨부파일 운영진시스템모니터 2021.02.06 25779
알림 포텐, 바로가기 테스트, 포텐 컷 고려중인 부분 750 첨부파일 포텐 운영진시스템모니터 2021.02.05 70962
알림 포텐 시스템 관련 고민 + 업데이트 697 포텐 운영진시스템모니터 2021.02.03 72407
알림 해외축구, 국내축구, 야구, 농구 포텐 우대 탭 복구 595 포텐 운영진시스템모니터 2021.02.02 63058
알림 인기글 시스템 개편, 인기글 사용 증가 및 포텐 글 양 줄이기 위해 포텐 컷 상향, 일부 게시판 인기글 24시간에서 12시간 기준 변경 테스트 166 포텐 운영진시스템모니터 2021.01.28 28932
알림 인기글 시스템 개편 테스트 예정 및 포텐 컷 조절 224 첨부파일 포텐 운영진시스템모니터 2021.01.23 62784
알림 게시판 인기 통계 + 포텐 컷 조절 305 포텐 운영진시스템모니터 2021.01.23 55334
알림 VPN IP의 회원 가입 및 추천/비추천 막음 284 포텐 운영진시스템모니터 2021.01.18 86264
알림 세상은 억울한 경우가 많습니다 913 포텐 운영진시스템모니터 2021.01.15 200724
게시판 목록 페이징 이전 1 2 3 4 5 6 7 8 9 10 ... 다음
/ 15