2022/06/14 최근 서버포럼 서버 불안정에 관한 안내 건.

profile
달소

 

안녕하세요. 관리자입니다.

 

최근에 자주 일어난 서버 불안정 사태에 대해 먼저 죄송하다는 말씀부터 드립니다.

 

서버포럼은 홈서버를 통해 운영되고있는 커뮤니티 사이트입니다.

홈서버로 운영되는만큼 유저여러분께 최신 오픈소스 프로젝트들을 소개시켜드리고 적용하는 과정에서 여러가지 이슈들이 발생하였습니다.

해당 이슈들의 경우 해결한뒤 안정화 단계로 접어들었다고 판단시 추후 업그레이드는 모두 별도의 개발서버에서 진행하고 배포하는 과정으로 변경하고자합니다.

 

장애관련


기존 ESXi에서 Ubuntu Linux를 통해서 구성중이던 홈서버 환경을 지난달 Proxmox로 전환하면서 무중단 서비스 및 업데이트를 하기위해서 여러가지 방법을 시도하였으나 db서버의 업데이트로 버전 이슈가 생겨 잠시 동안 서버가 접근이 되지않는등에 대한 문제가 발생하게 되었습니다.

-> 해당이슈는 기존버전으로 db를 롤백하면서 해결된듯합니다.(현재까지 이상무)

 

https://svrforum.com/notification/285071

 

하루전인 06월12일날 오전 12시 24분경 Proxmox 내부에서 메모리를 할당하는 과정에서 Out of Memory가 발생하여
내부의 VM중 가장 큰 용량의 RAM을 사용하고있던 서버포럼 및 달소씨의하루 블로그의 VM이 kill.. 당했습니다.

 

image.png.jpg

 

해당이슈는 아래처럼 uptimekuma에서 모니터링이 가능했으나...

image.png.jpg


새벽시간 + 제가 외부에 나와있는 상황이였기 때문에 아침에 조치되었습니다.(VM Start)

 

문제점이 확인된 만큼 동일한 사태가 발생하지않도록 조치 완료되었으며 향후 동일한 이슈가 재발되지 않도록 하겠습니다.

 

https://svrforum.com/os/318576

 

서버포럼 백업관련

기본적으로 서버포럼은 타 장치로의 일 백업이 기본으로 설정되어있고 매주 주말 2차백업을 진행하고있습니다.

서버가 잠시 다운되더라도 소중한 자료들은 모두 잘 보관되고 있으니 걱정하지않으셔도 됩니다.

 

image.png.jpg

 

추가로 장애에 대한 가시성을 높일수 있는 방안도 고려해보겠습니다.

 

서버포럼을 이용해주셔서 감사합니다.

관리자 드림.

 

 

*ESXi에서 Proxmox 환경으로 변경한 이유는 Proxmox에서 지원하는 ZFS Raid를 통해 시스템의 가용성을 확보하기 위함입니다. 기존 단일 디스크 환경에서 OS부분과 Data부분을 모두 미러링 구성으로 변경하였으며 디스크가 1개 fail 나더라도 가용성이 보장됩니다.
 

서버포럼 관리자입니다.!

서버포럼은 홈서버로 운영중이며 아래와같은 시스템으로 운영됩니다.

 

메인서버 - Ryzen 5700G / Proxmox 7.2 / Ubuntu / Xpenology / 기타 VM 등등

보조서버 - Intel i9-9900ES(QQC0) / H370M / Proxmox 7.1 / 아직개발용서버로 사용중
백업서버 - 타오나스 A형(?) / DS918+ 6.2.3 / 메인서버 VM 백업용

 

하드웨어,가상화 등등 여러 IT분야에 관심이 두루두루많습니다만 깊게알고있는건 없습니다 하하하

 

 

적용중인 도장이 없습니다.

* 가입일 : 2020-12-24
* 총 게시글 수 : 5053
* 총 댓글 수 : 14868
* 추천받은 게시글 개수 : 2064
* 추천받은 댓글 개수 : 2507
댓글
12
  • MirDaTe
    2022.06.14

    고생이 많으셔요. 노고에 감사드립니다. ^^

  • MirDaTe
    달소
    작성자
    2022.06.14
    @MirDaTe 님에게 보내는 답글

    응원해주셔서 감사합니다 ^^

  • 스기
    2022.06.14

    고생해 주시는 덕분에 신세계를 경험합니다.

    늘 감사합니다.

  • 스기
    달소
    작성자
    2022.06.14
    @스기 님에게 보내는 답글

    제가 항상 모두에게 감사드리죠!

  • 우성짱
    2022.06.14

    둘다 써보질 않아서 무슨 말인지 모르겠지만 고생 많으십니다.

  • 우성짱
    달소
    작성자
    2022.06.14
    @우성짱 님에게 보내는 답글

    이슈는.. 없는게 제일인데요 ㅎㅎ 앞으로 새로운 이슈가 없기를...!

  • 초보나스
    2022.06.14

    저도 잘모르 겠지만 해결 하셨다니 다행이네요 ^^ 고생 하셨습니다

  • 초보나스
    달소
    작성자
    2022.06.14
    @초보나스 님에게 보내는 답글

    앞으로 문제없이 운영하도록하겠습니다!

  • quad
    2022.06.14

    운영을 책임지고 있으면 그런 경우 가슴이 철렁하죠.

    고생하셨습니다.

    그리고 너무 철렁하지 않으셔도 됩니다.

    세상이 무너지는 것도 아니고 누가 다치는 것도 아닌데요 뭘~

  • quad
    달소
    작성자
    2022.06.14
    @quad 님에게 보내는 답글

    맞습니다 ㅠㅠ 자고일어나니 이게 무슨일인지 싶더라구요..

    사이트가 문제없이 돌아가는건 신뢰의 문제라고 생각하기 때문에 최대한 문제없이 운영하고싶습니다 ㅎㅎ

    응원 감사합니다!

  • 몰라요
    2022.06.16

    항상 고생하십니다 감사합니다

  • 몰라요
    달소
    작성자
    2022.06.16
    @몰라요 님에게 보내는 답글

    아무쪼록 문제없이 운영되도록 해보겠습니다~~

댓글 쓰기
권한이 없습니다.