2022/10/26 자동백업도중 i/o error로 인한 임시 장애.
새벽에 돌아가는 백업시스템에서 아래와같은 에러가 나면서 디스크가 read only로 바뀌는 장애가 발생했습니다.
자세한 원인은 좀더 확인해봐야겠지만 2시간정도 장애가있었던걸로 확인되고있습니다.
현재는 정상화 완료하였고 원인 파악 후 조치하겠습니다.
사이트 이용에 불편을 드려 죄송합니다.
그래서 아침에 접속이 안되었던거군요.
복구되어 다행입니다.
원인 쉽게 찾고 수정하시길...
ㅠㅠ 아침부터 식겁했습니다,,,
어제 잠을 조금 일찍 잤습니다.
1시반에 눈이 떠져서 다시 잠이 안 왔습니다.
낑낑대던 해킨을 다시 한번 붙어보자 하고 2시간 넘게 삽질한 결과(대부분의 시간은 몬트레이 다운받고, 설치하는 시간) 빅서에서 몬트레이로의 업글에 성공했습니다.
새벽에 이 기쁜 소식을 전하고자 도와주셨던, 닭발은세개님과 화정큐삼님에게 성공보고를 드리려고 포럼을 클릭했는데, 메인 페이지 뜨고, 그 다음 클릭하니 에러 메시지 뿜뿜... 서버 죽는 그 순간을 목격(?)했지요 ㅎㅎㅎ~
보통 I/O에러면 드라이브가 맛이 간것이던데... 정상화 하시느라 고생하셨습니다.
쉬엄쉬엄 하세요^^
헣... 제가 자는동안에 죽는걸 목격하셔버렸군욘...ㅠㅠ
Proxmox VM에서 백업을 할때 VM에 스냅샷을 뜨면서 백업을 진행하게되는데 백업 진행 중 무슨일인지 에러가 발생해서 Ubuntu VM에 I/O가 먹통이됐습니다 ㅠ
다행히 디스크에러는 아니고 OS단 문제여서 재부팅하면서 fsck로 정상동작이 가능하긴했는데 일단 메인/백업서버에 패키지 업데이트들 한번씩 해주고 백업서버 램도 늘려놓은상태입니다.
일단은 내일 새벽에 재부팅을 한번하면서 커널을 최신버전으로 사용해보고 증상이 재현되는지 확인해봐야할듯합니다.
++ 해킨토시 업그레이드 축하드립니다~~
cmt alert