쉬는 날 이런 일이 ㅋㅋㅋ


뭐 하릴 없어서 회사 이메일 체크했더니 모니터링 시스템이 6시간 전에 이메일 보냈었네. 아직 정식 서비스 시작은 안하고 있는데 이런 일이 발생


SSH 연결해서 보려고 했더니 연결이 안되네? 서버가 통째로 맛탱이가 간듯. ㅎㄷㄷ


아마존 콘솔로 접속해서 최초 문제 발생 시각 정보만 복붙하고 일단 리부팅 하기로 함. 아니 ㅅㅂ 리부팅이 안되네? 결국 스톱하고 다시 스타트 시킴.  ㅎㄷㄷ




일단 리부팅 후 모두 정상 동작되는 거 확인하고, 로그파일을 통해서 문제를 파악해 보기로 함.


내가 만든 서버 로그 파일에서 문제 발생 시각 전후에 무슨 일이 있었는지 찾아봄 - 아무일도 없었네. ㅎㄷㄷ

nginx 로그 파일들을 뒤져보니 아무일도 없었네. ㅎㄷㄷ

syslog 로그 파일을 뒤져보니 아주 ㅎㄷㄷ한 로그를 발견! kernel: [536040.996098] INFO: task jbd2/xvda1-8:207 blocked for more than 120 seconds.


구글검색 해보니, 아마존 프리티어 사용시  EBS 관련 에러가 뜨는 경우가 있고, 이렇게 되면 아예 서버가 통째로 먹통이 된다네. ㅎㄷㄷ



두줄요약: 문제해결은 빨리하고 노는 날은 쉬자. 아마존 시방 쉐키들 공짜라고 똑바로 안해놨네.