데비안 시스템에 문제가 있습니다. 오늘 정확히 04:00에 nagios에 대한 응답이 중단되었습니다. SSH를 통해서도 로그인할 수 없습니다. 이런 일이 처음 발생한 것은 아니지만 Nagios와 함께 본 것은 처음이었습니다.
이 상자에는 특별하고 흔하지 않은 점이 하나 있습니다. USB 메모리에서 부팅된다는 점입니다. 그렇기 때문에 /var /tmp를 tmpfs에 매핑하는 것이 현명한 아이디어라고 생각했습니다.
재부팅하면 다시 작동할 것이라고 확신합니다. 하지만 /var/log가 메모리에 매핑되어 있기 때문에 재부팅 후에는 로그를 읽을 수 없습니다.
다음 문제는 하드웨어가 오프사이트에 있어서 로컬로 로그인할 수 없다는 것입니다.
처음에는 tmpfs가 가득 차는 것이 문제일 수 있습니다. 그러나 Nagios는 더 이상 연결이 불가능할 때까지 경고하지 않았습니다. 경고 임계값을 90% 여유 공간으로 설정했습니다. 그래서 이건 아닌 것 같습니다.
기타 흥미로운 증상:
- openVPN 서버가 아직 작동 중입니다
- 라우팅은 여전히 작동합니다
- SSH 포트가 아직 열려 있고 사용자 이름을 묻는 메시지가 나타납니다. 하지만 비밀번호를 입력하면 연결이 끊어집니다.
- 포트 80이 열려 있지만 아파치가 응답하지 않습니다
제가 가장 관심을 갖는 질문은 다음과 같습니다. 데비안 시스템이 새벽 4시에 무엇을 할 수 있습니까? 일종의 업데이트 확인?
올바른 방향으로의 아이디어나 조언에 감사드립니다. 힌트를 얻기 위해 nagios로 모니터링할 만한 것이 있나요? 다음에는 스왑 사용량 모니터링을 추가하겠습니다.
답변1
서버의 메모리가 부족한 경우가 있었습니다. 실행 중인 모든 프로세스는 계속되지만 새 프로세스 할당이 실패할 수 있습니다.
메모리 사용량을 모니터링하는 경우 이 질문에 답할 수 있습니다. 원격으로 로깅을 시도해 볼 수도 있습니다.
그러나 귀하의 질문에 답하려면 /etc/cron.daily를 확인하십시오. - 이 스크립트5월오전 4시에 달려요. /etc/cron.d/ 및 /etc/crontab을 확인하여 예약된 작업이 있는지 확인할 수도 있습니다.