우리 데이터 센터에 이상한 문제가 있습니다. 백업 서버(EMC Networker 실행)는 격일 오전 3시경에 네트워크 연결이 끊어집니다(백업 일정은 자정에 시작됩니다). 2시간 동안 중단되면 네트워크 연결이 자동으로 복구되어 정상으로 돌아옵니다.
우리가 관찰한 것:
서버팜 스위치(중간 홉 없이 레이어 2 연결)에 직접 연결되어 있으므로 네트워크 문제가 아닐 가능성이 높습니다. 또한 서버는 Broadcomm Teaming을 사용하여 로드 밸런싱을 위해 두 개의 서로 다른 스위치에 연결됩니다.
a) 스위치 관련 문제인 경우 두 네트워크 포트가 서로 다른 스위치에 연결되어 있으므로 두 네트워크 포트가 모두 다운될 가능성은 없습니다.
b) 동일한 Vlan의 다른 장치는 괜찮기 때문에 Vlan 전체 문제가 발생할 가능성도 배제됩니다.
c) 스위치 인터페이스 상태는 항상 켜져 있습니다. 하지만 정전 기간 동안 패킷 손실이 많이 발생합니다. 이는 백업 서버의 높은 인터페이스 활용도(거의 100%) 때문일 수 있습니다.
d) 네트워크 변경 없이 연결이 복원됩니다.
다음 용의자는 Windows 서버의 리소스 활용입니다. CPU와 메모리 모두 80%를 초과한 경우는 거의 없지만 NIC 카드 사용률은 놀라울 정도로 높습니다(거의 100%).
이것을 조사하는 방법을 잘 모르시나요?
답변1
드라이버 문제나 이중 불일치가 의심됩니다. 드라이버를 업그레이드하고 양쪽 끝의 양면 인쇄가 동일한지 확인하십시오. 스위치의 이더넷 통계도 확인하십시오(오류, 충돌 등이 있는 경우).
무슨 뜻인가요?네트워크 연결이 끊김? 연결할 수 없지만 인터페이스가 작동 중입니까? 도달 가능하지만 패킷 손실이 많이 발생합니까?
답변2
네트워크 카드를 교체해 보셨나요?
답변3
네트워크 연결이 끊어졌다는 것을 어떻게 알 수 있나요? 그게 정확히 무슨 뜻인가요? 연결할 수 없다는 것을 모니터링하는 것이 있습니까? 이벤트 로그에 어떤 내용이 있습니까? 그렇다면 무엇입니까?
네트워크 활용도가 높은 경우, 즉 완전히 포화된 지점에 도달하면 연결이 끊어진 것처럼 보일 수 있습니다. 그러나 귀하의 설명에 따르면 말하기가 어렵습니다. 내 생각에는 백업 작업이 파이프를 최대화하고 있는 것 같습니다. 격일로 실행되는 백업 작업이 있습니까 :)
답변4
어떤 종류의 스위치인가요?
이 특정 문제가 발생할 때 동일한 스위치에 있는 다른 장치에서 통신 문제가 발생합니까? 드물고 있을 수 없는 일이지만 해당 스위치의 한정된 리소스를 소모하고 어떤 의미에서는 스스로 DOS를 수행할 수도 있습니다.
또한 DOS 작업을 방지하는 메커니즘이 있는 경우 사용 패턴이 정상으로 돌아올 때까지 문제가 있는 서버를 본질적으로 블랙홀화할 수 있습니다.