[SK하이닉스] 이천캠퍼스 저장분배서버 4-1번 메모리 하드웨어 오류 장애
[장애 내용]
저장분배서버 4번 syslog에, ECC 메모리 관련 로그 지속적으로 발생. 관련하여 log 수신 (SK쉴더스 이경민 선임)
[장애 대응]
- 로그 분석 결과, 메모리 ECC기능에 의해 자동 수정 되고 있음을 확인
- 다만, 해당 로그가 지속적으로 기록 된다는 뜻은, 지속적인 error가 발생하는 뜻임에 따라 장애 발생 메모리 처리 필요
- 메모리 위치 확인을 위해, IPMI 툴 설치 (슈퍼마이크로 IPMI 파일 확보)
- ipmitool sel list 명령어를 통하여, 장애 발생한 메모리 DIMM 위치 확인
- 서버 종료 후, 케이스 오픈하여 해당 DIMM에 설치 된 메모리 제거
교체가 아닌 제거를 진행한 사유는, 해당 장비가 10년이 지난 장비임에 따라 DDR3 메모리를 수급 할 수 없음. - 서버 재기동 후, 로그 모니터링 결과, ECC 메모리 관련 로그 사라짐 확인 완료
[비고]
- 해당 서버와 동일한 시기에 납품 된 나머지 9대 장비도, 추후 하드웨어 장애 발생 시 교체용 부품 수급이 불가함에 따라
담당자에게 노후 장비 교체 필요성 언급