[IBM] x86 Server Memory 증설 중 블루스크린

1. 해당 작업을 ETL서버와 CIS 서버 메모리 증설 작업이였다.

2. ETL 서버는 NIC카드 2Port짜리 한 개, HBA 카드 2Port짜리 두 개가 장착 되어있는 장비이며, Windows 2008 Ent 64ibt가 설치 되어 있었고,

   기존에 메모리는 8GB *4ea가 있었다. 그리고, CPU는 1ea였다.

3. 해당 장비의 메모리는 16GB * 8ea를 꽃아서 메모리 증설을 하는 작업 이였으며, 메모리를 증설하고, Windows를 부팅시키니 블루스크린이 발생하였다.

4. 블루스크린 모습

 

 

 

 

 

 

4. 해당 작업의 TIME TABLE

 

작업시작시간	작업종료시간	작업내용	작업결과	장애내역	판단근거	범주
19:30	19:45	ETL 서버 Shutdown	정상	​	-	-
19:45	19:50	ETL 서버 메모리 증설	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	-	-
19:50	20:40	메모리 슬롯 확인 및 재장착	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	정상적인 메모리 장착여부 확인	메모리
20:40	21:00	기존 메모리로 원복 후 재부팅	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	증설메모리의 불량 또는 호환성 이슈	메모리
21:00	21:10	안전모드에서 Oracle 파라미터 값 복원 후 재부팅	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	파라미터 값 변경	S/W (Oracle DBMS)
21:10	21:20	동일 기종 서버 및 파트 배송 요청	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	OS 손상으로 판단하여 재구성 가능한 하드웨어 섭외	OS
21:20	21:35	16GB * 2 메모리 장착 후 Reboot	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	Oracle 파라미터 값 변경으로 인한 메모리 용량 부족 현상	메모리 용량
21:35	21:45	16GB * 2 메모리 제거 후 안전모드 부팅	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	Oracle 파라미터 값 변경과 관계없음을 확인 후 메모리 용량 원복	메모리
21:45	21:55	sfc scannow 및 chkdsk 수행	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	파일시스템 손상 의심	OS
21:45	21:55	Oracle 백업 시도 및 중단 후 Reboot	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	-	OS
22:00	22:10	Add-on Cable 분리 후 재부팅	정상부팅	-	장애 포인트로 의심되는 외부 요인 제거	HBA, NIC
22:10	22:35	FC케이블 재연결	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	장애 포인트로 의심되는 외부 요인 체크	HBA
22:35	23:20	NIC 재연결 후 OS 백업	정상	-	정상부팅 시 이미지백업 진행필요	OS
23:20	23:20	서버 및 파트 배송	-	-	-	-
23:20	23:30	HBA드라이버 업데이트 (Qlogic 2562 /  Driver ver. 9.1.11.28) 후 재부팅	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	FC연결시 BSOD발생으로 HBA드라이버 충돌 의심	HBA
12:00	12:20	HBA카드 교체 후 재부팅 및 FC케이블 연결	블루스크린 발생	블루스크린 코드 (BAD_POOL_HEADER) / minidump 생성	HBA카드 불량 의심	HBA
12:20	1:00	임시장비로 이미지복원	-	-	-	-
1:25	1:35	HBA드라이버 업데이트 (기존 9.1.11.28 --> 9.2.6.22)	정상	-	HBA드라이버 충돌 의심	HBA
1:25	1:35	IBM SDDDSM 드라이버 업데이트 (기존 2.5.0.0 --> 2.4.7.1 / Downgrade)	정상	-	IBM에서 제공한 최신 버전으로 복구	MPIO
1:35	1:45	HBA, IBM SDDDSM 업데이트 후 재부팅	정상	-	-	-

 

 

결론:  나중에 작업시에 위와 같은 블루스크린이 발생할 시 전원 케이블을 제외한 나머지 케이블을 모두 제거하고, 다시 부팅을 해서 정상적으로 부팅이 되는지를 확인하여야 하며, 정상적으로 부팅이 된다면 한 개 한 개씩 꽃아서 어떤 하드웨어가 장애가 있는지를 확인하고, 드라이버를 다운 그레이드를 하던지 업그레이드를 하여야 한다.