HBM / ECC 하드웨어 결함
NVIDIA Xid 48 (수정 불가 Double Bit ECC) 진단
GPU 메모리에서 ECC로 복구할 수 없는 이중 비트 오류가 감지되었으며, 연산 오염 방지를 위해 실행 중인 프로세스가 중단됩니다.
대표 로그 시그니처
kernel: NVRM: Xid (PCI:0000:47:00): 48, An uncorrectable double bit error (DBE) has been detected on GPU in the framebuffer근본 원인과 연쇄 증상 구분
HBM/GDDR 메모리 셀 열화, 온도 상승, 전원 노이즈로 인해 2비트 이상의 오류가 누적되면 Xid 48과 함께 Row Remapping 이벤트가 트리거됩니다.
재시작 전 반드시 확보할 진단 명령
nvidia-smi --query-gpu=index,uuid,serial,ecc.errors.uncorrected.aggregate.total,ecc.errors.uncorrected.volatile.total --format=csv
nvidia-smi -q -d ECC,ROW_REMAPPER,PAGE_RETIREMENT
dmesg -T | grep -i -E "xid.*(48|63|64|94|95)|retired|remapper"안전한 점검 및 조치 절차
- `nvidia-smi -q -d ECC,ROW_REMAPPER`로 미수정 ECC 누적 수치와 Remap 실패 여부를 확인합니다.
- `dmesg`에서 Xid 63/64/94/95 동반 여부를 확인한 뒤 작업을 비우고 안전하게 재시작해 리매핑 적용을 점검합니다.
- 리매핑 공간 소진 또는 재발 시 UUID 및 `nvidia-smi -q` 전문으로 벤더 RMA를 요청합니다.
가입 없는 실시간 진단
내 GPU 로그에서 최초 원인 바로 확인하기
로그를 붙여넣으면 브라우저에서 민감 정보를 자동 마스킹한 뒤 선행 원인을 추적합니다.
업로드 전 클라우드 데이터 처리 및 로컬 실행 옵션을 확인하세요.
training_logs.txt
테스트할 로그가 없다면 예시를 선택하세요:
대용량 로그 파일은 브라우저에서 먼저 압축 정리되며 진단 실행 시 선별된 증거만 전송됩니다.
하루 3회 무료 클라우드 진단
자주 묻는 질문
Xid 48 이후 체크포인트나 모델 가중치를 믿어도 되나요?
미수정 메모리 비트 오류가 연산을 오염시켰을 수 있으므로 직전 정상 체크포인트에서 재개하는 것이 안전합니다.
Row Remapping이 성공하면 계속 사용해도 되나요?
단발성 리매핑 성공 후 안정화되는 경우도 있으나 빈도가 높거나 Xid 48이 재발하면 교체 대상입니다.
관련 한국어 장애 트리아지 가이드
NVIDIA Xid 79 (PCIe 버스 이탈) 원인 분류 및 대응NVIDIA Xid 74 (NVLink 치명적 오류) 진단NCCL Watchdog 타임아웃 근본 원인 분리무료 LLM VRAM 계산기 열기
영문 전체 데이터베이스 문서:English Full Entry 보기
Denpex 30일 무료 체험. 무료.
카드 등록 없음. 자동 구독 전환 없음. 이미 원인을 파악한 과거 장애로 Denpex의 분석 정확도를 직접 확인하세요.
무료 30일 Team 평가 시작하기
30일 동안 하루 최대 50회 진단을 지원합니다. 회사 이메일을 인증해 기업 평가판을 활성화한 뒤, 기존 인시던트 로그를 재현하여 팀이 확정한 원인과 근거를 비교해 보세요.