Skip to content
NVLink · 인터커넥트 패브릭

NVIDIA Xid 74 (NVLink 치명적 오류) 진단

GPU 간 NVLink 또는 NVSwitch 고속 패브릭에서 복구 불가능한 링크 오류가 발생해 텐서 병렬/AllReduce 통신이 실패했습니다.

대표 로그 시그니처

kernel: NVRM: Xid (PCI:0000:83:00): 74, pid=28412, name=pt_main_thread, NVLink: fatal error detected on link 7

근본 원인과 연쇄 증상 구분

SXM 베이스보드/커넥터 접촉 불량, 고속 시그널 무결성 저하(CRC 누적), 또는 연결된 대향 GPU/스위치 칩 fault가 주원인입니다.

재시작 전 반드시 확보할 진단 명령

nvidia-smi nvlink -s
nvidia-smi nvlink -e
nvidia-smi topo -m
dmesg -T | grep -i -E "xid.*(74|149)|nvlink|nvswitch"

안전한 점검 및 조치 절차

  1. `nvidia-smi nvlink -e`로 어느 링크 번호에서 CRC 및 Replay 오류가 급증했는지 확인합니다.
  2. `nvidia-smi topo -m`과 동시 Xid 로그를 비교해 발신 GPU와 대향 스위치/피어를 특정합니다.
  3. 수집한 dmesg와 nvlink 통계를 클라우드·서버 벤더 하드웨어 티켓에 첨부합니다.
가입 없는 실시간 진단

내 GPU 로그에서 최초 원인 바로 확인하기

로그를 붙여넣으면 브라우저에서 민감 정보를 자동 마스킹한 뒤 선행 원인을 추적합니다.

업로드 전 클라우드 데이터 처리 및 로컬 실행 옵션을 확인하세요.

training_logs.txt
테스트할 로그가 없다면 예시를 선택하세요:

대용량 로그 파일은 브라우저에서 먼저 압축 정리되며 진단 실행 시 선별된 증거만 전송됩니다.

하루 3회 무료 클라우드 진단

자주 묻는 질문

Xid 74를 NCCL_P2P_DISABLE=1로 우회할 수 있나요?

임시 원인 검증용으로는 가능하나 NVLink 대역폭을 상실하므로 노드 격리 및 하드웨어 수리가 필요합니다.

왜 인접 GPU에서도 동시에 오류가 찍히나요?

단일 링크 결함이 송수신 양단에서 동시에 감지되기 때문에 에러 카운터 비율 비교가 중요합니다.

관련 한국어 장애 트리아지 가이드

영문 전체 데이터베이스 문서:English Full Entry 보기

Denpex 30일 무료 체험. 무료.

카드 등록 없음. 자동 구독 전환 없음. 이미 원인을 파악한 과거 장애로 Denpex의 분석 정확도를 직접 확인하세요.

무료 30일 Team 평가 시작하기

30일 동안 하루 최대 50회 진단을 지원합니다. 회사 이메일을 인증해 기업 평가판을 활성화한 뒤, 기존 인시던트 로그를 재현하여 팀이 확정한 원인과 근거를 비교해 보세요.

회사 도메인 이메일을 입력하세요 (예: minsu@yourcompany.co.kr).

신청 자격 안내

이메일 및 도메인 확인이 완료된 기업 도메인은 30일 무료 Team 평가(일 50회 진단)가 활성화됩니다. 자동 확인이 어려운 도메인은 support@denpex.com 에서 검토합니다. 에디터 확장의 로컬 진단은 계정이 필요 없습니다.

개인 이메일(Gmail, Naver, Outlook) 또는 개인 클러스터를 사용 중이신가요? $0 무료 계정 만들기 (개인 이메일 가능)에서 7일 기록 저장 및 AI 진단을 이용하거나 클러스터 장애 로그를 보내 라이브 데모를 요청하세요.