반응형
ubuntu nvidia-smi 명령어 사용 불가 이슈
반응형
-
Supermicro A100 서버 nvidia-smi fail 현상IT Operation 2025. 1. 13. 19:51
Supermicro A100 서버에서 가끔 nvidia-smi 명령이 실패할 때가 있다.그리고 이때 보면 GPU카드들이 동작하지 않는다.nvidia-smi 명령어를 입력하면 NVIDIA-SMI has failed because it couldn't communicate with NVIDIA driver라는 에러를 발생시키고 최신 NVIDIA 드라이버가 설치되어 있는지, 실행 중이지 확인하라고 나타난다. 처음부터 실행이 안된 게 아니라 쓰다가 어느날 보면 이 메시지가 나타나서 GPU가 인식 불량이 되는 현상이다. 이 상태에서 lspci | grep VGA 명령어를 입력해도 아무것도 보이지 않는다. 다른 GPU 서버에서는 연결된 VGA 목록이 모두 나타남을 알 수 있었다. 결과적으로 lscpi ..