解决多卡机器CUDA Error Code 802(CUDA_ERROR_SYSTEM_NOT_READY)

2023-12-14 18:25:32

解决多卡机器安装完CUDA后，出现802错误码：Fabric Manager需要和Driver具有完全一致的版本号。

现象

在这里插入图片描述

检查

查看service状态：
在这里插入图片描述
显示failed，查看nvidia-smi中的Driver版本：
在这里插入图片描述

切换版本

sudo yum list installed | grep nvidia
sudo yum remove nvidia-fabric-manager.x86_64
# 注意版本后的-1
sudo yum install -y nvidia-fabric-manager-515.65.01-1
# 启动服务
sudo systemctl disable nvidia-fabricmanager
sudo systemctl enable nvidia-fabricmanager
sudo systemctl start nvidia-fabricmanager
sudo systemctl status nvidia-fabricmanager

确认状态：
在这里插入图片描述
cuda bin可以正常工作：
在这里插入图片描述

参考链接

NVIDIA trouble shooting docs

On systems with NVSwitch, if you notice the CUDA_ERROR_SYSTEM_NOT_READY error being reported, then make sure that you install the same version of Fabric Manager as the CUDA driver.

文章来源:https://blog.csdn.net/liuzonrze/article/details/134997414
本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。