Как определить слот для неисправной карты графического процессора на сервере с помощью команд ОС UBUNTU?

У меня есть вопрос. Можно ли определить, в каком слоте находится сломанная карта графического процессора, используя операционную систему UBUNTU? У нас есть сервер SuperMicro GPU, в котором около 8 карт GPU для вычислений ИИ. Время от времени мы идем в серверную после того, как получаем информацию от пользователей/отдела о том, что карта не видна в команде nvidia-smi. Как правило, это аппаратные сбои.Затем мы сталкиваемся с ситуацией, когда 7 карт работают исправно и, к сожалению, нам приходится методом проб и ошибок выявлять неисправную карту, вытаскивая ее с сервера. Это ужасно утомительно и долго, поэтому мне интересно, можно ли однозначно определить слот, в котором находится неисправная карта.

Заранее спасибо.

В общем, если вы можете узнать, какой адрес шины PCI у этой карты, вы можете определить точный слот, который она занимает. Траверс dmidecode output и найти, в каком слоте появляется этот адрес PCI.

Однако это помогает только в том случае, если вы уверены, что нумерация слотов PCI в DMI предсказуема и соответствует фактическим физическим слотам на материнской плате. В фирменных компьютерах (HPE, Dell и т.д.) такое часто бывает. Если материнская плата произведена менее известным брендом, ее данные DMI могут быть не синхронизированы. Тем не менее, это стоит попробовать.