最近英偉達兩款高端產品,GeForce RTX 5090和RTX PRO 6000,都受到虛擬化重置錯誤的困擾。該錯誤可能會讓顯卡完全沒有響應,需要主機物理重啓才能恢復。這是一個特定的錯誤,除了GeForce RTX 5090和RTX PRO 6000外,包括RTX 4090和H100等舊型號都不會出現類似的問題,即便是Blackwell架構產品中最強的B200也沒有問題。
NVIDIA GeForce RTX 5090
據TomsHardware 報道 ,這是隨機發生的錯誤,沒有明確的原因,在持續使用幾天或幾周後,GPU虛擬機可能完全凍結而沒有任何響應跡象。現階段唯一恢復正常的解決方案就是重啓機器,這種情況引起了AI初創公司的關注,甚至懷疑是不是存在硬件設計缺陷。
根據日誌顯示,該錯誤發生在GPU通過KVM和VFIO傳遞給虛擬機之後,當虛擬機關機或GPU重新分配時,主機發出PCIe功能級重置(FLR)指令——這是清理直通設備標準流程的一部分。 這時候GPU未能恢復至正常狀態,內核報告顯示:“FLR後65535毫秒仍未就緒;放棄操作”。此時顯卡對lspci命令也變得不可讀,該命令會拋出“未知頭部類型7f”錯誤。
英偉達已經對該問題作出回應,稱可以復現問題,並在努力修復當中。具體情況還要等待官方的確認,預計很快會發布修復程序。