Proxmox VE(PVE)直通显卡 踩坑经验

原创文章，转载请注明出处
https://qiedd.com/

官方WIKI：https://pve.proxmox.com/wiki/Pci_passthrough

配置：UH630+英伟达GT1030

Grub修改

编辑文件 /etc/default/grub

#编辑 /etc/default/grub
nano /etc/default/grub

#找到
GRUB_CMDLINE_LINUX_DEFAULT="quiet“

#Intel用户修改为
GRUB_CMDLINE_LINUX_DEFAULT="quiet intel_iommu=on pcie_acs_override=downstream video=vesafb:off video=efifb:off"

#AMD用户修改为
GRUB_CMDLINE_LINUX_DEFAULT="quiet amd_iommu=on pcie_acs_override=downstream video=vesafb:off video=efifb:off"

这里说一下为什么会需要拆分iommu pcie_acs_override=downstream

像我这块主板，一二槽同时插上时会共享带宽，如果不拆分iommu，当两个设备同时直通，其中一个就会显示占用

video=vesafb:off video=efifb:off ：禁止启动和vesa驱动和efi启动的显卡

VT-d

检查VT-d是否开启

#执行
dmesg | grep -e DMAR -e IOMMU
#若无输出，请在BIOS内开启VT-d

#更新grub
update-grub

加载vifo模块

#编辑 /etc/modules
nano /etc/modules

vfio
vfio_iommu_type1
vfio_pci
vfio_virqfd

找到设备的hostpci

#找到设备的hostpci
lspci
#01:00.0为显卡本身视频输出
#01:00.1这是显卡自带的声卡

#查看设备的Device ID
lspci -n -s 01:00
##输出（将Device ID替换成你自己的）
#01:00.0 0300: 10de:1381 (rev a2)
#01:00.1 0403: 10de:0fbc (rev a1)

#将设备加入进vfio
echo "options vfio-pci ids=10de:1381,10de:0fbc disable_vga=1" > /etc/modprobe.d/vfio.conf 
##这里我还直通了核显
##echo "options vfio-pci ids=ids=8086:1234" > /etc/modprobe.d/vfio.conf

#防止在win10中显卡代码43
echo "options kvm ignore_msrs=1 report_ignored_msrs=0" > /etc/modprobe.d/kvm.conf

#信任设备
echo "options vfio_iommu_type1 allow_unsafe_interrupts=1" > /etc/modprobe.d/iommu_unsafe_interrupts.conf

#看看设备需要用到什么驱动
lspci -vvv -s 01:00

##可以看到01:00.0这个设备需要 nvidiafb, nouveau
#        Kernel driver in use: vfio-pci
#        Kernel modules: nvidiafb, nouveau

##01:00.1
#        Kernel driver in use: vfio-pci
#        Kernel modules: snd_hda_intel

因此我们把上面要的驱动都禁了

禁用驱动

将要禁用的驱动加入 /etc/modprobe.d/pve-blacklist.conf

#编辑blacklist
nano /etc/modprobe.d/pve-blacklist.conf

# This file contains a list of modules which are not supported by Proxmox VE 

# nidiafb see bugreport https://bugzilla.proxmox.com/show_bug.cgi?id=701
blacklist nvidiafb
blacklist nouveau
blacklist nvidia
blacklist snd_hda_intel     

#如果不想直通核显，这个可以不用
blacklist snd_hda_codec_hdmi
blacklist i915

#AMD Driver
blacklist radeon

更新配置

#更新initramfs
update-initramfs -u

#若输出 EFI sync什么的没有，不用理会，那是由于pve安装方式引起的

#重启
reboot

直通设备

机型选择q35，在虚拟机中添加PCI设备即可，如图，主GPU可勾可不勾，Linux下多GPU可能需要自己配置

可以通过 dmesg 查看是否有错误
比如 No more image in the PCI ROM
那你可能需要按上述操作把核显驱动也禁了