PVE8.1下-Ubuntu虚拟机创建与虚拟核显直通

博主：将夜
发布时间：2024 年 01 月 24 日
6008 次浏览
21 条评论
7652字数
分类：默认分类使用心得

## 前言

验证在`PVE`虚拟机模式下, Linux系统如何使用宿主机基于`SR-IOV`虚拟的核显. 以下基于`Ubuntu22.04LTS`桌面系统验证. 视频操作教程见如下链接:

https://www.bilibili.com/video/BV1HW4y1c74K

## 虚拟机创建与系统安装

PVE下按照常规模式添加一个Linux虚拟机, 并完成`Ubuntu22.04LTS`系统的配置安装

*镜像下载与上传:*

* 官方下载页面: https://cn.ubuntu.com/download/desktop
  * 点击标记处按钮即可开始下载
* 提前上传下载好的系统镜像到PVE存储节点中(以上传到local节点为例)

![Ubuntu22.04LTS下载](https://zoe.red/usr/uploads/2024/01/909421259.png)

![镜像上传](https://zoe.red/usr/uploads/2024/01/2848293994.png)

---

*虚拟机创建*

* 如图一所示, 准备在pve节点下新建虚拟机
* 如图二到十, 虚拟机配置设置

图一: 准备在pve节点下新建虚拟机

![准备在pve节点下新建虚拟机](https://zoe.red/usr/uploads/2024/01/4069167774.png)

图二: 常规设置页面, 填入虚拟机的名字, 然后点击下一步

![VM-常规设置](https://zoe.red/usr/uploads/2024/01/1252271187.png)

图三: 选择引导镜像, 首先选择镜像所在存储节点, 然后在镜像列表中选择目标镜像; 之后点击下一步

![VM-引导镜像](https://zoe.red/usr/uploads/2024/01/2731783866.png)

图四: 系统设置页面, 修改机型为q35, bois为UEFI, 并选择EFI存储位置, 之后点击下一步

![系统设置](https://zoe.red/usr/uploads/2024/01/144737067.png)

图五: 磁盘设置, 选择存储节点, 磁盘大小后, 点击下一步

![image.png](https://zoe.red/usr/uploads/2024/01/427393954.png)

图六: CPU设置页面, 修改要分配的核心数, 类别选择`host`, 然后点击下一步

![CPU设置](https://zoe.red/usr/uploads/2024/01/177663187.png)

图七: 内存设置, 根据需要调整大小, 然后点击下一步

![内存设置](https://zoe.red/usr/uploads/2024/01/1917219187.png)

图八: 网络设置, 取消勾选防火墙, 避免远程访问的一些问题; 模型可以选择默认的半虚拟化, 也可以选择`Intel E1000`, 然后点击下一步

![网络设置](https://zoe.red/usr/uploads/2024/01/1431502190.png)

图九: 确认页面, 确认配置无误后, 点击完成

![确认页面](https://zoe.red/usr/uploads/2024/01/1175107653.png)

图十: 调整虚拟机引导顺序配置, 之后点击`控制台`, 启动虚拟机开始系统安装

* 将系统镜像设置为第一引导选项
* 在控制台页面, 点击`start now`开始运行虚拟机

![image.png](https://zoe.red/usr/uploads/2024/01/769388297.png)

![VM控制台](https://zoe.red/usr/uploads/2024/01/77469298.png)

---

虚拟机运行后, 后面是正常的Ubuntu系统安装过程, 不在赘述.

![Ubuntu安装](https://zoe.red/usr/uploads/2024/01/2974025045.png)

![更新设置](https://zoe.red/usr/uploads/2024/01/3804368402.png)

![用户名密码设置](https://zoe.red/usr/uploads/2024/01/2580674946.png)

![安装完毕, 系统重启后, 提示移除引导镜像](https://zoe.red/usr/uploads/2024/01/3617548939.png)

直接回车, 默认还会进入到镜像引导安装页面, 点击左侧工具栏, `电源`按钮, `Hard Stop`强制关机

![强制关机](https://zoe.red/usr/uploads/2024/01/1861522621.png)

系统安装完毕后, 需要先停止虚拟机, 修改引导选项, 取消使用iso镜像引导

* 第一步: 如图所示, 取消ISO镜像引导
* 第二步: 停止虚拟机, 然后重新再启动
* 注意: 必须停止虚拟机的原因: 只有停止了该虚拟机, 对其设置的修改才会真正生效

![取消CD引导](https://zoe.red/usr/uploads/2024/01/616026654.png)

---

## 可选配置

可能还需要进行一些必要的配置来方便后续的操作

* SSH远程访问服务
* 配置国内软件源
  * 清华源: https://mirrors.tuna.tsinghua.edu.cn/help/ubuntu/
* 图形化页面下配置静态IP地址

SSH服务开启

```bash
apt update
apt install -y openssh-server
```

配置国内源(root或sudo权限用户)

```bash
mv /etc/apt/sources.list /etc/apt/sources.list.backup
vim /etc/apt/sources.list
# 添加内容
"""
# 默认注释了源码镜像以提高 apt update 速度，如有需要可自行取消注释
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy main restricted universe multiverse
# deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy main restricted universe multiverse
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-updates main restricted universe multiverse
# deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-updates main restricted universe multiverse
deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-backports main restricted universe multiverse
# deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-backports main restricted universe multiverse

deb http://security.ubuntu.com/ubuntu/ jammy-security main restricted universe multiverse
# deb-src http://security.ubuntu.com/ubuntu/ jammy-security main restricted universe multiverse

# 预发布软件源，不建议启用
# deb https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-proposed main restricted universe multiverse
# # deb-src https://mirrors.tuna.tsinghua.edu.cn/ubuntu/ jammy-proposed main restricted universe multiverse
"""
```

静态IP配置: 图形化界面方式

![静态IP地址设置](https://zoe.red/usr/uploads/2024/01/1188674300.png)

---

## 驱动安装与配置调整

驱动安装的主要过程与PVE8.1下配置SR-IOV虚拟核显相似, 主要区别在于不在需要`sysfsutils`工具库安装以及对应的`/etc/sysfs.conf`配置.

*系统信息查看*

* ubuntu22.04.3 LTS使用的内核为6.5.0-14, 与PVE8.1内核6.5.11-7版本非常接近

```bash
# 系统
cat /etc/os-release

# 内核
uname -ar
```

![内核信息](https://zoe.red/usr/uploads/2024/01/4075295676.png)

*APT软件源索引更新与必要工具软件安装*

```bash
apt update
apt install -y git build-* dkms # 必要编译工具安装

# 可选
apt install -y vim
```

*设置环境变量*

```bash
KERNEL=$(uname -r); KERNEL=${KERNEL%-generic}
echo ${KERNEL}
```

![环境变量](https://zoe.red/usr/uploads/2024/01/3302601175.png)

*核显虚拟化驱动项目的源码下载与配置修改(需要切换root执行)*

```bash
# 切换到root
sudo -i

# 进入root家目录, 下载驱动项目源码
cd ~
git clone https://github.com/strongtz/i915-sriov-dkms.git
cd ~/i915-sriov-dkms

# 备选操作
# 2024.04.20最新commit的版本编译安装阶段可能导致失败, 相关问题issue暂未解决
# 建议切换到2023.12月份的版本尝试, 可以执行如下代码, 之后再继续操作
# git checkout cdb1399821e942db6fcc2b8322da72b517a9bc0d

# 修改项目配置
cp -a ~/i915-sriov-dkms/dkms.conf{,.bak}
sed -i 's/"@_PKGBASE@"/"i915-sriov-dkms"/g' ~/i915-sriov-dkms/dkms.conf
sed -i 's/"@PKGVER@"/"'"$KERNEL"'"/g' ~/i915-sriov-dkms/dkms.conf
# sed -i 's/ -j$(nproc)//g' ~/i915-sriov-dkms/dkms.conf

# 查看修改后结果
cat ~/i915-sriov-dkms/dkms.conf
```

![配置修改内容](https://zoe.red/usr/uploads/2024/01/2608655323.png)

*DKMS添加驱动源码管理并安装部署*

```bash
# 链接内核源代码，并检查状态。确认内核显示已添加。
cp -r ~/i915-sriov-dkms /usr/src/i915-sriov-dkms-$KERNEL
ls /usr/src # 查看

cd /usr/src/i915-sriov-dkms-$KERNEL
dkms add .
dkms status

# 构建新内核并检查状态。验证是否显示已安装。
# 安装内核扩展, 会触发MOK相关设置.
dkms install -m i915-sriov-dkms -v $KERNEL -k $(uname -r) --force -j 4
dkms status
```

![/usr/src清单](https://zoe.red/usr/uploads/2024/01/1885638444.png)

构建安装内核扩展, 提示需要安全引导已启用,需要设置MOK,此处随意设置一个不太简单密码即可, 正常只会使用一次.

![构建内核扩展, 提示需要安全引导已启用,需要设置MOK](https://zoe.red/usr/uploads/2024/01/1554836773.png)

![image.png](https://zoe.red/usr/uploads/2024/01/2924897073.png)

![重复密码输入](https://zoe.red/usr/uploads/2024/01/2964081959.png)

---

*GRUB 配置*

```bash
# 解释: i915.max_vfs=7 表示最多虚拟成7个设备
cp -a /etc/default/grub{,.bak} 
# 会在第10行追加内容: intel_iommu=on iommu=pt i915.enable_guc=3 i915.max_vfs=7
sed -i '/^GRUB_CMDLINE_LINUX_DEFAULT/c\GRUB_CMDLINE_LINUX_DEFAULT="quiet splash intel_iommu=on iommu=pt i915.enable_guc=3 i915.max_vfs=7"' /etc/default/grub

# 更新引导
update-grub
update-initramfs -u -k all
```

![/etc/default/grub修改后](https://zoe.red/usr/uploads/2024/01/2999074192.png)

---

*系统重启与引导项MOK配置*

执行到此, 应该对该虚拟机系统进行重启, 但需要额外强调下:

* 因为当前版本系统启用了安全引导, 因此必须在安装驱动后, 重启进入系统前, 在引导页面进行MOK相关配置. 只需在第一次重启配置成功, 之后不在需要设置.
* 开机启动/引导项MOK配置过程: `Enroll MOK`, `Continue`, `Yes`, `<password>`, `Reboot`

```bash
# 重启机器, 在开机页面, 开机引导页面依次选择: 
# * Enroll MOK, Continue, Yes, <password>, Reboot
# 如果错过, 需要进入终端, 重新运行 mokutil ... 命令并再次重启。
# 在完成此设置之前，DKMS 模块不会加载。

# Ubuntu重置MOK
# 参见: https://wiki.ubuntu.com/UEFI/SecureBoot
update-secureboot-policy --enroll-key
```

![Enroll MOK](https://zoe.red/usr/uploads/2024/01/1685991174.png)

![Continue](https://zoe.red/usr/uploads/2024/01/567271211.png)

![Yes](https://zoe.red/usr/uploads/2024/01/453888952.png)

![Password](https://zoe.red/usr/uploads/2024/01/4051273154.png)

![Reboot](https://zoe.red/usr/uploads/2024/01/3784813335.png)

---

*虚拟机配置调整*

接下来我们需要调整虚拟机显示配置, 移除默认显示设别, 同时添加宿主机的虚拟PCI集显, 之后关闭系统, 使配置生效; 然后启动系统, 通过SSH远程登录系统, 通过如下命令行可以如下输出.

* 配置调整如图一/二
* 虚拟机关机后, 在重启,查看设备如图三

图一: 修改虚拟机配置2处

![配置调整](https://zoe.red/usr/uploads/2024/01/3619087076.png)

图二: 添加虚拟核显

![添加虚拟核显](https://zoe.red/usr/uploads/2024/01/54985681.png)

```bash
ls /dev/dri
```

![设备信息](https://zoe.red/usr/uploads/2024/01/2145402834.png)

## 效果验证

以Docker上部署Jellyfen流媒体应用来验证集显的使用.

操作同本站如下文章的的*效果验证*章节, 此处不在展开.

<div class="inner-content" >
<p class="inser-title">PVE8.1下-LXC容器创建与核显直通</p>
<div class="inster-summary text-muted">
前言场景: 在PVE下, 需要在虚拟机中使用核显, 因此使用自带的LXC容器引擎, 在为其直通宿主机(intel)...
</div>
</div>
</a>

</div>

</div>

THE END

本文作者：将夜
本文链接：https://zoe.red/2024/186.html
版权声明：本博客所有文章除特别声明外，均默认采用 CC BY-NC-SA 4.0 许可协议。

最后修改：2024 年 04 月 23 日

如果觉得我的文章对你有用，请随意赞赏

21 条评论

PVE8.1下-Ubuntu虚拟机虚拟核显直通 - FlyPigs`Blog
2024-07-07 23:18 来自中国北京市移动 / Other System / Other Browser

[...]物理核显直通 vs SRIOV vGPU的优缺点对比：优点缺点物理核显直通1、性能强2、支持物理显示输出(VGA/DP/HDMI/Type-C)3、兼容性好，不妨碍PVE升级。独占（不支持直通给多个虚拟机）直通后，PVE宿主不能同时用核显。SRIOV虚拟核显直通可分为多个VF虚拟显卡，给不同的虚拟机使用。1、性能拆分（分成多个VF显卡具体如何分配性能不详）如N100等不建议超过3个VF显卡，具有性[...]

回复
tenet
2024-06-18 21:53 来自中国广东省深圳市电信 / Windows 11 / Microsoft Edge

您好请问一下我的核显在22.04.4中直通有问题，直通进去的核显在/dev/dri目录是有东西，显示（01:00.0 VGA compatible controller: Intel Corporation Device 4692 (rev 0c)），但是jellyfin中无法调用，已经重开了几次环境了。（已经在windows11中直通核显成功了，Linux就是怎么都直通不了。PVE中核显也正常。）
无法在intel-gpu-top中手动指定id查看运行状态
root@ubuntu ls -l /sys/class/drm/card*
lrwxrwxrwx 1 root root 0 6月 18 21:44 /sys/class/drm/card0 -> ../../devices/pci0000:00/0000:00:1c.0/0000:01:00.0/drm/card0
sudo intel_gpu_top -d sys:/sys/devices/pci0000:00/0000:00:1c.0/0000:01:00.0
Failed to detect engines! (No such file or directory)
(Kernel 4.16 or newer is required for i915 PMU support.)
root@ubuntu lsmod | grep i915
i915 4026368 0
drm_buddy 20480 1 i915
ttm 110592 1 i915
drm_display_helper 241664 1 i915
cec 94208 2 drm_display_helper,i915
drm_kms_helper 274432 2 drm_display_helper,i915
i2c_algo_bit 16384 1 i915
video 73728 1 i915
drm 765952 6 drm_kms_helper,drm_display_helper,drm_buddy,i915,ttm
root@lorin:~# dmesg | grep -i i915
[ 0.000000] Command line: BOOT_IMAGE=/boot/vmlinuz-6.5.0-35-generic root=UUID=54709887-995b-468e-91cf-bc3ea382813f ro quiet splash intel_iommu=on iommu=pt i915.enable_guc=3 vt.handoff=7
[ 0.013299] Kernel command line: BOOT_IMAGE=/boot/vmlinuz-6.5.0-35-generic root=UUID=54709887-995b-468e-91cf-bc3ea382813f ro quiet splash intel_iommu=on iommu=pt i915.enable_guc=3 vt.handoff=7
[ 1.632749] i915: loading out-of-tree module taints kernel.
[ 1.890200] i915 0000:01:00.0: Running in SR-IOV VF mode
[ 1.891185] i915 0000:01:00.0: [drm] GT0: GUC: interface version 0.1.4.1
[ 1.892907] i915 0000:01:00.0: vgaarb: deactivate vga console
[ 1.892933] i915 0000:01:00.0: [drm] Using Transparent Hugepages
[ 1.893925] i915 0000:01:00.0: [drm] GT0: GUC: interface version 0.1.4.1
[ 1.894442] i915 0000:01:00.0: GuC firmware PRELOADED version 1.4 submission:SR-IOV VF
[ 1.894445] i915 0000:01:00.0: HuC firmware PRELOADED
[ 1.896133] i915 0000:01:00.0: [drm] Protected Xe Path (PXP) protected content support initialized
[ 1.896140] i915 0000:01:00.0: [drm] PMU not supported for this GPU.
[ 1.896430] [drm] Initialized i915 1.6.0 20201103 for 0000:01:00.0 on minor 0
Ubuntu内核版本： 6.5.0-35
PVE版本： 8.1.4
Intel I3 12300T 核显是UHD730

回复
ZuoMu
2024-06-05 16:15 来自中国河南省南阳市电信 / Windows 11 / Microsoft Edge

核显直通之后，无法通过VNC连接桌面了

回复
zp
2024-05-28 20:32 来自中国新疆移动 / Windows 10 / Google Chrome

9代cpu核显跟这个步骤一样吗？

回复
1. 将夜
  2024-05-28 20:37 来自中国北京市联通 / Mac OS X 10.15.7 / Google Chrome
  
  @zp
  
  9代intel cpu应该是不支持这个技术的, 建议使用较新的11/12/13代U平台尝试
  
  回复
淅淅沥沥
2024-04-23 23:55 来自中国北京市联通 / Mac OS X 10.15.7 / Microsoft Edge

root@ubuntu:/usr/src/i915-sriov-dkms-6.5.0-28# dkms install -m i915-sriov-dkms -v $KERNEL -k $(uname -r) --force -j 4
Kernel preparation unnecessary for this kernel. Skipping...
Building module:
cleaning build area...
make -j4 KERNELRELEASE=6.5.0-28-generic -j4 -C /lib/modules/6.5.0-28-generic/build M=/var/lib/dkms/i915-sriov-dkms/6.5.0-28/build KVER=6.5.0-28-generic..............(bad exit status: 2)
ERROR (dkms apport): binary package for i915-sriov-dkms: 6.5.0-28 not found
Error! Bad return status for module build on kernel: 6.5.0-28-generic (x86_64)
Consult /var/lib/dkms/i915-sriov-dkms/6.5.0-28/build/make.log for more information.

回复
1. 将夜
  2024-04-24 09:07 来自中国北京市联通 / Mac OS X 10.15.7 / Google Chrome
  
  @淅淅沥沥
  
  sr-iov驱动项目issue中已经有人反馈了这个问题, 属于暂未修复的bug, 建议切换到2023.12的源码版本之后重新尝试下吧; 博文中更新了相关操作
  
  回复
  1. 小当家
    2024-05-01 00:42 来自美国加利福尼亚州洛杉矶IT7网络 / Windows 11 / Google Chrome
    
    @将夜
    
    git checkout cdb1399821e942db6fcc2b8322da72b517a9bc0d这个之后依旧还是这个问题。。。
    
    回复
嗨嗨嗨
2024-04-23 04:20 来自中国四川省成都市联通 / Windows 10 / Google Chrome

好详细的教程！比我之前找的好多都详细。
最近太折磨了，pve 8.1, 内核6.2，虚拟机ubuntu22.04，只能直通主gpu，虚拟出来的gpu进虚拟机ls /dev/dri 看不到。
我是核显sriov再lxc中docker，然而6.5的内核jellyfin硬解会有内存泄露的问题，看了下github有和我一样问题的，似乎是dkms i915+6.5内核有问题，只好换回6.2内核。。。
但最近用immich视频硬件转码，开4个并行，整个pve就会崩溃。。。看了功耗表维持在50多w，但ssh，网页都没响应。
现在尝试在虚拟机里跑jellyfin和immich，结果(╯°A°)╯︵○○○虚拟机里都找不到/dev/dri。
想问下博主有什么头绪吗(ó﹏ò｡)

回复
1. 将夜
  2024-04-23 20:13 来自中国北京市联通 / Mac OS X 10.15.7 / Google Chrome
  
  @嗨嗨嗨
  
  如果是ssh，网页都没响应, 可以看下是否分配了全部的CPU给虚拟机/LXC, 所以才会在高负载时导致CPU卡死, 其它服务无响应, 所以建议针对immich所在虚拟机/lxc设置减少cpu可用核心在测试下; 今天试了下在虚拟机安装UBuntu22.04.4(KERNEL=6.5.0.28), 配置sr-iov的pci虚拟核显, 最后也成功了, 但需要注意最新的sr-iov驱动代码部分存在些问题, 暂时使用了2023.12月份的版本, 博文有更新说明
  
  回复
  1. 嗨嗨嗨
    2024-04-24 07:27 来自中国四川省成都市联通 / Windows 10 / Google Chrome
    
    @将夜
    
    太强了！之前没想过是i915版本问题，换到23年12月的版本，正常直通了！
    
    回复
ricebug
2024-03-27 09:57 来自中国广东省广州市移动 / Mac OS X 10.15.7 / Microsoft Edge

跟着UP主完成了主机的核显直通，写得太好了。现在跟着UP主做虚拟机内部的核显直通，最终结果和UP主的一样，但是感觉没有生效的，UP主有没有遇到过？我用intel_gpu_top这个来检测，没有找到显卡。

回复
1. 将夜
  2024-03-27 14:53 来自中国北京市联通 / Mac OS X 10.15.7 / Google Chrome
  
  @ricebug
  
  感觉没生效, 指的是无法再虚拟机linux内直接执行intel_gpu_top吧, 这个问题在sr-iov源码驱动项目的issue中被反馈过; 建议在pve宿主机内部署intel_gpu_top, 同时参考本文的效果验证部分docker方式部署一个jellyfen, 来验证是否生效
  
  回复
  1. ricebug
    2024-03-27 15:15 来自中国广东省广州市移动 / Mac OS X 10.15.7 / Microsoft Edge
    
    @将夜
    
    OK，我再试试。我说的不生效是说在系统层面，使用intel_gpu_top没有找到显卡，也导致了无法在虚拟机内部使用GPU来运行大模型的推理服务，后面我用lxc的容器就正常了。虚拟机的核显直通我还将继续尝试，后续看看有什么进展或者问题再上来分享和交流。
    
    回复
    
    将夜
    2024-03-27 16:15 来自中国北京市联通 / Mac OS X 10.15.7 / Google Chrome
    
    @ricebug
    
    大模型指的是llama2之类开源项目么, 方便分享的话可以留个地址我本地测试验证下
    
    回复
东东
2024-02-24 09:56 来自中国移动 / Android 10 / Microsoft Edge

按这个方法部署之后ubuntu里已经识别到了虚拟的显卡，但是docker里的jellyfin还是无法使用核显解码这是啥问题呢？jellyfin提示该客户端与媒体不兼容，服务器未发送兼容的媒体格式

回复
1. 将夜
  2024-02-24 20:44 来自中国北京市联通 / Windows 10 / Google Chrome
  
  @东东
  
  这个问题我也在之前配置的过程中遇到过, 出现问题的原因也暂时没弄清楚; 后面我重新开了一个环境, 按照本文的教程一步步配置成功了; 也建议你重开一个再试试看
  
  回复
奏凯
2024-02-20 11:46 来自中国广东省中山市电信 / Windows 11 / Microsoft Edge

请问下上篇的LXC Debian12核显直通，与这篇的Ubuntu22.04LTS核显直通，有什么区别吗？

回复
1. 将夜
  2024-02-20 12:50 来自中国北京市联通 / Mac OS X 10.15.7 / Google Chrome
  
  @奏凯
  
  LXC是一种容器技术, 部署的系统可以简单理解为简化后的, 移除了一些不必要的组件与设置(可以类比docker),CPU/RAM等资源占用更少; 这篇文章介绍的基于(QEMU)虚拟机部署的完整系统, 有着与物理机部署几乎一致的体验; 技术上来讲最大差别在于2者的底层依赖, 在实际应用中选择哪种, 需要看自己的需求: 一般如果主要是玩docker, 更推荐lxc容器化部署; 如果lxc容器内的系统无法满足需求, 或者修改设定太麻烦时, 可以考虑虚拟机方式
  
  回复
birdxs
2024-02-15 16:21 来自中国移动 / HarmonyOS / 华为浏览器

B站过来的，3个视频做的很用心，讲解很详细，支持UP主。想学一下Intel N100小主机pve核显直通的方法，结果搜到了你这个虚拟核显的视频，学习了一下，很棒。

回复
1. 将夜 1
  2024-02-20 13:07 来自中国北京市联通 / Mac OS X 10.15.7 / Google Chrome
  
  @birdxs
  
  谢谢, 欢迎一起折腾&分享
  
  回复

发表评论取消回复
使用cookie技术保留您的个人信息以便您下次快速评论，继续评论表示您已同意该条款

评论 *

名称 *

🎲

邮箱 *

地址

sk
我有一台桌面版ubuntu22.04，锐龙7900x可以用se...
TDHX
感谢分享
zyhw
有nuc9想看看怎么使用雷电网桥，谢谢分享。
windpro
感谢
PVE8.1下-Ubuntu虚拟机虚拟核显直通 - FlyPigs`Blog
[...]物理核显直通 vs SRIOV vGPU的优缺点对比...

文件共享服务-samba部署
浏览次数: 814
SSH端口转发实战
浏览次数: 302
conda体验升级
浏览次数: 1034
PVE8.1-命令行工具
浏览次数: 1720
MacOS-PDF打印
浏览次数: 871

PVE8.1下-Ubuntu虚拟机创建与虚拟核显直通

将夜 • 2024 年 01 月 24 日

## 前言

验证在`PVE`虚拟机模式下, Linux系统如何使用宿主机基于`SR-IOV`虚拟的核显. 以下基于`Ubuntu22.04LTS`桌面系统验证. 视频操作教程见如下链接:

https://www.bilibili.com/video/BV1HW4y1c74K

## 虚拟机创建与系统安装

PVE下按照常规模式添加一个Linux虚拟机, 并完成`Ubuntu22.04LTS`系统的配置安装

*镜像下载与上传:*

* 官方下载页面: https://cn.ubuntu.com/download/desktop
  * 点击标记处按钮即可开始下载
* 提前上传下载好的系统镜像到PVE存储节点中(以上传到local节点为例)

![Ubuntu22.04LTS下载](https://zoe.red/usr/uploads/2024/01/909421259.png)

![镜像上传](https://zoe.red/usr/uploads/2024/01/2848293994.png)

---

*虚拟机创建*

* 如图一所示, 准备在pve节点下新建虚拟机
* 如图二到十, 虚拟机配置设置

图一: 准备在pve节点下新建虚拟机

![准备在pve节点下新建虚拟机](https://zoe.red/usr/uploads/2024/01/4069167774.png)

图二: 常规设置页面, 填入虚拟机的名字, 然后点击下一步

![VM-常规设置](https://zoe.red/usr/uploads/2024/01/1252271187.png)

图三: 选择引导镜像, 首先选择镜像所在存储节点, 然后在镜像列表中选择目标镜像; 之后点击下一步

![VM-引导镜像](https://zoe.red/usr/uploads/2024/01/2731783866.png)

图四: 系统设置页面, 修改机型为q35, bois为UEFI, 并选择EFI存储位置, 之后点击下一步

![系统设置](https://zoe.red/usr/uploads/2024/01/144737067.png)

图五: 磁盘设置, 选择存储节点, 磁盘大小后, 点击下一步

![image.png](https://zoe.red/usr/uploads/2024/01/427393954.png)

图六: CPU设置页面, 修改要分配的核心数, 类别选择`host`, 然后点击下一步

![CPU设置](https://zoe.red/usr/uploads/2024/01/177663187.png)

图七: 内存设置, 根据需要调整大小, 然后点击下一步

![内存设置](https://zoe.red/usr/uploads/2024/01/1917219187.png)

图八: 网络设置, 取消勾选防火墙, 避免远程访问的一些问题; 模型可以选择默认的半虚拟化, 也可以选择`Intel E1000`, 然后点击下一步

![网络设置](https://zoe.red/usr/uploads/2024/01/1431502190.png)

图九: 确认页面, 确认配置无误后, 点击完成

![确认页面](https://zoe.red/usr/uploads/2024/01/1175107653.png)

图十: 调整虚拟机引导顺序配置, 之后点击`控制台`, 启动虚拟机开始系统安装

* 将系统镜像设置为第一引导选项
* 在控制台页面, 点击`start now`开始运行虚拟机

![image.png](https://zoe.red/usr/uploads/2024/01/769388297.png)

![VM控制台](https://zoe.red/usr/uploads/2024/01/77469298.png)

---

虚拟机运行后, 后面是正常的Ubuntu系统安装过程, 不在赘述.

![Ubuntu安装](https://zoe.red/usr/uploads/2024/01/2974025045.png)

![更新设置](https://zoe.red/usr/uploads/2024/01/3804368402.png)

![用户名密码设置](https://zoe.red/usr/uploads/2024/01/2580674946.png)

![安装完毕, 系统重启后, 提示移除引导镜像](https://zoe.red/usr/uploads/2024/01/3617548939.png)

直接回车, 默认还会进入到镜像引导安装页面, 点击左侧工具栏, `电源`按钮, `Hard Stop`强制关机

![强制关机](https://zoe.red/usr/uploads/2024/01/1861522621.png)

系统安装完毕后, 需要先停止虚拟机, 修改引导选项, 取消使用iso镜像引导

![取消CD引导](https://zoe.red/usr/uploads/2024/01/616026654.png)

---

## 可选配置

可能还需要进行一些必要的配置来方便后续的操作

* SSH远程访问服务
* 配置国内软件源
  * 清华源: https://mirrors.tuna.tsinghua.edu.cn/help/ubuntu/
* 图形化页面下配置静态IP地址

SSH服务开启

```bash
apt update
apt install -y openssh-server
```

配置国内源(root或sudo权限用户)

deb http://security.ubuntu.com/ubuntu/ jammy-security main restricted universe multiverse
# deb-src http://security.ubuntu.com/ubuntu/ jammy-security main restricted universe multiverse

静态IP配置: 图形化界面方式

![静态IP地址设置](https://zoe.red/usr/uploads/2024/01/1188674300.png)

---

## 驱动安装与配置调整

驱动安装的主要过程与PVE8.1下配置SR-IOV虚拟核显相似, 主要区别在于不在需要`sysfsutils`工具库安装以及对应的`/etc/sysfs.conf`配置.

*系统信息查看*

* ubuntu22.04.3 LTS使用的内核为6.5.0-14, 与PVE8.1内核6.5.11-7版本非常接近

```bash
# 系统
cat /etc/os-release

# 内核
uname -ar
```

![内核信息](https://zoe.red/usr/uploads/2024/01/4075295676.png)

*APT软件源索引更新与必要工具软件安装*

```bash
apt update
apt install -y git build-* dkms # 必要编译工具安装

# 可选
apt install -y vim
```

*设置环境变量*

```bash
KERNEL=$(uname -r); KERNEL=${KERNEL%-generic}
echo ${KERNEL}
```

![环境变量](https://zoe.red/usr/uploads/2024/01/3302601175.png)

*核显虚拟化驱动项目的源码下载与配置修改(需要切换root执行)*

```bash
# 切换到root
sudo -i

# 进入root家目录, 下载驱动项目源码
cd ~
git clone https://github.com/strongtz/i915-sriov-dkms.git
cd ~/i915-sriov-dkms

# 查看修改后结果
cat ~/i915-sriov-dkms/dkms.conf
```

![配置修改内容](https://zoe.red/usr/uploads/2024/01/2608655323.png)

*DKMS添加驱动源码管理并安装部署*

```bash
# 链接内核源代码，并检查状态。确认内核显示已添加。
cp -r ~/i915-sriov-dkms /usr/src/i915-sriov-dkms-$KERNEL
ls /usr/src # 查看

cd /usr/src/i915-sriov-dkms-$KERNEL
dkms add .
dkms status

![/usr/src清单](https://zoe.red/usr/uploads/2024/01/1885638444.png)

构建安装内核扩展, 提示需要安全引导已启用,需要设置MOK,此处随意设置一个不太简单密码即可, 正常只会使用一次.

![构建内核扩展, 提示需要安全引导已启用,需要设置MOK](https://zoe.red/usr/uploads/2024/01/1554836773.png)

![image.png](https://zoe.red/usr/uploads/2024/01/2924897073.png)

![重复密码输入](https://zoe.red/usr/uploads/2024/01/2964081959.png)

---

*GRUB 配置*

# 更新引导
update-grub
update-initramfs -u -k all
```

![/etc/default/grub修改后](https://zoe.red/usr/uploads/2024/01/2999074192.png)

---

*系统重启与引导项MOK配置*

执行到此, 应该对该虚拟机系统进行重启, 但需要额外强调下:

# Ubuntu重置MOK
# 参见: https://wiki.ubuntu.com/UEFI/SecureBoot
update-secureboot-policy --enroll-key
```

![Enroll MOK](https://zoe.red/usr/uploads/2024/01/1685991174.png)

![Continue](https://zoe.red/usr/uploads/2024/01/567271211.png)

![Yes](https://zoe.red/usr/uploads/2024/01/453888952.png)

![Password](https://zoe.red/usr/uploads/2024/01/4051273154.png)

![Reboot](https://zoe.red/usr/uploads/2024/01/3784813335.png)

---

*虚拟机配置调整*

* 配置调整如图一/二
* 虚拟机关机后, 在重启,查看设备如图三

图一: 修改虚拟机配置2处

![配置调整](https://zoe.red/usr/uploads/2024/01/3619087076.png)

图二: 添加虚拟核显

![添加虚拟核显](https://zoe.red/usr/uploads/2024/01/54985681.png)

```bash
ls /dev/dri
```

![设备信息](https://zoe.red/usr/uploads/2024/01/2145402834.png)

## 效果验证

以Docker上部署Jellyfen流媒体应用来验证集显的使用.

操作同本站如下文章的的*效果验证*章节, 此处不在展开.

PVE8.1下-Ubuntu虚拟机创建与虚拟核显直通

21 条评论

发表评论取消回复
使用cookie技术保留您的个人信息以便您下次快速评论，继续评论表示您已同意该条款

PVE8.1下部署Intel集显虚拟化驱动

PVE8.1下-Ubuntu虚拟机创建与虚拟核显直通

PVE8.1下软件源更新与其它配置

此内容被密码保护

PVE8.1下-LXC容器创建与核显直通

文件共享服务-samba部署

SSH端口转发实战

conda体验升级

PVE8.1-命令行工具

MacOS-PDF打印

PVE8.1下-Ubuntu虚拟机创建与虚拟核显直通

21 条评论

发表评论 取消回复 使用cookie技术保留您的个人信息以便您下次快速评论，继续评论表示您已同意该条款

PVE8.1下-Ubuntu虚拟机创建与虚拟核显直通

发表评论取消回复
使用cookie技术保留您的个人信息以便您下次快速评论，继续评论表示您已同意该条款