参考来源与致谢
- 引用来源:VMware vSphere 下 NVIDIA vGPU 驱动的安装和配置(图文+视频) – 丁乾的博客
- 原作者:原页面署名作者或发布机构(剪藏记录未保存可核验的个人署名)
- 感谢词:感谢原作者及发布机构对技术知识的公开分享。本文已结合企业运维场景完成脱敏、核验与原创重写,并非原文转载;如权利人需要更正署名或来源信息,请联系本站。
适用场景 #
企业虚拟化平台需要在 VMware vSphere 上为虚拟机提供 GPU 加速能力时,通常采用 NVIDIA vGPU 方案。本文适用于已具备 vCenter 管理环境、ESXi 主机已安装受支持的 NVIDIA 物理 GPU、并计划通过 vGPU 为虚拟机分配图形或计算资源的运维场景。具体驱动版本、GPU 型号与 vSphere 版本兼容性,请查阅对应版本的 NVIDIA 与 VMware 官方文档。
准备与风险 #
- 确认 ESXi 主机已加入 vCenter,vGPU 相关配置需在 vCenter 中完成。
- 开启 ESXi 的 SSH 服务,便于传输 vib 驱动包并执行命令行操作。
- 准备与当前 ESXi 版本匹配的 NVIDIA vGPU 驱动 vib 包。
- 安装驱动需将主机置于维护模式,会影响该主机上运行的所有虚拟机,请提前安排停机窗口。
- 操作前备份主机配置,并在测试环境验证流程后再应用于生产环境。
- 启用或关闭 ECC 均需重启主机,请预留重启时间。
处理步骤 #
1. 上传驱动包 #
使用安全文件传输工具将 vib 驱动包上传至 ESXi 主机的 /tmp 目录。
2. 检查 GPU 识别情况 #
SSH 登录 ESXi 主机,执行以下命令确认物理 GPU 已被识别:
lspci | grep NVIDIA
3. 安装驱动 #
进入 /tmp 目录,赋予驱动包可执行权限,并使用 esxcli 安装。安装时必须使用绝对路径,否则可能报错。主机需处于维护模式,可通过 vCenter 界面切换,也可在安装命令中附加维护模式参数:
cd /tmp
chmod +x NVIDIA*
esxcli software vib install -v /tmp/NVIDIA*.vib --maintenance-mode
安装完成后即使提示无需重启,仍建议重启主机以验证驱动状态,避免重启后驱动异常。
4. 验证驱动状态 #
重启后执行以下命令:
nvidia-smi
重点检查两项:一是 ECC 模式是否显示为 off;二是默认情况下 vSphere 使用 vsga 模式而非 vGPU 模式,输出中可能出现 xorg 条目,需后续调整。若 ECC 显示为 0 而非 off,在部分旧版本中需关闭 ECC 才能使用 vGPU。关闭命令如下,执行后需重启主机:
nvidia-smi -e 0
关于 ECC 的详细说明,请查阅对应版本官方文档。
5. 切换图形模式 #
登录 vCenter,定位到主机配置中的图形设置,将默认的共享模式切换为直接共享模式,才能使用 vGPU。多 GPU 环境下有两种分配策略:最佳性能模式会将虚拟机尽量平均分布到各 GPU;GPU 整合模式会优先在同一 GPU 上运行虚拟机,直到资源不足再使用下一个 GPU。除主机级设置外,每个 GPU 也可单独设置共享模式,首次使用需在此切换并重启 xorg 服务使配置生效。不同 vSphere 版本界面可能不同,部分早期版本需手动重启 xorg 服务。切换成功后 xorg 条目消失,即可开始使用 vGPU。
验证方法 #
- 执行
nvidia-smi,确认驱动正常加载、ECC 状态符合预期、无异常 xorg 条目。 - 在 vCenter 图形设置中确认主机与各 GPU 已切换为直接共享模式。
- 创建测试虚拟机并分配 vGPU profile,启动后确认虚拟机可正常识别并使用 GPU 资源。
回退建议 #
- 若驱动异常,可通过 esxcli 卸载对应 vib 包,并重启主机恢复。
- 若图形模式切换后异常,可将主机图形设置改回共享模式并重启 xorg 服务。
- 回退前确认已备份主机配置,并在测试环境验证回退步骤。
常见问题 #
- 安装报错:多因未使用绝对路径或主机未处于维护模式。
- 重启后驱动异常:安装提示无需重启时仍建议重启验证。
- ECC 显示为 0:部分旧版本需关闭 ECC 才能使用 vGPU,关闭后需重启。
- 仍显示 xorg 条目:说明尚未切换到直接共享模式,需在主机与 GPU 级别分别设置并重启 xorg 服务。
- 多 GPU 分配不均:根据业务需求选择最佳性能或 GPU 整合策略。
提示:涉及驱动版本、GPU 型号与 vSphere 版本兼容性时,请以对应版本官方文档为准,勿在生产环境直接套用未经验证的参数。
