vmware启动xorg失败排错！K1 K2卡

近期做基于3D的远程桌面系统部署，主要测试citrix desktop和vmware vSGA方案。

经测试，vmware在3D远程桌面确实差远了。

vmware安装时总是无法启动xorg服务。经大量测试，大量翻墙，最终确认：

vmware做vSGA方案时仅能使用1块K1卡。如果需要使用多个K1卡，请更换为Citrix方案！

xorg排错具体如下：

10.1.1.1 确认是否已安装 NVIDIA VIB 捆绑包
# esxcli software vib list | grep NVIDIA
如果已正确安装 VIB，则输出结果应当与下面的示例相似：
NVIDIA-VMware 304.59-1-OEM.510.0.0.799733 NVIDIA VMwareAccepted 2012-11-14
10.1.1.2 确认 NVIDIA 驱动程序是否已加载
# esxcli system module load –m nvidia
如果驱动程序已正确加载，则输出结果应当与下面的示例相似：
Unable to load module /usr/lib/vmware/vmkmod/nvidia:Busy
如果 Nvidia 驱动程序没有加载，请检查 vmkernel.log：
# vi /var/log/vmkernal.log
搜索“NVRM”。
一般来说，如果 GPU 有问题，vmkernal.log 中会指出
10.1.1.3 确认主机中是否存在显示设备
# esxcli hardware pci list –c 0x0300 –m 0xff
输出结果应当与下面的示例相似：
000:001:00.0
Address:000:001:00.0
Segment:0x0000
Bus:0x01
Slot:0x00
Function:0x00
VMkernel Name:
Vendor Name:NVIDIA Corporation
Device Name:NVIDIAQuadro 6000
Configured Owner:Unknown
Current Owner:VMkernel
Vendor ID:0x10de
Device ID:0x0df8
SubVendor ID:0x103c
SubDevice ID:0x0835
Device Class:0x0300
Device Class Name:VGA compatible controller
Programming Interface:0x00
Revision ID:0xa1
Interrupt Line:0x0b
IRQ:11
Interrupt Vector:0x78
PCI Pin:0x69
Spawned Bus:0x00
Flags:0x0201
Module ID:71
Module Name:nvidia
Chassis:0
Physical Slot:1
Slot Description:
Passthru Capable:true
Parent Device:PCI 0:0:1:0
Dependent Device:PCI 0:0:1:0
Reset Method:Bridge reset
FPT Sharable:true

注意：：：：：：

该步骤如果出现Module Name: None状况，xorg服务是无法启动的！！！

由于vmware在设计该方案时采用的是Q5000和Q6000的卡，非K系列卡，故未发现该问题！！而在虚拟化环境中，大量采用K1或K2的卡，安装时均会卡在本步骤！

解决方法如下：

在BIOS设置中关闭"64 bit PCI ressource"选项（在部分型号主板中为above 4G）。保存BIOS配置重启后故障修复，xorg顺利启动！！！

故障分析：

K1的架构为4块Q5000，显存达到奇迹般的16G。PCI-E 3.0标准较传统的2.0支持更大的带宽，采用更高的编码，支持到更快速的设备，在默认情况下，所有设备均需要使用64位的PCI ressource。而vmware方案需要单独的nvidia驱动，该驱动据说开发时缺少nvidia相关人员的参与，因此性能发挥很差，不支持64位PCI ressource。

关闭64 bit PCI ressource后单张K1卡可以正常工作。

但多张K1（2张或以上）卡工作时，由于PCI-E设备自身内存的和超过了PCI-E 3.0总线默认情况下的32G（数据推测），故必须要开启64 bit PCI ressource。

而开启64 bit PCI ressource后vmware的xorg又无法启动。

郁闷纠结中，垃圾vmware。。。。。

10.1.1.4 可能会发生的 PCI 总线插槽顺序问题
如果您需要在服务器中安装另一个低端 GPU，则 PCIe 插槽中的显卡的顺序可能会导致为 ESXi 控制台会话选择高端显卡。如果发生这种情况，您只需交换两个 GPU 使用的 PCIe 插槽，或者在服务器 BIOS 中更改“Primary GPU”（主要 GPU）设置即可解决问题。
10.1.1.5 检查 Xorg 日志
如果存在正确设备，则查看 xorg 日志文件可能会有帮助，可以看到是否存在任何明显问题。
# vi /var/log/Xorg.log
10.2 sched.mem.min 错误
如果您收到关于 sched.mem.min 的 vSphere 错误，请在虚拟机的 .vmx 文件中添加以下参数。
sched.mem.min = “4098”
注意： “4098”需要与配置的虚拟机内存量一致。上例适用于具有 4 GB RAM 的虚拟机。