PCIe 插槽和 PCIe 适配器
本主题介绍 PCIe 适配器的安装规则。
插槽配置
您的服务器通过不同类型的转接卡支持以下背面配置。
仅安装一个处理器时,服务器支持转接卡 1 和转接卡 3。如果安装了 12 x 3.5 英寸 AnyBay 扩展器背板,则不支持转接卡 3。
当安装两个处理器时,服务器支持转接卡 1、转接卡 2 和转接卡 3。必须选择转接卡 1,然后才能选择转接卡 2 或转接卡 3。
服务器后视图 | PCIe 插槽 | ||
---|---|---|---|
转接卡 1 上的插槽 1–3:
| 转接卡 2 上的插槽 4–6:
| 转接卡 3 上的插槽 7–8:
| |
转接卡 1 上的插槽 1–3:
| 转接卡 2 上的插槽 4–6:
| NA | |
转接卡 1 上的插槽 1–3:
| 转接卡 2 上的插槽 6:x16 | NA | |
转接卡 1 上的插槽 1–3:
| 转接卡 2 上的插槽 6:x16 | NA | |
转接卡 1 上的插槽 3:x16 | 转接卡 2 上的插槽 6:x16 | NA |
7 毫米硬盘仓安装规则:
对于配备 8 个 PCIe 插槽或 4 x 2.5 英寸背面硬盘仓的服务器型号,可以将 2FH + 7 毫米固态硬盘仓安装在插槽 3 或插槽 6 中,但不能同时安装在这两个插槽中。
- 对于配备 8 x 2.5 英寸/2 x 3.5 英寸背面硬盘仓的服务器型号,可以安装以下 7 毫米硬盘仓之一:
2FH + 7 毫米固态硬盘仓:插槽 3
7 毫米固态硬盘仓:插槽 6
对于配备 4 x 3.5 英寸背面硬盘仓或 GPU 的服务器型号,只能在插槽 6 上安装半高型 7 毫米硬盘仓。
串口模块安装规则:
对于配备 8 个 PCIe 插槽或 4 x 2.5 英寸背面硬盘仓的服务器型号:
如果转接卡 1 和转接卡 2 都使用 x16/x16/E 转接卡,并且插槽 6 中安装了 7 毫米硬盘仓,则可以在插槽 3 中安装串口模块。
如果转接卡 1 和转接卡 2 中只有一个(而不是两个)使用 x16/x16/E 转接卡,则无法同时安装 7 毫米硬盘仓和串口模块。如果未安装 7 毫米硬盘仓,则可以在插槽 6 中安装串口模块。
如果转接卡 1 和转接卡 2 均不使用 x16/x16/E 转接卡,则不支持任何串口模块。
对于配备 8 x 2.5 英寸/2 x 3.5 英寸背面硬盘仓的服务器型号:
如果转接卡 1 使用 x16/x16/E 转接卡,则可以在插槽 3 中安装串口模块,并在插槽 6 中安装 7 毫米固态硬盘仓。
如果转接卡 1 未使用 x16/x16/E 转接卡,则无法同时安装 7 毫米硬盘仓和串口模块。如果未安装 7 毫米硬盘仓,则可以在插槽 6 中安装串口模块。
对于配备 4 x 3.5 英寸背面硬盘仓的服务器型号,不能同时安装 7 毫米硬盘仓和串口模块。如果未安装 7 毫米硬盘仓,则可以在插槽 3 或插槽 6 中安装串口模块。
对于带双宽 GPU 的服务器型号,串口模块只能安装在插槽 6 上。
支持的 PCIe 适配器和插槽优先顺序
下表列出了常见 PCIe 适配器的建议插槽安装优先顺序。
PCIe 适配器 | 支持的最大数量 | 建议插槽优先顺序 |
---|---|---|
GPU 适配器注 | ||
双宽 GPU(V100S、A100、A40、A30、A6000、A16、A800、H100、L40) | 3 |
|
双宽 GPU(AMD MI210) | 2 |
|
单宽 GPU(P620、T4、A4、A2、L4) | 8 |
|
单宽 GPU(A10) | 4 |
|
NVMe 交换卡注 | ||
ThinkSystem 1611-8P PCIe Gen4 Switch Adapter | 4 | 2 个 CPU:1、2、4、5 |
PCIe 重定时器卡 | ||
ThinkSystem x16 Gen 4.0 Re-timer adapter | 3 |
|
内部 CFF RAID/HBA/扩展器 | ||
5350-8i、9350-8i、9350-16i | 1 | 不安装在 PCIe 插槽中。 CFF RAID/HBA 适配器仅在 2.5 英寸硬盘插槽机箱中受支持。 |
440-16i、940-16i | ||
ThinkSystem 48 port 12Gb Internal Expander | ||
内部 SFF RAID/HBA 适配器注 | ||
9350-8i | 4 |
|
9350-16i | 2 | |
430-8i、4350-8i、530-8i、5350-8i、930-8i | 4 |
|
430-16i、4350-16i、530-16i、930-16i | 2 | |
440-8i、540-8i、540-16i、940-8i、940-16i(8GB) | 4 | |
440-16i、940-16i(4GB) | 2 | |
940-32i | 1 | |
940-8i(三模式) | 3 | |
940-16i 4 GB(三模式) | 2 | |
940-16i 8 GB(三模式) | 4 | |
外部 RAID/HBA 适配器 | ||
430-8e、430-16e、440-16e | 8 |
|
930-8e、940-8e | 4 | |
PCIe 固态硬盘适配器 | ||
所有受支持的 PCIe 固态硬盘适配器 | 8 |
|
FC HBA 适配器 | ||
所有受支持的 FC HBA 适配器 | 8 |
|
NIC 适配器 | ||
ThinkSystem NVIDIA BlueField-2 25GbE SFP56 2-Port PCIe Ethernet DPU w/BMC & Crypto | 1 |
|
Mellanox ConnectX-6 Lx 100GbE QSFP28 2-port PCIe Ethernet Adapter Broadcom 57508 100GbE QSFP56 2-port PCIe 4 Ethernet Adapter Broadcom 57508 100GbE QSFP56 2-port PCIe 4 Ethernet Adapter v2 | 6 |
|
Broadcom 57454 10/25GbE SFP28 4-port PCIe Ethernet Adapter_Refresh ThinkSystem Intel E810-DA4 10/25GbE SFP28 4-port PCIe Ethernet Adapter ThinkSystem Broadcom 57504 10/25GbE SFP28 4-port PCIe Ethernet Adapter | 6 |
|
Xilinx Alveo U50 注 | 6 |
|
所有其他受支持的 NIC 适配器 | 8 |
|
InfiniBand 适配器 | ||
Mellanox ConnectX-6 HDR100 IB/100GbE VPI 1-port x16 PCIe 3.0 HCA w/ Tall Bracket | 6 |
|
Mellanox ConnectX-6 HDR100 IB/100GbE VPI 2-port x16 PCIe 3.0 HCA w/ Tall Bracket | ||
ThinkSystem NVIDIA ConnectX-7 NDR400 OSFP 1-Port PCIe Gen5 Adapter | ||
ThinkSystem NVIDIA ConnectX-7 NDR200/HDR QSFP112 2-Port PCIe Gen5 x16 InfiniBand Adapter 注 | ||
Mellanox ConnectX-6 HDR IB/200GbE Single Port x16 PCIe Adapter w/ Tall Bracket | 6 | 请参阅以下 注了解详细的安装规则。 |
Mellanox HDR Auxiliary x16 PCIe 3.0 Connection Card Kit | 3 |
有关 GPU 适配器的规则:
所有安装的 GPU 适配器必须完全相同。
如果在插槽 5、7 或 2 中安装了双宽 GPU 适配器,则相邻插槽 4、8 或 1 不可用。
如果 PCIe 插槽 1、4 或 7 上安装了单宽 150W GPU 适配器,则相邻插槽 2、5 或 8 不能安装 100GbE 或更高的以太网适配器。
有关受支持 GPU 的散热规则,请参阅散热规则。
系统使用 NVMe 交换适配器支持 32 个 NVMe 硬盘的情况下,会出现超额配置。如需详细信息,请参阅 https://lenovopress.lenovo.com/lp1392-thinksystem-sr650-v2-server#nvme-drive-support。
- 适用于内部标准外形规格(SFF)RAID/HBA 适配器的规则:
RAID 930/940 系列或 9350 系列适配器需要 RAID 快速充电模块。
不能在同一系统中混合使用 RAID/HBA 430/530/930 适配器(第 3 代)和 RAID/HBA 440/940 适配器(第 4 代)。
属于同一代(Gen 3 或 Gen 4)的 RAID/HBA 适配器可以在同一系统中混合使用。
RAID/HBA 4350/5350/9350 适配器不能与以下适配器在同一系统中混用:
RAID/HBA 430/530/930 适配器
RAID/HBA 440/540/940 适配器(外部 RAID/HBA 440-8e/440-16e/940-8e 适配器除外)
RAID 940-8i 或 RAID 940-16i 适配器支持三模式。启用三模式后,服务器将同时支持 SAS、SATA 和 U.3 NVMe 硬盘。NVMe 硬盘通过 PCIe x1 链路连接到控制器。
注要支持 U.3 NVMe 硬盘的三模式,必须通过 XCC Web GUI 为背板上选定的硬盘插槽启用U.3 x1 模式。否则,系统将检测不到 U.3 NVMe 硬盘。如需更多信息,请参阅U.3 NVMe 硬盘可在 NVMe 连接中检测到,但在三模式中检测不到。 不能同时支持 Virtual RAID on CPU(VROC)密钥和三模式。
有关不同服务器配置的控制器选择的更多信息,请参阅控制器选择(2.5 英寸机箱)和控制器选择(3.5 英寸机箱)。
要安装 Xilinx Alveo U50 适配器,请遵循以下规则:
环境温度不能超过 30°C。
所有风扇均正常运行。
未安装 VMware 操作系统。
在配备 24 x 2.5 英寸硬盘或 12 x 3.5 英寸硬盘的服务器型号中,Xilinx Alveo U50 适配器不受支持。
Xilinx Alveo U50 适配器必须与高性能风扇一起安装。
如果装有以下 InfiniBand 适配器之一:
主适配器:Mellanox ConnectX-6 HDR IB/200GbE Single Port x16 PCIe Adapter,最多 6 个适配器,可独立安装。
辅助适配器:Mellanox HDR Auxiliary x16 PCIe 3.0 Connection Card Kit,最多 3 个适配器,必须与主适配器一起安装。
适配器选择 适配器 数量 PCIe 插槽 选项 1 主适配器 1 1 或 2 辅助适配器 1 4 或 5 选项 2 主适配器 2 1 和 2 辅助适配器 2 4 和 5 选项 3 主适配器 3 1、2 和 7 辅助适配器 3 4、5 和 8 选项 4 仅主适配器 最多 6 个 1、4、7、2、5、8 注意当主适配器在 12 x 3.5 英寸或 24 x 2.5 英寸配置中搭配有源光缆(AOC)使用时,请遵循散热规则并确保环境温度不超过 30°C。此配置可能会导致高噪音,因此建议将其置于工业数据中心而非办公室环境。
当同时使用主适配器和 GPU 适配器时,请遵循 GPU 适配器的散热规则。有关详细信息,请参阅配备 GPU 的服务器型号。
- 适用于 ThinkSystem NVIDIA ConnectX-7 NDR200/200GbE QSFP112 2-port PCIe Gen5 x16 InfiniBand Adapter 的规则:
VMware 7.0 U3 不支持适配器。
VMware 8.0 U2 内置支持适配器。
Windows 2019 和 2022 可支持适配器。
配备中间硬盘插槽的 12 x 3.5 英寸或 24 x 2.5 英寸配置不支持带有源光缆(AOC)的适配器。
- 安装适配器后,PCIe 插槽 3 和插槽 6 在以下配置中不支持 AOC。
12 x 3.5 英寸配置
24 x 2.5 英寸配置
配备背面硬盘插槽的 12 x 3.5 英寸配置
配备背面硬盘插槽的 24 x 2.5 英寸配置