跳到主要内容

PCIe 插槽和 PCIe 适配器

本主题介绍 PCIe 适配器的安装规则。

插槽配置

您的服务器通过不同类型的转接卡支持以下背面配置。

  • 仅安装一个处理器时,服务器支持转接卡 1 和转接卡 3。如果安装了 12 x 3.5 英寸 AnyBay 扩展器背板,则不支持转接卡 3。

  • 当安装两个处理器时,服务器支持转接卡 1、转接卡 2 和转接卡 3。必须选择转接卡 1,然后才能选择转接卡 2 或转接卡 3。

*E:空
服务器后视图PCIe 插槽


转接卡 1 上的插槽 1–3:

  • 类型 1:x16/x8/x8

  • 类型 2:x16/x16/E

  • 类型 3:E/x16/x16

转接卡 2 上的插槽 4–6:

  • 类型 1:x16/x8/x8

  • 类型 2:x16/x16/E

  • 类型 3:E/x16/x16

转接卡 3 上的插槽 7–8:

  • 类型 1:x16/x16

  • 类型 2:x8/x8



转接卡 1 上的插槽 1–3:

  • 类型 1:x16/x8/x8

  • 类型 2:x16/x16/E

  • 类型 3:E/x16/x16

转接卡 2 上的插槽 4–6:

  • 类型 1:x16/x8/x8

  • 类型 2:x16/x16/E

  • 类型 3:E/x16/x16

NA


转接卡 1 上的插槽 1–3:

  • 类型 1:x16/x8/x8

  • 类型 2:x16/x16/E

  • 类型 3:E/x16/x16

转接卡 2 上的插槽 6:x16

NA


转接卡 1 上的插槽 1–3:

  • 类型 1:x16/x8/x8

  • 类型 2:x16/x16/E

  • 类型 3:E/x16/x16

转接卡 2 上的插槽 6:x16

NA


转接卡 1 上的插槽 3:x16

转接卡 2 上的插槽 6:x16

NA
  • 7 毫米硬盘仓安装规则

    • 对于配备 8 个 PCIe 插槽或 4 x 2.5 英寸背面硬盘仓的服务器型号,可以将 2FH + 7 毫米固态硬盘仓安装在插槽 3 或插槽 6 中,但不能同时安装在这两个插槽中。

    • 对于配备 8 x 2.5 英寸/2 x 3.5 英寸背面硬盘仓的服务器型号,可以安装以下 7 毫米硬盘仓之一:
      • 2FH + 7 毫米固态硬盘仓:插槽 3

      • 7 毫米固态硬盘仓:插槽 6

    • 对于配备 4 x 3.5 英寸背面硬盘仓或 GPU 的服务器型号,只能在插槽 6 上安装半高型 7 毫米硬盘仓。

  • 串口模块安装规则:

    • 对于配备 8 个 PCIe 插槽或 4 x 2.5 英寸背面硬盘仓的服务器型号:

      • 如果转接卡 1 和转接卡 2 都使用 x16/x16/E 转接卡,并且插槽 6 中安装了 7 毫米硬盘仓,则可以在插槽 3 中安装串口模块。

      • 如果转接卡 1 和转接卡 2 中只有一个(而不是两个)使用 x16/x16/E 转接卡,则无法同时安装 7 毫米硬盘仓和串口模块。如果未安装 7 毫米硬盘仓,则可以在插槽 6 中安装串口模块。

      • 如果转接卡 1 和转接卡 2 均不使用 x16/x16/E 转接卡,则不支持任何串口模块。

    • 对于配备 8 x 2.5 英寸/2 x 3.5 英寸背面硬盘仓的服务器型号:

      • 如果转接卡 1 使用 x16/x16/E 转接卡,则可以在插槽 3 中安装串口模块,并在插槽 6 中安装 7 毫米固态硬盘仓。

      • 如果转接卡 1 未使用 x16/x16/E 转接卡,则无法同时安装 7 毫米硬盘仓和串口模块。如果未安装 7 毫米硬盘仓,则可以在插槽 6 中安装串口模块。

    • 对于配备 4 x 3.5 英寸背面硬盘仓的服务器型号,不能同时安装 7 毫米硬盘仓和串口模块。如果未安装 7 毫米硬盘仓,则可以在插槽 3 或插槽 6 中安装串口模块。

    • 对于带双宽 GPU 的服务器型号,串口模块只能安装在插槽 6 上。

支持的 PCIe 适配器和插槽优先顺序

下表列出了常见 PCIe 适配器的建议插槽安装优先顺序。

PCIe 适配器支持的最大数量建议插槽优先顺序
GPU 适配器
双宽 GPU(V100S、A100、A40、A30、A6000、A16、A800、H100、L40)3
  • 1 个 CPU:2、7

  • 2 个 CPU:2、5、7

双宽 GPU(AMD MI210)2
  • 1 个 CPU:2、7

  • 2 个 CPU:2、5、7

单宽 GPU(P620、T4、A4、A2、L4)8
  • 1 个 CPU:1、2、3、7、8

  • 2 个 CPU:1、4、7、8、2、5、3、6

单宽 GPU(A10)4
  • 1 个 CPU:1、2、7

  • 2 个 CPU:1、4、5、7、8

NVMe 交换卡

ThinkSystem 1611-8P PCIe Gen4 Switch Adapter

4

2 个 CPU:1、2、4、5

PCIe 重定时器卡

ThinkSystem x16 Gen 4.0 Re-timer adapter

3
  • 1 个 CPU:1、2、3

  • 2 个 CPU:1、3、2、4

内部 CFF RAID/HBA/扩展器

5350-8i、9350-8i、9350-16i

1

不安装在 PCIe 插槽中。

CFF RAID/HBA 适配器仅在 2.5 英寸硬盘插槽机箱中受支持。

440-16i、940-16i

ThinkSystem 48 port 12Gb Internal Expander

内部 SFF RAID/HBA 适配器

9350-8i

4
  • 1 个 CPU:
    • 带其他 SFF RAID 适配器:2、3、1

    • 不带其他 SFF RAID 适配器:3、2、1

  • 2 个 CPU:

    • 带其他 SFF RAID 适配器:
      • 配备 2.5 英寸正面硬盘插槽的配置:2、3、5、6、1、4

      • 配备 3.5 英寸正面硬盘插槽的配置:
        • 带背面硬盘插槽:2、3、5、6、1、4

        • 不带背面硬盘插槽:2、3、1

    • 不带其他 SFF RAID 适配器:
      • 配备 2.5 英寸正面硬盘插槽的配置:3、2、5、6、1、4

      • 配备 3.5 英寸正面硬盘插槽的配置:
        • 带背面硬盘插槽:3、2、5、6、1、4

        • 不带背面硬盘插槽:3、2、1

9350-16i

2

430-8i、4350-8i、530-8i、5350-8i、930-8i

4
  • 1 个 CPU:2、3、1

  • 2 个 CPU:

    • 配备 2.5 英寸正面硬盘插槽的配置:2、3、5、6、1、4

    • 配备 3.5 英寸正面硬盘插槽的配置:2、3、1

430-16i、4350-16i、530-16i、930-16i

2

440-8i、540-8i、540-16i、940-8i、940-16i(8GB)

4

440-16i、940-16i(4GB)

2

940-32i

1

940-8i(三模式)

3

940-16i 4 GB(三模式)

2

940-16i 8 GB(三模式)

4
外部 RAID/HBA 适配器

430-8e、430-16e、440-16e

8
  • 1 个 CPU:2、3、1、7、8

  • 2 个 CPU:2、5、3、6、7、8、1、4

930-8e、940-8e

4
PCIe 固态硬盘适配器
所有受支持的 PCIe 固态硬盘适配器8
  • 1 个 CPU:2、3、1、7、8

  • 2 个 CPU:2、5、3、6、7、8、1、4

FC HBA 适配器
所有受支持的 FC HBA 适配器8
  • 1 个 CPU:2、3、1、7、8

  • 2 个 CPU:2、5、3、6、7、8、1、4

NIC 适配器

ThinkSystem NVIDIA BlueField-2 25GbE SFP56 2-Port PCIe Ethernet DPU w/BMC & Crypto

1
  • 1 个 CPU:1、2、3

  • 2 个 CPU:1、4、2、5、3

Mellanox ConnectX-6 Lx 100GbE QSFP28 2-port PCIe Ethernet Adapter

Broadcom 57508 100GbE QSFP56 2-port PCIe 4 Ethernet Adapter

Broadcom 57508 100GbE QSFP56 2-port PCIe 4 Ethernet Adapter v2

6
  • 1 个 CPU:1、2、7

  • 2 个 CPU:1、4、2、5、7、8

Broadcom 57454 10/25GbE SFP28 4-port PCIe Ethernet Adapter_Refresh

ThinkSystem Intel E810-DA4 10/25GbE SFP28 4-port PCIe Ethernet Adapter

ThinkSystem Broadcom 57504 10/25GbE SFP28 4-port PCIe Ethernet Adapter

6
  • 1 个 CPU:2、3、1、7

  • 2 个 CPU:2、5、3、6、7、8、1、4

Xilinx Alveo U506
  • 1 个 CPU:2、1、7

  • 2 个 CPU:2、5、1、4、7、8

所有其他受支持的 NIC 适配器8
  • 1 个 CPU:2、3、1、7、8

  • 2 个 CPU:2、5、3、6、7、8、1、4

InfiniBand 适配器

Mellanox ConnectX-6 HDR100 IB/100GbE VPI 1-port x16 PCIe 3.0 HCA w/ Tall Bracket

6
  • 1 个 CPU:1、2、7

  • 2 个 CPU:1、4、2、5、7、8

Mellanox ConnectX-6 HDR100 IB/100GbE VPI 2-port x16 PCIe 3.0 HCA w/ Tall Bracket

ThinkSystem NVIDIA ConnectX-7 NDR400 OSFP 1-Port PCIe Gen5 Adapter

ThinkSystem NVIDIA ConnectX-7 NDR200/HDR QSFP112 2-Port PCIe Gen5 x16 InfiniBand Adapter

Mellanox ConnectX-6 HDR IB/200GbE Single Port x16 PCIe Adapter w/ Tall Bracket

6

请参阅以下了解详细的安装规则。

Mellanox HDR Auxiliary x16 PCIe 3.0 Connection Card Kit

3
  1. 有关 GPU 适配器的规则:

    • 所有安装的 GPU 适配器必须完全相同。

    • 如果在插槽 5、7 或 2 中安装了双宽 GPU 适配器,则相邻插槽 4、8 或 1 不可用。

    • 如果 PCIe 插槽 1、4 或 7 上安装了单宽 150W GPU 适配器,则相邻插槽 2、5 或 8 不能安装 100GbE 或更高的以太网适配器。

    • 有关受支持 GPU 的散热规则,请参阅散热规则

  2. 系统使用 NVMe 交换适配器支持 32 个 NVMe 硬盘的情况下,会出现超额配置。如需详细信息,请参阅 https://lenovopress.lenovo.com/lp1392-thinksystem-sr650-v2-server#nvme-drive-support

  3. 适用于内部标准外形规格(SFF)RAID/HBA 适配器的规则:
    • RAID 930/940 系列或 9350 系列适配器需要 RAID 快速充电模块。

    • 不能在同一系统中混合使用 RAID/HBA 430/530/930 适配器(第 3 代)和 RAID/HBA 440/940 适配器(第 4 代)。

    • 属于同一代(Gen 3 或 Gen 4)的 RAID/HBA 适配器可以在同一系统中混合使用。

    • RAID/HBA 4350/5350/9350 适配器不能与以下适配器在同一系统中混用:

      • RAID/HBA 430/530/930 适配器

      • RAID/HBA 440/540/940 适配器(外部 RAID/HBA 440-8e/440-16e/940-8e 适配器除外)

    • RAID 940-8i 或 RAID 940-16i 适配器支持三模式。启用三模式后,服务器将同时支持 SAS、SATA 和 U.3 NVMe 硬盘。NVMe 硬盘通过 PCIe x1 链路连接到控制器。

      要支持 U.3 NVMe 硬盘的三模式,必须通过 XCC Web GUI 为背板上选定的硬盘插槽启用 U.3 x1 模式。否则,系统将检测不到 U.3 NVMe 硬盘。如需更多信息,请参阅U.3 NVMe 硬盘可在 NVMe 连接中检测到,但在三模式中检测不到
    • 不能同时支持 Virtual RAID on CPU(VROC)密钥和三模式。

    • 有关不同服务器配置的控制器选择的更多信息,请参阅控制器选择(2.5 英寸机箱)控制器选择(3.5 英寸机箱)

  4. 要安装 Xilinx Alveo U50 适配器,请遵循以下规则:

    • 环境温度不能超过 30°C。

    • 所有风扇均正常运行。

    • 未安装 VMware 操作系统。

    • 在配备 24 x 2.5 英寸硬盘或 12 x 3.5 英寸硬盘的服务器型号中,Xilinx Alveo U50 适配器不受支持。

    • Xilinx Alveo U50 适配器必须与高性能风扇一起安装。

  5. 如果装有以下 InfiniBand 适配器之一:

    • 主适配器:Mellanox ConnectX-6 HDR IB/200GbE Single Port x16 PCIe Adapter,最多 6 个适配器,可独立安装。

    • 辅助适配器:Mellanox HDR Auxiliary x16 PCIe 3.0 Connection Card Kit,最多 3 个适配器,必须与主适配器一起安装。

      适配器选择适配器数量PCIe 插槽
      选项 1主适配器11 或 2
      辅助适配器14 或 5
      选项 2主适配器21 和 2
      辅助适配器24 和 5
      选项 3主适配器31、2 和 7
      辅助适配器34、5 和 8
      选项 4仅主适配器最多 6 个1、4、7、2、5、8
      注意
      • 当主适配器在 12 x 3.5 英寸或 24 x 2.5 英寸配置中搭配有源光缆(AOC)使用时,请遵循散热规则并确保环境温度不超过 30°C。此配置可能会导致高噪音,因此建议将其置于工业数据中心而非办公室环境。

      • 当同时使用主适配器和 GPU 适配器时,请遵循 GPU 适配器的散热规则。有关详细信息,请参阅配备 GPU 的服务器型号

  6. 适用于 ThinkSystem NVIDIA ConnectX-7 NDR200/200GbE QSFP112 2-port PCIe Gen5 x16 InfiniBand Adapter 的规则:
    • VMware 7.0 U3 不支持适配器。

    • VMware 8.0 U2 内置支持适配器。

    • Windows 2019 和 2022 可支持适配器。

    • 配备中间硬盘插槽的 12 x 3.5 英寸或 24 x 2.5 英寸配置不支持带有源光缆(AOC)的适配器。

    • 安装适配器后,PCIe 插槽 3 和插槽 6 在以下配置中不支持 AOC。
      • 12 x 3.5 英寸配置

      • 24 x 2.5 英寸配置

      • 配备背面硬盘插槽的 12 x 3.5 英寸配置

      • 配备背面硬盘插槽的 24 x 2.5 英寸配置