跳到主要内容

PCIe 插槽和 PCIe 适配器

本主题介绍 PCIe 适配器的安装规则。

不带 DWCM 的插槽配置

下表列出了不带直接水冷模块(DWCM)的服务器视图中的 PCIe 插槽配置。

*E:空
PCIe 插槽
图 1. 配备八个 PCIe 插槽的后视图

转接卡 1/2x16/x8/x8(Gen 4/5)x16/x16/E(Gen 4/5)E/x16/x16转接卡 3x16/x16(Gen 4/5)x8/x8(Gen 4/5)
插槽 1/4PCIe x16PCIe x16插槽 7PCIe x16PCIe x8
插槽 2/5PCIe x8PCIe x16PCIe x16(Gen 4/5)插槽 8PCIe x16PCIe x8
插槽 3/6PCIe x8PCIe x16(Gen 4)   
图 2. 配备十个 PCIe 插槽的后视图

转接卡 1/2x16/x8/x8(Gen 4/5)x16/x16/E(Gen 4/5)E/x16/x16转接卡 3/4x16/x8(转接卡 3 为 Gen 4)x16/x8(转接卡 4 为 Gen 5)
插槽 1/4PCIe x16PCIe x16插槽 7/9PCIe4 x8PCIe5 x8
插槽 2/5PCIe x8PCIe x16PCIe x16(Gen 4/5)插槽 8/10PCIe4 x8PCIe5 x8
插槽 3/6PCIe x8PCIe x16(Gen 4)   
图 3. 配备六个 PCIe 插槽的后视图

转接卡 1/2x16/x8/x8(Gen 4/5)x16/x16/E(Gen 4/5)E/x16/x16   
插槽 1/4PCIe x16PCIe x16   
插槽 2/5PCIe x8PCIe x16PCIe x16(Gen 4/5)   
插槽 3/6PCIe x8PCIe x16(Gen 4)   
图 4. 配备四个 PCIe 插槽的后视图

转接卡 1x16/x8/x8(Gen 4/5)x16/x16/E(Gen 4/5)E/x16/x16转接卡 2x16(Gen 4) 
插槽 1PCIe x16PCIe x16插槽 6PCIe x16 
插槽 2PCIe x8PCIe x16PCIe x16(Gen 4/5)   
插槽 3PCIe x8PCIe x16(Gen 4)   
图 5. 配备两个 PCIe 插槽的后视图

转接卡 1x16(Gen 4)转接卡 2x16(Gen 4)   
插槽 3PCIe x16插槽 6PCIe x16   
图 6. 配备两个 PCIe 插槽的前视图

转接卡 5x16/x16(Gen4)     
插槽 11PCIe x16     
插槽 12PCIe x16     

带有 DWCM 的插槽配置

下表列出了带有 DWCM 的服务器视图中的 PCIe 插槽配置。

*E:空
PCIe 插槽
图 7. 配备 9 个 PCIe 插槽的后视图

转接卡 1/2x16/x8/x8(Gen 4/5)x16/x16/E(Gen 4/5)E/x16/x16转接卡 3/4x16/x8(转接卡 3 为 Gen 4)x16/x8(转接卡 4 为 Gen 5)
插槽 1/4PCIe x16PCIe x16插槽 7/9PCIe4 x8PCIe5 x8
插槽 2/5PCIe x8PCIe x16PCIe x16(Gen 4/5)插槽 8/10PCIe4 x8PCIe5 x8
插槽 3PCIe x8PCIe x16(Gen 4)   
图 8. 配备 7 个 PCIe 插槽的后视图

转接卡 1/2x16/x8/x8(Gen 4/5)x16/x16/E(Gen 4/5)E/x16/x16转接卡 3x16/x16(Gen 4/5)x8/x8(Gen 4/5)
插槽 1/4PCIe x16PCIe x16插槽 7PCIe x16PCIe x8
插槽 2/5PCIe x8PCIe x16PCIe x16(Gen 4/5)插槽 8PCIe x16PCIe x8
插槽 3PCIe x8PCIe x16(Gen 4)   
图 9. 配备 5 个 PCIe 插槽的后视图

转接卡 1/2x16/x8/x8(Gen 4/5)x16/x16/E(Gen 4/5)E/x16/x16   
插槽 1/4PCIe x16PCIe x16   
插槽 2/5PCIe x8PCIe x16PCIe x16(Gen 4/5)   
插槽 3PCIe x8PCIe x16(Gen 4)   
图 10. 配备 3 个 PCIe 插槽的后视图

转接卡 1x16/x8/x8(Gen 4/5)x16/x16/E(Gen 4/5)E/x16/x16   
插槽 1PCIe x16PCIe x16   
插槽 2PCIe x8PCIe x16PCIe x16(Gen 4/5)   
插槽 3PCIe x8PCIe x16(Gen 4)   
图 11. 配备 1 个 PCIe 插槽的后视图

转接卡 1x16(Gen 4)     
插槽 3PCIe x16     
  • 服务器支持 Gen 4 和 Gen 5 PCIe 转接卡,但这两种转接卡不能在同一个系统中同时使用。

  • Gen 4 转接卡支持 Gen 4 和 Gen 5 PCIe 适配器(Gen 5 重定时器卡除外),但这两种适配器不能在同一个系统中同时使用。

  • Gen 5 转接卡支持 Gen 4 和 Gen 5 PCIe 适配器,但这两种适配器不能在同一个系统中同时使用。

  • E/x16/x16 转接卡上的插槽 2 和 5 不支持重定时器卡。

  • 7 毫米硬盘仓安装规则

    • 对于配备 8 个 PCIe 插槽或 10 个 PCIe 插槽的服务器型号,可以将 2FH+7 毫米固态硬盘仓安装在插槽 3 或插槽 6 中,但不能同时安装在这两个插槽中。

    • 对于配备 8 x 2.5 英寸/2 x 3.5 英寸背面硬盘仓的服务器型号,可以安装以下 7 毫米硬盘仓之一:
      • 2FH + 7 毫米固态硬盘仓:插槽 3

      • 7 毫米固态硬盘仓:插槽 6

    • 对于配备 4 x 3.5 英寸背面硬盘仓或 GPU 的服务器型号,只能在插槽 6 上安装半高型 7 毫米硬盘仓。

    • 对于配备 4 x 2.5 英寸背面硬盘仓的服务器型号,不支持 7 毫米硬盘仓。

  • 串口模块安装规则:

    • 对于配备 8 个 PCIe 插槽、10 个 PCIe 插槽或 4 x 2.5 英寸背面硬盘仓的服务器型号:

      • 如果转接卡 1 和转接卡 2 都使用 x16/x16/E 转接卡,并在插槽 6 中安装了 7 毫米硬盘仓,则可以在插槽 3 中安装一个串口模块。如果没有安装 7 毫米硬盘仓,则可以在插槽 6 中安装一个串口模块。

      • 如果转接卡 1 采用 x16/x16/E 转接卡,但没有安装转接卡 2,或没有安装 x16/x16/E 转接卡,则在没有安装 7 毫米硬盘仓的情况下,可以在插槽 3 中安装一个串口模块。

      • 如果转接卡 1 不采用 x16/x16/E 转接卡,但转接卡 2 采用 x16/x16/E 转接卡,则在没有安装 7 毫米硬盘仓的情况下,可以在插槽 6 中安装一个串口模块。

      • 如果转接卡 1 和转接卡 2 均不使用 x16/x16/E 转接卡,则不支持任何串口模块。

    • 对于配备 8 x 2.5 英寸/2 x 3.5 英寸背面硬盘仓的服务器型号:

      • 如果转接卡 1 使用 x16/x16/E 转接卡,则可以在插槽 3 中安装串口模块,并在插槽 6 中安装 7 毫米固态硬盘仓。

      • 如果转接卡 1 未使用 x16/x16/E 转接卡,则无法同时安装 7 毫米硬盘仓和串口模块。如果未安装 7 毫米硬盘仓,则可以在插槽 6 中安装串口模块。

    • 对于配备 4 x 3.5 英寸背面硬盘仓的服务器型号,不能同时安装 7 毫米硬盘仓和串口模块。如果未安装 7 毫米硬盘仓,则可以在插槽 6 中安装串口模块。

    • 对于配备双宽 GPU 的服务器型号,在未安装 7 毫米硬盘仓的情况下,串口模块只能安装在插槽 6 中。

支持的 PCIe 适配器和插槽优先顺序

下表列出了常见 PCIe 适配器的建议插槽安装优先顺序。

PCIe 适配器支持的最大数量建议插槽优先顺序
GPU 适配器1
双宽 GPU3
  • 1 个 CPU:2、7

  • 2 个 CPU:2、5、7

单宽 GPU:T400、T10008
  • 1 个 CPU:1、2、3、7

  • 2 个 CPU:1、4、2、5、7、8、3、6

单宽 GPU:A28
  • 1 个 CPU:1、2、3、7、8、12

  • 2 个 CPU:1、4、7、8、2、5、6、3、11、12

单宽 GPU:L48
  • 1 个 CPU:1、2、3、7

  • 2 个 CPU:1、4、7、8、2、5、6、3

PCIe 重定时器卡

ThinkSystem PCIe Gen 4 x16 Retimer Adapter

ThinkSystem SR630/SR650 V3 PCIe Gen 5 x16 Retimer Adapter

4
  • 1 个 CPU:1、2、3

  • 2 个 CPU:1、2、4、5、3、6

内部自定义外形规格(CFF)RAID/HBA/扩展器

5350-8i、9350-8i、9350-16i

1

不安装在 PCIe 插槽中。

CFF RAID/HBA/扩展器适配器仅在 2.5 英寸硬盘插槽机箱中受支持,安装在正面背板和主板组合件之间。

440-16i、940-16i

ThinkSystem 48 port 12Gb Internal Expander

内部标准外形规格(SFF)RAID/HBA 适配器2

4350-8i、5350-8i

4
  • 1 个 CPU:2、3、1

  • 2 个 CPU:2、3、5、6、1、4

4350-16i

2

440-8i、540-8i、940-8i

4

440-16i、540-16i、940-16i

2

940-32i

1
9350-8i4
  • 1 个 CPU:3、2、1

  • 2 个 CPU:3、2、5、6、1、4

9350-16i2
外部 RAID/HBA 适配器

440-8e、440-16e

12
  • 1 个 CPU:1、2、3、7、8、12

  • 2 个 CPU:1、4、7、8、2、5、3、6、9、10、11、12

940-8e

4
  • 1 个 CPU:1、2、3、7、8、12

  • 2 个 CPU:1、4、7、8、2、5、3、6、9、10、11、12

FC HBA 适配器
所有受支持的 FC HBA 适配器12
  • 1 个 CPU:1、2、3、7、8、12

  • 2 个 CPU:1、4、7、8、2、5、3、6、9、10、11、12

NIC 适配器

ThinkSystem NVIDIA BlueField-2 25GbE SFP56 2-Port PCIe Ethernet DPU w/BMC & Crypto

1
  • 1 个 CPU:1、2、3

  • 2 个 CPU:1、4、2、5、3、6

ThinkSystem AMD X3522 10/25GbE DSFP28 2-port PCIe Ethernet Adapter

6
  • 1 个 CPU:1、2、3

  • 2 个 CPU:1、4、2、5、3、6

ThinkSystem Broadcom 57504 10/25GbE SFP28 4-port PCIe Ethernet Adapter

ThinkSystem Broadcom 57508 100GbE QSFP56 2-port PCIe 4 Ethernet Adapter V2

ThinkSystem Mellanox ConnectX-6 Dx 100GbE QSFP56 2-port PCIe Ethernet Adapter

Mellanox MCX623106AC-CDAT Dx 100GbE QSFP56 2-port PCIe NIC -CSP I4

6
  • 1 个 CPU:1、2、3、7、12

  • 2 个 CPU:1、4、2、5、7、8、3、6、11、12

ThinkSystem Intel E810-DA4 10/25GbE SFP28 4-port PCIe Ethernet Adapter

10
  • 1 个 CPU:1、2、3、7、8、12

  • 2 个 CPU:1、4、7、8、2、5、3、6、11、12

所有其他受支持的 NIC 适配器12
  • 1 个 CPU:1、2、3、7、8、12

  • 2 个 CPU:1、4、7、8、2、5、3、6、9、10、11、12

InfiniBand 适配器

Mellanox ConnectX-6 HDR100 IB/100GbE VPI 1-port x16 PCIe 3.0 HCA w/ Tall Bracket

Mellanox ConnectX-6 HDR100 IB/100GbE VPI 2-port x16 PCIe 3.0 HCA w/ Tall Bracket

ThinkSystem Mellanox ConnectX-6 HDR IB/200GbE Single Port x16 PCIe Adapter(without auxiliary adapter)

ThinkSystem Nvidia ConnectX-7 NDR200/HDR QSFP112 2-port PCIe Gen5 x16 InfiniBand Adapter

ThinkSystem NVIDIA ConnectX-7 NDR400 OSFP 1-port PCIe Gen5 Adapter

6
  • 1 个 CPU:1、2、3、7、12

  • 2 个 CPU:1、4、2、5、7、8、3、6、11、12

  1. 有关 GPU 适配器的规则:

    • 所有安装的 GPU 适配器必须完全相同。有关 GPU 的散热要求,请参阅散热规则

    • GPU 适配器的导风罩因 GPU 类型而异。有关详细信息,请参阅更换 GPU

    • 如果安装了 GPU 适配器,则不支持中间硬盘仓、背面硬盘仓或 PCIe 固态硬盘卡。

    • 最多仅支持六个 T400 和 T1000 GPU 适配器。Gen 5 转接卡不支持 T400 和 T1000 GPU 适配器。

    • 如果在插槽 2、5 或 7 中安装了双宽 GPU 适配器,则相邻插槽 1、4 或 8 不可用。

    • 当装有三个或更多 SFF RAID/HBA 适配器时,最多仅支持两个双宽 GPU 适配器。

  2. 内部 SFF RAID/HBA 适配器的规则:
    • RAID 940 系列或 9350 系列适配器需要 RAID 快速充电模块。

    • RAID/HBA 4350/5350/9350 适配器不能与以下适配器在同一系统中混用:

      • Intel E810-DA2 OCP/PCIe 以太网适配器

      • Intel E810-DA4 OCP/PCIe 以太网适配器

    • RAID 940-8i 或 RAID 940-16i 适配器支持三模式。启用三模式后,服务器将同时支持 SAS、SATA 和 U.3 NVMe 硬盘。NVMe 硬盘通过 PCIe x1 链路连接到控制器。

      要支持 U.3 NVMe 硬盘的三模式,必须通过 XCC Web GUI 为背板上选定的硬盘插槽启用 U.3 x1 模式。否则,系统将检测不到 U.3 NVMe 硬盘。如需更多信息,请参阅U.3 NVMe 硬盘可在 NVMe 连接中检测到,但在三模式中检测不到
    • 不能同时支持 Virtual RAID on CPU(VROC)密钥和三模式。

    • 由于重量原因,ThinkSystem AMD X3522 10/25GbE DSFP28 2-port PCIe Ethernet Adapter 必须安装在 x16 插槽上。