跳到主要内容

安装 OSFP 模块和网卡(仅限经过培训的技术人员)

按以下信息安装 OSFP 模块网卡

注意

如果仅更换网络板,请参阅网卡(仅限经过培训的技术人员)

重要
间隙垫/油灰垫更换准则
  • 要确定间隙垫/油灰垫的位置和方向,请参阅:

  • 在更换间隙垫/油灰垫之前,请使用酒精清洁垫轻轻地清洁接口板或硬件表面。

  • 小心地握住间隙垫/油灰垫,以免变形。确保间隙垫/油灰垫材料不会遮挡螺钉孔或开口。

  • 请勿使用过期的油灰垫。检查油灰垫包装上的有效期。如果油灰垫过期,请购买新的油灰垫以进行妥善更换。

关于本任务

必备工具

请确保您手头有下列必备工具,以便妥善更换组件。

  • SD665-N V3 Water Loop Service Kit (维护套件中的水循环模块载板可重复使用,建议将其留在服务器运行的场所,以备将来更换时使用。)

  • SD665-N V3 Water Loop Putty Pad Kit

  • SD665-N V3 SXM5 PCM Fixture

  • SXM5 PCM Kit(用于从 GPU 上卸下 PCM)

  • SD665-N V3 OSFP Putty Pad Kit

    油灰垫不能重复使用。每次卸下水循环模块后,都必须更换新的油灰垫,再将水循环模块装回。

  • 螺钉和螺丝刀

    为确保能够正确安装和卸下相应的螺钉,请准备好以下螺丝刀。
    螺钉类型/用途螺丝刀类型
    六角螺钉(GPU 节点水循环模块)6 毫米六角螺丝刀
    从导电板上松开 OSFP 模块平头螺丝刀
    T10 内六角螺钉T10 内六角螺丝刀
    T15 内六角螺钉T15 内六角螺丝刀
    1 号十字螺钉1 号十字螺丝刀
    2 号十字螺钉2 号十字螺丝刀
注意
固件和驱动程序下载:更换组件后,可能需要更新固件或驱动程序。

安装网卡

过程

  1. 网卡对齐到载板上的导孔;然后,将网卡放置到载板上。
    图 1. 安装网卡
    Installing the network board
  2. 按照下图所示的顺序将网卡螺钉(4 颗 T15 内六角螺钉)拧紧到载板上。
    (供参考)将螺钉完全拧紧或卸下所需的扭矩为 0.9 牛·米,即 7.96 英寸·磅。
    图 2. 安装网卡螺钉
    Network board screws installation

更换 GPU 节点水循环模块间隙垫/油灰垫。请确保遵循间隙垫/油灰垫更换准则

  1. 将 GPU 节点水循环模块上的相变材料(PCM)和油灰垫更换为新的 PCM 和油灰垫。
    1. 将 PCM 夹具安装到 GPU 冷却板上。
    2. 将 PCM 连接到夹具的方形开口。
    3. 重复操作以更换所有四个 GPU 冷却板的 PCM。
      注意
      • PCM 不能重复使用。每次卸下水循环模块时,都必须更换新的 PCM。

      • 更换 PCM 后,GPU 在恢复正常运行之前,预计会有短暂的降速期。这是因为更换 PCM 后需要经历磨合期。

      图 3. 更换水循环模块 GPU 冷却板 PCM(GPU 节点)
      Water loop GPU cold plate PCM replacement
    4. 更换 GPU 节点水循环模块上的油灰垫。
      注意
      油灰垫不能重复使用。每次卸下水循环模块后,都必须更换新的油灰垫,再将水循环模块装回。
      图 4. 更换水循环模块油灰垫(GPU 节点)
      Putty pads on the GPU node water loop putty pads replacement
    5. 更换 GPU 上的油灰垫(5 个)。确保将油灰垫对齐到 GPU VR(1)以及 GPU 上的标记。重复操作以更换四个 GPU 上的所有油灰垫。
      1 GPU VR(使用油灰垫覆盖 GPU VR)
      注意
      油灰垫不能重复使用。每次卸下水循环模块后,都必须更换新的油灰垫,再将水循环模块装回。
      图 5. 更换 GPU 油灰垫
      GPU putty pads replacement
  2. 展开水循环模块并将其放置到 GPU 节点上。
    图 6. 将水循环模块展开到 GPU 节点上
    Unfolding the water loop to GPU node
  3. 拧松水循环模块载板螺钉(20 颗 2 号十字螺钉)。
    图 7. 安装水循环模块螺钉和快接件螺钉(GPU 节点)
    Water loop screws and quick connect screws installation (GPU node)
  4. 从 GPU 节点上卸下水循环模块载板。
    图 8. 卸下水循环模块载板(GPU 节点)
    Water loop carrier removal (GPU node)
  5. 安装 GPU 冷却板螺钉(16 颗 T10 螺钉)。
    1. 按照 GPU 冷却板安装顺序安装 GPU 冷却板螺钉:GPU 2 > GPU 4 > GPU 1 > GPU 3
      图 9. GPU 编号
      GPU numbering
    2. 将扭矩螺丝刀的扭矩设置为 1.5 +/- 0.5 磅·英寸(0.1 +/- 0.06 牛·米);然后,拧紧 GPU 冷却板螺钉。
    3. 将扭矩螺丝刀的扭矩设置为 3.5 +/- 0.5 磅·英寸(0.4 +/- 0.06 牛·米);然后,拧紧 GPU 冷却板螺钉,直到所有螺钉完全拧紧。
      请确保遵循 GPU 冷却板标签上的螺钉顺序:
      图 10. 安装 GPU 冷却板螺钉
      GPU cold plate screw installation
  6. 按照网卡标签上指定的螺钉安装顺序,使用设置到适当扭矩的扭矩螺丝刀安装网络冷却板螺钉(8 颗 T10 内六角螺钉)。
    (供参考)将螺钉完全拧紧或卸下所需的扭矩为 5.0+/- 0.5 磅·英寸,即 0.55+/- 0.05 牛·米。
    图 11. 安装网卡螺钉
    Network card screw installation
  7. 使用设置到适当扭矩的扭矩螺丝刀,安装快接件螺钉(4 颗 T10 内六角螺钉)。
    (供参考)将螺钉完全拧紧或卸下所需的扭矩为 5.0+/- 0.5 磅·英寸,即 0.55+/- 0.05 牛·米。
    图 12. 安装快接件螺钉(GPU 节点)
    Quick connect screw installation (GPU node)
  8. 使用设置到适当扭矩的扭矩螺丝刀,安装水循环模块螺钉和快接件螺钉(13 颗 T10 内六角螺钉)。
    (供参考)将螺钉完全拧紧或卸下所需的扭矩为 5.0+/- 0.5 磅·英寸,即 0.55+/- 0.05 牛·米。
    图 13. 安装水循环模块 T10 内六角螺钉(GPU 节点)
    Water loop Torx T10 screws installation (GPU node)
  9. 安装六角螺钉(1 颗)和 PH1 螺钉(3 颗)。
    (供参考)将螺钉完全拧紧或卸下所需的扭矩为 5.0+/- 0.5 磅·英寸,即 0.55+/- 0.05 牛·米。
    图 14. 安装水循环模块六角螺钉和 PH1 螺钉(GPU 节点)
    Water loop Hex and PH1 screws installation (GPU node)
  10. 将线缆扎带安装到 GPU 板。
    图 15. 安装线缆扎带
    Installing the cable tie
  11. 连接载板电源线。
    图 16. 连接载板电源线
    Connecting carrier board power cable
    线缆从(载板)到(GPU 节点配电板)
    1 载板电源线电源和边带接口电源接口

安装 OSFP 模块

  1. OSFP 模块导电板上更换新的油灰垫。请确保遵循间隙垫/油灰垫更换准则
    注意
    油灰垫不能重复使用。每次卸下水循环模块后,都必须更换新的油灰垫,再将水循环模块装回。
    图 17. 更换 OSFP 模块上的油灰垫
    Replacing the putty pad on the OSFP module
  2. 连接两根 OSFP 模块电源线。将标记为 P1 的电源线连接到 OSFP 模块上的电源接口 1,并将 P2 连接到电源接口 2。
    OSFP 模块连接到电源线
    1 电源接口 12 P1
    4 电源接口 24 P2
    图 18. 安装 OSFP 模块电源线
    OSFP power cable installation
  3. 安装OSFP 模块
    1. OSFP 模块对齐到导销,然后将 OSFP 模块安装到计算节点上。
    2. 拧紧三颗螺钉以将 OSFP 模块固定到计算节点。
    图 19. 安装 OSFP 模块
    OSFP module installation
  4. OSFP 模块线缆连接到 GPU 节点上的网卡
    警告
    • 将线缆接头插入端口时,以 45 度角握住电缆接头。

    • 插拔带有 45 度标签的接头时要格外小心,因为这些接头很脆弱,如果没有以正确的 45 度角安装,就会损坏。



    图 20. 将 OSFP 模块连接到网卡
    Connecting the OSFP module cables to the network board
    线缆

    OSFP 模块接口

    网卡接口

    1 网络线缆(长)网络接口(靠近 GPU 节点)端口 0
    2 电源线电源接口 P1OOB 端口 0
    3 电源线电源接口 P2OOB 端口 1(位于网卡上)和电源接口(位于载板上)
    4 网络线缆(短)网络接口(靠近计算节点)端口 1
  5. 按压网络线缆接头以将线缆插头正确连接到接口。请确保滑锁与接口完全啮合。
    图 21. 按压网络线缆插头

  6. 将 MCIO 线缆连接到载板。单处理器配置和双处理器配置的载板线缆布放有所不同,请参阅以下内容了解详细信息。
    单处理器配置:将所有 MCIO 线缆连接到载板
    图 22. 单处理器配置 — 将所有 MCIO 线缆连接到载板
    One-processor configuration—Connecting all MCIO cables to the carrier board
    线缆索引从(GPU 节点中的载板)到(计算节点中的主板)
    1MCIO 1 线缆PCIe 4
    2MCIO 2 线缆
    3MCIO 3 线缆PCIe 3
    4MCIO 4 线缆
    双处理器配置:连接 MCIO 1、MCIO 2 和 MCIO 3 线缆
    图 23. 双处理器配置 — 将 MCIO 2、MCIO 3 和 MCIO 4 线缆连接到 GPU 节点

    确保遵循顺序 312


    Two-processor configuration—Connecting MCIO 2, MCIO 3, and MCIO 4 cable to the GPU node
    线缆索引从(GPU 节点中的载板)到(计算节点中的主板)
    1MCIO 2 线缆PCIe 5
    2MCIO 3 线缆PCIe 4
    3MCIO 4 线缆PCIe 3
  7. 连接硬盘线缆。
    图 24. 连接硬盘仓线缆
    Disconnecting drive cable
    图 25. 连接 7 毫米硬盘仓线缆
    Disconnecting drive cable
    图 26. E3.S 硬盘线缆布放
    E3.S drives cable routing
完成之后
  1. 安装 M.2 背板组合件。请参阅安装 M.2 背板组合件

  2. 安装汇流条。请参阅安装汇流条

  3. 安装横梁。请参阅安装横梁

  4. 安装托盘外盖。请参阅安装托盘外盖

  5. 将托盘装入机柜。请参阅在机柜中安装 DWC 托盘

  6. 将所有需要的外部线缆连接到解决方案。
    用力将 QSFP 线缆连接到解决方案。
  7. 检查各节点上的电源 LED,确保其从快速闪烁转变为缓慢闪烁,表示所有节点已准备好打开电源。

演示视频

在 YouTube 上观看操作过程

在 YouTube 上观看操作过程