跳到主要内容

安装 OSFP 模块和网卡(仅限经过培训的技术人员)

按以下信息安装 OSFP 模块网卡

注意

OSFP 模块和网卡应视为整体,两者中有任何一个出现问题,都应同时更换。因此,在更换有问题的 OSFP 模块时,还应将网卡更换为新网卡,反之亦然。确保在更换其中任一部件时,也准备好另一个部件。

关于本任务

必备工具

请确保您手头有下列必备工具,以便妥善更换组件。

  • SD665-N V3 Water Loop Service Kit (The water loop carrier in the Service Kit is reusable, it is recommended to keep it at the facility where the server operates for future replacement needs.)

  • SD665-N V3 Water Loop Putty Pad Kit

  • SD665-N V3 SXM5 PCM Fixture

  • SXM5 PCM Kit (用于从 GPU 上卸下 PCM)

  • SD665-N V3 OSFP Putty Pad Kit

    Putty pad cannot be reused. Whenever the water loop is removed, putty pads must be replaced with new ones before reinstalling the water loop.

  • 螺钉和螺丝刀

    为确保正确安装和卸下相应的螺钉,请准备好以下螺丝刀。
    螺钉类型/用途螺丝刀类型
    六角螺钉(GPU 节点水循环模块)6 毫米六角螺丝刀
    从导电板上松开 OSFP 模块平头螺丝刀
    T10 内六角螺钉T10 内六角螺丝刀
    T15 内六角螺钉T15 内六角螺丝刀
    1 号十字螺钉1 号十字螺丝刀
    2 号十字螺钉2 号十字螺丝刀
注意
重要
间隙垫/油灰垫更换准则
  • 要确定间隙垫/油灰垫的位置和方向,请参阅间隙垫/油灰垫的标识和位置

  • 在更换间隙垫/油灰垫之前,请使用酒精清洁垫轻轻地清洁接口板或硬件表面。

  • 小心地握住间隙垫/油灰垫,以免变形。确保间隙垫/油灰垫材料不会遮挡螺钉孔或开口。

  • 请勿使用过期的油灰垫。检查油灰垫包装上的有效期。如果油灰垫过期,请购买新的油灰垫以进行妥善更换。

固件和驱动程序下载:更换组件后,可能需要更新固件或驱动程序。

安装网卡

过程

  1. 网卡对齐到载板上的导孔;然后,将网卡放置到载板上。
    图 1. 安装网卡
    Installing the network board
  2. 按照下图所示的顺序将网卡螺钉(4 颗 T15 内六角螺钉)拧紧到载板上。
    (供参考)将螺钉完全拧紧或卸下所需的扭矩为 0.9 牛·米,即 7.96 英寸·磅。
    图 2. 安装网卡螺钉
    Network board screws installation

更换 GPU 节点水循环模块间隙垫/油灰垫。请确保遵循间隙垫/油灰垫更换准则

  1. 将 GPU 节点水循环模块上的相变材料(PCM)和油灰垫更换为新的 PCM 和油灰垫。
    1. 将 PCM 夹具安装到 GPU 冷却板上。
    2. 将 PCM 连接到夹具的方形开口。
    3. 重复操作以更换所有四个 GPU 冷却板的 PCM。
      图 3. 更换水循环模块 GPU 冷却板 PCM(GPU 节点)
      Water loop GPU cold plate PCM replacement
    4. 更换 GPU 节点水循环模块上的油灰垫。
      图 4. 更换水循环模块油灰垫(GPU 节点)
      Putty pads on the GPU node water loop putty pads replacement
    5. 更换 GPU 上的油灰垫(5 个)。确保将油灰垫对齐到 GPU VR(1)以及 GPU 上的标记。重复操作以更换四个 GPU 上的所有油灰垫。
      1 GPU VR(使用油灰垫覆盖 GPU VR)
      图 5. 更换 GPU 油灰垫
      GPU putty pads replacement
  2. 展开水循环模块并将其放置到 GPU 节点上。
    图 6. 将水循环模块展开到 GPU 节点上
    Unfolding the water loop to GPU node
  3. 拧松水循环模块载板螺钉(20 颗 2 号十字螺钉)。
    图 7. 安装水循环模块螺钉和快接件螺钉(GPU 节点)
    Water loop screws and quick connect screws installation (GPU node)
  4. 从 GPU 节点上卸下水循环模块载板。
    图 8. 卸下水循环模块载板(GPU 节点)
    Water loop carrier removal (GPU node)
  5. 安装 GPU 冷却板螺钉(16 颗 PH2 螺钉)。按对角线顺序安装 GPU 冷却板。完成 GPU 2 螺钉的安装,然后继续安装 GPU 4 > GPU 1 > GPU 3 的螺钉。
    1. 将扭矩螺丝刀设置为 3.5 磅·英寸,即 0.39 牛·米。
    2. 按照螺钉安装顺序将螺钉拧紧 720 度:
      确保遵循螺钉安装顺序,以免 GPU 冷却板倾斜。
    3. 重复操作,直到四个 GPU 冷却板上的所有螺钉完全拧紧
    图 9. 安装 GPU 冷却板螺钉
    GPU cold plate screw installation
  6. 按照网卡标签上指定的螺钉安装顺序,使用设置到适当扭矩的扭矩螺丝刀安装网络冷却板螺钉(8 颗 T10 内六角螺钉)。
    (供参考)将螺钉完全拧紧或卸下所需的扭矩为 5.0+/- 0.5 磅·英寸,即 0.55+/- 0.05 牛·米。
    图 10. 安装网卡螺钉
    Network card screw installation
  7. 使用设置到适当扭矩的扭矩螺丝刀,安装快接件螺钉(4 颗 T10 内六角螺钉)。
    (供参考)将螺钉完全拧紧或卸下所需的扭矩为 5.0+/- 0.5 磅·英寸,即 0.55+/- 0.05 牛·米。
    图 11. 安装快接件螺钉(GPU 节点)
    Quick connect screw installation (GPU node)
  8. 使用设置到适当扭矩的扭矩螺丝刀,安装水循环模块螺钉和快接件螺钉(13 颗 T10 内六角螺钉)。
    (供参考)将螺钉完全拧紧或卸下所需的扭矩为 5.0+/- 0.5 磅·英寸,即 0.55+/- 0.05 牛·米。
    图 12. 安装水循环模块 T10 内六角螺钉(GPU 节点)
    Water loop Torx T10 screws installation (GPU node)
  9. 安装六角螺钉(1 颗)和 PH1 螺钉(3 颗)。
    (供参考)将螺钉完全拧紧或卸下所需的扭矩为 5.0+/- 0.5 磅·英寸,即 0.55+/- 0.05 牛·米。
    图 13. 安装水循环模块六角螺钉和 PH1 螺钉(GPU 节点)
    Water loop Hex and PH1 screws installation (GPU node)
  10. 将线缆扎带安装到 GPU 板。
    图 14. 安装线缆扎带
    Installing the cable tie
  11. 连接载板电源线。
    图 15. 连接载板电源线
    Connecting carrier board power cable
    线缆从(载板)到(GPU 节点配电板)
    1 载板电源线电源和边带接口电源接口

安装 OSFP 模块

  1. OSFP 模块导电板上更换新的油灰垫。请确保遵循间隙垫/油灰垫更换准则
    图 16. 更换 OSFP 模块上的油灰垫
    Replacing the putty pad on the OSFP module
  2. 连接两根 OSFP 模块电源线。将标记为 P1 的电源线连接到 OSFP 模块上的电源接口 1,并将 P2 连接到电源接口 2。
    OSFP 模块连接到电源线
    1 电源接口 12 P1
    4 电源接口 24 P2
    图 17. 安装 OSFP 模块电源线
    OSFP power cable installation
  3. 安装OSFP 模块
    1. OSFP 模块对齐到导销,然后将 OSFP 模块安装到计算节点上。
    2. 拧紧三颗螺钉以将 OSFP 模块固定到计算节点。
    图 18. 安装 OSFP 模块
    OSFP module installation
  4. OSFP 模块线缆连接到 GPU 节点上的网卡
    将线缆接头插入端口时,以 45 度角握住电缆接头。
    图 19. 将 OSFP 模块连接到网卡
    Connecting the OSFP module cables to the network board
    线缆

    OSFP 模块接口

    网卡接口

    1 网络线缆(长)网络接口(靠近 GPU 节点)端口 0
    2 电源线电源接口 P1OOB 端口 0
    3 电源线电源接口 P2OOB 端口 1(位于网卡上)和电源接口(位于载板上)
    4 网络线缆(短)网络接口(靠近计算节点)端口 1
  5. 将 MCIO 线缆连接到载板。单处理器配置和双处理器配置的载板线缆布放有所不同,请参阅以下内容了解详细信息。
    单处理器配置:将所有 MCIO 线缆连接到载板
    图 20. 单处理器配置 — 将所有 MCIO 线缆连接到载板
    One-processor configuration—Connecting all MCIO cables to the carrier board
    线缆索引从(GPU 节点中的载板)到(计算节点中的主板)
    1MCIO 1 线缆PCIe 4
    2MCIO 2 线缆
    3MCIO 3 线缆PCIe 3
    4MCIO 4 线缆
    双处理器配置:连接 MCIO 1、MCIO 2 和 MCIO 3 线缆
    图 21. 双处理器配置 — 将 MCIO 2、MCIO 3 和 MCIO 4 线缆连接到 GPU 节点

    确保遵循顺序 312


    Two-processor configuration—Connecting MCIO 2, MCIO 3, and MCIO 4 cable to the GPU node
    线缆索引从(GPU 节点中的载板)到(计算节点中的主板)
    1MCIO 2 线缆PCIe 5
    2MCIO 3 线缆PCIe 4
    3MCIO 4 线缆PCIe 3
  6. 连接硬盘线缆。
    图 22. 连接硬盘线缆
    Connecting drive cable
    图 23. 连接 E3.S 硬盘线缆
    Connecting E3.S drive cable
完成之后
  1. 安装 M.2 背板组合件。请参阅安装 M.2 背板组合件

  2. 安装汇流条。请参阅安装汇流条

  3. 安装横梁。请参阅安装横梁

  4. 安装托盘外盖。请参阅安装托盘外盖

  5. 将托盘装入机柜。请参阅在机柜中安装 DWC 托盘

  6. 将所有需要的外部线缆连接到解决方案。
    用力将 QSFP 线缆连接到解决方案。
  7. 检查各节点上的电源 LED,确保其从快速闪烁转变为缓慢闪烁,表示所有节点已准备好打开电源。

演示视频

在 YouTube 上观看操作过程

在 YouTube 上观看操作过程