Гнезда PCIe и адаптеры PCIe
В этом разделе представлены правила установки адаптеров PCIe.
Конфигурации гнезд
Сервер поддерживает следующие конфигурации задней панели с различными типами плат-адаптеров Riser.
Если установлен только один процессор, сервер поддерживает платы-адаптеры Riser 1 и Riser 3. Если установлена объединительная панель расширения для 12 3,5-дюймовых дисков AnyBay, плата-адаптер Riser 3 не поддерживается.
Если установлены два процессора, сервер поддерживает платы-адаптеры Riser 1, Riser 2 и Riser 3. Необходимо выбрать плату-адаптер Riser 1, а затем можно выбрать плату-адаптер Riser 2 или Riser 3.
Вид сервера сзади | Гнезда PCIe | ||
---|---|---|---|
Гнезда 1–3 на плате-адаптере Riser 1:
| Гнезда 4–6 на плате-адаптере Riser 2:
| Гнезда 7 и 8 на плате-адаптере Riser 3:
| |
Гнезда 1–3 на плате-адаптере Riser 1:
| Гнезда 4–6 на плате-адаптере Riser 2:
| Неприменимо | |
Гнезда 1–3 на плате-адаптере Riser 1:
| Гнездо 6 на плате-адаптере Riser 2: x16 | Неприменимо | |
Гнезда 1–3 на плате-адаптере Riser 1:
| Гнездо 6 на плате-адаптере Riser 2: x16 | Неприменимо | |
Гнездо 3 на плате-адаптере Riser 1: x16 | Гнездо 6 на плате-адаптере Riser 2: x16 | Неприменимо |
Правила установки отсека для дисков толщиной 7 мм
В моделях серверов с 8 гнездами PCIe или задним отсеком для четырех 2,5-дюймовых дисков можно установить отсек для твердотельных дисков 2FH+7 мм в гнездо 3 или гнездо 6, но не в оба гнезда одновременно.
- В моделях серверов с задним отсеком для восьми 2,5-дюймовых дисков/двух 3,5-дюймовых дисков можно установить один из следующих отсеков для дисков толщиной 7 мм:
Отсек для твердотельных дисков 2FH+7 мм: гнездо 3
Отсек для твердотельных дисков толщиной 7 мм: гнездо 6
В моделях серверов с задним отсеком для четырех 3,5-дюймовых дисков или графическим процессором низкопрофильный отсек для дисков толщиной 7 мм можно установить только в гнездо 6.
Правила установки модуля последовательного порта
В моделях серверов с 8 гнездами PCIe или задним отсеком для четырех 2,5-дюймовых дисков:
Если на платах-адаптерах Riser 1 и Riser 2 используется плата-адаптер Riser x16/x16/E и отсек для дисков 7 мм установлен в гнездо 6, модуль последовательного порта можно установить в гнездо 3.
Если плата-адаптер Riser x16/x16/E используется только на плате-адаптере Riser 1 или плате-адаптере Riser2 (но не на обеих платах), отсек для дисков 7 мм и модуль последовательного порта невозможно установить одновременно. Если отсек для дисков толщиной 7 мм не установлен, модуль последовательного порта можно установить в гнездо 6.
Если для плат-адаптеров Riser 1 и 2 плата x16/x16/E не используется, модуль последовательного порта не поддерживается.
В моделях серверов с задним отсеком для восьми 2,5-дюймовых дисков/двух 3,5-дюймовых дисков правила установки следующие.
Если для платы-адаптера Riser 1 используется плата-адаптер Riser x16/x16/E, модуль последовательного порта можно установить в гнездо 3, а отсек для твердотельных дисков толщиной 7 мм — в гнездо 6.
Если для платы-адаптера Riser 1 плата-адаптер Riser x16/x16/E не используется, установить отсек для дисков толщиной 7 мм и модуль последовательного порта одновременно невозможно. Если отсек для дисков толщиной 7 мм не установлен, модуль последовательного порта можно установить в гнездо 6.
В моделях серверов с задним отсеком для четырех 3,5-дюймовых дисков отсек для дисков толщиной 7 мм и модуль последовательного порта невозможно установить одновременно. Если отсек для дисков 7 мм не установлен, модуль последовательного порта можно установить в гнездо 3 или 6.
В моделях серверов с графическим процессором двойной ширины модуль последовательного порта может быть установлен только в гнездо 6.
Поддерживаемые адаптеры PCIe и приоритеты гнезд
В следующей таблице перечислены рекомендуемые приоритеты гнезд для установки обычных адаптеров PCIe.
Адаптер PCIe | Максимально поддерживаемое количество | Рекомендуемый приоритет гнезд |
---|---|---|
Адаптер графического процессорапримечание | ||
Графический процессор двойной ширины (V100S, A100, A40, A30, A6000, A16, A800, H100, L40) | 3 |
|
Графический процессор двойной ширины (AMD MI210) | 2 |
|
Графический процессор одинарной ширины (P620, T4, A4, A2, L4) | 8 |
|
Графический процессор одинарной ширины (A10) | 4 |
|
Плата переключателей NVMeпримечание | ||
ThinkSystem 1611-8P PCIe Gen4 Switch Adapter | 4 | 2 ЦП: 1, 2, 4, 5 |
Плата ретаймера PCIe | ||
ThinkSystem x16 Gen 4.0 Re-timer adapter | 3 |
|
Внутренний адаптер RAID/HBA/расширителя CFF | ||
5350-8i, 9350-8i, 9350-16i | 1 | Не устанавливаются в гнезда PCIe. Адаптеры RAID/HBA CFF поддерживаются только в раме с отсеками для 2,5-дюймовых дисков. |
440-16i, 940-16i | ||
ThinkSystem 48 port 12Gb Internal Expander | ||
Внутренний адаптер RAID/HBA SFF примечание | ||
9350-8i | 4 |
|
9350-16i | 2 | |
430-8i, 4350-8i, 530-8i, 5350-8i, 930-8i | 4 |
|
430-16i, 4350-16i, 530-16i, 930-16i | 2 | |
440-8i, 540-8i, 540-16i, 940-8i, 940-16i (8 ГБ) | 4 | |
440-16i, 940-16i (4 ГБ) | 2 | |
940-32i | 1 | |
940-8i (трехрежимный) | 3 | |
940-16i 4 ГБ (трехрежимный) | 2 | |
940-16i 8 ГБ (трехрежимный) | 4 | |
Внешний адаптер RAID/HBA | ||
430-8e, 430-16e, 440-16e | 8 |
|
930-8e, 940-8e | 4 | |
Адаптер для твердотельных дисков PCIe | ||
Все поддерживаемые адаптеры для твердотельных дисков PCIe | 8 |
|
Адаптер HBA FC | ||
Все поддерживаемые адаптеры HBA FC | 8 |
|
Адаптер NIC | ||
ThinkSystem NVIDIA BlueField-2 25GbE SFP56 2-Port PCIe Ethernet DPU w/BMC & Crypto | 1 |
|
Mellanox ConnectX-6 Lx 100GbE QSFP28 2-port PCIe Ethernet Adapter Broadcom 57508 100GbE QSFP56 2-port PCIe 4 Ethernet Adapter Broadcom 57508 100GbE QSFP56 2-port PCIe 4 Ethernet Adapter v2 | 6 |
|
Broadcom 57454 10/25GbE SFP28 4-port PCIe Ethernet Adapter_Refresh ThinkSystem Intel E810-DA4 10/25GbE SFP28 4-port PCIe Ethernet Adapter ThinkSystem Broadcom 57504 10/25GbE SFP28 4-port PCIe Ethernet Adapter | 6 |
|
Xilinx Alveo U50примечание | 6 |
|
Все другие поддерживаемые адаптеры NIC | 8 |
|
Адаптер InfiniBand | ||
Mellanox ConnectX-6 HDR100 IB/100GbE VPI 1-port x16 PCIe 3.0 HCA w/ Tall Bracket | 6 |
|
Mellanox ConnectX-6 HDR100 IB/100GbE VPI 2-port x16 PCIe 3.0 HCA w/ Tall Bracket | ||
ThinkSystem NVIDIA ConnectX-7 NDR400 OSFP 1-Port PCIe Gen5 Adapter | ||
ThinkSystem NVIDIA ConnectX-7 NDR200/HDR QSFP112 2-Port PCIe Gen5 x16 InfiniBand Adapter примечание | ||
Mellanox ConnectX-6 HDR IB/200GbE Single Port x16 PCIe Adapter w/ Tall Bracket | 6 | В отношении правил установки см. примечание ниже. |
Mellanox HDR Auxiliary x16 PCIe 3.0 Connection Card Kit | 3 |
Правила для адаптеров графического процессора:
Все устанавливаемые адаптеры графических процессоров должны быть идентичными.
Если в гнездо 5, 7 или 2 устанавливается адаптер графического процессора двойной ширины, расположенные рядом гнезда 4, 8 и 1 соответственно недоступны.
Если в гнездо PCIe 1, 4 или 7 установлен графический процессор одинарной ширины 150 Вт, в расположенные рядом гнезда 2, 5 и 8 соответственно невозможно установить адаптер Ethernet 100 GbE или выше.
Правила в отношении температуры для поддерживаемых графических процессоров см. в разделе Правила в отношении температуры
Превышение лимита происходит, когда система поддерживает 32 диска NVMe с помощью адаптеров-переключателей NVMe. Подробные сведения см. по адресу https://lenovopress.lenovo.com/lp1392-thinksystem-sr650-v2-server#nvme-drive-support.
- Правила для адаптеров RAID/HBA SFF:
Адаптеры RAID серии 930/940 или 9350 требуют использования модуля питания флеш-памяти RAID.
Недопустимо использовать адаптеры RAID/HBA 430/530/930 (3-го поколения) и адаптеры RAID/HBA 440/940 (4-го поколения) в одной системе.
Адаптеры RAID/HBA одного поколения (третьего или четвертого) можно использовать в одной системе.
Адаптеры RAID/HBA 4350/5350/9350 невозможно использовать в одной системе со следующими адаптерами:
Адаптеры RAID/HBA 430/530/930
Адаптеры RAID/HBA 440/540/940, кроме внешних RAID/HBA 440-8e/440-16e/940-8e
Адаптеры RAID 940-8i и RAID 940-16i поддерживают трехрежимную работу. Если трехрежимная функция включена, сервер одновременно поддерживает диски SAS, SATA и U.3 NVMe. Диски NVMe подключаются к контроллеру по линии PCIe x1.
Прим.Для поддержки в трехдиапазонном режиме дисков U.3 NVMe необходимо с помощью графического интерфейса XCC Web GUI включить на материнской платережим U.3 x1 для выбранных разъемов диска. В противном случае, распознать диски U.3 NVMe невозможно. Дополнительные сведения см. в разделе Диск U.3 NVMe можеть распознаваться в разъеме NVMe, в трехдиапазонном режиме (Tri-mode) диск не распознается. Виртуальный массив RAID на ЦП (VROC) и трехрежимная работа одновременно не поддерживаются.
Дополнительные сведения о выборе контроллеров для разных конфигураций сервера см. в разделах Выбор контроллеров (рама для 3,5-дюймовых дисков) и Выбор контроллеров (рама для 2,5-дюймовых дисков).
Чтобы установить адаптер Xilinx Alveo U50, необходимо обеспечить соблюдение следующих правил.
Температура окружающей среды не должна превышать 30 °C.
Вентилятор должен работать без сбоев.
Не должна быть установлена операционная система VMware.
В моделях серверов с двадцатью четырьмя 2,5-дюймовыми или двенадцатью 3,5-дюймовыми дисками адаптер Xilinx Alveo U50 не поддерживается.
Адаптер Xilinx Alveo U50 необходимо установить с вентилятором повышенной мощности.
Если установлен один из перечисленных ниже адаптеров InfiniBand:
Основной адаптер: Mellanox ConnectX-6 HDR IB/200GbE Single Port x16 PCIe Adapter, возможна независимая установка до 6 адаптеров.
Дополнительный адаптер: Mellanox HDR Auxiliary x16 PCIe 3.0 Connection Card Kit, до 3 адаптеров, необходимо устанавливать с основным адаптером.
Выбор адаптеров Адаптер Количество Гнездо PCIe Вариант 1 Основной адаптер 1 1 или 2 Дополнительный адаптер 1 4 или 5 Вариант 2 Основной адаптер 2 1 и 2 Дополнительный адаптер 2 4 и 5 Вариант 3 Основной адаптер 3 1, 2 и 7 Дополнительный адаптер 3 4, 5 и 8 Вариант 4 Только основной адаптер До 6 1, 4, 7, 2, 5, 8 ВниманиеПри использовании основного адаптера с активными оптическими кабелями в конфигурации с 12 3,5-дюймовыми или 24 2,5-дюймовыми дисками следуйте инструкциям в разделе Правила в отношении температуры и убедитесь, что температура окружающей среды не превышает 30 °C. Такая конфигурация может создавать высокий акустический шум, ее рекомендуется использовать в промышленных дата-центрах, а не офисах.
При одновременном использовании основного адаптера и адаптеров графического процессора следуйте правилам температуры для адаптеров графического процессора. Подробные сведения см. в разделе Модели серверов с графическими процессорами.
- Правила для ThinkSystem NVIDIA ConnectX-7 NDR200/200GbE QSFP112 2-port PCIe Gen5 x16 InfiniBand Adapter:
VMware 7.0 U3 не поддерживает адаптер.
VMware 8.0 U2 в комплекте поддерживает адаптер.
Windows 2019 и 2022 поддерживают адаптер.
Адаптер с активными оптическими кабелями (AOC) не поддерживается в конфигурации с 12 отсеками 3,5 дюйма или 24 отсеками 2,5 дюйма при наличии средних отсеков для дисков.
- Если установлен адаптер, AOC не поддерживается в гнездах PCIe 3 и 6 в следующей конфигурации.
Конфигурация с 12 отсеками для 3,5-дюймовых дисков
Конфигурация с 24 отсеками для 2,5-дюймовых дисков
Конфигурация с двенадцатью 3,5-дюймовыми задними отсеками для дисков
Конфигурация с двадцатью четырьмя 2,5-дюймовыми задними отсеками для дисков