Материнская плата lenovo rd450x hyperscale.

!!! Не путать с Lenovo RD450.

Поделие сумрачного китайского гения.
Вероятно поставлялась в дата центры крупных китайский компаний, типа Tencent и baidu по спец заказу.
На сайте Lenovo тех. поддержка не доступна. Гарантийный срок на эти платы закончился.


Известно как минимум о двух видах данной материнской платы c разными встроенными сетевыми картами:
1) 10Gbit*2 сетевой картой на intel i540, визуально можно отличить по наличию радиатора возле PCI-E слотов

2) 1Gbit*2 сетевой картой на intel i350


Характеристики:
Формфактор: EATX
Чипсет: intel с612
Процессоры: 2*LGA2011-3 2600 v4(v3) intel Xeon Haswel-EP (4,6,8,10,12,14 ядер) от 1,6 до 3,5 МГц
Память: 16*DDR4 2400 МГц (RDIMM, LRDIMM) до 1024 GB
6 PCI-e слотов (2*16x 4*8x) ver 3
3 usb 2.0 (один на плате)
2 Usb 3.0
2 SATA
Встроенный HBA контролер 6gb+ два разъёма SAS SFF-8087
VGA
BMC/IPMI
Для работы не в комплектом корпусе lenovo необходимы колхозные переходники(которые, как правило, поставляются вместе с платой)


Добавлено спустя 8 минут 28 секунд:
Схема переходников:

pwr sw - кнопка включения
reset sw - кнопка reset
pwr led - светодиод питания
hdd led - светодиод активности дисковой системы


Наличие этого переходника обязательно!
Иначе материнка не стартует

Добавлено спустя 21 минуту 37 секунд:
Документация к материнской плате.
!Осторожно много китайского языка!

Англоязычной документации найти не удалось!

Добавлено спустя 16 минут 4 секунды:
Основные выявленные проблемы материнской платы:

1) Скудный по настройкам BIOS
2) Глючный BMC/IPMI
проблемы вытыкающие из этого:
3) Неуправляемые вентиляторы.
4) PCIe Bifurcation - не включается/отсутствует в bios.


BIOS:
Известно о следующих версиях bios:

2.19 - нет отзывов об эксплуатации
2.31 - отсутствует раздел IntelRCSetup > IIO Configuration


BMC/IPMI
Известно о следующих версиях BMC:

2.36.1315 - множество ошибок, не весь список доступных на плате сенсоров.
3.24.1145 - множество ошибок, не весь список доступных на плате сенсоров, плата не включается через bmc, постоянно засирает лог ошибками, вероятно не родной для этой платы
4.10.1011 - нет отзывов
4.11.1027 - нет отзывов

Добрый вечер.
Можете подсказать по этой материнке? Есть такая из Китая, но немного "изменённая", на фото под цифрой 1, там какая-то распайка под usb и кнопку включения(не уверен). В общем проблема есть, переходников не было в комплекте и думаю по Вашей инструкции надо соединить контакты под цифрой 2, как Вы обозначили, но не уверен, что из-за некоторых изменений на плате они будут соответствовать Вашей инструкции. Сейчас дефолтная ситуация такая:
2 cpu e2650 v4
4 x 8Gb DDR4 ECC Samsung 2400Mhz в слотах a1 b1 cpu1 и a1 b1 cpu2
500W блок питания
И вот, сначала при включении горит индикатор led01, потом начинает мигать. Кулера сначала на максимум, потом успокаиваются, потом опять на максимум.
Всё немного греется, мост, встроенное видео, процы.
Думал на оперативку, типо материнка только 2133 частоту поддерживает, но пробовал менять, не помогло.
Также вытаскивал второй процессор, пробовал на одном, та же ситуация.
Неужели все из-за этих перемычек под цифрой 2 на фото?
Спасибо за любую помощь!

1) На вашем фото под безымянным пальцем - разъем с маркировкой psu_crl.
Именно в нем нужно соединить четыре ножки, как показано в сообщении выше(красный и желты проводок).
Иначе материнка не стартует.
2) Индикатор (led01) показывает состояние загрузки BMC.
Без полной загрузки BMC материнка не стартует. (Во всяком случае у меня).
Полное время загрузки BMC после подачи питания на БП может быть более 1,5 минут.
3) Посмотрите документацию (есть в сообщении выше), на страницах 34-35 схема "заселения" памяти.
Обратите внимание, что для одного CPU нумерация разъёмов идет снизу вверх, а для другого сверху вниз.

Есть у меня такая материнка (которая с 10Гбит портами).
Версия БИОС 2.31
Версия BMC 2.36.1315
Сама плата работает. Все нормально. Но не работает удаленное управление. Загорается диод показывающий состояние BMC. Потом начинает мигать. В это время начинает пинговаться IP интерфейса управления. Очень редко можно успеть зайти в веб морду управления (не на долго). Но потом опять диод загорается, горит. Пинги пропадают. Потом диод тухнет. Потом опять загорается, потом мигает и так по кругу...
При входе в БИОС иногда отображается версия BMC и IPMI, а иногда нет (показывает 0.0.0 и 0.0).

Сталкивался кто-нибудь с таким? Может у кого есть дампы BMC и BIOS на эту плату?

Для начала в биосе нужно включить поддержку BMC, если не включена.

некоторые версии bmc можно взять здесь: https://drive.google.com/drive/folders/ ... gn2UNL5yGa

Само собой в БИОСе я включил BMC.
То что по ссылке - совсем не работает. Похоже, это от другой платы прошивки.

У меня сейчас так:
BMC Product Information List^
Product Model RD450X
BMC F/W Version 2.21.1095
BIOS F/W Version R450X231

ipmi mc info:
Device ID : 32
Device Revision : 1
Firmware Revision : 2.21
IPMI Version : 2.0

Плата детище леновы исключительно для китайских Tencent и BiliBili

Удалось добыть BIOS R450X602 с модификацией конкретно для BiliBili, там всё работает штатно, включая бифуркацию PCI-E

Прошил. Настроек BMC там нету? Не нашел что-то...

Что-то тоже не увидел.
При этом у меня BMC работает, если через выделенный порт для IPMI подключаться то всё ок.

У меня есть еще несколько версий биосов, но все не проверял, выложу отдельными сообщениями

Добавлено спустя 9 минут 3 секунды:
Модифицированные RD450X231 с IntelRCSetup и Resizable Bar (не проверялось)

Добавлено спустя 3 минуты 54 секунды:
Еще парочка ванильных биосов RD450X602 и RD450X231.

Есть еще 218 и 219 биосы, но там че-то много всего, залью отдельно

Добавлено спустя 3 минуты 49 секунд:
Еще 2 биоса от BiliBili, версия и доступные опции не проверялись

добрый день,
это может быть связано с бп (бмс на дежурной линии сидит)

добрый день,
спасибо за биусы, бифуркация работает только в 超微450.zip
биус, где открыт пункт IntelRCSetup меняет или неправильные переменные, или там просто нет кода, реализующего настройку разделения

А у вас версия BMC какая?

И есть ли свежие версии bmc? Очень надо.

добрый день,
а чем конкретно не устраивает? в чем глюки-то?
какую бы версию не установить - там чип ограничением является - аст2400, я лично с мелкими неприятностями сталкивался:
- влан можно на интерфейс в режиме разделения повесить, но это неудобно - проще пользоваться выделенным портом для ипми
- отвал серийной консоли, если в определенные моменты (когда переключается состояние биуса - чаще всего) кнопки на клавиатуре тыкать
- скудный набор публичных/описанных команд для ипми
- кажется нельзя загрузить свой сертификат для веп-консоли бмс
но эти совершенно проблемы и на ипми от других вендоров (например асрок) - один в один, так что тут не сама прошивка от левоны влияет, а возможности чипа и базовое ПО

Не подскажу, сервер сейчас разобран, 2.x версия была (родная с которой материнка приехала, BMC не рискнул обновлять)
Из того что запомнилось: настройки BMC, сконфигурированные через биос похоже шьются в другой nand раздел, потому что после смены биоса они не меняются.
В целом можно попробовать взять любой биос где есть настройки BMC, сконфигурировать сеть, если потребуется, а потом заменить биос на тот который нужен. У меня после накатов-перенакатов его настройки сохранялись
Если что выставил static для сети, dhcp не стал включать, т.к заметил что он при изменениях "на ходу" на тот же dhcp не делает перенастройку сетевых параметрах, только при полном отключении от сети и новом включении.

По поводу других версий, имеются, но ничего не проверял.

Как файлы приложить не могу, сам образ BMC много весит после сжатия, даже если удалить все вспомогательные софтины.
BMC залил на google drive: https://drive.google.com/file/d/1A1l3LQ ... sp=sharing
Пароль: overclockers

Там такие версии:
- BMC_RD450X_Tencent_V2.21.1095_SVT
- BMC_RD450X_Tencent_V2.17.1086_SVT
- BMC_RD450X_MLK_Baidu_V3.24.1145_SVT

Выше писал:
3.24.1145 - множество ошибок, ругаеться на оборудование, не весь список доступных на плате сенсоров, плата не включается через bmc, постоянно засирает лог ошибками, вероятно не родной для этой платы.

сейчас сижу на 2.21 - более стабильная прошивка, КМК, но вентиляторов показывает только три системных(из четырех) и один процессорный.

В 231 верии BIOS есть возможность настройки bmc

А вы как BIOS заливаете? Я пробую через BMC (у меня версия 2.21, так же пробовал 3.24) - нормально rom не льется, BIOS запускается с ошибками, половина разделов пустая.





Нормальное работают только ванильные bin 231 и 602.

у меня несколько таких плат. на одной BMC 4.11.1027 - придумать бы как его выковырять.
на пару могу зайти в bmc через ssh.

Добавлено спустя 1 час 24 минуты 47 секунд:
231 поновее будет:



к сожалению 231 не запускается с bmc 4.11.1027, 219 работает.

Судя по этой информации:
https://forum.ixbt.com/topic.cgi?id=9:68849

https://forums.servethehome.com/index.p ... c-ipmi.12/
Ключевое слово: socflash

1.System Requirement:
- Linux Environment
- Support ASPEED Chips
>> AST1000/2000 A1 and after
>> AST1100/2050/2100
2.Run Script File Usage:
- chmod u+x *.sh
- Select the update script
>> socflash.sh: the firmware is provided by ASPEED, AMI, Avocent
>> socflsah_elom.sh: the firmware is provided by Quanta
- Run Script
>> Format1:
++ ./socflash.sh [new image] [backup image]
>> Format2: Update image only
++ ./socflash.sh -s [new image]
>> Format3: Backup old image only
++ ./socflash.sh -b [backup image]
3.Run Execution File Usage: (New Command Interface)
- Format:
>> socflash [operand]
++ operand list
+++ if=the update file
+++ of=the backup file
+++ cs=chip select
++++ AST1000/2000: 0/1 (default: 0)
++++ AST1100/2050/2100: 0/1/2
+++++ default: get from SCU trapping
++++++ if Boot Trapping is disabled, then set to 0 for AST2100, and 2 for others
+++ flashtype=flash chip type
++++ 0/1/2: NOR/NAND/SPI
+++ skip=the skip size in bytes at the start of input file (default=0)
+++ offset=the offset in bytes at the start of the flash (default=0)
+++ count=the size in bytes copy to the flash (default=the size of the flash)
+++ option=f|2
++++ f: skip the comparision of flash data and force to update
++++ 2: two flash update support
++++ c: use chip erase instead of sector erase
+++++ AST1100/2050/2100: two SPI solution: 1st SPI is on CS2; 2nd SPI is on CS0
+++++ AST2000: two NOR Flash Solution: 1st Flash is on CS0; 2nd Flash is on CS1
>> example:
++socflash if=new.bin of=old.bin option=f
+++ update the firmware image to new.bin
+++ bacup the old firmware to old.bin
+++ force to update without comparision
4.Run Execution File Usage: (Legacy Interface)
- Format:
>> Normal: SOCFlash [-options] [the update soc file*] [the backup file*] [Chip Select] [Flash Type] [Skip Size] [Programming Size]
>> Backup Only: SOCFlash -b [the backup file*] [Chip Select] [Flash Type] [Start Offset] [Programming Size]
>> Skip Backup: SOCFlash -s [the update soc file*] [Chip Select] [Flash Type] [Start Offset] [Programming Size]
++ The fields add * means must have
- Options:
>> Chip Select:
++ AST1000/2000: 0/1 (default: 0)
++ AST1100/2050/2100: 0/1/2
+++ default: get from SCU trapping
++++ if Boot Trapping is disabled, then set to 0 for AST2100, and 2 for others
>> Flash Type: (AST1100/2050/2100)
++ 0/1/2: NOR/NAND/SPI
>> Skip Size: Skip size from image start (default: 0x0)
>> Programming Size: The size need to program to Flash
>> options:
++ b: backup only
++ s: skip backup
++ f: force to update flash
++ 2: special for two SPI support on AST1100/2050/2100
+++ Boot CS: 2; Secondary CS: 0
- Example: socflash all.bin old.bin
5.Support Flash Chip List:
- NOR:
>> Spansion S29xx064MxxR4
>> Spansion S29GL128Nx8, S29GL256Nx8
>> ST STM29W640F
>> MXIC MX29LV640DT
- NAND:
>> Micron MT29F2G08
>> Samsung K9F1G08U0A
- SPI:
>> Spansion S25FL128P, S25FL64A
>> SST 25VF016B
>> ST M65P64, M25P128
>> Winbond W25X16, W25x64
>> MXIC MX25L12805D
6.Verified Linux Distribution List
- RHEL 4.6 x86/x64
- RHEL 5.1 x86/x64
7.FAQ:
- Load Driver Failed and show message as follow:
insmod: error inserting 'socflash_drv.ko': -1 Invalid module format
>> Use the older version of SOCFLASH, please update to v.0.50 and after
- New Command Interface Support:
>> Support New Command Interface after than v.0.90
- Show Error Message "Can't Open /dev/mem File"
>> Please login as "root" user

Крайне желательно проверить возможность обратной прошивки образа BMC
Обратите внимание, что после перепрошивки вероятно может слететь мак-адрес

Штатная утилита из архива с BMC, похоже не умеет бэкапить.
https://pubs.lenovo.com/tsm/flash_tool



p.s. Сам этого не делал, мне бы с BIOS разобраться. Кстати как вы заливали биос, с помощью утилит или через BMC?

p.s.s Посмотрите, пожалуйста, сколько показывает вентеляторов ваша последняя версия BMC?
ipmitool -I lanplus -H ip_aadr -U user_name -P password sensor list | grep Fan