Многосокетные материнские платы: Преодоление проблем высокой скорости и высокой плотности в печатных платах серверов центров обработки данных
В современном мире, управляемом данными, спрос на вычислительную мощность экспоненциально растет, от обучения искусственного интеллекта (ИИ) до крупномасштабных облачных вычислений. За этим спросом стоит непрерывная эволюция аппаратного обеспечения центров обработки данных, в основе которой лежит многосокетная материнская плата. Эта высокосложная печатная плата (PCB) является краеугольным камнем современных высокопроизводительных серверов, обеспечивая беспрецедентные возможности параллельной обработки за счет интеграции нескольких центральных процессоров (CPU). Однако интеграция нескольких мощных процессоров на одной печатной плате также влечет за собой беспрецедентные проблемы в области высокоскоростных сигналов, целостности питания и теплового управления.
Как ведущий поставщик решений для печатных плат, HILPCB глубоко понимает сложности проектирования и производства многосокетных материнских плат. В этой статье будет подробно рассмотрены их основные технические проблемы с точки зрения экспертов по архитектуре центров обработки данных и показано, как эти проблемы успешно решаются благодаря превосходному инженерному проектированию и производственным процессам, закладывая прочную основу для аппаратного обеспечения серверов следующего поколения.
Что такое многосокетная материнская плата? Почему она критически важна для современных серверов?
Проще говоря, многосокетная материнская плата — это материнская плата, позволяющая устанавливать и запускать два или более физических процессора. Наиболее распространенной конфигурацией является двухпроцессорная материнская плата, но системы для высокопроизводительных вычислительных задач могут содержать четыре, восемь или даже больше сокетов. Основные преимущества такого дизайна:
- Экспоненциально увеличенная вычислительная мощность: Объединяя ядра, кэши и вычислительные ресурсы нескольких процессоров, система может обрабатывать больше потоков и задач одновременно, что критически важно для баз данных, виртуализации и научных вычислений.
- Увеличенная пропускная способность и емкость памяти: Каждый процессор имеет свои выделенные каналы памяти. Увеличение числа процессоров умножает количество каналов памяти и максимально поддерживаемую емкость памяти, тем самым устраняя узкие места в приложениях, интенсивно использующих данные.
- Расширенные возможности ввода-вывода: Большее количество процессоров обычно сопровождается большим количеством линий PCIe, обеспечивая достаточную пропускную способность для графических процессоров, высокоскоростных сетевых карт (NIC) и накопителей NVMe, что особенно важно в современных конструкциях печатных плат для стоечных серверов.
По сравнению с однопроцессорными серверами, архитектура многосокетных материнских плат обеспечивает более высокую вычислительную плотность в концентрированном физическом пространстве (например, в стандартном корпусе печатной платы сервера 4U), тем самым снижая общую стоимость владения (TCO) и физический размер центра обработки данных.
Целостность высокоскоростных сигналов (SI): Проблемы физического уровня межсоединений нескольких процессоров
На многосокетной материнской плате одной из самых больших проблем является обеспечение стабильного и надежного высокоскоростного обмена данными между процессорами, а также между процессорами и памятью или устройствами PCIe. Межсоединения между процессорами (такие как Intel Ultra Path Interconnect (UPI) или AMD Infinity Fabric) работают на скоростях, превышающих 20 ГТ/с, и любое малейшее искажение сигнала может привести к сбою системы.
Ключевые аспекты проектирования SI
| Проблема | Описание | Решения HILPCB |
|---|
Сравнение технических характеристик: стандартные печатные платы против высокоскоростных/высокоплотных плат
| Пункт спецификации | Стандартная многослойная печатная плата | Многопроцессорная материнская плата PCB (Multi-Socket Motherboard PCB) | Расширенные возможности HILPCB |
|---|---|---|---|
| Количество слоев | 4-12 слоев | 16-30+ слоев | До 64 слоев |
| Максимальная скорость сигнала | < 5 Гбит/с | 25 Гбит/с+ | Поддерживает 112 Гбит/с PAM4 |
| Допуск импеданса | ±10% | < ±7% (критический ±5%) | До ±5% |
| Ключевые материалы | Стандартный FR-4 | Ламинаты со сверхнизкими потерями | Полный ассортимент высокоскоростных материалов на складе |
Целостность питания (PI): Стабильное электропитание для сотен ядер
Пиковое энергопотребление современного серверного процессора может достигать 400-500 Вт, а потребляемый ток превышать 500 ампер. Для Dual CPU Motherboard это означает, что сеть распределения питания (PDN) печатной платы должна стабильно подавать ток почти в тысячу ампер при чрезвычайно низких напряжениях (обычно ниже 1 В).
Основная цель целостности питания — минимизировать импеданс PDN, обеспечивая, чтобы колебания напряжения (пульсации и шум) оставались в очень узком диапазоне (обычно ±3%) при мгновенных изменениях нагрузки ЦП. Это требует системного подхода к проектированию:
- Размещение VRM (модуля регулирования напряжения): Цепи VRM должны быть расположены как можно ближе к сокету ЦП, чтобы сократить пути для больших токов и уменьшить резистивные и индуктивные потери. Это особенно сложно в Blade Server PCB, где пространство чрезвычайно ценно.
- Сеть развязывающих конденсаторов: Вокруг ЦП необходимо тщательно расположить большое количество конденсаторов различной емкости. Электролитические или полимерные конденсаторы большой емкости действуют как «энергетические резервуары» для удовлетворения потребностей в низкочастотных больших токах; тогда как тысячи керамических конденсаторов (MLCC) используются для фильтрации высокочастотного шума.
- Проектирование слоев питания и заземления: Multi-Socket Motherboard обычно используют несколько полных, неразделенных слоев питания и заземления. Использование технологии Heavy Copper PCB с толстой медью (например, 3-4 унции) может значительно снизить падение постоянного напряжения (IR Drop), особенно на основных шинах питания, подающих напряжение на VRM.
Продвинутое управление температурным режимом: Сохранение прохлады при киловаттном энергопотреблении
Два или более высокопроизводительных ЦП, десятки модулей памяти DDR5 и несколько устройств PCIe, работающих вместе, могут генерировать более одного киловатта тепла. Если это тепло не будет эффективно отводиться, это приведет к снижению тактовой частоты компонентов или даже к необратимому повреждению. Сама печатная плата играет решающую роль в управлении температурным режимом.
- Выбор материалов с высоким Tg: Серверы работают под высокой нагрузкой в течение длительного времени, и температура печатной платы может значительно повышаться. Использование материалов с высокой температурой стеклования (Tg), таких как Tg170℃ или Tg180℃, является основным требованием. Эти материалы High-Tg PCB сохраняют лучшую механическую стабильность и электрические характеристики при высоких температурах.
- Термический дизайн:
- Медные заливки (Copper Pour): Большие площади меди на поверхности и внутренних слоях печатной платы могут действовать как радиаторы, помогая теплу проводить и рассеиваться в поперечном направлении.
- Термические переходные отверстия (Thermal Vias): Плотное размещение термических переходных отверстий под тепловыделяющими компонентами (такими как MOSFET VRM) быстро передает тепло от верхнего слоя к большим медным областям на внутренних или нижних слоях, или даже непосредственно к корпусу.
- Интеграция с системами охлаждения: Проектирование печатной платы должно точно учитывать установку больших радиаторов, вентиляторов и воздуховодов. Это включает высокоточные монтажные отверстия, зоны запрета компонентов (Keep-out Zone) вокруг сокетов ЦП и строгий контроль плоскостности печатной платы (Warpage) для обеспечения идеального контакта между радиатором и поверхностью ЦП. Для компактных Blade Server PCB оптимизация путей воздушного потока имеет решающее значение для успеха.
