С взрывным ростом генеративного ИИ, больших языковых моделей (LLM) и высокопроизводительных вычислений (HPC) объем трафика данных внутри центров обработки данных стремительно увеличивается с беспрецедентной скоростью. Чтобы удовлетворить огромные потребности в обмене данными между ускорителями ИИ (такими как GPU и TPU), архитектуры серверов развиваются в сторону увеличения плотности и пропускной способности. В основе этой эволюции высокоскоростная печатная плата материнской платы AI-сервера (обычно относящаяся к объединительным платам или промежуточным платам) играет критически важную роль. Она является не только физической основой, соединяющей вычислительные, запоминающие и сетевые дочерние платы, но и ключевым путем для высокоскоростных шин следующего поколения, таких как PCIe 5.0/6.0 и CXL. Проектирование и производство стабильной высокоскоростной печатной платы материнской платы AI-сервера является высшим испытанием целостности сигнала, целостности питания, теплового менеджмента и технологичности. Являясь сердцем систем межсоединений центров обработки данных, проектирование и производство объединительных плат AI-серверов напрямую определяют потолок производительности и надежность всей системы. Любой незначительный дефект проектирования или производственный брак может быть бесконечно увеличен при триллионах передач данных в секунду, что приводит к замедлению работы системы или даже к сбоям. Поэтому сотрудничество с опытными производителями, такими как Highleap PCB Factory (HILPCB), с ранних стадий проектирования имеет решающее значение для обеспечения успеха проекта. В этой статье будут рассмотрены основные проблемы и ключевые технологии создания высокопроизводительных объединительных плат AI-серверов с точки зрения системного инженера.
Почему проектирование стека слоев критически важно для объединительных плат AI-серверов?
В высокоскоростном проектировании цифровых схем печатная плата - это не просто носитель для соединения компонентов, это само по себе сложное пассивное устройство. Проектирование стека слоев печатной платы материнской платы AI-сервера является основой всего проекта, напрямую влияя на контроль импеданса, перекрестные помехи сигнала, стабильность сети питания и производительность EMI/EMC. Хорошо спроектированный стек слоев - это первый шаг к достижению превосходного качества печатной платы материнской платы AI-сервера.
Объединительные платы AI-серверов обычно имеют чрезвычайно большое количество слоев (20-40 слоев и более) для размещения плотных высокоскоростных дифференциальных пар, сложных сетей распределения питания (PDN) и управляющих сигналов. При проектировании стека слоев печатной платы материнской платы AI-сервера необходимо учитывать следующие факторы:
- Выбор материала: По мере того как скорости сигнала возрастают с 16 ГТ/с для PCIe 4.0 до 64 ГТ/с для PCIe 6.0, потери сигнала становятся основным узким местом. Должны использоваться ламинатные материалы со сверхнизкими потерями (ULL) или экстремально низкими потерями (ELL), такие как Tachyon 100G и Megtron 6/7/8. Эти материалы характеризуются более низкими диэлектрическими проницаемостями (Dk) и коэффициентами рассеяния (Df), эффективно уменьшая затухание сигнала во время передачи.
- Контроль импеданса: Высокоскоростные дифференциальные пары (например, линии PCIe/CXL) очень чувствительны к непрерывности импеданса. Конструкция стека должна точно планировать толщину диэлектрика и ширину трассы между сигнальными слоями и опорными плоскостями (GND/PWR), чтобы обеспечить контроль дифференциального импеданса (обычно 85 Ом или 100 Ом) в пределах допуска ±5%.
- Подавление перекрестных помех: Оптимизируя размещение сигнальных слоев относительно слоев заземления и увеличивая расстояние между сигнальными парами (следуя правилу 3W/5W), можно эффективно подавлять ближние перекрестные помехи (NEXT) и дальние перекрестные помехи (FEXT). Стратегическое расположение стриплайновых и микрополосковых структур в стеке является ключом к контролю перекрестных помех.
- Целостность питания (PI): Стек должен включать несколько крупноплощадных плоскостей питания и заземления для создания PDN с низким импедансом. Тесная связь между этими плоскостями образует естественную планарную емкость, обеспечивая стабильное питание высокоскоростных чипов. Оптимизированная конструкция стека объединительной платы (backplane-pcb) обеспечивает наилучший баланс между производительностью, стоимостью и технологичностью.
Как решать проблемы целостности высокоскоростных сигналов в эпоху PCIe 5.0/6.0?
Когда скорости сигналов достигают 32 ГТ/с (PCIe 5.0) и 64 ГТ/с (PCIe 6.0), проблемы целостности сигнала (SI) становятся исключительно заметными. На высокоскоростных печатных платах материнских плат AI-серверов сигналы должны проходить через многочисленные неоднородности, такие как разъемы, переходные отверстия и трассы, каждая из которых может стать узким местом производительности.
Основные проблемы SI включают:
- Вносимые потери (Insertion Loss): Ослабление энергии сигнала вдоль тракта передачи. Это в основном вызвано диэлектрическими потерями и потерями в проводнике (скин-эффект). В дополнение к выбору материалов с низкими потерями, для уменьшения потерь в проводнике требуются более широкие трассы и финишные покрытия (такие как ENEPIG вместо ENIG).
- Отражение: Вызвано рассогласованием импедансов. Разъемы, переходные отверстия, контактные площадки BGA и другие неоднородности импеданса могут приводить к отражениям сигнала, ухудшая глазковую диаграмму.
- Перекрестные помехи (Crosstalk): Электромагнитная связь между соседними сигнальными линиями. В плотно разведенных объединительных платах перекрестные помехи являются одной из основных причин ошибок данных.
- Эффекты переходных отверстий (Via Effects): Оставшийся участок переходного отверстия (stub) может создавать резонанс, вызывая сильное затухание сигнала на определенных частотах и образуя "смертельные ловушки". Для высокоскоростных сигналов обратное сверление (back-drilling) почти обязательно, так как оно точно удаляет неиспользуемую часть переходного отверстия.
Для решения этих проблем инженеры-разработчики должны полагаться на передовые инструменты электромагнитного моделирования (такие как Ansys HFSS или Cadence Clarity) для полнофункционального моделирования и симуляции всей цепи - от разъемов и трасс печатной платы до принимающих чипов - чтобы точно предсказывать и оптимизировать производительность SI.
Ключевые стратегии оптимизации целостности высокоскоростных сигналов
- Точный контроль импеданса: Строго управляйте шириной трассы, толщиной диэлектрика и толщиной меди для обеспечения непрерывности импеданса по всей линии связи, поддерживая допуски в пределах ±5%.
- Применение материалов с низкими потерями: Используйте материалы со сверхнизкими потерями, такие как Megtron 7 или Tachyon 100G, чтобы фундаментально снизить диэлектрические потери.
- Обратное сверление (Back-Drilling): Удаляйте нефункциональные участки (stubs) в переходных отверстиях для устранения высокочастотного резонанса - критически важный процесс для обеспечения качества сигнала на скоростях PCIe 5.0 и выше.
В высокоскоростных межсоединениях разъемы и переходные отверстия печатных плат являются двумя наиболее уязвимыми точками. Объединительные платы AI-серверов обычно используют высокоплотные ортогональные разъемы или разъемы типа "плата-плата", где дизайн переходной зоны контактов (pin) оказывает решающее влияние на целостность сигнала.
- Область вывода разъема: Трассировка от контактов разъема к внутренним трассам печатной платы чрезвычайно плотная. При проектировании требуется тщательная оптимизация, чтобы избежать острых углов и чрезмерно узких ширин трасс. Использование микропереходных отверстий по технологии HDI PCB (HDI-pcb) может эффективно снизить загруженность в области вывода.
- Оптимизация переходных отверстий:
- Анти-площадка: Размер зазора вокруг переходных отверстий на опорных плоскостях должен быть оптимизирован. Недостаточный размер анти-площадки увеличивает паразитную емкость, в то время как чрезмерный нарушает непрерывность обратного пути.
- Сшивающие переходные отверстия: Стратегическое размещение заземляющих переходных отверстий вокруг высокоскоростных переходных отверстий обеспечивает низкоиндуктивный обратный путь для сигналов и подавляет электромагнитные помехи.
- Контроль глубины обратного сверления: Точность глубины обратного сверления критически важна. Недостаточное сверление оставляет "пеньки", в то время как чрезмерное сверление может повредить сигнальные слои. Опытные производители, такие как HILPCB, могут контролировать допуски глубины обратного сверления в пределах +/- 50 мкм.
Как спроектировать эффективную сеть распределения питания (PDN) для сотен ампер?
Графические процессоры и ASIC в серверах ИИ потребляют огромную мощность, при этом требования к току одного чипа достигают сотен или даже тысяч ампер, а требования к пульсациям напряжения чрезвычайно строги. Являясь основным каналом для подачи питания от модулей к вычислительным картам, проектирование PDN объединительной платы сталкивается со значительными проблемами.
- Снижение падения напряжения постоянного тока (IR-падение): Высокие токи вызывают значительные падения напряжения на медных слоях. Для решения этой проблемы часто применяется технология печатных плат с толстым медным покрытием (heavy-copper-pcb), использующая медную фольгу толщиной 6 унций (унц) или более для плоскостей питания и заземления. Кроме того, параллельное соединение нескольких слоев питания эффективно снижает сопротивление постоянному току PDN.
- Контроль импеданса переменного тока: Для обработки переходных изменений нагрузки PDN должен поддерживать низкий импеданс в широком диапазоне частот. Это требует правильного размещения многочисленных развязывающих конденсаторов на объединительной плате, формируя полную иерархию конденсаторов от объемных электролитических до малых керамических конденсаторов.
- Тепловое управление: Высокие токи генерируют значительное джоулево тепло в медных слоях. Проектирование PDN должно быть скоординировано с тепловым проектированием, используя моделирование для анализа плотности тока и распределения горячих точек, обеспечивая, чтобы температуры печатной платы оставались в безопасных пределах.
Обзор производственных возможностей высокопроизводительных объединительных плат HILPCB
| Производственный параметр | Возможности HILPCB | Значение для объединительных плат AI-серверов |
|---|---|---|
| Максимальное количество слоев | 64+ слоя | Соответствует сложным требованиям к трассировке высокоскоростных сигналов и слоев питания |
| Максимальная толщина меди | 20 унций (внутренние/внешние слои) | Поддерживает передачу сотен ампер высокого тока, снижая падение IR |
| Максимальная толщина платы | 12 мм | Обеспечивает высокую жесткость для поддержки больших, тяжелых разъемов и компонентов |
| Точность глубины обратного сверления | ±0,05 мм | Точно удаляет остатки переходных отверстий, обеспечивая качество сигнала PCIe 5.0/6.0 |
| Допуск контроля импеданса | ±5% | Обеспечивает стабильность при передаче высокоскоростных дифференциальных сигналов |
