PCB per High Performance Computing (HPC) per Laboratori Nazionali, Centri di Addestramento AI e HPC per la Difesa

Produzione di PCB HPC per blade di calcolo, schede acceleratrici GPU, nodi di archiviazione e infrastrutture di interconnessione di rete, alimentando simulazioni scientifiche, addestramento AI e calcolo per la difesa su scala di laboratorio nazionale.

PCB per High Performance Computing (HPC) per Laboratori Nazionali, Centri di Addestramento AI e HPC per la Difesa

Il mercato globale dell'HPC ha raggiunto i 53,4 miliardi di dollari nel 2024 (Hyperion Research), trainato da laboratori nazionali, agenzie di difesa e strutture di addestramento AI aziendali che richiedono schede funzionanti ai limiti assoluti della tecnologia PCB commerciale, dove ogni interfaccia opera continuamente alla massima velocità nominale, ogni componente lavora con carichi di potenza costantemente al peggior caso, e le aspettative di affidabilità riflettono investimenti di sistema di centinaia di milioni di dollari con una durata decennale.

L'HPC non è semplicemente "server computing più veloce". Il profilo operativo è fondamentalmente diverso: un server cloud elabora richieste indipendenti con carichi variabili e frequenti periodi di inattività; un compute blade HPC mantiene la massima potenza per l'intera durata di un'esecuzione di simulazione, giorni o settimane senza interruzioni. Il design termico di un server cloud può fare affidamento sulla capacità termica per assorbire picchi transitori; un blade HPC deve estrarre continuamente il massimo TDP senza fare affidamento su alcun duty-cycle medio. Un server cloud ha un ciclo di vita di 3-5 anni; un sistema HPC rappresenta un investimento di 7-12 anni, con la fornitura di schede di ricambio nel 10° anno come requisito contrattuale.

HILPCB produce PCB per HPC con capacità fino a 64 strati e registrazione di ±1,5 mil per gli OEM di sistemi che costruiscono blade di calcolo, moduli acceleratori, nodi di archiviazione e infrastrutture di interconnessione, promuovendo scoperte scientifiche e avanzamenti dell'AI in laboratori nazionali (Oak Ridge, Argonne, Sandia, CSCS, Jülich, RIKEN), università di ricerca, agenzie di difesa e centri di addestramento AI aziendali in tre continenti.

Navigazione Guida


Cosa rende un PCB "HPC-Grade"

Il termine "HPC-Grade" è specifico e misurabile: descrive schede progettate e prodotte per resistere a tre condizioni operative che separano l'HPC da tutte le altre categorie di elaborazione:

Funzionamento Sostenuto alla Massima Velocità. Ogni interfaccia (DDR5 a 5600+ MT/s, PCIe Gen 5 a 32 GT/s, InfiniBand NDR a 400G) funziona al massimo throughput per ore o giorni, senza i periodi di inattività su cui l'hardware consumer e cloud si affida per il ciclo termico, la media della potenza e la media del tasso di errore. Un'apertura dell'occhio marginale che supera un test di conformità di 60 secondi può fallire dopo 72 ore di funzionamento continuo mentre la deriva termica, l'invecchiamento dell'alimentatore e l'assorbimento dielettrico spostano il punto operativo del canale.

Carico Termico Continuo al Caso Peggiore. I TDP dei processori di 300-500W sono mantenuti indefinitamente, non il modello "boost-then-idle" in cui i design termici consumer utilizzano la capacità termica per assorbire brevi picchi. Il design termico per HPC deve dissipare costantemente il TDP massimo con margini per la variazione della temperatura ambiente (30-45°C all'ingresso del data center) e l'invecchiamento dei componenti nell'arco di una vita utile di 10 anni.

Durata Estesa di Componenti e Materiali. 7-12 anni di servizio con oltre 50.000 ore di MTBF (5,7 anni tra i guasti per scheda): questo richiede un declassamento dei componenti, la convalida della stabilità del materiale e l'affidabilità dei giunti di saldatura di 2-3 volte superiori ai livelli di qualificazione commerciale standard.

Benchmark delle Prestazioni HPC

  • Larghezza di banda DDR5: 8-12 canali sostenuti a 5600-6400 MT/s che forniscono 350-500 GB/s di larghezza di banda di memoria per socket, limitati dalla qualità del canale del PCB piuttosto che dalla capacità della DRAM.
  • Throughput PCIe Gen 5: Oltre 128 lane sostenute a 32 GT/s, con collegamenti di espansione di memoria CXL 2.0 che condividono lo stesso livello fisico, richiedendo budget di perdita del canale che lasciano <2 dB di margine per le variazioni di produzione.
  • InfiniBand NDR: 400G per porta (8×50G PAM4) sostenuti a velocità di linea durante le fasi di comunicazione MPI; la qualità del canale PCB della rete determina direttamente l'efficienza di scalabilità del cluster.
  • Densità di Potenza: 300-500W per processore, 2-4 processori per blade, oltre a memoria e I/O: un totale di 1.500-3.000W di potenza per blade estratti tramite raffreddamento a liquido diretto o aria forzata ad alta velocità.

Ingegnerizzazione delle Interfacce di Processori e Acceleratori

I sistemi HPC utilizzano i package di processori con le massime prestazioni disponibili: Intel Xeon Scalable (Sapphire Rapids/Granite Rapids con oltre 4.677 pin LGA), AMD EPYC (Genoa/Turin con 6.096 pin LGA), NVIDIA Grace (basato su ARM con BGA personalizzato) e GPU con fattore di forma OAM (OCP Accelerator Module) con oltre 6.000 connessioni BGA. Il PCB deve smistare tutte le connessioni di alimentazione e segnale da questi enormi package mantenendo l'integrità del segnale sulle corsie più veloci ed erogando centinaia di ampere ai pin di alimentazione, il tutto contemporaneamente all'interno della stessa area della scheda.

Design dell'Interfaccia del Processore

  • Fan-out BGA ad Alta Densità: Package con passo di 0,5-0,65 mm con oltre 4.000-6.000 pin richiedono via-in-pad con microvie perforate al laser da 0,075-0,1 mm in una struttura HDI. L'accumulo sequenziale (Sequential build-up) con 2-3 strati HDI per lato consente un fan-out completo del segnale all'interno dell'ombra del package per queste strutture a 20-28 strati (capacità fino a 64 strati per i progetti più estremi).
  • Routing di Interconnessione Multi-Socket: UPI 2.0 (Intel) a 16-24 GT/s e Infinity Fabric/GMI3 (AMD) a 32 GT/s coprono 150-250 mm tra i socket del processore con una perdita di inserzione (insertion loss) inferiore a 8 dB alla frequenza di Nyquist, richiedendo laminati a bassa perdita (Df < 0,003 a 12 GHz), via retroforate (back-drilled) con stub <6 mil e rame HVLP (Rz < 2,0 μm) su tutti gli strati di segnale nel percorso di interconnessione.
  • Interfaccia del Modulo Acceleratore OAM: Il fattore di forma OCP Accelerator Module con connettore edge standardizzato trasporta segnali PCIe Gen 5 x16 e sideband; il footprint del connettore e le zone di non sbroglio (keep-out) sono definite dalle specifiche OCP, con l'integrità del segnale convalidata attraverso il canale completo dal modulo alla scheda base.
  • Sbroglio Coordinato di Potenza e Segnale: L'erogazione di centinaia di ampere attraverso piani in rame spesso (heavy copper) (3-4 oz interni) deve coesistere con lo sbroglio del fan-out del segnale a passo fine nella stessa area della scheda, la sfida di layout più vincolata geometricamente nel design della scheda HPC, che richiede coppie di strati di potenza/segnale alternati con zone di transizione dei via attentamente gestite.

Larghezza di Banda della Memoria: Il Sottosistema Limitante le Prestazioni

I carichi di lavoro HPC sono frequentemente limitati dalla larghezza di banda della memoria: simulazioni scientifiche con operazioni stencil di grandi dimensioni, addestramento AI con enormi tabelle di embedding e analisi dei dati che scansionano set di dati multi-terabyte traggono tutti vantaggio dal massimo throughput della memoria. Il sottosistema di memoria del PCB deve supportare tutti i canali DIMM che funzionano alla massima velocità nominale per tutte le configurazioni di popolamento, incluse le configurazioni 2DPC (2 DIMM per canale) che i sistemi HPC utilizzano tipicamente per la massima capacità, dove i margini di temporizzazione (timing margins) sono notevolmente più ristretti rispetto a 1DPC.

La distinzione critica rispetto alla progettazione della memoria del server cloud è l'utilizzo sostenuto: il controller di memoria di un server cloud passa tra canali attivi mentre i carichi di lavoro si spostano tra le macchine virtuali; un nodo di calcolo HPC martella tutti i canali simultaneamente durante modelli di accesso alla memoria prolungati di classe benchmark STREAM.

Progettazione del Sottosistema di Memoria

  • Routing DDR5 a Canale Completo: 8-12 canali DDR5 per socket a 5600-6400 MT/s, ciascuno instradato con tolleranza di abbinamento (matching) delle lane dei byte di ±1 mil e una topologia fly-by convalidata tramite simulazione IBIS-AMI in configurazioni sia 1DPC che 2DPC. Il write-leveling, read-leveling e le tempistiche di command/address vengono verificate per tutte le opzioni di popolamento DIMM supportate prima dell'impegno del layout.
  • Selezione dei Materiali per l'Integrità del Segnale: La DDR5 a 5600+ MT/s richiede laminati a impedenza controllata con una tolleranza Dk ristretta (±3%) e tangente di perdita nota (Df ≤ 0,008 a 5 GHz) per mantenere impedenze e temporizzazioni costanti tra i lotti di produzione. Un lotto di laminato con una variazione Dk del ±5% (specifica standard) può spostare i margini di temporizzazione DDR5 del ±10%, portando potenzialmente a errori intermittenti con carichi di lavoro sostenuti.
  • LPDDR5 per Moduli di Calcolo Compatti: LPDDR5 saldata a 6400 MT/s su fattori di forma Compute-on-Module (COM), che utilizza il routing di fan-out HDI con precisione di registrazione di ±15 μm per package BGA con passo di 0,5 mm, massimizzando la densità di memoria su compute blade e schede acceleratrici con limitazioni di spazio.
  • Infrastruttura ECC e RAS: Supporto ECC completo con instradamento adeguato della corsia dei byte ECC (adattamento temporale alle corsie dei byte dati), instradamento del bus I²C del DIMM SPD (Serial Presence Detect) e segnalazione RAS (Reliability, Availability, Serviceability) per la segnalazione di errori di memoria e il ritiro della pagina, funzionalità da cui dipendono i sistemi HPC per l'integrità di simulazioni di più giorni.

PCB per High Performance Computing

Interconnessione di Rete a 400G/800G per Porta

Le prestazioni della rete HPC determinano l'efficienza di scalabilità, ovvero il rapporto tra le prestazioni raggiunte e il picco teorico all'aumentare del numero di nodi. Le moderne interconnessioni HPC (InfiniBand NDR a 400G, HPE Slingshot a 200G, Ethernet a 400G/800G per porta) utilizzano topologie switch high-radix con i SerDes più veloci disponibili nel silicio commerciale.

Il PCB che trasporta questi segnali di interconnessione deve fornire prestazioni del canale al limite delle capacità del substrato organico, e farlo costantemente tra i lotti di produzione, poiché un singolo nodo con una qualità di collegamento marginale ridurrà l'efficienza di scalabilità dell'intero cluster.

Progettazione della Scheda di Interconnessione HPC

  • Progettazione del Canale per Porta 400G/800G: 8 corsie di PAM4 50G (400G) o PAM4 100G (800G) per porta con perdita di inserzione (insertion loss) inferiore a 4,5 dB a 26,5 GHz (400G) o inferiore a 3,5 dB a 56 GHz (800G). Ciò richiede dielettrici ultra-low-loss (Dk 3,0, Df < 0,0015 a 28 GHz), lamina di rame HVLP/RTF (Rz < 1,0 μm) e trama di vetro allargato (spread-glass) per eliminare l'effetto di trama della fibra (fiber weave effect) alle frequenze delle onde millimetriche.
  • Routing Fan-out degli ASIC Switch: IC switch high-radix con oltre 2.000-4.000 pin SerDes che richiedono strutture HDI multistrato su schede a 24-36 strati (capacità fino a 64 strati) per il fan-out completo, con ottimizzazione dell'impedenza della singola corsia tramite sintonizzazione dell'anti-pad.
  • Ingegneria dei Via a 26,5-56 GHz: Via retroforate (back-drilled) con lunghezza dello stub <5 mil, verificate mediante sezionamento automatico al 100% o misurazione nel dominio del tempo. Via cieche/interrate per transizioni a strato interno in cui la retroforatura non può arrivare. Per ogni transizione di via vengono assegnati 0,5-2,0 dB alla frequenza operativa di Nyquist, consumando il 10-30% dell'intera attenuazione di canale assegnata per transizione.
  • Interfaccia Connettore OSFP/QSFP-DD: Impronte della gabbia del connettore (cage footprint) con geometria anti-pad ottimizzata che mantengono un return loss >20 dB a 26,5 GHz attraverso la transizione PCB-connettore. Continuità del piano di riferimento (reference plane continuity) (nessuna divisione o slot) entro 2 mm dal campo dei pin del connettore per prevenire le radiazioni di tipo slot antenna.

Architettura di Alimentazione e Termica a Carico Continuo

I nodi HPC mantengono la massima potenza per l'intera durata del lavoro di calcolo: simulazioni meteorologiche di più giorni, esecuzioni di addestramento dell'AI di una settimana e calcoli di dinamica molecolare di un mese che operano senza periodi di inattività. Questo profilo di carico sostenuto crea requisiti termici e di alimentazione che sono fondamentalmente diversi rispetto all'elaborazione cloud o consumer, in cui la media del duty-cycle e la capacità termica forniscono un margine che semplicemente non esiste nell'HPC.

Ingegneria dell'Alimentazione e Termica per il Funzionamento Continuo

  • Architettura Termica a Via per TDP Sostenuto: Array di via termiche riempite e tappate sotto tutti i componenti dissipativi di potenza (processore, VRM, buffer di memoria), con il conteggio dei via e il passo (pitch) calcolati per ogni TDP di componente (niente schemi generici). Campi di via termici del processore progettati per 300-500W costanti, con resistenza termica verificata da termografia IR a regime in condizioni di potenza nominale.
  • Heavy Copper Power Delivery: Piani interni in rame da 3-4 oz (once) che distribuiscono oltre 500 A di corrente del processore, con la resistenza complessiva del piano dall'uscita del VRM alla ball del package del processore inferiore a 0,2 mΩ. Questo è verificato mediante simulazione IR drop CC con feedback termico (la resistenza aumenta con la temperatura, creando un circuito di feedback positivo che deve essere considerato nel design).
  • Durabilità del Materiale sotto Carico Termico Continuo: Laminati ad alto Tg (Tg ≥ 180°C, T288 > 30 min) convalidati per oltre 10.000 ore alla massima temperatura operativa (125°C accelerato) senza degradazione misurabile della rigidità dielettrica, dell'adesione o delle proprietà meccaniche, per garantire che le schede prodotte oggi abbiano prestazioni identiche dopo 10 anni di servizio HPC ininterrotto.
  • Integrazione del Raffreddamento a Liquido: Controlli della planarità (flatness) della scheda a ±0,2% (più severi dello standard di ±0,75%) a supporto delle piastre fredde di raffreddamento a liquido diretto (Direct Liquid Cooling - DLC) nelle configurazioni HPC di massima potenza. La planarità è verificata con profilometria ottica al 100% e documentata per numero di serie per la qualifica del montaggio delle cold plate.

Qualità e Supporto al Ciclo di Vita del Programma HPC

I programmi HPC sono impegni pluriennali e rappresentano un investimento di sistema dell'ordine delle centinaia di milioni di dollari. La qualità della scheda incide direttamente sulla disponibilità del sistema, sul throughput computazionale e sul risultato scientifico. L'infrastruttura di qualità a supporto della produzione di schede HPC deve operare a un livello normalmente associato a programmi aerospaziali o di difesa, perché le conseguenze (guasti giornalieri dei nodi, sovraccarico di checkpoint/riavvio, throughput scientifico ridotto) di un guasto alla scheda in un sistema a 50.000 nodi sono finanziariamente comparabili.

Struttura Qualità e Ciclo di Vita HPC

  • Pacchetto di Qualificazione Primo Articolo (First-Article Qualification Package): Verifica elettrica completa (flying probe, boundary scan), caratterizzazione dell'integrità del segnale (profilazione dell'impedenza TDR, estrazione dei parametri S a 67 GHz, misurazione dell'occhio a 400G PAM4), caratterizzazione termica sotto carico prolungato e ispezione dimensionale documentata in base allo standard AS9102; il pacchetto di dati di qualificazione funge da riferimento di produzione per l'intera vita del programma.
  • Profondità dei Test di Produzione: Test ICT o flying probe (100% di copertura della rete), verifica tramite boundary scan di tutti i package BGA/QFN, test funzionali in condizioni operative e 48-72 ore di burn-in a temperatura elevata (55°C ambiente) con carico di calcolo sintetico. Questo sottopone a stress i meccanismi di guasto prematuro prima della spedizione per garantire che le schede distribuite abbiano superato la regione della mortalità infantile (infant-mortality).
  • Supporto a Prototipazione e Sviluppo: Produzioni da 5 a 50 schede per la validazione del progetto e l'attivazione (bring-up) del sistema con tempi di risposta degli Engineering Change Order (ECO) entro 48 ore, abilitando un'iterazione hardware rapida durante la fase critica del debug del sistema. Scalabilità in modalità "chiavi in mano" (Turnkey) verso i volumi di produzione con parametri di processo identici.
  • Continuità del Ciclo di Vita di un Decennio: Attrezzature di produzione (tooling), dati CAM, specifiche dei materiali approvate (incluse fonti alternative qualificate per i materiali obsoleti), profili di laminazione, programmi di foratura e ricette di assemblaggio (assembly recipes) sono mantenuti e dotati di versioning per l'intera durata di 7-12 anni del programma, consentendo la produzione di schede di ricambio, l'espansione del parco macchine e il supporto alla riparazione a livello di componente nel decimo anno senza necessità di riqualificazione.

Domande Frequenti su PCB per High Performance Computing

Come si prevengono le rotture dielettriche (dielectric breakdown) con carichi sostenuti di 500W del processore?

Le schede HPC impiegano laminati ad alto Tg (Tg ≥ 180°C) progettati per il funzionamento continuo ad alta temperatura. Convalidiamo questi materiali per oltre 10.000 ore a temperature accelerate per garantire che la rigidità dielettrica (dielectric strength) e le proprietà meccaniche non si degradino in un decennio di carico computazionale continuo 24 ore su 24, 7 giorni su 7.

Perché la tolleranza Dk (costante dielettrica) è così critica per i canali di memoria DDR5?

Alle velocità della DDR5 (5600+ MT/s), una variazione Dk standard del ±5% sposta i margini temporali (timing margins) in misura sufficiente a causare errori di memoria intermittenti. Specifichiamo laminati con una tolleranza Dk ristretta (±3% o migliore) per mantenere impedenze costanti e tempi di volo (flight times) su tutti i canali DIMM.

In che modo la planarità (flatness) del PCB influisce sul raffreddamento a liquido diretto (DLC) nei nodi HPC?

Il raffreddamento a liquido diretto si basa sull'accoppiamento perfetto tra le piastre fredde (cold plates) e i package dei processori. Se la scheda PCB si deforma oltre il ±0,2% (valore più stringente dei limiti dello standard IPC), la qualità di contatto del materiale di interfaccia termica (TIM) si riduce, creando punti caldi (hotspots) che costringono il processore al thermal throttling e riducono così le prestazioni complessive del cluster HPC.

Avvia il tuo programma PCB HPC con il nostro team di produzione ad alte prestazioni →