Cablaggio della rete InfiniBand XDR con DAC 1.6T

Il DAC passivo 1.6T è l'infrastruttura centrale per le reti rack NVIDIA Quantum-3. Man mano che i cluster di addestramento AI in espansione e la tecnologia InfiniBand XDR spingono le interconnessioni a 1.6T, le prestazioni elettriche dei collegamenti fisici diventano fondamentali per la stabilità complessiva del cluster. A questa larghezza di banda ultra-elevata, il cablaggio rack deve controllare rigorosamente potenza e calore. Garantendo consumo energetico zero e bassa latenza, il DAC 1.6T elimina efficacemente i rischi termici ad alta densità, soddisfacendo i severi requisiti di velocità ed efficienza energetica delle reti di nuova generazione.

Che cos'è un DAC 1.6T

A 1.6T DAC è una soluzione passiva di interconnessione in rame progettata specificamente per ambienti di calcolo di nuova generazione ad altissima velocità. A livello fisico, utilizza in genere package OSFP o QSFP-DD e contiene più set di fili di rame biassiali ad alte prestazioni.

La principale differenza rispetto alla generazione precedente di DAC 400G/800G è che la velocità di trasmissione per singolo canale del DAC 1.6T passa a 224Gbps basandosi sulla modulazione PAM4. Elimina la necessità di componenti di conversione optoelettronica, come laser e DSP, affidandosi invece a fili di rame puramente fisici per collegare direttamente lo switch Quantum-3 all'interfaccia elettrica del server.

In breve, il DAC 1.6T non solo raddoppia la velocità, ma rappresenta anche la forma definitiva di trasmissione fisica a distanza ultra-breve e ad altissima densità all'interno dell'architettura XDR.

Perché la connettività dei rack AI richiede DAC 1.6T

Nelle reti aziendali tradizionali, i moduli ottici sono la soluzione di riferimento per gli aggiornamenti della larghezza di banda. Tuttavia, gli ambienti moderni di addestramento AI, come l'architettura NVIDIA DGX SuperPOD, presentano sfide significative.

Innanzitutto, ci sono i punti critici del consumo energetico e della dissipazione del calore. Un singolo modulo ottico 1.6T consuma spesso oltre 20W. Se un pannello ToR completamente caricato con switch Quantum-3 viene riempito con moduli ottici, genererà una quantità impressionante di calore aggiuntivo, aggravando il carico sul raffreddamento a liquido o ad aria.

In secondo luogo, c'è il costo della latenza. Nell'operazione All-Reduce dell'addestramento distribuito su larga scala, anche una latenza a livello di microsecondi tra i nodi può far sì che le GPU restino inattive. I DAC, poiché eliminano il processo di conversione del segnale fotoelettrico, realizzano un vero pass-through fisico a latenza zero. Pertanto, entro la distanza ottimale del rack, i DAC sono l'unica soluzione in grado di bilanciare perfettamente consumo energetico, latenza e costo.

Come il DAC 1.6T aumenta l'efficienza dei cluster XDR

Innanzitutto, il DAC passivo 1.6T ottiene una trasmissione a consumo zero all'interno del rack. Si basa interamente sull'alimentazione dello switch e della scheda di interfaccia di rete (NIC) stessa, risparmiando preziosa energia che altrimenti verrebbe consumata dai moduli ottici e destinandola interamente alla potenza di calcolo delle GPU.

In secondo luogo, migliora le capacità di offloading delle reti ad alta densità. Nelle implementazioni pratiche, un singolo switch Quantum-3 collega tipicamente più server AI 800G. Utilizzando cavi DAC breakout da 1.6T OSFP a 2x 800G OSFP/QSFP-DD, la differenza di velocità tra lo switch e le NIC può essere perfettamente allineata, raddoppiando l'utilizzo della densità delle porte senza aumentare i layer fisici dello switch, semplificando notevolmente l'architettura di rete Spine-Leaf.

Infine, la sua latenza ultra-bassa a livello di nanosecondi riduce significativamente la latenza di comunicazione nelle reti lossless InfiniBand, traducendo direttamente i vantaggi dell'hardware sottostante in una maggiore efficienza dell'addestramento dei modelli.

1.6T DAC vs. soluzioni ottiche attive a 224G

Con velocità a canale singolo che raggiungono 224Gbps, i segnali elettrici affrontano problemi estremamente elevati di perdita di inserzione e diafonia. Ciò comprime il limite fisico di trasmissione dei cavi in rame passivi a circa 1-1,5 metri.

Per connessioni cross-rack o su distanze medio-lunghe, un AOC 1.6T o un modulo ottico abbinato a fibra ottica è senza dubbio la scelta necessaria. Tuttavia, nella maggior parte degli scenari in cui i server sono collegati direttamente agli switch top-of-rack, la distanza è spesso inferiore a 1 metro.

Entro questa distanza, utilizzare forzatamente costosi AOC o moduli ottici non solo rappresenta un enorme spreco di risorse, ma introduce anche una latenza aggiuntiva a livello di microsecondi a causa del chip DSP integrato. Pertanto, nelle reti 1.6T, i DAC e le soluzioni ottiche non sono più semplici sostituti, ma formano piuttosto una divisione del lavoro estremamente rigorosa basata sulla distanza: i DAC sono insostituibili entro 1,5 metri, mentre le ottiche dominano per distanze superiori a 3 metri.

Creare l'ecosistema XDR con le soluzioni QSFPTEK 1.6T

Con il graduale lancio di Quantum-3, trovare cavi DAC di alta qualità in grado di trasportare perfettamente segnali 224G è diventata una priorità assoluta per gli architetti di rete. In qualità di fornitore professionale di interconnessioni ottiche ad alte prestazioni, QSFPTEK è pienamente preparata per l'ecosistema 1.6T.

La serie di cavi DAC 1.6T di QSFPTEK viene sottoposta a rigorosi test di riflettometria nel dominio del tempo e di integrità del segnale per garantire bassi tassi di errore sui bit a frequenze estremamente elevate.

Ancora più importante, il solido centro di test di QSFPTEK garantisce la compatibilità di base dei suoi prodotti con i principali dispositivi di rete InfiniBand mainstream e switch Ethernet AI. Offrendo un ROI altamente competitivo, QSFPTEK sta aiutando i data center di tutto il mondo a passare senza difficoltà all'era 1.6T con CAPEX inferiori.

Conclusione

In conclusione, il DAC 1.6T, con il suo consumo energetico pari a zero, la latenza ultra-bassa e l'eccellente rapporto costo-efficacia, è diventato la pietra angolare per la realizzazione dei cluster di training AI su scala ultra-grande NVIDIA Quantum-3. In breve, negli scenari di interconnessione a breve distanza all'interno dei rack server, non solo risolve efficacemente i colli di bottiglia di dissipazione del calore e latenza causati dai moduli ottici, ma migliora anche l'efficienza di calcolo complessiva attraverso un'architettura di rete semplificata. Per i data center che cercano prestazioni estreme e ritorno sull'investimento, scegliere una soluzione DAC 1.6T di alta qualità è la scelta chiave e ottimale per implementare reti di calcolo intelligente di nuova generazione.