NVIDIA Mellanox MMA4Z00-NS Τεχνική λύση οπτικού δέκτη κέντρου δεδομένων

Τεχνική Λύση Οπτικού Δέκτη-Εκπομπού NVIDIA Mellanox MMA4Z00-NS Κέντρου Δεδομένων: Εξισορρόπηση Εύρους Ζώνης και Απόστασης σε Συνδέσεις Εντός Ραφιού και Μεταξύ Δωματίων

1. Ιστορικό Έργου & Ανάλυση Απαιτήσεων

Καθώς οι συστοιχίες εκπαίδευσης τεχνητής νοημοσύνης κλιμακώνονται από χιλιάδες σε δεκάδες χιλιάδες GPU, τα δίκτυα κέντρων δεδομένων αντιμετωπίζουν πρωτοφανείς προκλήσεις στην πυκνότητα εύρους ζώνης και τη φυσική απόσταση ταυτόχρονα. Λαμβάνοντας ως παράδειγμα ένα τυπικό κέντρο υπολογιστικής νοημοσύνης (AI), οι κόμβοι υπολογιστικής GPU του κατανέμονται σε πολλαπλά ράφια στον ίδιο όροφο, καθώς και σε δύο κεντρικές μηχανοστάσια σε γειτονικούς ορόφους. Οι απαιτήσεις δικτύωσης είναι αυστηρές: παροχή εύρους ζώνης πλήρους γραμμής 800G μεταξύ όλων των κόμβων υπολογιστικής, υποστήριξη τόσο InfiniBand (για άμεση επικοινωνία GPU) όσο και Ethernet (για δίκτυα αποθήκευσης και διαχείρισης) και κάλυψη αποστάσεων συνδέσεων που κυμαίνονται από 5 μέτρα (εντός ραφιού) έως 80 μέτρα (μεταξύ δωματίων) χωρίς να εισάγονται σημεία συμφόρησης μετατροπής πρωτοκόλλου.

Οι παραδοσιακές προσεγγίσεις σχεδιασμού συνήθως βασίζονται σε ένα μείγμα διαφορετικών τύπων δεκτών-εκπομπού: 800G SR8 για συνδέσεις μικρής εμβέλειας εντός ραφιού (έως 50μ σε OM4) και λύσεις μονού τρόπου 800G DR8/FR8 για μεγαλύτερες συνδέσεις μεταξύ δωματίων. Ωστόσο, αυτή η στρατηγική πολλαπλών SKU δημιουργεί σημαντικό λειτουργικό κόστος στη διαχείριση αποθεμάτων, τις δοκιμές πιστοποίησης και την παροχή ανταλλακτικών. Επιπλέον, το υψηλότερο κόστος και η κατανάλωση ενέργειας των οπτικών μονού τρόπου τις καθιστούν υποβέλτιστες για αναπτύξεις μεγάλης κλίμακας και υψηλής πυκνότητας. Ο NVIDIA Mellanox MMA4Z00-NS αξιολογήθηκε ως πιθανή λύση ενιαίας πλατφόρμας ικανή να ενοποιήσει και τους δύο τομείς απόστασης, διατηρώντας παράλληλα την ευελιξία πρωτοκόλλου και την αποδοτικότητα κόστους.

2. Σχεδιασμός Συνολικής Αρχιτεκτονικής Δικτύου/Συστήματος

Η προτεινόμενη αρχιτεκτονική υιοθετεί μια τοπολογία spine-leaf με κόμβους υπολογιστικής GPU συνδεδεμένους σε διακόπτες leaf μέσω θυρών OSFP 800G, και τους διακόπτες leaf να συνδέονται σε διακόπτες spine χρησιμοποιώντας τον ίδιο τύπο δέκτη-εκπομπού για τη διατήρηση της συνέπειας. Η βασική αρχιτεκτονική απόφαση ήταν η τυποποίηση σε ένα ενιαίο μοντέλο οπτικού δέκτη-εκπομπού—τον NVIDIA Mellanox MMA4Z00-NS—σε όλα τα τμήματα συνδέσεων, από εντός ραφιού έως μεταξύ δωματίων, αξιοποιώντας το βελτιωμένο DSP και τον οπτικό προϋπολογισμό ισχύος του για την επέκταση της αποτελεσματικής εμβέλειας πέρα από την τυπική προδιαγραφή των 50 μέτρων.

Για τη μεγιστοποίηση της ακεραιότητας του σήματος σε εκτεταμένες αποστάσεις, η αρχιτεκτονική ενσωματώνει διάφορες αρχές σχεδιασμού:

• Βελτιστοποίηση Φυτωρίου Οπτικών Ινών: Χρήση υψηλής ποιότητας πολυτροπικής οπτικής ίνας OM4 (ελάχιστο αποτελεσματικό διαμορφικό εύρος ζώνης ≥ 4700 MHz·km) για όλες τις συνδέσεις, με συνδέσεις MPO-12 APC για ελαχιστοποίηση της απώλειας εισαγωγής και της ανάκλασης. Οι δομημένες διαδρομές καλωδίωσης σχεδιάζονται για να αποφεύγονται οι αυστηρές καμπύλες και οι υπερβολικές μεταγωγές πάνελ.
• Απόθεμα Προϋπολογισμού Σύνδεσης: Ο προϋπολογισμός απώλειας της αρχιτεκτονικής διατηρείται κάτω από 3,0 dB για όλες τις συνδέσεις, διασφαλίζοντας επαρκές περιθώριο για τον MMA4Z00-NS ώστε να λειτουργεί χωρίς σφάλματα ακόμη και στα 80 μέτρα. Αυτό επιτυγχάνεται με τον περιορισμό του αριθμού των ζευγαρωμένων ζευγών συνδετήρων σε τέσσερις ανά σύνδεση.
• Προώθηση Ανεξάρτητη Πρωτοκόλλου: Οι διακόπτες leaf (NVIDIA Spectrum-4 για Ethernet και Quantum-2 για InfiniBand) διαμορφώνονται για να αναγνωρίζουν τη λειτουργία δυνατότητα MMA4Z00-NS 2x400G InfiniBand/Ethernet, επιτρέποντας τη δυναμική ανάθεση πρωτοκόλλου ανά θύρα χωρίς αλλαγές υλικού.

Η αρχιτεκτονική υποστηρίζει αναπτύξεις τόσο σε ένα ράφι όσο και σε πολλαπλά ράφια, με τον MMA4Z00-NS να λειτουργεί ως ο καθολικός ενεργοποιητής φυσικού επιπέδου σε όλες τις περιοχές απόστασης.

3. Ρόλος του NVIDIA Mellanox MMA4Z00-NS και Βασικά Χαρακτηριστικά

Στην καρδιά αυτής της λύσης, ο NVIDIA Mellanox MMA4Z00-NS λειτουργεί ως ενοποιημένη γέφυρα φυσικού επιπέδου, εξαλείφοντας την ανάγκη για πολλαπλούς τύπους δεκτών-εκπομπού. Τα βασικά τεχνικά χαρακτηριστικά του που σχετίζονται με αυτήν την αρχιτεκτονική περιλαμβάνουν:

Το λεπτομερές φύλλο δεδομένων MMA4Z00-NS παρέχει ολοκληρωμένες οπτικές και ηλεκτρικές προδιαγραφές, συμπεριλαμβανομένων των χαρακτηριστικών του πομπού και του δέκτη, οι οποίες χρησιμοποιήθηκαν για την επικύρωση των υπολογισμών του προϋπολογισμού σύνδεσης για όλα τα τμήματα αυτής της ανάπτυξης. Οι προδιαγραφές MMA4Z00-NS επιβεβαιώνουν τυπική ισχύ εκπομπής από -2,5 dBm έως 4,0 dBm και ευαισθησία δέκτη -6,5 dBm (BER 5E-8), παρέχοντας την απαραίτητη οπτική απόσταση για τον στόχο των 80 μέτρων.

Λειτουργικά, ο δέκτης-εκπομπός MMA4Z00-NS 800G OSFP SR8 λειτουργεί συγκεντρώνοντας οκτώ γραμμές ηλεκτρικών σημάτων 100G PAM4 από το ASIC του διακόπτη, μετατρέποντάς τα σε οπτικά σήματα και μεταδίδοντάς τα μέσω παράλληλης πολυτροπικής οπτικής ίνας μέσω της διεπαφής MPO-12. Στην πλευρά λήψης, το ενσωματωμένο DSP εκτελεί ανάκτηση ρολογιού και δεδομένων, εξίσωση και αποπολυπλεξία πίσω στον ηλεκτρικό τομέα. Αυτή η γραμμή επεξεργασίας είναι κρίσιμη για τη διατήρηση της ακεραιότητας του σήματος σε εκτεταμένες αποστάσεις όπου η διαμορφική διασπορά και η εξασθένηση θα υποβάθμιζαν διαφορετικά την απόδοση.

4. Συστάσεις Ανάπτυξης & Κλιμάκωσης (Με Τυπική Τοπολογία)

Για βέλτιστη ανάπτυξη του NVIDIA Mellanox MMA4Z00-NS, συνιστώνται οι ακόλουθες οδηγίες τοπολογίας και καλωδίωσης:

Τυπική Τοπολογία – Κλιμάκωση Τριών Επιπέδων:

• Επίπεδο 1 (Εντός Ραφιού, ≤15μ): Άμεσες καλωδιώσεις MPO-12 μεταξύ κόμβων υπολογιστικής GPU και διακοπτών στην κορυφή του ραφιού (TOR). Ο MMA4Z00-NS εγκαθίσταται και στις δύο άκρες. Δεν απαιτείται επιπλέον προσαρμογή.
• Επίπεδο 2 (Διασταυρούμενο Ράφι, 15–45μ): Προ-τερματισμένα καλώδια κορμού MPO που διατρέχουν κρυφές διαδρομές, συνδέοντας διακόπτες TOR με διακόπτες συγκέντρωσης leaf. Επιτρέπονται έως και δύο πάνελ σύνδεσης.
• Επίπεδο 3 (Μεταξύ Δωματίων, 45–80μ): Δομημένη καλωδίωση με ενισχυμένους κορμούς MPO, χρησιμοποιώντας γωνιακούς συνδετήρες και ελάχιστη συγκόλληση. Κάθε σύνδεση ελέγχεται για απώλεια εισαγωγής και ανακλαστικότητα πριν από την ανάθεση.

Λίστα ελέγχου ανάπτυξης:

• Επικυρώστε όλες τις συνδέσεις οπτικών ινών χρησιμοποιώντας έναν οπτικό ανακλασιόμετρο πεδίου (OTDR) και έναν μετρητή ισχύος για να επιβεβαιώσετε απώλεια κάτω από 3,0 dB.
• Διαμορφώστε τις θύρες του διακόπτη στο επιθυμητό πρωτόκολλο (InfiniBand ή Ethernet) και επαληθεύστε ότι ο MMA4Z00-NS διαπραγματεύεται αυτόματα τη σωστή λειτουργική λειτουργία σύμφωνα με το φύλλο δεδομένων MMA4Z00-NS.
• Για μικτά περιβάλλοντα 400G/800G, ενεργοποιήστε τη λειτουργία διαχωρισμού 2×400G σε επιλεγμένες θύρες, επιτρέποντας στη δυνατότητα MMA4Z00-NS 2x400G InfiniBand/Ethernet να υποστηρίζει δύο συνδέσεις 400G από έναν μόνο δέκτη-εκπομπό.
• Αναπτύξτε σε φάσεις: ξεκινήστε με ένα μόνο ράφι, επαληθεύστε μετρήσεις BER και καθυστέρησης, στη συνέχεια επεκταθείτε σε συνδέσεις διασταυρούμενων ραφιών και μεταξύ δωματίων.

Για κλιμάκωση μεγάλης κλίμακας πέρα από τα 80 μέτρα, η αρχιτεκτονική συνιστά την τοποθέτηση ενεργών οπτικών καλωδίων (AOC) ή λύσεων μονού τρόπου μόνο για τις μακρύτερες συνδέσεις κορμού, διατηρώντας παράλληλα τη λύση δέκτη-εκπομπού MMA4Z00-NS 800G OSFP SR8 για την συντριπτική πλειοψηφία των συνδέσεων leaf-to-spine και compute-to-leaf.

5. Λειτουργίες, Παρακολούθηση, Αντιμετώπιση Προβλημάτων & Βελτιστοποίηση

Ο MMA4Z00-NS έχει σχεδιαστεί για λειτουργική απλότητα, με ολοκληρωμένη υποστήριξη ψηφιακής διαγνωστικής παρακολούθησης (DDM) μέσω της διεπαφής I²C. Οι βασικές λειτουργικές πρακτικές περιλαμβάνουν:

• Παρακολούθηση σε Πραγματικό Χρόνο: Παρακολούθηση θερμοκρασίας, τάσης τροφοδοσίας, ισχύος εκπομπής/λήψης και ρεύματος πόλωσης λέιζερ. Οι πλατφόρμες διαχείρισης δικτύου της NVIDIA μπορούν να ειδοποιούν όταν πλησιάζουν τα όρια, επιτρέποντας προληπτική συντήρηση.
• Περιθώρια Σύνδεσης: Χρησιμοποιήστε τις δυνατότητες ρύθμισης DSP για να εκτελέσετε δοκιμές περιθωρίων σύνδεσης κατά την εγκατάσταση και ως μέρος τριμηνιαίων ελέγχων υγείας. Ο MMA4Z00-NS υποστηρίζει προσαρμογές εξίσωσης κατ' απαίτηση μέσω firmware, οι οποίες μπορούν να αντισταθμίσουν τη σταδιακή γήρανση της οπτικής ίνας ή την υποβάθμιση των συνδετήρων.
• Απομόνωση Σφαλμάτων: Εάν μια σύνδεση παρουσιάζει υψηλό BER ή συμβάντα απώλειας σήματος, τα δεδομένα DDM και από τις δύο άκρες της σύνδεσης θα πρέπει να συγκριθούν. Κοινές μορφές σφαλμάτων περιλαμβάνουν βρώμικους/μολυσμένους συνδετήρες MPO (καθαρίστε χρησιμοποιώντας καθαριστές τύπου κασέτας), υπερβολική απώλεια κάμψης (ελέγξτε τη φυσική διαδρομή) ή υποβάθμιση του πομπού (ελέγξτε τις τάσεις του ρεύματος πόλωσης και της οπτικής ισχύος).
• Ενημερώσεις Firmware: Η NVIDIA κυκλοφορεί περιοδικά ενημερώσεις firmware που μπορούν να βελτιώσουν τους αλγορίθμους εξίσωσης και να ενισχύσουν τη συμβατότητα. Βεβαιωθείτε ότι όλες οι μονάδες MMA4Z00-NS είναι στην τελευταία έκδοση firmware σύμφωνα με την ανακοίνωση του κατασκευαστή.

Για τη βελτιστοποίηση της απόδοσης, η αρχιτεκτονική συνιστά την εκτέλεση μιας βασικής σάρωσης όλων των συνδέσεων σε λειτουργίες 800G και 2×400G, καταγράφοντας στατιστικά οπτικής ισχύος και BER. Αυτή η βάση χρησιμεύει ως αναφορά για μελλοντική αντιμετώπιση προβλημάτων και σχεδιασμό χωρητικότητας. Επιπλέον, η διαθεσιμότητα MMA4Z00-NS προς πώληση μέσω τυποποιημένης παγκόσμιας διανομής διασφαλίζει ότι οι εφεδρικές μονάδες μπορούν να αποκτηθούν γρήγορα, ελαχιστοποιώντας τον χρόνο διακοπής λειτουργίας σε περίπτωση βλαβών.

6. Περίληψη & Αξιολόγηση Αξίας

Ο NVIDIA Mellanox MMA4Z00-NS παρέχει μια συναρπαστική ενοποιημένη οπτική λύση για σύγχρονα κέντρα δεδομένων AI που πρέπει να εξισορροπήσουν υψηλό εύρος ζώνης με μεταβαλλόμενες φυσικές αποστάσεις. Τυποποιώντας σε έναν ενιαίο τύπο δέκτη-εκπομπού τόσο για συνδέσεις εντός ραφιού όσο και μεταξύ δωματίων, η αρχιτεκτονική μειώνει την πολυπλοκότητα του αποθέματος, απλοποιεί τις διαδικασίες πιστοποίησης και διευκολύνει τη συντήρηση, ενώ αξιοποιεί τις προηγμένες οπτικές δυνατότητες και το DSP της μονάδας για να επεκτείνει την εμβέλεια πέρα από τα παραδοσιακά όρια SR8.

Βασικά αποτελέσματα αξίας:

• Απλοποίηση Αποθέματος: Ένα μόνο SKU αντικαθιστά πολλαπλούς τύπους δεκτών-εκπομπού, μειώνοντας το κόστος διατήρησης εφεδρικών κατά ένα εκτιμώμενο 60%.
• Αποδοτικότητα Κόστους: Η υποδομή πολυτροπικής οπτικής ίνας είναι σημαντικά φθηνότερη από την εγκατάσταση μονού τρόπου, και η τιμή MMA4Z00-NS ανά θύρα είναι σημαντικά χαμηλότερη από ισοδύναμες εναλλακτικές DR8/FR8.
• Ευελιξία Έτοιμη για το Μέλλον: Η λειτουργία διαχωρισμού 2×400G παρέχει μια είσοδο για περιβάλλοντα που δεν είναι ακόμη πλήρως έτοιμα για 800G, ενώ η λειτουργία 800G υποστηρίζει σήμερα συστοιχίες GPU επόμενης γενιάς.
• Λειτουργική Ανθεκτικότητα: Το ισχυρό DDM, η προληπτική ειδοποίηση και οι ρυθμιζόμενες εν λειτουργία παράμετροι DSP διασφαλίζουν ότι οι συνδέσεις παραμένουν εντός προδιαγραφών καθ' όλη τη διάρκεια της λειτουργικής τους ζωής.

Για αρχιτέκτονες δικτύων, μηχανικούς λύσεων και ομάδες λειτουργίας, ο MMA4Z00-NS αντιπροσωπεύει ένα πρακτικό, υψηλής απόδοσης και οικονομικά αποδοτικό θεμέλιο για την κατασκευή επεκτάσιμων δικτύων AI που μπορούν να καλύπτουν ράφια και δωμάτια χωρίς συμβιβασμούς. Το ολοκληρωμένο φύλλο δεδομένων MMA4Z00-NS και η υποστηρικτική τεχνική τεκμηρίωση είναι διαθέσιμα για τη διευκόλυνση του σχεδιασμού ενσωμάτωσης και της επικύρωσης της ανάπτυξης.