Προσαρμογέας διακομιστή NVIDIA Mellanox MCX653105A-HDAT σε δράση: Μεταφορά και διακομιστής χαμηλής καθυστέρησης RDMA/RoCE
June 15, 2026
Στα σύγχρονα κέντρα δεδομένων, η κατανεμημένη αποθήκευση, η υπολογιστική υψηλής απόδοσης (HPC) και οι συστάδες εκπαίδευσης AI αντιμετωπίζουν ένα κοινό μπουκάλιο: το δίκτυο.Οι παραδοσιακές στοίβες TCP/IP εισάγουν σημαντική καθυστέρηση και έξοδα CPUΗ μελέτη αυτής της περίπτωσης εξετάζει πώς ένας μεσαίου μεγέθους πάροχος cloud αντιμετώπισε ακριβώς αυτές τις προκλήσεις με την ανάπτυξη τουNVIDIA Mellanox MCX653105A-HDATΟ διακομιστής θα χρησιμοποιήσει έναν προσαρμογέα διακομιστή για να επιτρέψει τη μεταφορά χαμηλής καθυστέρησης με βάση το RDMA / RoCE και να αυξήσει δραματικά την απόδοση του διακομιστή.
Προηγούμενο & Προκλήσεις: Όταν κάθε μικροδευτερόλεπτο μετράει
Η υφιστάμενη υποδομή 25GbE του παρόχου, που εκτελεί το πρότυπο TCP / IP, δυσκολευόταν να υποστηρίξει το νέο backend αποθήκευσης NVMe-over-Fabrics.Η χρησιμοποίηση του CPU στους κόμβους αποθήκευσης ξεπερνούσε τακτικά το 70% μόνο από την επεξεργασία δικτύουΕπιπλέον, καθώς κλιμακώθηκαν σε εκατοντάδες κόμβους, οι εταιρείες άρχισαν να αναπτύσσουν νέες τεχνολογίες.Η συμφόρηση του δικτύου προκάλεσε ακμές καθυστέρησης ουράς που επηρέασαν τις SLA εφαρμογήςΧρειαζόταν μια λύση που θα μπορούσε να αποφορτίσει το networking overhead, να παρέχει υπο-μικροδευτερόλεπτο καθυστέρηση και να διατηρήσει σταθερή απόδοση υπό φόρτο.
Λύση και ανάπτυξη: εισαγωγή της κάρτας δικτύου PCIe MCX653105A-HDAT ConnectX Adapter
Μετά την αξιολόγηση αρκετών επιλογών, η ομάδα επέλεξε τοΠίνακας προσαρμογής MCX653105A-HDAT EthernetΗ νέα τεχνολογία, η οποία παρουσιάζεται στην παρούσα έκδοση, έχει ως στόχο να ενισχύσει την πρόσβαση σε ηλεκτρονικά δίκτυα, καθώς και να ενισχύσει την πρόσβαση σε ηλεκτρονικά δίκτυα.NVIDIA Mellanox MCX653105A-HDATέχει αναπτυχθεί σε 120 κόμβους αποθήκευσης και υπολογισμού, με την ακόλουθη διαμόρφωση:
- Ενεργοποιημένη η RoCEμε ECN (Εξήγηση ρητής συμφόρησης) και DCQCN για τον έλεγχο της συμφόρησης
- Βλέπε σημεία 5.3.1.στο υλικό, παρακάμπτοντας την CPU υποδοχής για την αποθήκευση I/O
- Διαχωρισμόςσε ροές προτεραιότητας χωρίς απώλειες για την κυκλοφορία αποθήκευσης
- Παρακολούθηση τηλεμετρίαςχρησιμοποιώντας τους ενσωματωμένους μετρητές επιδόσεων του προσαρμογέα
Σύμφωνα με τηνΔελτίο δεδομένων MCX653105A-HDATΗ κάρτα υποστηρίζει τόσο τα πρωτόκολλα InfiniBand όσο και Ethernet, αλλά η ομάδα επέλεξε το RoCEv2 για να ενσωματωθεί απρόσκοπτα με τους υπάρχοντες διακόπτες Ethernet.Όλα τα μεγάλα μοντέλα server ήτανΣυμφωνία MCX653105A-HDATΗ εγκατάσταση ολοκληρώθηκε σε δύο Σαββατοκύριακα με μηδενικό χρόνο αναμονής, χρησιμοποιώντας τις δυνατότητες μετανάστευσης του προσαρμογέα.
Αποτελέσματα και οφέλη: Μετρήσιμα κέρδη απόδοσης
Ο ακόλουθος πίνακας συνοψίζει τα βασικά μετρικά πριν και μετά την ανάπτυξη τουΛύση κάρτας προσαρμογέα Ethernet MCX653105A-HDAT:
| Μετρική | Πριν (TCP/IP) | Μετά (RoCE + MCX653105A-HDAT) | Βελτίωση |
|---|---|---|---|
| Μέση καθυστέρηση (από κόμβο σε κόμβο) | 52 μs | 10,8 μs | 960,5% μείωση |
| Χρήση CPU (δέσμος αποθήκευσης, συστοιχία δικτύου) | 72% | 8% | 89% μείωση |
| Επαρκής απόδοση ανά κόμβο (NVMe-oF) | 18 Gbps | 96 Gbps | 5.3x αύξηση |
| Κύκλος καθυστέρησης (99,9ο εκατοστιαίο) | 380 μs | 12 μs | 960,8% μείωση |
Εκτός από αυτούς τους αριθμούς, η ομάδα σημείωσε πρόσθετα λειτουργικά οφέλη.Ειδικές προδιαγραφές MCX653105A-HDATΤο σύστημα αυτό περιλαμβάνει την παρακολούθηση των συνδέσεων με βάση το υλικό και την αποφόρτιση ροής ASAP2, η οποία μείωσε την αναταραχή της κυκλοφορίας από την Ανατολή προς τη Δύση και επέτρεψε την πιο ομαλή κλιμάκωση.MCX653105A-HDAT τιμήΗ εφαρμογή του προσαρμογέα είναι πλέον ευρέως διαθέσιμη σε όλες τις χώρες της ΕΕ.MCX653105A-HDAT προς πώλησηΗ εν λόγω επιδότηση θα είναι προσβάσιμη σε οργανισμούς κάθε μεγέθους.
Σύνοψη & Προοπτικές: Ένα Ίδρυμα για την Επόμενη Γενιά Υποδομών
Η υπόθεση αυτή αποδεικνύει ότι ηMCX653105A-HDAT ConnectX προσαρμογέα κάρτα δικτύου PCIeΗ τεχνολογία αυτή δεν είναι απλώς μια ταχύτερη NIC, είναι μια πλατφόρμα για πραγματική κεντρική πληροφορική δεδομένων.NVIDIA Mellanox MCX653105A-HDATΜεταμορφώνει τον τρόπο επικοινωνίας των διακομιστών, εξαλείφοντας το κληρονομικό κόστος των πρωτοκόλλων και απελευθερώνοντας το πλήρες δυναμικό της αποθήκευσης NVMe και των διανεμημένων υφασμάτων μνήμης.
Κοιτάζοντας στο μέλλον, ο πάροχος σχεδιάζει να επεκτείνει την ανάπτυξη του για να συμπεριλάβει το GPUDirect RDMA για φορτία εργασίας κατάρτισης τεχνητής νοημοσύνης,καθώς και να διερευνήσει τα χαρακτηριστικά προγραμματισμό του προσαρμοστή για την επεξεργασία προσαρμοσμένων πακέτωνΓια τους αρχιτέκτονες πληροφορικής και τους μηχανικούς δικτύων που αντιμετωπίζουν παρόμοιες προκλήσεις κλιμακώσεως, ηΠίνακας προσαρμογής MCX653105A-HDAT Ethernetπροσφέρει μια αποδεδειγμένη και έτοιμη για το μέλλον πορεία προς τη δικτύωση κέντρων δεδομένων χαμηλής καθυστέρησης και υψηλής απόδοσης.