NVIDIA Mellanox MCX4121A-ACAT Server Adapter σε δράση.

Καθώς η κατανεμημένη αποθήκευση, τα συμπλέγματα HPC και οι αγωγοί εκπαίδευσης τεχνητής νοημοσύνης κλιμακώνονται γρήγορα, η παραδοσιακή στοίβα TCP/IP γίνεται εμπόδιο για τις εσωτερικές επικοινωνίες του κέντρου δεδομένων. Η υψηλή επιβάρυνση της CPU και η καθυστέρηση σε επίπεδο μικροδευτερόλεπτου εμποδίζουν την απόδοση της εφαρμογής. Για αρχιτέκτονες και διευθυντές πληροφορικής που αναζητούν μια πρακτική διαδρομή αναβάθμισης, τοMCX4121A-ACATΗ λύση RDMA/RoCE που βασίζεται σε αποδεδειγμένα αποτελέσματα σε πραγματικές αναπτύξεις.

Ιστορικό & Πρόκληση: Το κενό απόδοσης 10GbE έως 25GbE

Σε ένα πρόσφατο έργο εκσυγχρονισμού του κέντρου δεδομένων σε έναν πάροχο υπηρεσιών cloud μεσαίου μεγέθους, το υπάρχον δίκτυο αποθήκευσης που βασίζεται σε 10 GbE TCP/IP αποκάλυψε δύο κρίσιμα σημεία πόνου. Πρώτον, η δημιουργία αντιγράφων ασφαλείας της βάσης δεδομένων και η κίνηση NVMe μέσω Fabrics υπέστησαν καθυστέρηση στοίβας TCP που υπερέβαινε τα 50 μικροδευτερόλεπτα, επηρεάζοντας άμεσα τους χρόνους απόκρισης των συναλλαγών. Δεύτερον, οι πυρήνες της CPU κατακλύζονταν—σχεδόν το 30% της ισχύος επεξεργασίας καταναλώθηκε από διακοπές δικτύου και λειτουργίες αντιγραφής δεδομένων, αφήνοντας ανεπαρκείς πόρους για επιχειρηματικές εφαρμογές. Η ομάδα χρειαζόταν μια λύση που θα μπορούσε να προσφέρει εύρος ζώνης 25 GbE και να ενεργοποιήσει την παράκαμψη του πυρήνα με απομακρυσμένη άμεση πρόσβαση στη μνήμη.

Λύση: Ανάπτυξη NVIDIA Mellanox MCX4121A-ACAT με RoCE

Μετά από αυστηρή αξιολόγηση, ο πελάτης επέλεξε τοNVIDIA Mellanox MCX4121A-ACATπροσαρμογέα διακομιστή ως βασικό στοιχείο αναβάθμισης. Χτισμένος στην αρχιτεκτονική ConnectX-4 Lx, αυτός ο προσαρμογέας SFP28 διπλής θύρας παρέχει ρυθμό γραμμής 25 GbE ανά θύρα και ενσωματώνει εγγενώς κινητήρες εκφόρτωσης υλικού RoCE (RDMA μέσω Converged Ethernet). Οι μηχανικοί εγκατέστησαν τοΚάρτα προσαρμογέα Ethernet MCX4121A-ACATσε τυπικές υποδοχές διακομιστή x86 PCIe 3.0 x8, σε συνδυασμό με διακόπτες 25 GbE με δυνατότητα PFC/ECN για τη δημιουργία ενός υφάσματος Ethernet χωρίς απώλειες.

Από την πλευρά του λογισμικού, η ομάδα ενεργοποίησε τη λειτουργία RoCE v2 χρησιμοποιώντας το πρόγραμμα οδήγησης Mellanox OFED και καρφίτσωσε κρίσιμους φόρτους αποθήκευσης (πύλες Ceph OSD και NVMe-oF) στις διεπαφές RDMA. Συγκεκριμένα, τοMCX4121A-ACAT ConnectX-4 Lx διπλής θύρας 25 GbE SFP28Ο προσαρμογέας συνεργάστηκε άψογα με τα υπάρχοντα οπτικά SFP28 και καλώδια DAC, εξαλείφοντας το κόστος επανακαλωδίωσης. Για λεπτομερείς προδιαγραφές θερμικής και ισχύος, τοΦύλλο δεδομένων MCX4121A-ACATπαρέχει πλήρεις κατευθυντήριες γραμμές μηχανικής.

Αποτελέσματα & Οφέλη: 5x χαμηλότερη καθυστέρηση, 1,7x υψηλότερη απόδοση

Μετά από δύο εβδομάδες επικύρωσης με γκρι κυκλοφορία, η ομάδα του έργου μέτρησε δραματικές βελτιώσεις. Σε σύγκριση με τη βασική γραμμή TCP/IP παλαιού τύπου, η μέση καθυστέρηση μεταφοράς μπλοκ μεταξύ κόμβων μειώθηκε από 52µs σε μόλις 9μs—μείωση άνω του 80%. Όσον αφορά τη διακίνηση διακομιστή, τοΠροδιαγραφές MCX4121A-ACATυποσχέθηκε απόδοση διπλής θύρας με ρυθμό γραμμής, η οποία επικυρώθηκε πλήρως: ένας μεμονωμένος κόμβος που χειριζόταν ταυτόχρονα κίνηση iSCSI και NVMe-oF πέτυχε συνολική απόδοση 46,8 Gb/s, πλησιάζοντας το θεωρητικό μέγιστο. Το πιο σημαντικό, με το RDMA να επιτρέπει την άμεση πρόσβαση στη μνήμη, η χρήση της CPU για την επεξεργασία δικτύου μειώθηκε από 32% σε 6%. Οι ελευθερωμένοι κύκλοι της CPU ανακατευθύνθηκαν σε φόρτους εργασίας εφαρμογών, με αποτέλεσμα τη συνολική αύξηση της απόδοσης της εφαρμογής κατά 1,7 φορές.

Οι ομάδες επιχειρήσεων ανακάλυψαν επίσης ότι οι δυνατότητες εικονικοποίησης SR-IOV του προσαρμογέα υπερτερούσαν σε περιβάλλοντα κοντέινερ μεγάλης κλίμακας. Με βάσηΣυμβατό με MCX4121A-ACATαποτελέσματα επικύρωσης, ο προσαρμογέας λειτουργεί άψογα με μεγάλες διανομές Linux, VMware ESXi και προσθήκες Kubernetes Multus-CNI. Ο πελάτης έχει πλέον τυποποιήσει τοΛύση κάρτας προσαρμογέα Ethernet MCX4121A-ACATως βασική συνιστώσα για τις προδιαγραφές υπερσυγκλίνουσας υποδομής επόμενης γενιάς.

Αναφορά κόστους & προμήθειας

Για ομάδες με γνώμονα τον προϋπολογισμό, τοMCX4121A-ACAT τιμήγίνεται ιδιαίτερα ανταγωνιστικός σε όγκο. Εμφανίζονται οι τρέχουσες λίστες καναλιώνΠωλείται MCX4121A-ACATσε περίπου 460–520 $ ανά μονάδα (ανάλογα με τη συμπερίληψη του βραχίονα πλήρους ύψους), που αντιπροσωπεύει εξοικονόμηση 40%+ TCO σε σύγκριση με ισοδύναμα HBA καναλιών ινών ή λύσεις InfiniBand. Οι ακριβείς προσφορές είναι διαθέσιμες μέσω εξουσιοδοτημένων διανομέων NVIDIA.

Περίληψη & Outlook: Από την επιτάχυνση αποθήκευσης στην πλήρη κάλυψη του κέντρου δεδομένων

Αυτή η μελέτη περίπτωσης καταδεικνύει ότι ηMCX4121A-ACATΗ λύση που βασίζεται σε RDMA/RoCE παρέχει χαρακτηριστικά καθυστέρησης σχεδόν Infiniband χωρίς να εγκαταλείπει το οικοσύστημα Ethernet, ενώ ενισχύει δραματικά την απόδοση διακίνησης διακομιστή. Κοιτάζοντας το μέλλον, ο πάροχος υπηρεσιών σχεδιάζει να αναπτύξει τοNVIDIA Mellanox MCX4121A-ACATσε κατανεμημένες βάσεις δεδομένων SQL και αγωγούς εξαγωγής χαρακτηριστικών AI σε πραγματικό χρόνο, ξεκλειδώνοντας περαιτέρω τις δυνατότητες των υφασμάτων 25 GbE. Για μηχανικούς δικτύου και αρχιτέκτονες που σχεδιάζουν αναβαθμίσεις κέντρων δεδομένων, αυτός ο προσαρμογέας προσφέρει έναν ρεαλιστικό συνδυασμό απόδοσης, συμβατότητας και επεκτασιμότητας.