Τεχνικό σχέδιο λύσης: Mellanox (NVIDIA) MCX631102AN-ADAT Server Adapter για μετάδοση χαμηλής καθυστέρησης RDMA/RoCE

Οι σύγχρονες αρχιτεκτονικές κέντρων δεδομένων βρίσκονται υπό συνεχή πίεση για να προσφέρουν υψηλότερη απόδοση, διατηρώντας παράλληλα την επιχειρησιακή αποδοτικότητα. Η εκθετική αύξηση των φόρτων εργασίας που βασίζονται σε δεδομένα – από αναλύσεις σε πραγματικό χρόνο και εκπαίδευση AI έως κατανεμημένη αποθήκευση και χρηματοοικονομικές συναλλαγές – έχει αποκαλύψει τους περιορισμούς των παραδοσιακών δικτυακών υποδομών. Το κύριο σημείο συμφόρησης βρίσκεται στη συμβατική στοίβα δικτύωσης TCP/IP, η οποία καταναλώνει σημαντικούς πόρους CPU, εισάγει απρόβλεπτη καθυστέρηση και περιορίζει τη συνολική απόδοση του συστήματος.

Οι αρχιτέκτονες επιχειρήσεων αντιμετωπίζουν μια κρίσιμη πρόκληση: πώς να κλιμακώσουν την απόδοση του δικτύου χωρίς ανάλογες αυξήσεις στο κόστος και την πολυπλοκότητα. Η λύση απαιτεί μια θεμελιώδη μετατόπιση από τη δικτύωση με επίκεντρο την CPU σε μοντέλα επικοινωνίας με επιτάχυνση υλικού, με επίκεντρο τα δεδομένα. Αυτή η τεχνική λευκή βίβλος παρουσιάζει μια ολοκληρωμένη λύση που βασίζεται στο Mellanox (NVIDIA) MCX631102AN-ADAT, αντιμετωπίζοντας τις βασικές απαιτήσεις για μετάδοση χαμηλής καθυστέρησης και βελτίωση της απόδοσης του διακομιστή μέσω της τεχνολογίας RDMA/RoCE.

Η προτεινόμενη αρχιτεκτονική υιοθετεί μια τοπολογία leaf-spine βελτιστοποιημένη για συνδεσιμότητα 25GbE με υποστήριξη RDMA/RoCE. Στην καρδιά αυτού του σχεδιασμού βρίσκεται η αρχή της εξάλειψης της επιβάρυνσης της CPU που σχετίζεται με το δίκτυο, διατηρώντας παράλληλα την απρόσκοπτη ενσωμάτωση με τις υπάρχουσες επενδύσεις υποδομής.

• Επίπεδο Φύλλων (Leaf Layer): Διακόπτες Top-of-rack διαμορφωμένοι με PFC (Priority Flow Control) και ECN (Explicit Congestion Notification) για υποστήριξη απρόσκοπτης κίνησης RoCE v2
• Επίπεδο Ράχης (Spine Layer): Διακόπτες υψηλής χωρητικότητας που παρέχουν μη-μπλοκάρισμα συνδεσιμότητα οποιουδήποτε-προς-οποιονδήποτε με uplinks 100GbE
• Επίπεδο Διακομιστών (Server Layer): Κόμβοι υπολογιστών και αποθήκευσης εξοπλισμένοι με τους προσαρμογείς NVIDIA Mellanox MCX631102AN-ADAT ConnectX-6 Lx διπλής θύρας 25GbE SFP28
• Δίκτυο Αποθήκευσης (Storage Network): Αφιερωμένο ύφασμα (fabric) με δυνατότητα RoCE για πρόσβαση NVMe-oF σε συστοιχίες αποθήκευσης all-flash

Η αρχιτεκτονική υποστηρίζει πολλαπλούς τομείς φόρτου εργασίας – συμπεριλαμβανομένων εικονικών, bare-metal και εμπορευματοποιημένων περιβαλλόντων – μέσω έξυπνης τμηματοποίησης της κίνησης και πολιτικών QoS. Κάθε διακομιστής αξιοποιεί τη δυνατότητα διπλής θύρας του MCX631102AN-ADAT είτε για ενεργή-ενεργή εξισορρόπηση φορτίου είτε για ενεργή-παθητική διαμόρφωση υψηλής διαθεσιμότητας.

Η κάρτα προσαρμογέα Ethernet MCX631102AN-ADAT λειτουργεί ως η κρίσιμη διεπαφή μεταξύ των πόρων του διακομιστή και του υφάσματος του δικτύου. Αυτός ο προηγμένος προσαρμογέας, χτισμένος στην αρχιτεκτονική ConnectX-6 Lx, προσφέρει πολλές μετασχηματιστικές δυνατότητες:

• Εκφόρτωση RDMA/RoCE Βάσει Υλικού: Ο προσαρμογέας υλοποιεί πλήρη εκφόρτωση RoCE v2 σε υλικό, επιτρέποντας μεταφορές δεδομένων απευθείας από μνήμη σε μνήμη χωρίς εμπλοκή της CPU. Αυτό μειώνει την καθυστέρηση σε μικροδευτερόλεπτα μονής ψηφίου, ενώ απελευθερώνει πυρήνες CPU για επεξεργασία εφαρμογών.
• Έξυπνη Βελτιστοποίηση PCIe: Με διεπαφή υποδοχής PCIe 3.0/4.0 x8, οι προδιαγραφές του MCX631102AN-ADAT δείχνουν υποστήριξη για αμφίδρομη απόδοση έως και 50Gb/s, εξαλείφοντας τα σημεία συμφόρησης PCIe σε διακομιστές υψηλής απόδοσης.
• Προηγμένη Υποστήριξη Εικονικοποίησης: Ο προσαρμογέας παρέχει SR-IOV βάσει υλικού με έως και 512 εικονικές λειτουργίες, διασφαλίζοντας προβλέψιμη απόδοση για περιβάλλοντα πολλαπλών ενοικιαστών.
• Επιτάχυνση Αποθήκευσης: Εγγενής υποστήριξη για NVMe-oF και iSER επιτρέπει αποτελεσματικά μοτίβα πρόσβασης αποθήκευσης απαραίτητα για σύγχρονες υπερ-συγκεντρωμένες υποδομές.

Η διαμόρφωση διπλής θύρας 25GbE SFP28 προσφέρει ευελιξία ανάπτυξης – οι θύρες μπορούν να διαμορφωθούν για ξεχωριστά δίκτυα (π.χ., ένα για αποθήκευση, ένα για υπολογιστές) ή να συγκεντρωθούν για αυξημένο εύρος ζώνης και πλεονασμό.

Η επιτυχημένη ανάπτυξη της λύσης MCX631102AN-ADAT ConnectX-6 Lx διπλής θύρας 25GbE SFP28 απαιτεί προσεκτικό σχεδιασμό σε επίπεδο δικτύου, διακομιστή και εφαρμογής. Συνιστάται η ακόλουθη σταδιακή προσέγγιση:

Για αναπτύξεις πολλαπλών τοποθεσιών, εξετάστε την υλοποίηση RoCE σε δίκτυα L3 χρησιμοποιώντας προηγμένες λειτουργίες όπως QoS βάσει DSCP και διάδοση ειδοποιήσεων συμφόρησης. Η λύση κάρτας προσαρμογέα Ethernet MCX631102AN-ADAT περιλαμβάνει ολοκληρωμένη υποστήριξη για αυτές τις δυνατότητες.

Η διατήρηση της βέλτιστης απόδοσης απαιτεί ορατότητα στα μοτίβα κίνησης RDMA/RoCE και στην υγεία του προσαρμογέα. Οι ακόλουθες πρακτικές διασφαλίζουν αξιόπιστη λειτουργία:

• Παρακολούθηση Απόδοσης: Χρησιμοποιήστε τα Εργαλεία Mellanox της NVIDIA (mlxtool, ethtool) και τυπικά βοηθητικά προγράμματα Linux για την παρακολούθηση στατιστικών θυρών, μετρητών RDMA και σφαλμάτων PCIe. Βασικές μετρήσεις περιλαμβάνουν πτώσεις συμφόρησης RoCE, καρέ παύσης PFC και πακέτα με σήμανση ECN.
• Διαχείριση Υλικολογισμικού και Προγραμμάτων Οδήγησης: Οι τακτικές ενημερώσεις διασφαλίζουν πρόσβαση στις τελευταίες δυνατότητες και διορθώσεις σφαλμάτων. Το MCX631102AN-ADAT που πωλείται μέσω εξουσιοδοτημένων καναλιών περιλαμβάνει δικαίωμα πρόσβασης στο αποθετήριο εταιρικού λογισμικού της NVIDIA.
• Διαχείριση Συμφόρησης: Εφαρμόστε δυναμική ρύθμιση κατωφλίων για buffers PFC βάσει μοτίβων φόρτου εργασίας. Για εφαρμογές ευαίσθητες στην καθυστέρηση, διαμορφώστε ξεχωριστές ομάδες προτεραιότητας για κίνηση RDMA και παραδοσιακή κίνηση TCP.
• Πλαίσιο Αντιμετώπισης Προβλημάτων: Αναπτύξτε μια συστηματική προσέγγιση για κοινά ζητήματα:
  • Ζητήματα σύνδεσης: Επαληθεύστε τις μονάδες SFP28, την ποιότητα καλωδίου και τις διαπραγματευόμενες ταχύτητες
  • Συνδεσιμότητα RoCE: Επικυρώστε τη συμμετρία διαμόρφωσης PFC σε όλους τους διακόπτες
  • Υποβάθμιση απόδοσης: Ελέγξτε για εξάντληση buffer ή συμφόρηση incast

Οι ολοκληρωμένες προδιαγραφές MCX631102AN-ADAT περιλαμβάνουν εκτεταμένες δυνατότητες διαγνωστικών μέσω μετρητών υλικού και καταχωρητών αποσφαλμάτωσης προσβάσιμων μέσω τυπικών διεπαφών διαχείρισης.

Ο προσαρμογέας διακομιστή Mellanox (NVIDIA) MCX631102AN-ADAT αντιπροσωπεύει ένα θεμελιώδες δομικό στοιχείο για αρχιτεκτονικές κέντρων δεδομένων επόμενης γενιάς. Ενεργοποιώντας την επικοινωνία βάσει RDMA/RoCE σε πυκνότητες 25GbE, αυτή η λύση προσφέρει:

• Μείωση 80-90% στην επιβάρυνση της CPU που σχετίζεται με το δίκτυο, επιτρέποντας την ενοποίηση διακομιστών και τη μείωση του κόστους αδειοδότησης
• Καθυστέρηση κάτω των 10 μικροδευτερολέπτων για επικοινωνία μεταξύ διακομιστών, επιτρέποντας νέες κατηγορίες κατανεμημένων εφαρμογών
• Γραμμική κλιμάκωση απόδοσης με το μέγεθος του συμπλέγματος, εξαλείφοντας τα παραδοσιακά σημεία συμφόρησης δικτύου
• Επένδυση μελλοντικής ασφάλειας με συμβατότητα σε πολλαπλές γενιές υποδομών διακομιστών και αποθήκευσης

Οι οργανισμοί που εξετάζουν την ανάπτυξη μπορούν να λάβουν λεπτομερείς πληροφορίες τιμολόγησης MCX631102AN-ADAT και τεχνική συμβουλευτική από εξουσιοδοτημένους συνεργάτες της NVIDIA Mellanox. Η αποδεδειγμένη αρχιτεκτονική της λύσης και η εκτεταμένη υποστήριξη του οικοσυστήματος την καθιστούν την προτιμώμενη επιλογή για επιχειρήσεις που μεταβαίνουν σε μοντέλα υπολογιστών με επίκεντρο τα δεδομένα.