NVIDIA Mellanox MCX623106AN-CDAT Server Adapter ในการทํางาน
June 10, 2026
ผู้ให้บริการคลาวด์ขนาดกลางเผชิญกับปัญหาที่คุ้นเคยเมื่อไม่นานมานี้: NICs 25GbE ของพวกเขาไม่สามารถติดตามการเติบโตอย่างระเบิดของ NVMe-oF storage และกระจายงานฝึกอบรม AI ได้การใช้งาน CPU มักจะเกิน 70% ในโน้ดการเก็บข้อมูล เนื่องจากค่าใช้จ่ายส่วนสูงของ TCP/IPการใช้งานของแอพพลิเคชั่นในช่วงเวลาสูงสุดNVIDIA Mellanox MCX623106AN-CDATเปลี่ยนแปลงพื้นฐานของพวกเขาผ่าน RDMA และ RoCE
คลัสเตอร์การเก็บของผู้ให้บริการประกอบด้วย 50 ค้อนของ Ceph, แต่ละคันจัดการทั้ง I / O ของลูกค้าและจราจรการจําลองภายใน.การตัด CPU จากการประมวลผลเครือข่ายสูง, ความอ่อนแอที่ไม่สม่ําเสมอภายใต้ภาระงานผสมผสาน, และความอิ่มของแบนด์วิทตะวันออก-ตะวันตก.หลังจากประเมินรายละเอียด MCX623106AN-CDATและใบข้อมูล MCX623106AN-CDAT, ทีมได้เลือกMCX623106AN-CDAT แอดป์เตอร์ ConnectX การ์ดเครือข่าย PCIeสําหรับการใช้งานแบบทดลอง
อาร์คิเทคชั่นใหม่ได้เปลี่ยนตัวปรับแบบเก่าNVIDIA Mellanox MCX623106AN-CDATในแปดโน้ดในการเก็บข้อมูลและสี่โน้ดการคํานวณการ์ด MCX623106AN-CDAT Ethernetมีพอร์ตสองสาย 100Gb/s, PCIe 4.0/5.0, และการสนับสนุน RoCE ของพื้นบ้าน. ขั้นตอนการใช้งานหลักรวมถึง:
- การเปิด DCQCN (Data Center Quantized Congestion Notification) สําหรับการควบคุมความจุกจุก RoCE
- การแยกโดเมน PFC (Priority Flow Control) เพื่อแยกการจองและการฝึก AI
- อัพเกรดเนื้อเยื่อสู่ทอปโลยี Ethernet spine-leaf ที่ไม่มีการสูญเสีย (25ms buffer threshold)
- การใช้งาน NVMe-oF กับ RDMA สําหรับการเข้าถึงสต็อปบล็อก
เครื่อง ASAP2 ของตัวปรับอัตราการอํานวยความสะดวก จัดการแพ็คเก็ตมากกว่า 90 ล้านครั้งต่อวินาทีบนโน้ดการจองข้อมูล โดยเลี่ยง CPU ที่เป็นเจ้าภาพโดยสิ้นเชิงในการเคลื่อนไหวข้อมูลMCX623106AN-CDAT Ethernet การแก้ไขการ์ดปรับเปลี่ยนยังทําให้การเข้ารหัสในระบบได้ โดยไม่ต้องเสียค่าประสิทธิภาพ ✅ เป็นความจําเป็นสําหรับผู้เช่าบริการการเงินของผู้ให้บริการ
หลังจากการใช้ในระบบผลิต 3 เดือน ผู้ให้บริการได้บันทึกการปรับปรุงที่สําคัญ:
| เมทริก | Legacy 25GbE (TCP) | MCX623106AN-CDAT(RoCE) | การปรับปรุง |
|---|---|---|---|
| อัตราเฉลี่ยของความช้า (อ่านสุ่ม 4KB) | 42 μs | 8 μs | - 81% |
| การใช้งาน CPU (สตอเรจเน็ต) | 71% | 19% | - 73% |
| ขนาดความเร็วสูงสุดต่อหน่วย | 21 Gb/s | 98 Gb/s | +367% |
| ความช้าของหาง (เปอร์เซ็นติลที่ 99.9) | 218 μs | 34 μs | - 84% |
รายการการ์ด MCX623106AN-CDAT Ethernetยังพิสูจน์ได้อย่างเต็มที่สอดคล้องกับ MCX623106AN-CDATกับสวิตช์ Cumulus Linux ของผู้ให้บริการและ Ceph BlueStore backend ที่มีอยู่ ไม่มีขัดแย้งของไดรเวอร์หรือฟอร์มแวร์เกิดขึ้นระหว่างการเปิดตัวระยะ
การใช้งานนี้ยืนยันว่าNVIDIA Mellanox MCX623106AN-CDATไม่ใช่แค่การปรับปรุงความกว้างของแบนด์วิธ ครับ มันเปลี่ยนประสิทธิภาพของเซอร์เวอร์โดยพื้นฐาน ผ่าน RDMA/RoCE โดยการลดความจูงในการประมวลผลของเครือข่าย และเปิดให้ใช้งานเอเธอร์เน็ตที่ไม่มีการสูญเสียตัวปรับปรับลดความช้าในการเก็บของ 5 เท่าในขณะที่ปลดปล่อย CPU core สําหรับภาระงานแอปพลิเคชั่นสําหรับผู้บริหารไอทีที่ประเมินMCX623106AN-CDAT ราคาและ ROI ผู้ให้บริการได้ผลตอบแทนของฮาร์ดแวร์ภายในเจ็ดเดือน ผ่านการลดจํานวนเซอร์เวอร์และค่าบริการการอนุญาตต่ํากว่า
ในขณะที่องค์กรมากขึ้นนํา NVMe-oF, GPU RDMA โดยตรง, และบริการไมโครMCX623106AN-CDAT แอดป์เตอร์ ConnectX การ์ดเครือข่าย PCIeเปิดทางที่ผ่านการพิสูจน์ไปยังศูนย์ข้อมูลที่มีความอ่อนแอต่ําและความเร็วสูงMCX623106AN-CDAT สําหรับขายสามารถติดต่อผู้จําหน่าย NVIDIA Mellanox ที่ได้รับอนุญาตรายละเอียด MCX623106AN-CDATและคู่มือการใช้งานใบข้อมูล MCX623106AN-CDAT.

