Mellanox (NVIDIA Mellanox) 920-9B110-00FH-0D0 InfiniBand Switch ทางเทคนิค

July 14, 2026

Mellanox (NVIDIA Mellanox) 920-9B110-00FH-0D0 InfiniBand Switch ทางเทคนิค

Mellanox (NVIDIA Mellanox) 920-9B110-00FH-0D0 โซลูชันทางเทคนิคของสวิตช์ InfiniBand – การเพิ่มประสิทธิภาพการเชื่อมต่อระหว่างกันแบบ Latency ต่ำสำหรับคลัสเตอร์ RDMA/HPC/AI

เอกสารไวท์เปเปอร์ทางเทคนิคนี้นำเสนอสถาปัตยกรรมโซลูชันที่ครอบคลุมซึ่งสร้างขึ้นโดยคำนึงถึงเมลลาน็อกซ์ (NVIDIA เมลลาน็อกซ์) 920-9B110-00FH-0D0สวิตช์ InfiniBand เอกสารนี้มุ่งเป้าไปที่สถาปนิกเครือข่าย วิศวกรก่อนการขาย และผู้นำการปฏิบัติงาน โดยมีรายละเอียดวิธีการ920-9B110-00FH-0D0มอบความหน่วงต่ำตามที่กำหนด RDMA แบบไม่สูญเสีย และแบนด์วิดท์ HDR ที่ปรับขนาดได้ 200 Gb/s สำหรับคลัสเตอร์ HPC และ AI ขนาดกลางถึงขนาดใหญ่ เราครอบคลุมการออกแบบสถาปัตยกรรม เทคโนโลยีที่สำคัญ โทโพโลยีการปรับใช้ แนวทางปฏิบัติที่ดีที่สุดในการปฏิบัติงาน และการประเมินมูลค่า

1. การวิเคราะห์ความเป็นมาและความต้องการของโครงการ

การฝึกอบรม AI สมัยใหม่ การจำลองทางวิทยาศาสตร์ และการวิเคราะห์ที่ต้องใช้ข้อมูลจำนวนมากต้องการแฟบริคเครือข่ายที่ให้เวลาแฝงต่ำกว่าไมโครวินาทีที่สม่ำเสมอ การสูญเสียแพ็กเก็ตเป็นศูนย์ และแบนด์วิดท์แบบแยกส่วนสูง โซลูชันที่ใช้อีเทอร์เน็ตแบบดั้งเดิม แม้ว่าจะมีการปรับปรุง RoCEv2 ก็มักจะขาดประสิทธิภาพเนื่องจากการจัดการความแออัดที่ซับซ้อน ค่าใช้จ่ายในการปรับแต่ง PFC และความหน่วงแฝงที่คาดเดาไม่ได้ภายใต้โหลด สำหรับองค์กรที่ใช้งานคลัสเตอร์ที่มีโหนด GPU 64 ถึง 512 มีความต้องการที่ชัดเจนสำหรับการเชื่อมต่อระหว่างกันที่สร้างขึ้นตามวัตถุประสงค์ที่สร้างสมดุลระหว่างประสิทธิภาพ ต้นทุน และความเรียบง่ายในการดำเนินงาน

ข้อกำหนดโครงการหลักที่ระบุในการปรับใช้ HPC/AI ทั่วไป ได้แก่:

  • เวลาแฝงของสวิตช์จากต้นทางถึงปลายทาง < 1 μs (พอร์ตต่อพอร์ต) ภายใต้โหลดเต็ม
  • ผ้าไร้การสูญเสียพร้อมกับการหยดแพ็กเก็ตที่เกิดจากความแออัดเป็นศูนย์
  • โทโพโลยีที่ปรับขนาดได้รองรับโหนด 64–512 พร้อมแบนด์วิดท์แบบแบ่งครึ่งเต็ม
  • การดำเนินงานที่ง่ายขึ้นด้วยการวัดและส่งข้อมูลทางไกลในตัวและการกู้คืนข้อผิดพลาดอัตโนมัติ
  • ราคาต่อพอร์ตที่คุ้มค่าสำหรับงบประมาณระดับกลาง

ที่NVIDIA เมลลาน็อกซ์ 920-9B110-00FH-0D0ตอบสนองความต้องการเหล่านี้โดยตรงโดยการรวมเทคโนโลยี HDR (อัตราข้อมูลสูง) 200 Gb/s การกำหนดเส้นทางแบบปรับได้ และการถ่ายโอนข้อมูลโดยรวมของ SHARP ไว้ในแพลตฟอร์ม 1U ที่ประหยัดพลังงาน ที่920-9B110-00FH-0D0 สวิตช์ InfiniBand OPNลดความซับซ้อนในการจัดซื้อด้วยหมายเลขชิ้นส่วนการสั่งซื้อที่ชัดเจน ช่วยให้มั่นใจได้ถึงการกำหนดค่าที่สอดคล้องกันตลอดการใช้งาน

2. การออกแบบสถาปัตยกรรมเครือข่าย / ระบบโดยรวม

สถาปัตยกรรมที่แนะนำเป็นไปตามโทโพโลยี leaf-spine (fat-tree) สองชั้น ซึ่งให้แบนด์วิธแบบแบ่งครึ่งเต็มรูปแบบและมีความยืดหยุ่นสูง แต่ละลีฟบล็อกประกอบด้วยชั้นวางหลายชั้น โดยแต่ละชั้นจะมีชั้นวาง 2 ชั้น920-9B110-00FH-0D0สวิตช์เพื่อความซ้ำซ้อน เลเยอร์สไปน์จะรวมการรับส่งข้อมูลจากลีฟสวิตช์ทั้งหมด ทำให้มั่นใจได้ว่าการสื่อสารจะไม่มีการปิดกั้นระหว่างจุดปลายทั้งสองจุด สำหรับคลัสเตอร์ 256-GPU ทั่วไป การออกแบบนี้ใช้สวิตช์ leaf แปดตัว (แต่ละสวิตช์เชื่อมต่อโหนด GPU 32 โหนดผ่านลิงก์ 200G) และสวิตช์สไปน์สี่ตัว ซึ่งทั้งหมดเชื่อมต่อถึงกันโดยใช้สายออปติคอลหรือ DAC 200G HDR

ความหนาแน่น 200 Gb/s ของสวิตช์ต่อพอร์ตช่วยให้มีโทโพโลยีที่ยืดหยุ่น ได้แก่:

  • การปิด 3 ขั้นตอน (ต้นอ้วน):เหมาะสำหรับปริมาณงานที่สมดุลด้วยรูปแบบการรับส่งข้อมูลที่คาดการณ์ได้
  • แมลงปอ+:สำหรับคลัสเตอร์ขนาดใหญ่พิเศษที่ต้องการรัศมีสูงและการสื่อสารระดับโลกที่มีประสิทธิภาพ

ที่920-9B110-00FH-0D0 MQM8790-HS2F 200Gb/s HDRแพลตฟอร์มรองรับสวิตช์ ทำให้มั่นใจได้ถึงความเข้ากันได้กับระบบนิเวศ HDR ของ NVIDIA รวมถึงอะแดปเตอร์ ConnectX-6 และ ConnectX-7 ที่เข้ากันได้ 920-9B110-00FH-0D0การออกแบบยังรองรับออพติกของบุคคลที่สามที่ได้รับการตรวจสอบผ่านโปรแกรมพันธมิตรของ NVIDIA ซึ่งให้ความยืดหยุ่นในการปรับใช้

3. บทบาทและคุณลักษณะสำคัญของเมลลาน็อกซ์ (NVIDIA เมลลาน็อกซ์) 920-9B110-00FH-0D0ในโซลูชั่น

ที่NVIDIA เมลลาน็อกซ์ 920-9B110-00FH-0D0เป็นรากฐานสำคัญของโซลูชันนี้ โดยมอบชุดความสามารถด้านเครือข่ายขั้นสูงที่แข็งแกร่ง:

  • HDR 200 Gb/s ต่อพอร์ต– พร้อมสวิตช์แบบตัดผ่านที่ให้ค่าหน่วงเวลาระหว่างพอร์ตต่อพอร์ตต่ำกว่า 900 ns เหมาะสำหรับปริมาณงาน RDMA และ MPI ที่ไวต่อค่าหน่วงเวลา
  • การกำหนดเส้นทางแบบปรับเปลี่ยนได้– เลือกเส้นทางที่มีความแออัดน้อยที่สุดแบบไดนามิกต่อแพ็กเก็ต หลีกเลี่ยงการเชื่อมโยงฮอตสปอตและรักษาประสิทธิภาพที่สม่ำเสมอแม้ภายใต้รูปแบบการรับส่งข้อมูลที่ไม่สมมาตร
  • SHARPv2 (โปรโตคอลการรวมและการลดลำดับชั้นที่ปรับขนาดได้)– ถ่ายการสื่อสารโดยรวม (ลดทั้งหมด ออกอากาศ) จาก CPU ของโฮสต์ ลดการพูดคุยผ่านเครือข่าย และปรับปรุงประสิทธิภาพการฝึกอบรม AI ได้ถึง 25%
  • การประมวลผลในเครือข่าย– รองรับการลดและแบ่งส่วนข้อมูล ทำให้ทรัพยากร GPU อันมีค่าว่างสำหรับการคำนวณ
  • การวัดระยะไกลขั้นสูง– ตัวนับต่อพอร์ต ฮิสโตแกรมการใช้บัฟเฟอร์ และตัววัดเวลาแฝงระดับพาธ ทั้งหมดสามารถส่งออกได้ผ่าน UFM หรือ REST API สำหรับการตรวจสอบเชิงรุก

ที่ข้อมูลจำเพาะ 920-9B110-00FH-0D0ยังรวมถึงการรองรับ DAC ทองแดงแบบพาสซีฟและโมดูลออปติคัลแบบแอคทีฟ ซึ่งให้ความยืดหยุ่นด้านระยะห่างจากภายในแร็ค (≤5 ม.) ไปจนถึงอินเตอร์แร็ค (สูงสุด 100 ม. พร้อมออปติก 200G SR4) สำหรับองค์กรที่ต้องการการใช้งานที่มีความหนาแน่นสูง ฟอร์มแฟคเตอร์ 1U ของสวิตช์และการใช้พลังงานต่ำ (ประมาณ 1.5 วัตต์ต่อพอร์ต) จะช่วยลดค่าใช้จ่ายในการดำเนินงานให้เหลือน้อยที่สุด

4. คำแนะนำในการปรับใช้และการปรับขนาด (โทโพโลยีทั่วไป)

สำหรับการปรับใช้แบบเป็นขั้นตอน เราขอแนะนำแนวทางต่อไปนี้:

  • เฟส 1 – ไพล็อต (64 โหนด GPU):ติดตั้งสวิตช์ลีฟ 2 อันและสวิตช์สไปน์ 2 อัน ตรวจสอบประสิทธิภาพเทียบกับเอกสารข้อมูลสินค้า 920-9B110-00FH-0D0พารามิเตอร์ที่มุ่งเน้นไปที่เวลาแฝง ปริมาณงาน และประสิทธิภาพออฟโหลดของ SHARP
  • เฟส 2 – การขยายขนาด (128–256 โหนด):เพิ่มสวิตช์ลีฟโดยเพิ่มขั้นละ 2 ต่อแร็ค และสวิตช์สไปน์ตามความจำเป็นเพื่อรักษาการสมัครสมาชิกเกิน ≤ 1:1 ความหนาแน่นของพอร์ต 200G ช่วยให้สวิตช์ลีฟเดี่ยวรองรับโหนด 32–64 ได้ (ขึ้นอยู่กับความเร็วอัปลิงก์ของโหนด)
  • เฟส 3 – หลายระนาบ (512+ โหนด):ใช้แฟบริคอิสระหลายตัว (เช่น ระนาบ 2× หรือ 4×) พร้อมการปรับสมดุลโหลดตามเส้นทาง โดยใช้ประโยชน์จากการรองรับสวิตช์สำหรับเลนเสมือนและคีย์พาร์ติชัน

การเดินสายเคเบิลทั่วไปใช้ OSFP‑to‑OSFP DAC สำหรับการเชื่อมต่อภายในชั้นวาง (≤3 ม.) และโมดูลออปติคัล OSFP‑to‑200G SR4 สำหรับระยะห่างของกระดูกสันหลังสูงสุด 100 ม. ที่โซลูชัน OPN สวิตช์ InfiniBand 920-9B110-00FH-0D0ลดความยุ่งยากในการขนส่ง – OPN รับประกันการแก้ไขฮาร์ดแวร์และเฟิร์มแวร์ที่สอดคล้องกันในทุกหน่วย ช่วยลดข้อผิดพลาดในการปรับใช้

5. การดำเนินงาน การตรวจสอบ การวินิจฉัยข้อผิดพลาด และการเพิ่มประสิทธิภาพ

การดำเนินงานที่มีประสิทธิผลมีความสำคัญอย่างยิ่งต่อการรักษาเวลาแฝงในการผลิตให้ต่ำ โซลูชั่นบูรณาการกับNVIDIA UFM (ตัวจัดการแฟบริคแบบรวม)ซึ่งมี:

  • แดชบอร์ดแบบเรียลไทม์– แบนด์วิธต่อพอร์ต ตัวนับข้อผิดพลาด และแผนที่ความหนาแน่นของความแออัด
  • การเพิ่มประสิทธิภาพเส้นทางอัตโนมัติอีกครั้ง– เมื่อลิงก์เสียหรือล้มเหลว UFM จะคำนวณเส้นทางใหม่และกำหนดค่าตารางเส้นทางแบบปรับได้ใหม่โดยไม่มีการแทรกแซงของผู้ปฏิบัติงาน
  • การวัดทางไกลทางประวัติศาสตร์– จัดเก็บข้อมูลเวลาแฝงและการไหลสำหรับการวิเคราะห์หลังชันสูตรและการวางแผนกำลังการผลิต

ขั้นตอนการแก้ไขปัญหาและการปรับให้เหมาะสมที่แนะนำ:

  1. ตรวจสอบเฟรมและการละทิ้งการหยุดชั่วคราวต่อพอร์ต– คาดว่าจะทิ้งเป็นศูนย์ การละทิ้งใดๆ บ่งชี้ถึงการกำหนดค่าที่ไม่ถูกต้องหรือออพติคที่ผิดพลาด ใช้การแจ้งเตือน UFM เพื่อระบุปัญหาในเชิงรุก
  2. ตรวจสอบการทำงานของ SHARPv2– ตรวจสอบสถิติโดยรวมของ UFM เพื่อให้แน่ใจว่าการดำเนินการลดได้รับการลดภาระลง ถ้าไม่เช่นนั้น ให้ตรวจสอบการกำหนดค่าเฟิร์มแวร์และอะแดปเตอร์
  3. ปรับเกณฑ์การกำหนดเส้นทางแบบปรับได้ให้เหมาะสม– ปรับช่วงการตรวจจับโหลดตามรูปแบบภาระงาน ที่920-9B110-00FH-0D0ช่วยให้ปรับแต่งได้อย่างละเอียดผ่านอินเทอร์เฟซการจัดการ
  4. อัพเดตเฟิร์มแวร์เป็นประจำ– พร้อมใช้งานผ่านพอร์ทัลสนับสนุนของ NVIDIA รวมถึงการปรับปรุงประสิทธิภาพและแพตช์ความปลอดภัย

สำหรับองค์กรที่ทำการประเมินราคา 920-9B110-00FH-0D0ความเรียบง่ายในการปฏิบัติงานและค่าใช้จ่ายด้านวิศวกรรมที่ลดลง ส่งผลให้ต้นทุนรวมในการเป็นเจ้าของลดลงโดยตรง เมื่อเทียบกับทางเลือกอีเธอร์เน็ตที่ต้องมีการปรับแต่งอย่างต่อเนื่อง

6. สรุปและการประเมินมูลค่า

ที่เมลลาน็อกซ์ (NVIDIA เมลลาน็อกซ์) 920-9B110-00FH-0D0นำเสนอรากฐานที่คุ้มค่าและผ่านการพิสูจน์แล้วสำหรับเครือข่ายคลัสเตอร์ RDMA/HPC/AI ด้วยการรวมความเร็ว HDR 200 Gb/s การประมวลผลในเครือข่ายขั้นสูง และการวัดระยะไกลที่มีประสิทธิภาพ จะช่วยขจัดปัญหาคอขวดของประสิทธิภาพแบบเดิม และให้เส้นทางการอัปเกรดที่ชัดเจนจากแฟบริคอีเทอร์เน็ตที่ประสบปัญหา ข้อเสนอคุณค่าที่สำคัญ ได้แก่ :

  • ผลงาน:เวลาแฝงต่ำกว่า 900 ns, การสูญเสียแพ็กเก็ตเป็นศูนย์ และการดำเนินการโดยรวมเร็วขึ้นสูงสุด 25% ผ่าน SHARPv2
  • ความสามารถในการขยายขนาด:รองรับคลัสเตอร์โหนด 64–512+ ที่มีแบนด์วิดท์การแบ่งส่วนเต็มรูปแบบ ปรับให้เข้ากับโทโพโลยีทั้ง Fat Tree และ Dragonfly+ ได้
  • ประสิทธิภาพการดำเนินงาน:การรวม UFM และการกู้คืนข้อผิดพลาดอัตโนมัติช่วยลดการแทรกแซงด้วยตนเองได้มากกว่า 80%
  • ความคุ้มค่า:ราคาต่อพอร์ตที่แข่งขันได้ (ราคา 920-9B110-00FH-0D0) และการใช้พลังงานต่ำทำให้เกิด TCO ที่น่าสนใจ

ที่เอกสารข้อมูลสินค้า 920-9B110-00FH-0D0และข้อมูลจำเพาะ 920-9B110-00FH-0D0ให้รายละเอียดด้านเทคนิคที่ครอบคลุม และมีหน่วยพร้อมใช้งาน (ขาย 920-9B110-00FH-0D0ผ่านเครือข่ายช่องทางทั่วโลกของ NVIDIA) ความเข้ากันได้ของสวิตช์กับอะแดปเตอร์ NVIDIA ที่มีอยู่ทำให้เส้นทางการโยกย้ายราบรื่นสำหรับองค์กรที่ลงทุนในระบบนิเวศของ Mellanox แล้ว

โดยสรุป โซลูชันทางเทคนิคนี้อิงจากโซลูชัน OPN สวิตช์ InfiniBand 920-9B110-00FH-0D0มอบแฟบริคที่แข็งแกร่งและมีประสิทธิภาพในการดำเนินงานซึ่งตรงตามข้อกำหนดการเชื่อมต่อระหว่างกันที่มีความหน่วงต่ำซึ่งเป็นที่ต้องการมากที่สุด ซึ่งเป็นรากฐานที่สำคัญสำหรับการประมวลผล AI และ HPC รุ่นต่อไป