เอกสารทางเทคนิคทางเทคนิคของสายเคเบิลออปติคอล Mellanox (NVIDIA Mellanox) MFS1S00-H015V AOC Active

1. ความเป็นมาของโครงการและการวิเคราะห์ข้อกำหนด

ศูนย์ข้อมูลองค์กรและสิ่งอำนวยความสะดวก HPC กำลังประสบกับการเติบโตอย่างที่ไม่เคยมีมาก่อนทั้งในด้านความหนาแน่นของการประมวลผลและแบนด์วิดท์เครือข่าย ในขณะที่องค์กรปรับใช้คลัสเตอร์ AI ที่เร่งด้วย GPU และระบบจัดเก็บข้อมูลแบบกระจายขนาดใหญ่ การเชื่อมต่อระหว่างชั้นวางกลายเป็นปัญหาคอขวดที่สำคัญ ไม่ใช่ในแง่ของทรูพุตดิบ แต่ในการปรับใช้ทางกายภาพ การจัดการสายเคเบิล และความน่าเชื่อถือในการปฏิบัติงาน ปัญหาจะรุนแรงเป็นพิเศษสำหรับระยะห่างระหว่าง 10 ถึง 30 เมตร ซึ่งแสดงถึงการเชื่อมต่อแบบแร็คถึงแร็คและแบบลีฟถึงกระดูกสันหลังส่วนใหญ่ในศูนย์ข้อมูลสมัยใหม่

Direct Attach Cables (DAC) ที่เป็นทองแดงแบบดั้งเดิมที่ความเร็ว 200Gb/s ประสบปัญหาความสมบูรณ์ของสัญญาณลดลงอย่างมากเกินกว่า 5 เมตร แม้ว่า DAC บางตัวที่มีรีไทม์เมอร์แบบแอคทีฟสามารถขยายได้ไกลถึง 10 เมตร แต่ก็ยังมีขนาดใหญ่ แข็ง และยากต่อการกำหนดเส้นทางผ่านระบบการจัดการสายเคเบิลมาตรฐาน ตัวเลือกตัวรับส่งสัญญาณแบบออปติคอลแบบแยกที่จับคู่กับจัมเปอร์ไฟเบอร์แบบแยก ให้การเข้าถึงที่ดีเยี่ยม แต่มีจุดเสียหายหลายจุด ต้องใช้ทักษะการติดตั้งเฉพาะทาง และเพิ่มโครงสร้างต้นทุนต่อพอร์ตอย่างมาก

สถาปนิกเครือข่าย วิศวกรโครงสร้างพื้นฐาน และผู้จัดการฝ่ายปฏิบัติการต่างมองหาโซลูชันที่มอบประสิทธิภาพและการเข้าถึงของไฟเบอร์ออปติก ขณะเดียวกันก็รักษาความเรียบง่ายในการปฏิบัติงานของสายเคเบิลแบบปลั๊กแอนด์เพลย์ที่ต่อไว้ล่วงหน้าไว้ เอกสารไวท์เปเปอร์นี้นำเสนอโซลูชันทางเทคนิคที่ครอบคลุมโดยมีศูนย์กลางอยู่ที่เมลลาน็อกซ์ (NVIDIA เมลลาน็อกซ์) MFS1S00-H015Vสายออปติคอลแบบแอคทีฟ ออกแบบมาเป็นพิเศษเพื่อรับมือกับความท้าทายในการเชื่อมต่อในระยะสั้น

2. การออกแบบสถาปัตยกรรมเครือข่าย/ระบบโดยรวม

สถาปัตยกรรมที่แนะนำเป็นไปตามโทโพโลยีแบบกระดูกสันหลังแบบสองชั้น ซึ่งเป็นการออกแบบที่โดดเด่นสำหรับแฟบริค InfiniBand ที่มีประสิทธิภาพสูง เนื่องจากความสามารถในการปรับขนาด เวลาแฝงที่คาดการณ์ได้ และแบนด์วิดท์แบบแยกส่วนสูง ในการออกแบบนี้ สวิตช์ลีฟจะอยู่ที่ด้านบนของชั้นวางเซิร์ฟเวอร์แต่ละแร็ค โดยรวบรวมการประมวลผลและการจัดเก็บข้อมูลจากอะแดปเตอร์ช่องโฮสต์ (HCA) และเชื่อมต่อกับสวิตช์สไปน์คู่ที่ซ้ำซ้อนซึ่งอยู่ในแถวสไปน์เฉพาะ การเชื่อมต่อระหว่างสวิตช์ลีฟและสไปน์แสดงถึงส่วนที่สำคัญแบบแร็คทูแร็คโดยที่MFS1S00-H015Vมอบคุณค่าสูงสุดให้กับมัน

สวิตช์ลีฟแต่ละตัวมีพอร์ตอัปลิงค์ QSFP56 หลายพอร์ต และการเชื่อมต่อกับเลเยอร์สไปน์ถูกสร้างขึ้นโดยใช้MFS1S00-H015V 200G QSFP56 สายเคเบิล AOC. Active Optics แบบบูรณาการของสายเคเบิลช่วยลดความจำเป็นในการใช้ตัวรับส่งสัญญาณแยกกัน ช่วยลดรายการวัสดุทั้งหมดต่อการเชื่อมต่อจากส่วนประกอบ 6 ชิ้น (ตัวรับส่งสัญญาณ 2 ตัว ตัวเชื่อมต่อไฟเบอร์ 2 ตัว แผงแพทช์ 2 ตัว) เหลือเพียง 2 จุดปลายทาง การลดความซับซ้อนนี้ช่วยลดการสูญเสียการแทรก กำจัดการจัดการขั้วไฟฟ้า และปรับปรุงเอกสารประกอบเกี่ยวกับสายเคเบิลให้มีประสิทธิภาพอย่างมาก

ที่MFS1S00-H015V สายเคเบิลออปติคอลที่ใช้งาน InfiniBand HDR 200Gb/sเข้ากันได้อย่างสมบูรณ์กับสวิตช์ NVIDIA Mellanox Quantum HDR InfiniBand และอะแดปเตอร์ ConnectX-6 HDR ช่วยให้มั่นใจได้ถึงการผสานรวมเข้ากับแฟบริคที่มีอยู่ได้อย่างราบรื่น สถาปัตยกรรมสามารถปรับขนาดจาก 8 แร็คเป็นมากกว่า 100 แร็ค ในขณะที่ยังคงรักษาเวลาแฝงที่คาดการณ์ได้และประสิทธิภาพที่ไม่ปิดกั้น

3. บทบาทและลักษณะสำคัญของเมลลาน็อกซ์ (NVIDIA เมลลาน็อกซ์) MFS1S00-H015Vในโซลูชั่น

ที่MFS1S00-H015Vทำหน้าที่เป็นองค์ประกอบพื้นฐานสำหรับเลเยอร์การเชื่อมต่อระหว่างใบไม้ถึงกระดูกสันหลัง ลักษณะทางเทคนิคตามที่ระบุไว้ในเอกสารเอกสารข้อมูลสินค้า MFS1S00-H015Vได้รับการปรับให้เหมาะสมโดยเฉพาะสำหรับการใช้งานที่มีการเข้าถึงระยะสั้นถึงปานกลาง:

• ความสมบูรณ์ของสัญญาณ:ให้การส่งข้อมูลที่ปราศจากข้อผิดพลาด (BER < 1E-15) ที่ 200Gb/s ในระยะทางตั้งแต่ 5 ถึง 100 เมตร พร้อมประสิทธิภาพที่ดีที่สุดในจุดเชื่อมต่อ 10–30 เมตรสำหรับการเชื่อมต่อแบบแร็คทูแร็ค
• เครื่องยนต์ออปติคอลที่ใช้งานอยู่:ออปติกที่ใช้ VCSEL แบบฝังและวงจรปรับสภาพสัญญาณช่วยให้มั่นใจได้ถึงประสิทธิภาพที่สม่ำเสมอ โดยไม่คำนึงถึงสัญญาณรบกวนทางไฟฟ้าหรือความซับซ้อนของเส้นทางสายเคเบิล
• ฟอร์มแฟกเตอร์:ตัวเชื่อมต่อ QSFP56 ที่ปลายทั้งสองข้างรักษาความเข้ากันได้กับโครงสร้างพื้นฐานสวิตช์และอะแดปเตอร์ที่มีอยู่ ในขณะที่ใยแก้วนำแสงแบบบางช่วยลดปริมาณถาดสายเคเบิลได้มากกว่า 60% เมื่อเทียบกับทองแดงที่เทียบเท่า
• การตรวจสอบการวินิจฉัยแบบดิจิตอล (DDM):การตรวจสอบบนพื้นฐาน I²C ในตัวช่วยให้มองเห็นอุณหภูมิ แรงดันไฟฟ้า กระแสไบแอสของเลเซอร์ และกำลังรับแสงได้แบบเรียลไทม์ ตามรายละเอียดในสเปค MFS1S00-H015V.
• ประสิทธิภาพการใช้พลังงาน:กินไฟน้อยกว่า 3.5W ต่อปลาย ซึ่งตรงกับโปรไฟล์กำลังของโซลูชันทองแดงแบบพาสซีฟ ขณะเดียวกันก็ให้ประสิทธิภาพที่เหนือกว่า

สายก็คือรองรับการใช้งาน MFS1S00-H015Vด้วยสวิตช์ NVIDIA Mellanox Quantum และ Spectrum ทั้งหมด รวมถึงอุปกรณ์ของบุคคลที่สามที่เป็นไปตามมาตรฐาน QSFP56 MSA และ IBTA ความเข้ากันได้ในวงกว้างนี้ช่วยให้มั่นใจได้ว่าองค์กรต่างๆ สามารถปรับใช้ได้MFS1S00-H015Vโดยไม่ต้องใช้อินเทอร์เฟซที่เป็นกรรมสิทธิ์หรือการล็อคอินของผู้ขาย

4. คำแนะนำในการปรับใช้และการขยายด้วยโทโพโลยีทั่วไป

กำลังปรับใช้MFS1S00-H015Vปฏิบัติตามกระบวนการที่มีโครงสร้างซึ่งช่วยลดความเสี่ยงและเร่งเวลาในการให้บริการ เวิร์กโฟลว์การปรับใช้ที่แนะนำประกอบด้วยสี่ขั้นตอน:

ระยะที่ 1 – การวางแผนทางกายภาพ:วัดเส้นทางสายเคเบิลระหว่างตำแหน่งสวิตช์ลีฟและสไปน์อย่างแม่นยำ รวมถึงเส้นทางการจัดการสายเคเบิลในแนวตั้งและแนวนอน ที่MFS1S00-H015Vมีความยาวมาตรฐาน การเลือกความยาวที่เหมาะสมจะช่วยลดรอบการบริการให้เหลือน้อยที่สุด ในขณะเดียวกันก็ให้การหย่อนที่เพียงพอสำหรับการบำรุงรักษาในอนาคต การออกแบบพ็อด 16 แร็คทั่วไปต้องใช้อัปลิงก์ 8 อัปต่อสวิตช์ลีฟไปยังสวิตช์สไปน์สองตัว ส่งผลให้มีสายเคเบิล 128 เส้นสำหรับพ็อดเต็ม

ระยะที่ 2 – การยืนยันก่อนการติดตั้ง:ยืนยันว่าพอร์ตสวิตช์ลีฟและสไปน์ทั้งหมดได้รับการกำหนดค่าสำหรับการทำงาน InfiniBand HDR ที่ 200Gb/s รีวิวเอกสารข้อมูลสินค้า MFS1S00-H015Vเพื่อตรวจสอบความเข้ากันได้ของเฟิร์มแวร์และระบุข้อกำหนดการกำหนดค่าก่อนการติดตั้ง

ขั้นตอนที่ 3 - การติดตั้งทางกายภาพ:ติดตั้งMFS1S00-H015Vสายเคเบิลโดยการเสียบตัวเชื่อมต่อ QSFP56 เข้ากับพอร์ตอัปลิงค์ที่กำหนดบนสวิตช์ลีฟและสไปน์ การออกแบบแถบดึงช่วยให้ใส่และถอดได้อย่างปลอดภัยโดยไม่ต้องรัดขั้วต่อที่อยู่ติดกัน เดินเส้นใยไปตามทางเดินเฉพาะ โดยรักษารัศมีการโค้งงอขั้นต่ำ 30 มม. ตามที่ระบุไว้ในเอกสารประกอบของผลิตภัณฑ์ เส้นผ่านศูนย์กลางของสายเคเบิลที่ลดลงทำให้สามารถรวมกลุ่มความหนาแน่นสูงในตัวจัดการสายเคเบิลแนวตั้งได้

ระยะที่ 4 – การนำลิงก์ขึ้นมาและการตรวจสอบความถูกต้อง:หลังการติดตั้ง ให้ตรวจสอบสถานะลิงก์โดยใช้อินเทอร์เฟซการจัดการสวิตช์ ที่MFS1S00-H015V 200G QSFP56 โซลูชันสายเคเบิล AOCรองรับการเจรจาอัตโนมัติ ทำให้การนำขึ้นมาง่ายขึ้น ใช้การอ่านค่า DDM เพื่อยืนยันว่ากำลังรับแสง อุณหภูมิ และแรงดันไฟฟ้าอยู่ภายในช่วงการทำงานปกติ บันทึกค่า DDM พื้นฐานสำหรับการเปรียบเทียบในอนาคตระหว่างการแก้ไขปัญหา

สำหรับการขยายตัวนั้นMFS1S00-H015Vปรับขนาดได้อย่างลงตัว สามารถเชื่อมต่อชั้นวางเพิ่มเติมกับสวิตช์สไปน์ที่มีอยู่ได้โดยการเพิ่มสายเคเบิล AOC ให้กับพอร์ตที่มีอยู่ เมื่ออัพเกรดโครงสร้างพื้นฐานจาก 100G เป็น 200G ความจุของสายเคเบิล 200Gb/s ช่วยเพิ่มแบนด์วิดท์ในอนาคตโดยไม่ต้องเปลี่ยนสายเคเบิล

5. การตรวจสอบการดำเนินงาน การแก้ไขปัญหา และการเพิ่มประสิทธิภาพ

การจัดการแฟบริค InfiniBand ขนาดใหญ่อย่างมีประสิทธิผลจำเป็นต้องมีการตรวจสอบที่ครอบคลุมและความสามารถในการแก้ไขปัญหาที่รวดเร็ว ที่MFS1S00-H015Vผสานรวมกับระบบนิเวศการจัดการเครือข่ายของ NVIDIA Mellanox เพื่อมอบความสามารถเหล่านี้:

การติดตามสุขภาพเชิงรุก:คุณสมบัติ DDM ให้การติดตามพารามิเตอร์ที่สำคัญอย่างต่อเนื่อง ผู้ดูแลระบบเครือข่ายสามารถกำหนดค่าการแจ้งเตือนเกณฑ์สำหรับการเบี่ยงเบนของอุณหภูมิ แรงดันไฟฟ้า และพลังงานแสงได้โดยใช้อินเทอร์เฟซการจัดการสวิตช์มาตรฐาน การตรวจจับการอ่าน DDM ที่ผิดปกติตั้งแต่เนิ่นๆ เช่น กำลังรับลดลงอย่างค่อยเป็นค่อยไป ช่วยให้สามารถบำรุงรักษาเชิงป้องกันก่อนที่การเชื่อมต่อจะล้มเหลว ที่สเปค MFS1S00-H015Vบันทึกช่วงการทำงานที่ระบุเพื่อใช้อ้างอิง

การแยกตัวไม่เป็นผล:เมื่อตรวจพบปัญหาการเชื่อมต่อ ข้อมูล DDM จะช่วยแยกความแตกต่างระหว่างปัญหาเกี่ยวกับสายเคเบิลและข้อบกพร่องด้านสวิตช์ โดยทั่วไปกำลังรับที่ลดลงอย่างกะทันหันบ่งบอกถึงการปนเปื้อนของเส้นทางแสงหรือความเสียหายของสายเคเบิล ในขณะที่การสูญเสียกระแสไบแอสของเลเซอร์บ่งบอกถึงปัญหาที่ปลายการส่งสัญญาณ ความสามารถในการวินิจฉัยนี้ช่วยลดเวลาเฉลี่ยในการซ่อมแซม (MTTR) ได้อย่างมาก

ทัศนวิสัยกว้างผ้า:ที่NVIDIA Mellanox MFS1S00-H015Vข้อมูล DDM ผสานรวมกับ NVIDIA UFM (Unified Fabric Manager) และแพลตฟอร์มการวัดและส่งข้อมูลทางไกลอื่นๆ ช่วยให้เกิดความสัมพันธ์ของการวินิจฉัยเลเยอร์ทางกายภาพกับตัวชี้วัดประสิทธิภาพทั่วทั้ง Fabric การมองเห็นนี้สนับสนุนการวางแผนกำลังการผลิต การจัดวางปริมาณงาน และการวิเคราะห์สาเหตุที่แท้จริง

แนวทางปฏิบัติที่ดีที่สุดในการแก้ปัญหา:เมื่อแก้ไขปัญหาลิงก์ที่ใช้งานไม่ได้ ลำดับที่แนะนำคือ: (1) ตรวจสอบการเชื่อมต่อทางกายภาพที่ปลายทั้งสองด้าน; (2) ตรวจสอบการอ่าน DDM เพื่อหาพารามิเตอร์ที่อยู่นอกช่วง (3) ตรวจสอบสถานะพอร์ตสวิตช์และการกำหนดค่า (4) หากการวินิจฉัยไม่สามารถสรุปได้ ให้เปลี่ยนสายเคเบิลกับยูนิตที่ทราบว่าใช้งานได้ ผ่านการทดสอบจากโรงงานMFS1S00-H015Vได้แสดงให้เห็นถึงความน่าเชื่อถือที่ยอดเยี่ยมในสภาพแวดล้อมการผลิต โดยความล้มเหลวที่เกิดจากสายเคเบิลนั้นพบได้น้อยมาก

การเพิ่มประสิทธิภาพต้นทุน:ในขณะที่ราคา MFS1S00-H015Vต่อหน่วยเกินกว่า DAC ทองแดง การวิเคราะห์ต้นทุนรวมในการเป็นเจ้าของ (TCO) มักจะสนับสนุนโซลูชันออปติกแบบแอคทีฟอย่างต่อเนื่อง ลดต้นทุนการทำความเย็น ลดแรงงานในการจัดการสายเคเบิล ขจัดการจัดซื้อตัวรับส่งสัญญาณ และความน่าเชื่อถือที่ดีขึ้น ส่งผลให้ ROI เป็นบวกภายในปีแรกของการดำเนินงาน องค์กรควรประเมินผลขาย MFS1S00-H015Vตัวเลือกผ่านข้อตกลงการจัดซื้อปริมาณเพื่อปรับโครงสร้างต้นทุนให้เหมาะสม

6. สรุปและการประเมินมูลค่า

ที่เมลลาน็อกซ์ (NVIDIA เมลลาน็อกซ์) MFS1S00-H015Vสายเคเบิลออปติคอลแบบแอคทีฟแสดงถึงแนวทางการเปลี่ยนแปลงในการเชื่อมต่อระหว่างชั้นวางในระยะสั้นในศูนย์ข้อมูลประสิทธิภาพสูง ด้วยการรวมความเรียบง่ายแบบพลักแอนด์เพลย์ของ DAC เข้ากับความสมบูรณ์ของสัญญาณและการเข้าถึงของไฟเบอร์ออปติก จะช่วยแก้ไขช่องว่างที่สำคัญในพอร์ตโฟลิโอการเชื่อมต่อระหว่างกันที่บังคับสถาปนิกเครือข่ายมายาวนานให้ต้องยอมประนีประนอมโซลูชัน

ที่MFS1S00-H015V 200G QSFP56 โซลูชันสายเคเบิล AOCมอบประโยชน์ที่วัดได้ในหลายมิติ: ความหนาแน่นของสายเคเบิลดีขึ้นกว่า 60% เวลาใช้งานต่อลิงก์ลดลงประมาณ 75% และความน่าเชื่อถือของลิงก์ดีขึ้นตามลำดับความสำคัญเมื่อเทียบกับตัวเลือกทองแดง ฟังก์ชัน DDM แบบบูรณาการช่วยให้มองเห็นได้ที่จำเป็นสำหรับการจัดการการปฏิบัติงานเชิงรุก ในขณะที่รองรับการใช้งาน MFS1S00-H015Vธรรมชาติช่วยให้สามารถบูรณาการเข้ากับโครงสร้างพื้นฐานที่มีอยู่ได้อย่างราบรื่น

สำหรับองค์กรที่วางแผนจะปรับใช้หรือขยายแฟบริค InfiniBand 200GMFS1S00-H015Vนำเสนอรากฐานที่ผ่านการพิสูจน์แล้วและผ่านการตรวจสอบภาคสนาม ซึ่งปรับขนาดตั้งแต่ไม่กี่ชั้นวางไปจนถึงหลายพันโหนด ความเข้ากันได้กับโครงสร้างพื้นฐานสวิตช์ที่มีอยู่ ตามเอกสารในเอกสารข้อมูลสินค้า MFS1S00-H015Vช่วยให้มั่นใจได้ว่าการอัพเกรดสามารถดำเนินการได้โดยไม่ต้องเปลี่ยนรถยกหรือการทดสอบความสามารถในการทำงานร่วมกันที่ซับซ้อน

เนื่องจากความเร็วของศูนย์ข้อมูลมีการพัฒนาอย่างต่อเนื่อง หลักการสถาปัตยกรรมพื้นฐานที่แสดงโดยโซลูชันนี้—ออปติกแบบแอคทีฟแบบบูรณาการ การวินิจฉัยแบบดิจิทัล และการจัดการสายเคเบิลที่ง่ายขึ้น—จะยังคงมีความเกี่ยวข้อง ที่MFS1S00-H015Vไม่ใช่แค่สายเคเบิลเท่านั้น เป็นองค์ประกอบโครงสร้างพื้นฐานเชิงกลยุทธ์ที่ช่วยให้สถาปนิกเครือข่ายสามารถสร้างแฟบริคประสิทธิภาพสูงที่หนาแน่นขึ้น เชื่อถือได้มากขึ้น และจัดการได้มากขึ้นสำหรับเวิร์คโหลดการประมวลผลรุ่นต่อไป