Mellanox (NVIDIA Mellanox) MFS1S00-H005V AOC แนวทางปฏิบัติในการใช้งานสายเคเบิลออปติคอลที่ใช้งานอยู่

Mellanox (NVIDIA Mellanox) MFS1S00-H005V AOC การใช้งานเคเบิลออปติกที่ใช้งาน

สถานการณ์และความท้าทาย: ความลําบากในการเชื่อมต่อสายไฟฟ้าระหว่างราค

ศูนย์คอมพิวเตอร์สูงแห่งชาติพบกับปัญหาที่ไม่คาดคิด หลังจากปรับปรุงเครือข่าย InfiniBand HDR 200G ผูกพันทางกายภาพระหว่างเรคแต่ละตัวมี 16 เซอร์เวอร์ GPU, โดยเซอร์เวอร์แต่ละตัวต้องใช้ 200G uplink ไปยังสวิตช์ Leaf บนราค (ToR) โดยวิธีการประเพณี การเชื่อมต่อระหว่างราคใช้สายไฟเบอร์พัทช์ และโมดูลออปติกที่แยกแยก:เครื่องรับสัญญาณ QSFP56 SR4 ได้ถูกนําไปใช้ในด้านบนของแต่ละราค, เชื่อมต่อผ่าน MPO ไฟเบอร์ jumpers ไปยังสวิตช์ใบไม้ในราคติดต่อกัน. การแก้ไขนี้เปิดเผยปัญหาหลายอย่างระหว่างการจัดจําหน่ายครั้งแรก.การแพร่หลายของสายเคเบิลเป็นอย่างมาก ต้องการเชื่อมต่อไฟเบอร์มากกว่า 300 ช่องระหว่าง 48 ราค, และแทรกเคเบิลได้บรรลุกําลังเต็มภายในสองสัปดาห์ ทําให้การเพิ่มใหม่ใด ๆ ขึ้นอยู่กับการถอนเคเบิลที่มีอยู่โดยที่ทีมปฏิบัติการบันทึกเฉลี่ยการเปลี่ยนโมดูล 3 ถึง 4 ครั้งต่อสัปดาห์ ระหว่าง 3 เดือนแรกหลังจากการจัดจําหน่ายมักต้องมีการปรับปรุงความสามารถของลิงค์ และทําให้การกําหนดการงานช้าเพิ่มเวลา 15 ถึง 20 นาทีต่อเส้นทางระหว่างการนําขึ้นครั้งแรกผู้นําการดําเนินงานสรุปความท้าทายว่า "เราต้องการคําตอบที่สามารถให้ผลงาน 200G แต่มีส่วนประกอบน้อยกว่า การจัดการง่ายกว่าและลดอัตราการล้มเหลวของสนามลงอย่างมาก."

การแก้ไขและการนําเสนอ: การนําเสนอเคเบิลออปติกที่ใช้งาน MFS1S00-H005V

เพื่อแก้ไขจุดเจ็บปวดเหล่านี้ ศูนย์ได้ประเมินทางเลือกหลายอย่าง และในที่สุดเลือกMFS1S00-H005Vจาก Mellanox (NVIDIA Mellanox)สาย MFS1S00-H005V 200G QSFP56 AOCซึ่งรวมตัวรับสัญญาณและไฟเบอร์ออปติกส์เข้าสู่การประกอบตัวเดียวMFS1S00-H005V InfiniBand HDR สายไฟฟ้าออนไลน์ที่ทํางาน 200Gb/s, มันกําจัดความต้องการของโมดูลและจอมเปอร์ที่แยกแยกกันให้บริการเชื่อมต่อกันแบบ plug-and-play ที่กว้างถึง 50 เมตร เหมาะสําหรับระยะห่าง 5 ถึง 15 เมตรที่เฉพาะทางระหว่าง racks ในอุปกรณ์นี้.

กลยุทธ์การจัดจําหน่ายถูกจัดระยะในช่วงสามวันหยุดสุดสัปดาห์ ในระยะที่ 1 ทีมงานได้เปลี่ยนการเชื่อมต่อทั้งหมดจากใบไปใบในชั้นกระดูกสันหลังหลักNVIDIA Mellanox MFS1S00-H005Vยืนยันว่ารองรับ MFS1S00-H005Vระยะที่ 2 ขยายการใช้งาน AOC ไปยังการเชื่อมต่อที่สูงสุดของเรค โดยเชื่อมต่อทุกหน่วยคอมพิวเตอร์กับสวิตช์ใบขั้นตอนที่ 3 เน้นกับ GPU-to-storage fabricที่MFS1S00-H005V 200G QSFP56 โซลูชั่นเคเบิล AOCให้ความช้าช้าที่กําหนดสําหรับการจราจรระบบไฟล์คู่.ใบข้อมูล MFS1S00-H005Vเพื่อตรวจสอบงบประมาณการเชื่อมโยงและให้แน่ใจว่าความกว้าง 50 เมตรเพียงพอสําหรับการทํางานยาวที่สุดของพวกเขา (วัดที่ 37 เมตรรวมวงจรบริการ)

ข้อดีสําคัญของวิธี AOC คือการกําจัดขั้นตอนการทําความสะอาดตัวรับสัญญาณแยกMFS1S00-H005Vส่งมาที่โรงงานทดสอบและปิด จําเป็นเพียงการตรวจสอบทางสายตาของหน้าปลายของเครื่องเชื่อม ก่อนการติดตั้งทีมวิจัยใช้เครื่องเชื่อมสายเคเบิลที่มีสี เพื่อแยกระหว่างสายใบกับกระดูกสันหลัง จากสายใบกับคอมพิวเตอร์, การจัดทําเอกสารง่ายขึ้น

ผลและผลประโยชน์: การปรับปรุงที่สัมผัสได้ในความน่าเชื่อถือและประสิทธิภาพการดําเนินงาน

การประเมินหลังการจัดจําหน่ายแสดงผลดีขึ้นที่สําคัญในหลายมิติรายละเอียด MFS1S00-H005Vรวมถึงการบริโภคพลังงานทั่วไปที่ต่ํากว่า 1.5W ต่อปลาย และ BER ต่ํากว่า 1e-15โดยที่ศูนย์รายงานว่า ไม่มีการล้มเหลวในงานที่เกี่ยวข้องกับการเชื่อมต่อในช่วงสองเดือนหลังจากการตัดตารางต่อไปนี้สรุปการปรับปรุงหลัก ๆ:

ทีมปฏิบัติการยังสังเกตว่าMFS1S00-H005Vเสื้อคลุมคลื่นของสายเคเบิลและรัศมีโค้งขั้นต่ํา 30 มิลลิเมตร ทําให้การเดินทางภายในตู้สายเคเบิลเรียบร้อยมากขึ้น ลดความจําเป็นในการผูกสายเคเบิลและปรับปรุงการไหลของอากาศศูนย์พบว่าในขณะที่ราคา MFS1S00-H005Vในแต่ละหน่วยค่อนข้างสูงกว่าการรวมโมดูลและกระโดดแยกกันในฐานะแต่ละลิงค์ การกําจัดคลังของอะไหล่และอัตราความล้มเหลวเกือบศูนย์ ทําให้ค่าบริการรวม (TCO) สะดวกกว่า.MFS1S00-H005V สําหรับขายผ่านช่องทางของ NVIDIA ยังให้ความมั่นใจในการเปลี่ยนหน่วยที่บกพร่องอย่างรวดเร็ว (แม้ว่าไม่มีอันใดเกิดขึ้นในสามเดือนแรก)

สรุปและมุมมอง: แผนผังสําหรับผ้า HDR ที่เรียบง่าย

ศูนย์คอมพิวเตอร์ยอดเยี่ยมMFS1S00-H005Vแสดงว่าสายไฟฟ้าออปติกที่ใช้ได้สามารถทําให้การเชื่อมต่อระหว่างราคได้ง่ายขึ้นในสภาพแวดล้อม HDR 200G โดยการรวมตัวรับและไฟเบอร์ไฟเบอร์เข้าสู่การประกอบแบบเดียวแนวทาง AOC ลดจํานวนองค์ประกอบสําหรับสถาปนิกเครือข่ายและผู้บริหาร IT ที่ต้องจัดการกับปัญหาความหนาแน่นของสายเคเบิลที่คล้ายกันNVIDIA Mellanox MFS1S00-H005Vเปิดทางที่ผ่านการพิสูจน์ให้ความน่าเชื่อถือสูงขึ้นและต้นทุนการดําเนินงานที่ต่ํากว่าใบข้อมูล MFS1S00-H005Vและเมทริกส์ความสอดคล้องที่ได้รับการตรวจสอบ มีให้บริการผ่านช่องทางทางการใช้งานทางการคาดหวังที่จะนําผลประโยชน์เดียวกันไปใช้ในขนาดที่ใหญ่กว่า.