QSFP-DD لمجموعات الذكاء الاصطناعي: كيفية الاختيار بين 400 جيجا و800 جيجا بدون تخمين

Aug 03, 2026

ترك رسالة

يعتبر QSFP-DD مناسبًا لمجموعة AI عندما يستخدم المحول أو نقطة النهاية بالفعل قفص QSFP-DD الأصلي، وعندما يجب أن تظل قاعدة كبيرة من وحدات عائلة QSFP- المؤهلة والألياف في الخدمة، وعندما يتمكن النظام الأساسي من تبريد الوحدات المختارة مع تعبئة كل منفذ. إنها نقطة بداية خاطئة عندما تكون خوادم ومحولات وحدة معالجة الرسومات مبنية حول أقفاص OSFP الأصلية، أو عندما تتطلب البصريات التي تحتاجها فعليًا مساحة رأس حرارية أكبر مما يمكن أن يوفره لها المضيف.

عامل الشكل ليس هو القرار الأول. وهو الرابع تقريبًا. يبدأ تصميم الشبكة الذي يستمر بعد أول تدريب على الإنتاج بواجهات الخادم، وعدد القضبان، والهيكل المستهدف، ونسبة الاشتراك الزائد المقبولة، ومسار الكابل المُقاس. عندها فقط يصبح شكل الوحدة مهمًا.

يشرح هذا الدليل هذا الطلب من البداية إلى النهاية، مع حساب القدرة التشغيلية، وجدول تحديد الرابط-، وتسلسل التحقق من الصحة الذي يمكنك تسليمه إلى فريق المختبر.

AI cluster network with GPU servers, leaf-spine switches, and QSFP-DD links

ما هو عامل الشكل الذي يجب عليك اختياره؟

حالة نقطة النهاية الاختيار الأول للتقييم
كلا الطرفين أصلاً QSFP-DD / QSFP-DD800 QSFP-DD
كلا الطرفين OSFP أصلا OSFP
الترحيل من قاعدة QSFP 400G المثبتة QSFP-DD، بشرط أن يدعم المضيف وضع المنفذ المطلوب
بصريات عالية الطاقة-على النظام الأساسي الذي يكون قفصه الأصلي هو OSFP OSFP
أحد طرفي OSFP، والطرف الآخر QSFP-DD عامل متقاطع مؤهل -نموذج- DAC/AEC، أو رابط بصري مع PMD مطابق ومعدل المسار ووضع FEC في كلا الطرفين

القاعدة الأساسية قصيرة:اختر القفص الأصلي لنقطة النهاية، ثم تحقق من معدل المسار الكهربائي والواجهة البصرية ووضع FEC وفئة الطاقة والبرامج الثابتة لرقم الجزء المحدد.كل ما هو أدناه هو العمل المطلوب لتطبيق هذه القاعدة بأمانة.

القرارات الخمسة بالترتيب

معظم عمليات إنشاء شبكات الذكاء الاصطناعي السيئة تأتي من اتخاذ هذه القرارات خارج التسلسل - اختيار وحدة أولاً واكتشاف القيد لاحقًا. تغذي كل خطوة أدناه الخطوة التالية، وكل خطوة تغير ما يمكنك شراؤه في الخطوة التي تليها.

  1. تأكيد نقاط النهاية.نوع القفص الأصلي ووضع البروتوكول عند طرفي كل رابط.
  2. حساب القدرة.منافذ لكل عقدة، لكل سكة، ثم قم بتمرير سعة الوصلة الهابطة والصاعدة بمعدل الاشتراك الزائد المستهدف.
  3. حدد الارتباط المادي.طول المسار المُقاس، ومصنع الألياف، والموصل، ومتطلبات الاختراق.
  4. التحقق من صحة رقم الجزء.FEC، معدل المسار، فئة الطاقة، البرامج الثابتة، مراجعة CMIS، تأهيل البائع.
  5. النشر حسب مجال الفشل.قم بالمختبر أولاً، ثم رف واحد أو حاجز أو وحدة قابلة للتطوير في كل مرة.

الخطوة 1: افصل عامل الشكل والبروتوكول والواجهة البصرية

يتم دمج هذه الأشياء الثلاثة في قرار واحد باستمرار، وهذا الانهيار هو مصدر معظم مفاجآت التوافق. إنها طبقات منفصلة مع وثائق حاكمة منفصلة.

عامل الشكليحدد الأبعاد الميكانيكية والموصل المضيف والممرات الكهربائية وسلوك الإدارة والتصميم الحراري. المواصفات أجهزة QSFP-DD MSAيغطي المتطلبات الميكانيكية والكهربائية والحرارية، وتعمل مراجعاته اللاحقة على توسيع نفس المنفذ المضيف المكون من ثمانية مسارات إلى متغيرات 800G و1.6T مع الحفاظ على التوافق مع عائلة QSFP. إذا كنت تريد الخلفية الميكانيكية والإدارية قبل المضي قدمًا، فلديناQSFP-نظرة عامة فنية على DDيغطي عامل الشكل نفسه بالتفصيل.

البروتوكوليتم تحديد - Ethernet أو RoCEv2 أو InfiniBand - بواسطة NIC والمحول ASIC والبرنامج الثابت وتكوين المنفذ، وليس من خلال شكل القفص. لا ينبغي أبدًا وصف وحدة QSFP-DD بأنها "تدعم كلاً من Ethernet وInfiniBand" كخاصية لعامل الشكل. تنتمي هذه الإمكانية إلى المضيف ويجب تأكيدها في المنفذ المحدد.

الواجهة البصريةيصف - DR8، FR4، SR8، LR - تنظيم الممر والوصول إليه وتطبيقه. ولا يصف الموصل أو عدد الألياف أو رسم خرائط الاختراق أو معدل المسار الكهربائي. يمكن أن تختلف وحدتان تحملان نفس الملصق البصري في كل واحدة منهما. يتم تعريف الإشارة نفسها بواسطة IEEE، وليس بواسطة MSA:IEEE ستد 802.3df-2024تمت إضافة معلمات MAC والطبقات المادية للتشغيل بسرعة 800 جيجابت/ثانية ووحدات PHY إضافية بسرعة 400 جيجابت/ثانية.

السلوك الإداري هو الطبقة الرابعة الأكثر هدوءًا. تتم إدارة كل من وحدتي QSFP-DD وOSFP من خلال CMIS، وتكون المراجعة مهمة بالنسبة لسلوك تحديث البرنامج الثابت واختيار التطبيق وتوقيت الوحدة-المضيفة. التنقيحات المنشورة مدرجة فياتفاقيات تنفيذ المنظمة الدولية للفرانكفونية.

الخطوة 2: تحديد حجم الشبكة من منافذ الخادم، وليس من عدد وحدات معالجة الرسومات

يخبرك عدد GPU بمدى حجم المجموعة. ولا يخبرك بما يجب أن تحمله الشبكة، لأن الشبكة لا ترى سوى واجهات الخادم.

هناك مثالان يوضحان هذه النقطة. يعرض نظام NVIDIA DGX H100/H200 ثماني واجهات ConnectX-7 للحوسبة-بسرعة تصل إلى 400 جيجابت/ثانية لكل منها - ولكنها ليست ثمانية أقفاص فعلية. تُظهر البنية المرجعية SuperPOD النسيج الحسابي المقدم من خلالهأربعة أجهزة إرسال واستقبال ذات منفذين-تصل إلى جميع وحدات معالجة الرسومات الثمانية. على النقيض من ذلك، يقدم DGX B300ثمانية منافذ للشبكة على علبة GPUيخدم ثماني واجهات ConnectX-8 بسرعة تصل إلى 800 جيجابايت/ثانية. نفس عدد وحدات معالجة الرسومات، ومخزون منافذ مختلف تمامًا، وعدد الكابلات، وفاتورة البصريات.

لذا، قبل أن تنظر إلى ورقة بيانات تبديل واحدة، قم بإعداد مستند لكل نوع عقدة: حساب-منافذ النسيج، ومعدل المنفذ، وبطاقة NIC-إلى-وحدة معالجة الرسومات أو تعيين السكك الحديدية، ونوع القفص الأصلي، وأوضاع البروتوكول المدعومة، بالإضافة إلى واجهات التخزين والإدارة المنفصلة. هذا المخزون، وليس رقم وحدة معالجة الرسومات، هو المدخل لكل عملية حسابية تالية.

حساب القدرة العاملة

خذ وحدة قابلة للتطوير مكونة من 32 عقدة، تحتوي كل منها على ثمانية منافذ حاسوبية-بسعة 400 جيجا بايت، منفذ واحد لكل سكة، في تصميم محسّن للسكك الحديدية-. العمل على سكة واحدة في كل مرة:

  • قدرة الوصلة الهابطة لكل ورقة السكك الحديدية= 32 عقد × 1 منفذ × 400 جيجا =12.8 تيرابايت/ثانية
  • عند 1:1 (غير -محظور)، سعة الوصلة الصاعدة المطلوبة=12.8 تيرابايت/ثانية → 12800 ÷ 800 =وصلات صاعدة 16 × 800 جيجا
  • عند 2:1، سعة الوصلة الصاعدة المطلوبة=6.4 تيرابايت/ثانية →وصلات صاعدة 8 × 800 جيجا

ثم تحقق من النتيجة مقابل جذر التبديل: 32 وصلة هابطة بالإضافة إلى 16 وصلة صاعدة تحتاج إلى 48 منفذًا قابلاً للاستخدام على تلك الصفحة، مما يحد من اختيارك للمحول على الفور. أضف روابط للتكرار والصيانة، وكرر لكل سكة - ثمانية قضبان، وثماني مجموعات أوراق، وليس رقمًا إجماليًا واحدًا. هذا هو المكان الذي يأخذ فيه 800G مكانه أو لا: هنا يخفض عدد منافذ الوصلة الصاعدة إلى النصف، وهي وسيطة جذرية، وليست وسيطة عرض النطاق الترددي.

تعد أنسجة شجرة السكك الحديدية-المحسنة والمتوازنة-نموذجًا لمستندات NVIDIA لمجموعات التدريب الكبيرة -البنية المرجعية DGX H100 SuperPODيستخدم شجرة-كاملة مع ثمانية اتصالات حسابية لكل-نظام. ما إذا كان هذا النمط يناسب عبء العمل الخاص بك هو حكم تصميمي، ولكن طريقة الحساب أعلاه تنطبق بغض النظر عن الهيكل.

الخطوة 3: تخطيط جميع الأقمشة الأربعة، ثم العودة إلى الوحدات

مجموعة الذكاء الاصطناعي ليست شبكة واحدة. البنى المرجعية DGX SuperPOD منفصلةالحوسبة والتخزين وإدارة النطاق-وإدارة النطاق-خارجه-الأقمشة، وكل واحد منها ينتج منفذه الخاص ومتطلبات البصريات.

الحساب النسيجيحمل تبادل التدرج، ومزامنة المعلمات، والمجموعات وعمليات الذاكرة عن بعد. فهو يشتمل على متطلبات زمن الوصول والازدحام وتناسق المسار- الأكثر صرامة، وهو المكان الذي تتم فيه تسوية وسيطة 800G-مقابل 400G فعليًا.

النسيج التخزينيحمل بيانات التدريب ونقاط التفتيش والمصنوعات اليدوية النموذجية. وتعتمد سعتها على تنسيق مجموعة البيانات، ومعدل دخول ذاكرة التخزين المؤقت، وتوازي أداة تحميل البيانات-، وتكرار نقاط التفتيش، وكثافة البيانات الوصفية -، ولهذا السبب فإن عبارة "400 جيجا كافية للتخزين" ليست افتراضية آمنة. تحدد البنى المرجعية أداء التخزين على مستوى النظام وتبقيه خارج نسيج الحوسبة بدقة حتى لا يؤدي عبء العمل إلى إتلاف بعضهما البعض.

الفي-شبكة إدارة النطاقيحمل التزويد وحركة جدولة البيانات والسجلات والمستودعات والمراقبة. الخارج-شبكة النطاق-.يصل إلى BMCs ومنافذ إدارة التبديل وطاقة الحامل، ويجب أن يظل قابلاً للوصول أثناء كسر نسيج الإنتاج. تعامل معه كمسار للاسترداد والأمان مع رابط صاعد خاص به، وليس كحركة مرور منخفضة السرعة-.

بالنسبة لاختيار الوحدة، فإن النتيجة العملية هي كما يلي: يساهم كل نسيج في عدد المنافذ الخاص به، وملف تعريف المسافة الخاص به، ونوع القفص الخاص به، وغالبًا ما تكون مختلفة. يمكن أن تكون المجموعة OSFP على الحوسبة وQSFP-DD على التخزين والإدارة دون حدوث أي خطأ.

الخطوة 4: اختر 400 جرام أو 800 جرام من القيد، وليس الاتجاه

منفذ 800G يضاعف السعة الاسمية. لا يقلل من حركة المرور التي ينشئها تطبيقك. تكون قيمته دائمًا تقريبًا بنيوية - روابط أقل، أو كفاءة جذرية أفضل، أو نقطة نهاية أصلية تبلغ 800 جيجا.

يبقى 400G هو الخيار الأفضلعندما تكون نقاط نهاية الحوسبة 400 جيجا في الأصل، أو أن النسيج الحالي يلبي بالفعل هدف الحظر الخاص به، أو أن المجموعة تنمو داخل النطاق الأساسي المتاح، أو أن وحدة 400 جيجا مؤهلة وقاعدة الكابلات موجودة بالفعل، أو أن قيود الطاقة والتبريد تجعل 800 جيجا غير جذابة. باستخدام 800Gالوصلات الصاعدةما فوق خوادم 400G لا تزال معقولة تمامًا - ولكن قم بتبريرها من حساب المنفذ أعلاه، وليس من التسمية.

800G يحسن التصميمعندما تكشف الخوادم عن واجهات 800G الأصلية، أو عندما يجب تجميع العديد من تدفقات 400G في عدد أقل من الروابط الأساسية، أو عندما يكون عدد منافذ التبديل هو قيد الربط، أو عندما يؤدي الانتقال من 800G إلى واجهات فرعية ذات سرعة أقل- إلى تبسيط عملية الترحيل. مذكور بدقة: يمكن لـ 800G تقليل عدد الروابط المادية أو منافذ التبديلفي التصاميم التي يكون فيها التجميع والجذر هما القيود المقيدة. وهو لا يفعل ذلك كقانون من قوانين الطبيعة.

Comparison of 400G and 800G AI cluster network architectures

-يحتاج الترحيل السريع المختلط إلى وثائق صريحة

الاختراق هو المكان الذي تفشل فيه تصميمات السرعة-المختلطة بهدوء. تجعل بطاقات NIC الحديثة هذا قابلاً للتكوين وليس ثابتًا - NVIDIA's ConnectX-8منفذ-تقسيم الوثائقيُظهر قفص OSFP واحد بسرعة 800 جيجا بايت يتم إعادة تكوينه إلى منفذين بسرعة 400 جيجابت أو ثمانية منافذ بسرعة 100 جيجابت، ويتطلب كل منها تغيير تكوين مستوى البرنامج الثابت- ودورة طاقة. توجد هذه المرونة فقط عندما يقوم البائع باختبارها ونشرها.

لذا، يجب أن توضح خطة الترحيل، لكل منفذ: المنافذ التي تعمل وبأي سرعة، وما إذا كان المضيف يدعم وضع الفصل المقصود، ومعدل الممر الكهربائي في كلا الطرفين، وما إذا كان الانفصال منطقيًا أو بصريًا أو يعتمد على الكابل-، ووضع FEC الذي تحتاجه كل واجهة فرعية، وما إذا كان يمكن إعادة استخدام عدد الألياف الحالي ونوع الموصل، وكيف ستحدد المراقبة كل منفذ فرعي. إن إدراج وحدة سرعة أقل-لا يجعل كل وضع مضيف متاحًا.

QSFP-DD مقابل OSFP

عامل القرار QSFP-DD OSFP
QSFP-التوافق مع العائلة أصلي، حيث يدعم المضيف الوضع من الممكن استخدام بعض الوحدات من خلال محول مصمم لهذا الغرض-.
حجم الوحدة الأصغر أكبر
التصميم الحراري تصميمات المبدد الحراري للركوب-؛ التحقق من إجمالي عدد السكان غرفة تبريد متكاملة أو ركوب؛ يحدد MSA فئات الطاقة الأعلى
الاستخدام النموذجي لنظام الذكاء الاصطناعي-. محولات إيثرنت ومنصات{0}سرعات مختلطة عدة-أنظمة أساسية لوحدة معالجة الرسومات وInfiniBand عالية الأداء
قاعدة القرار يُفضل أن تكون نقاط النهاية هي QSFP الأصلية-DD وQSFP التي تعيد استخدام الأمور يُفضل أن تكون نقاط النهاية هي OSFP أصلية أو أن البصريات تحتاج إلى غلاف الطاقة الخاص بها

اثنين من المطالبات تحتاج إلى الحد. أولاً، "OSFP ليس لديه توافق مع الإصدارات السابقة" واسع جدًا - theOSFP MSAيوثق توافق QSFP من خلال محول مخصص، وتحدد مواصفات الوحدة الخاصة به فئات الطاقة الأعلى وخيارات المبدد الحراري -المدمجة التي تمنح OSFP سمعته الحرارية. ثانيًا، تلك السمعة هي سقف للمواصفات، وليست ضمانًا. يعتمد ما إذا كان هيكل معين يمكنه بالفعل تشغيل وحدات فئة 30 وات-في كل قفص على تصميم القفص، واتجاه تدفق الهواء، ودرجة حرارة المدخل، وسياسة المروحة، وتخفيض-المنافذ المجاورة والحدود الخاصة ببائع النظام.

وهذا هو السبب في أن -التحقق الحراري الشامل غير قابل للتفاوض-: يمكن للوحدة التي تمر في منفذ واحد أن تتجاوز حد درجة حرارة الحالة-عند إضاءة جميع المنافذ البالغ عددها 32 أو 64 منفذًا، ومرة ​​أخرى عند فشل المروحة أو مصدر الطاقة. اختبر النظام المأهول، عند درجة حرارة المدخل الحقيقية.

إذا كان الخادم هو OSFP وكان المحول هو QSFP-DD، فقاوم انعكاس التوحيد القياسي. تضيف المحولات اعتبارات الخلوص الميكانيكي وتدفق الهواء والطاقة وتكامل الإشارة والمخزون والدعم. يعد كبل العامل المتقاطع -المؤهل -، أو الرابط البصري مع PMD وFEC المتطابقين في كل طرف، أكثر نظافة من استبدال الأجهزة لجعل الأشكال متطابقة.

QSFP-DD and OSFP transceivers compared by size and thermal design

الخطوة 5: حدد الرابط حسب المسافة المقاسة والألياف الموجودة

لقد قامت الآن السعة ونقاط النهاية بتثبيت سرعة المنفذ والقفص. المسافة ومصنع الألياف المثبت يصلحان كل شيء آخر. كمبادئ توجيهية هندسية وليس قاعدة، فإن أقصر رابط صالح تقنيًا هو عادة أبسط رابط للتشغيل - ولكن المرونة وقطر الكابل وقابلية الخدمة ومتطلبات الاختراق كلها تتعارض مع ذلك.

طريق خيار نموذجي ما للتأكيد
رف داخلي-، قصير جدًا لجنة المساعدة الإنمائية السلبية الطول الدقيق ونوع الكابل مدعومان من كلا الطرفين؛ نصف قطر الانحناء وزن
قصير ولكن يتجاوز النحاس السلبي لجنة التحكيم الاقتصادية / لجنة التنسيق الإدارية سحب الطاقة، الكمون الإضافي، انسداد تدفق الهواء، تأهيل البائع، دعم وضع المنفذ
بصري قصير، طول ثابت مقبول شركة نفط الجنوب إمكانية الخدمة - يؤدي الفشل إلى استبدال التجميع بأكمله
الوضع المتعدد، في-الصف إلى الصف-المجاور فئة SR-البصريات المتوازية درجة الألياف وحدود الوصول؛ انظر لدينادليل حدود المسافة OM1 – OM5
وضع فردي-، كيلومتر فرعي-، مطلوب الاختراق DR-فئة البصريات المتوازية حجم MPO، القطبية، طلاء APC/UPC، رسم خرائط الاختراق
الوضع الفردي-، مقياس الكيلومتر فئة FR-ثنائية أو متوازية، حسب المنتج يختلف نوع الموصل حسب رقم الجزء؛ مقارنة درجة الألياف -الألياف ذات الوضع الفردي OS1 وOS2-

يعد تنفيذ الموصل هو الفخ هنا، لأنه لا يتضمنه الملصق البصري. يقوم البائعون بشحن منتجات 800G DR8 مع اتصال MPO-12 مزدوج أو MPO فردي-16، ومنتجات فئة FR بطول 2 كم مع MPO متوازي أو LC ثنائي الاتجاه. كلا الخيارين مشروعان. إنهم بحاجة إلى كابلات مختلفة تمامًا. قبل طلب جذوع، قم بتسوية سؤال الموصل عمدا - لدينادليل اختيار MTP مقابل MPOيغطي الاختلافات الميكانيكية والقطبية، ودليل كابل الاختراق MPOيغطي تعيين-خرج المروحة الذي تعتمد عليه منافذ الاختراق.

ينتمي عنصران آخران إلى نفس المحادثة. يجب أن تتم موازنة خسارة القناة وفقًا لمواصفات الوحدة مع حساب الموصلات والوصلات، وليس من المفترض - راجعكيف يتراكم فقدان الإدراج في شبكات الألياف. ومن الأسهل صيانة الكابلات المنظمة بين الصفوف عندما تكون مبنية على -منتهية مسبقًاكبلات MPO/MTPباستخدام طريقة قطبية موثقة بدلاً من عمليات التشغيل المجمعة في الحقل-. عندما يتم استخدام روابط FR المزدوجة، فإن جودة واجهة الموصل تؤدي إلى فقدان الإرجاع مباشرةً؛ الدليل موصل LCيغطي ما يجب فحصه.

لكل رابط، قم بالتسجيل: قفص المضيف، معدل حارة المضيف، سرعة المنفذ التي تم تكوينها، PMD أو نوع الكابل، الموصل، نوع الألياف وعددها، الحد الأقصى لفقد القناة، وضع FEC، تعيين الاختراق، رمز تطبيق الوحدة، CMIS ومتطلبات البرامج الثابتة، الحد الأقصى من الطاقة، وحالة التأهيل. إن سجل كل-رابط يستحق أكثر من أي قاعدة عامة حول أي بصري يذهب إلى أين.

AI network interconnect options from DAC cables to duplex optics

RoCEv2 أو InfiniBand: قرر ذلك بشكل مستقل

اختيار البروتوكول متعامد مع عامل الشكل، ويجب أن يتم على أسس تشغيلية.

RoCEv2يناسب المؤسسات التي تقوم بالفعل بتشغيل Ethernet على نطاق واسع، مع ميزات RoCE المعتمدة على منصة التبديل وفريق قادر على امتلاك جودة الخدمة والتحكم في الازدحام والقياس عن بعد وتكوين المضيف. التحذير هو أن "تمكين PFC وECN" ليس خطة نشر. تصف وثائق Cumulus Linux الخاصة بـ NVIDIARoCE كتكوين معقدتجمعات المخزن المؤقت الممتدة، وتصنيف حركة المرور، وتعيين الأولويات، وعتبات PFC وECN والجدولة، مع وضع بدون فقدان باستخدام PFC وECN معًا ووضع مع فقد باستخدام ECN فقط - ويلاحظ أن التكوين الذي تم إنشاؤه لإنشاء محول ASIC واحد لا ينتقل إلى آخر.

إنفينيبانديناسب عمليات النشر التي تتبع بنية البائع المعتمدة، حيث تكون إدارة النسيج المتكاملة ذات قيمة ويمتلك الفريق بالفعل الأدوات والخبرة.

اعتمد الاختيار على سلوك التطبيق الذي تم اختباره والمهارات التشغيلية وحدود الدعم والتصميم الإجمالي للنظام. تعتمد النسب المئوية لأداء التسويق على الهيكل وإصدار البرنامج وحجم الرسالة وحالة الازدحام وتكوين NIC، ونادرًا ما يتم نقلها إلى مجموعة أخرى.

التحقق من الصحة: ​​ما الذي يجب اختباره قبل الشراء بكميات كبيرة

يغطي الاختبار المعملي التمثيلي أربع مناطق، ويهم الترتيب - استقرار الرابط أولاً، لأن أرقام الأداء من رابط غير مستقر لا معنى لها.

أحضر-:التمهيد البارد، وإعادة التشغيل الدافئ، وإدراج الوحدة وإزالتها، وتعطيل/تمكين المنفذ، وإنشاء الاختراق وإزالته، وإعادة تشغيل كلا الطرفين بتسلسلات مختلفة.سلامة الإشارة:ما قبل -FEC BER، وأعداد FEC المصححة وغير القابلة للتصحيح، وأخطاء مستوى الخط-، وPRBS أو BERT حيثما يكون ذلك مدعومًا، وطاقة الإرسال والاستقبال الضوئية، ودرجة حرارة علبة الوحدة، وأعداد رفرف الارتباط- تحت الحمل الحراري.أداء:الإنتاجية المستدامة، والمجموعات وأحجام الرسائل التي تستخدمها مهامك فعليًا، وحركة السكك الحديدية المتعددة-المتزامنة، والبث المباشر، والتخزين-بالإضافة إلى-التنافس الحسابي، والنقع لفترة طويلة.فشل:رابط فردي، ومفتاح طرفي، ووصلة العمود الفقري،-استعادة دورة الطاقة، واستبدال الكابلات والوحدة، وإدارة-فقدان المسار.

عتبات التسجيل، وليس النجاح/الرسوب فقط. يجب أن تكون أخطاء FEC غير القابلة للتصحيح صفرًا على الارتباط السليم؛ pre-يجب أن تكون معدلات خطأ FEC موجودة جيدًا داخل الهامش المحدد للوحدة وتظل هناك مع ارتفاع درجة حرارة الحالة أثناء النقع. الرابط الذي يتجه نحو الأعلى عبر نقع لمدة 48 ساعة هو الرابط الذي سيفشل في الإنتاج.

ثم يتم الطرح حسب مجال الفشل - حامل واحد أو حاجز واحد أو زوج أوراق واحد أو وحدة واحدة قابلة للتطوير في كل مرة - ومراقبة تغييرات حالة الارتباط، والأعداد المصححة وغير القابلة للتصحيح، ودرجة حرارة الوحدة، والطاقة الضوئية، ونشاط الإيقاف المؤقت لـ PFC، وعلامات ECN، وإشغال قائمة الانتظار، ووقت الاتصال على مستوى المهمة-. الرابط الذي لا يزال قيد التشغيل يمكن أن يظل مهينًا؛ يعد الخطأ المصحح المتزايد-واتجاهات درجة الحرارة هو أول تحذير تحصل عليه.

ثلاثة سيناريوهات التصميم

توسيع نسيج إيثرنت 400G الحالي.إن محولات QSFP-DD 400G والكابلات الهيكلية موجودة بالفعل؛ العقد الجديدة تعرض 400G. احتفظ بروابط الخادم -المواجهة عند 400 جيجا، وقم بتشغيل حساب الوصلة الصاعدة أعلاه لاختبار نسبة الحظر، وقدم 800 جيجا فقط حيث يشتري كفاءة منفذ العمود الفقري. أعد استخدام البصريات والألياف المؤهلة حيثما تسمح ميزانية الخسارة بذلك، وتحقق من صحة كل تكوين مختلط لكسر السرعة- قبل الشراء. التبديل الأساسي هو الذي يحرك هذا القرار، وليس عدد وحدات معالجة الرسومات.

إنشاء مجموعة أصلية بسعة 800 جيجا-.تعرض الخوادم 800G الأصلي. اتبع الهيكل الذي تم التحقق من صحته من قبل بائع الخادم، واختر المحولات ذات القفص الأصلي المطابق، وتحقق من السعة الحرارية الكاملة -للسكان عند درجة حرارة المدخل، واختر الاتصال البيني من أطوال المسار المقاسة، وتحقق من صحة كل مجموعة اختراق وFEC قبل الالتزام. هنا يتم تبرير 800G بنقطة النهاية نفسها.

العيش مع اثنين من عوامل الشكل.الخوادم هي OSFP؛ جزء من ملكية تحويل Ethernet هو QSFP-DD. قارن بين مجموعات عامل DAC أو AOC المتقاطعة -النموذجية- المؤهلة، وقابلية التشغيل البيني البصري مع أقفاص مختلفة في كل طرف، والمحولات المعتمدة، وتأثيرات الطاقة والحرارة، ومخزون الغيار وملكية الدعم. غالبًا ما يكون استبدال جانب واحد فقط لتوحيد شكل الوحدة أكثر تكلفة من تشغيل بيئة مختلطة موثقة.

سبعة أخطاء تسبب إعادة العمل

  • بدءاً من عدد GPU.ولا يصف عدد NIC أو تعيين السكك الحديدية أو معدل المنفذ أو الاشتراك الزائد. احسب من واجهات الخادم.
  • بافتراض أن 800G أسرع لكل مهمة.إنه يساعد فقط حيث يمكن لنقاط النهاية والطوبولوجيا ونمط حركة المرور استخدامها. قم بمقارنة المجموعات الجماعية التي تديرها بالفعل.
  • التعامل مع QSFP-DD كبروتوكول.إنه قفص. التحقق من صحة القفص والبروتوكول والوضع الكهربائي والبصريات وFEC بشكل منفصل.
  • تجاهل أقمشة التخزين والإدارة.لا يمكن لنسيج الحوسبة السريعة أن يعوض التسليم البطيء لنقاط التفتيش أو BMC الذي لا يمكن الوصول إليه.
  • قراءة الملصق البصري كمواصفات للكابلات.لا تحدد DR8 وFR4 تصميم الموصل أو عدد الألياف أو التصميم المنفصل. استخدم أرقام الأجزاء الدقيقة ومخطط الكابلات.
  • اختبار منفذ واحد.يعد تدفق الهواء الكامل للسكان ودرجة حرارة المدخل بمثابة الاختبار الحقيقي.
  • اقتباس نسب الأداء بدون طريقة.انشر الهيكل وطريقة الاختبار، أو قم بإسقاط الرقم.

بناء نموذج التكلفة الإجمالية للملكية الذي يمكنك الدفاع عنه

تغطي التكاليف الرأسمالية بطاقات NIC أو وحدات DPU، ومفاتيح الأوراق والعمود الفقري، وأجهزة الإرسال والاستقبال، وDACs، وAECs، وAOC، وجذوع الألياف والترقيع، وإدارة الرفوف والكابلات، ومعدات الاختبار وقطع الغيار. تغطي التكاليف التشغيلية الوحدة وطاقة التبديل والتبريد والمراقبة وتأهيل البرامج الثابتة والتدريب والعمالة البديلة ودعم البائعين. تكاليف المخاطرة - التي يتم حذفها عادةً - تغطي حالات فشل التوافق، وتأخير النشر، والانخفاض الحراري، وعدم استقرار الارتباط، وإعادة-الكابلات، ومهام التدريب المتقطعة، ووقت الاسترداد الممتد.

يعمل التوافق مع الإصدارات السابقة على تقليل التكلفة بشكل حقيقي، ولكن يجب حساب التوفير من خلال المعدات المحددة التي يمكن إعادة استخدامها بالسرعة والوضع المطلوبين. لا يضمن توافق عامل الشكل- وحده أن ASIC أو PCB أو القفص أو نظام التبريد أو البرامج الثابتة أو ميزانية الطاقة الحالية يمكنها تشغيل الجيل التالي. تعامل مع ترحيل السرعة المستقبلي باعتباره سؤالًا يتعلق بالنظام الأساسي، وليس سؤالًا يتعلق بالموصل.

الأسئلة المتداولة

هل QSFP-DD مناسب لمجموعات تدريب الذكاء الاصطناعي؟

نعم، عندما يكون أصليًا للمحول أو نقطة النهاية المختارة، ويلبي المتطلبات الحرارية عند إجمالي عدد المنافذ، ويدعم وضع المنفذ المطلوب والواجهة البصرية. معدل البيانات الاسمي وحده ليس سببا لاختياره.

كم عدد وحدات معالجة الرسومات التي تتطلب شبكة 800G؟

لا يوجد حد GPU. احسب من منافذ الشبكة لكل خادم، وسرعة المنفذ، وتعيين السكك الحديدية، والهيكل، وهدف الاشتراك الزائد، وحركة مرور التطبيق - بالطريقة المذكورة في الخطوة 2 أعلاه.

هل QSFP-DD أفضل من OSFP؟

ولا يوجد أي منهما أفضل على المستوى العالمي. يقدم QSFP-DD توافقًا أصليًا مع عائلة QSFP-ومساحة أصغر؛ تحدد مواصفات OSFP فئات الطاقة الأعلى وخيارات المبدد الحراري-المدمجة، وهي أصلية في العديد من أنظمة الذكاء الاصطناعي-العالية الأداء. نقطة النهاية تقرر.

هل يمكن لمنفذ OSFP استخدام وحدة QSFP؟

تدعم بعض تطبيقات OSFP وحدات QSFP من خلال محول معتمد، ولكن التوافق والطاقة ووضع المنفذ ودعم البائع كلها تحتاج إلى التحقق من النظام الأساسي المحدد.

هل يمكن استخدام QSFP-DD لكل من Ethernet وInfiniBand؟

عامل الشكل لا يحدد البروتوكول. يجب أن يدعم المنفذ المضيف وبطاقة NIC والمحول والبرامج الثابتة والكابل وجهاز الإرسال والاستقبال وضع التشغيل المقصود.

ما هو جهاز الإرسال والاستقبال 800G الذي يجب أن أستخدمه؟

ابدأ من المسافة المقاسة، وقفص نقطة النهاية، والاختراق المطلوب، ونوع الألياف، والموصل، ومعدل المسار، ووضع FEC، وفئة الطاقة، وتأهيل البائع. اسم الواجهة الضوئية ليس كافيًا في حد ذاته.

هل يضمن توافق QSFP-DD مع الإصدارات السابقة ترقية سهلة إلى 1.6T؟

لا. قد يقبل المنفذ المضيف الوحدة ميكانيكيًا بينما لا تستطيع ميزانية ASIC أو PCB أو القفص أو التبريد أو الطاقة دعم معدل المسار الجديد. التحقق على مستوى النظام الأساسي.

قبل التوقيع على أمر الشراء

قم بتأكيد قفص نقطة النهاية عند طرفي كل نوع رابط؛ عدد وسرعة منافذ الحوسبة- لكل عقدة؛ رسم خرائط السكك الحديدية ونسبة الاشتراك الزائد المستهدفة؛ عدد منافذ الأوراق والعمود الفقري بما في ذلك التكرار؛ متطلبات جميع الأقمشة الأربعة؛ وضع التشغيل، وبالنسبة لـ RoCE، تصميم التحكم الكامل في الازدحام-؛ مسار الكابل المُقاس واختيار التوصيل البيني الناتج؛ الموصل والقطبية وميزانية الخسارة ؛ FEC ووضع الاختراق. طاقة الوحدة مقابل الحدود الحرارية الكاملة للسكان-؛ توافق البرامج الثابتة وCMIS؛ حالة تأهيل البائع؛ والنتائج المعملية لاختبار BER والأداء والازدحام والفشل والنقع.

يدعم QSFP-DD نسيج AI قابل للتطوير بوزن 400 جيجا أو 800 جيجا. لا يزال عنصرًا واحدًا فقط من التصميم. ابدأ بنقاط النهاية ونموذج المرور، واحسب الهيكل، واختر الرابط المادي من المسافة المقاسة، وتحقق من صحة النظام المجمع قبل أن يقوم بمهمة تدريبية.

المنهجية والنطاق

يعتمد هذا الدليل على ثلاثة أنواع من المصادر، وقد تم إبقاؤها متميزة عن عمد في النص أعلاه.المعايير ووثائق MSAتحدد مواصفات أجهزة - IEEE 802.3df وQSFP-DD وOSFP MSA واتفاقيات تنفيذ OIF CMIS - عوامل الشكل والتشوير وسلوك الإدارة.وثائق البائع- أدلة نظام NVIDIA DGX، والبنيات المرجعية لـ DGX SuperPOD، وملاحظات تكوين منافذ ConnectX-8 ووثائق Cumulus Linux RoCE - تم الاستشهاد بها كمثال خاص بالمورد، وليس كسلوك عالمي؛ منصات أخرى تختلف.المبادئ التوجيهية الهندسية- نصيحة التسلسل، وتفضيل الروابط الأقصر، وحدود التحقق من الصحة - هي توصيات تشغيلية مستمدة من ممارسة النشر، ويتم تصنيفها على هذا النحو بدلاً من تقديمها كمواصفات.

 

إرسال التحقيق