تتولى هذه الوظيفة إدارة تخصيص عرض النطاق الترددي للشبكة لتفريق الأحمال التدريبية ذات النطاق الترددي العالي عن طلبات الاستدلال الحساسة للتأخير. من خلال تطبيق قوائم انتظار ذات أولوية ديناميكية، تمنع هذه الوظيفة توقف مهام التدريب بسبب حركة مرور الاستدلال المتنافسة أو العكس. يضمن النظام حصول نماذج الذكاء الاصطناعي الهامة على الإنتاجية اللازمة مع الحفاظ على انخفاض التذبذب للتطبيقات في الوقت الفعلي، مما يؤثر بشكل مباشر على كفاءة الحوسبة الإجمالية وسرعات تقارب النماذج دون الحاجة إلى ترقيات في الأجهزة.
يحدد متحكم الشبكة تدفقات حركة مرور متميزة تنشأ من مجموعات التدريب مقابل نقاط نهاية الاستدلال.
تُعيَّن الأوزان ذات الأولوية ديناميكيًا بناءً على متطلبات عبء العمل الحالية واتفاقيات مستوى الخدمة المحددة مسبقًا.
يتم تعديل رؤوس الحزم لتعكس مستويات الأولوية، مما يوجه نسيج التبديل نحو مسارات التوجيه المثلى.
حدد فئات حركة المرور عن طريق ربط عناوين IP المصدر بمعرفات التدريب أو الاستدلال.
تخصيص أوزان أولوية حيث يحصل التدريب على ضمانات نطاق ترددي أعلى أثناء أوقات الذروة.
قم بتكوين قواعد وسم الحزم لتضمين علامات الأولوية في رؤوس الشبكة.
تحقق من سلوك قائمة الانتظار عن طريق محاكاة تدفقات حركة مرور تدريب واستدلال مكثفة ومتزامنة.
يكتشف ويصنّف الحزم تلقائيًا لتلك التي تنتمي إلى جلسات التدريب أو الاستدلال بناءً على أنماط عناوين IP المصدر ونطاقات المنافذ.
يقوم بتهيئة معلمات جودة الخدمة (QoS) مثل النطاق الترددي المضمون وعتبات أقصى زمن الوصول لأعباء عمل الذكاء الاصطناعي المحددة.
يعرض مقاييس حية حول أعماق قوائم الانتظار، ومعدلات فقدان الحزم، وفعالية تطبيق الأولوية عبر نسيج الشبكة.