نشرت DeepSeek ورقة بحثية جديدة، تكشف عن البنية التحتية الخاصة بها لتدريب وكلاء الذكاء الاصطناعي. ووفقًا للورقة على موقع arXiv (DeepSeek Elastic Compute (DSec))، تُستخدم هذه المنظومة لدعم تدريب وتقييم وكلاء على نطاق واسع. كما تم إدراج المؤسس ليانغ وينغفنغ ضمن قائمة المؤلفين أيضًا.
مجموعة SDK تدير أربعة أنواع من البيئات الرملية
تشير الورقة إلى أنه عند استخدام نماذج اللغات الكبيرة لإجراء تدريب وتقييم واسع النطاق للوكلاء، يحتاج النموذج إلى فحص المكتبات واستدعاء الأدوات وتنفيذ الأوامر والتفاعل مع الخدمات ذات الصلة بالمهام داخل بيئة تنفيذ معزولة تحافظ على الحالة. مثل هذه الأحمال تتطلب إنشاء العديد من البيئات الرملية خلال فترة قصيرة، وتختلف احتياجاتها من حيث الوظائف والعزل، كما يجب الاحتفاظ بالحالة أثناء التفاعل على مدى فترات طويلة، إضافةً إلى الاعتماد على مكتبة ضخمة من الصور (images) مع معدل إعادة استخدام منخفض نسبيًا. لذلك ترى الورقة أن ما يلزم لدعم هذه المهام هو منصة تنفيذ مرنة، وليس نوعًا واحدًا من بيئات التنفيذ الرملية.
تتمثل طريقة DSec في توفير أربعة أنواع من الخلفيات عبر SDK موحّد: استدعاءات الدوال، والحاويات، والآلات الافتراضية الصغيرة، والآلات الافتراضية الكاملة. يتولى النظام مسؤولية ترتيب أماكن التشغيل وإدارة دورات الحياة داخل الكتلة/العنقود، ويربط الطبقات التي تُدار كلٌ منها بإصدار مستقل لإعادة تكوين البيئة، كما يجمع بين مشاركة الذاكرة والاسترداد وجدولة وحدة المعالجة المركزية لرفع كثافة التنفيذ. أما بيانات الصور/اللقطات فتُحمّل عند الحاجة من نظام ملفات موزع على مستوى العنقود من نوع 3FS.
بالتعاون مع أطر التعلم المعزز، يتم تصميم عمليات الاستدلال ذات الحالة وفصلها عن التدريب القابل للاستباق
يشرح البحث أن DSec وإطار التعلم المعزز (RL) هما تصميم مشترك: فصل تنفيذ الاستدلال ذي الحالة عن تدريب GPU القابل للاستباق، والتنسيق بين دورة حياة البيئة والتدريب، بحيث يتم استعادة الموارد الخاملة مع الحفاظ على حالة الاستدلال، كما يتناول مشكلة سلوك الوكيل غير الملائم.
وفقًا لتقرير TechNode، تتكون وحدة بحجم إنتاجي من حوالي 160 عقدة، ويمكنها دعم حوالي 3 ملايين حاوية/بيئة يوميًا؛ وفي الوقت نفسه يتم تشغيل أكثر من 380 ألفًا منها، وبمعدل إنشاء يتجاوز 5000 بيئة في الثانية. تجاوز عدد مؤلفي هذه الورقة 130 مؤلفًا.
تُنشر هذه المقالة ورقة تدريب الوكيل المفتوح لـ DeepSeek لبيئات DSec. يظهر اسم المؤلف ليانغ وينفنغ في قائمة المؤلفين لأول مرة في .
$جراد البحر