الانتقال إلى المحتوى الرئيسي

Memdoor: خمسة نماذج Qwen3.8-27B تتفوق على Fable 5 في LiveCodeBench Hard

Behzat AImulti-agent-swarmscoding-evalsopen-sourcellm-agentsbenchmarking
صورة مقرّبة للوحة دائرة إلكترونية تُظهر مكوّنات كثيفة ومسارات معدنية دقيقة.

نشر Memdoor سير عمل لحل المهام الجماعي تُشغَّل فيه خمسة نماذج Qwen3.8-27B كفريق بدلًا من وكيل واحد. ووفقًا لتغطية المشروع، فإن إعداد الفريق يتفوق على Fable 5 في LiveCodeBench Hard. التنفيذ متاح كمستودع مفتوح مع أمثلة على سير العمل، بحيث يمكن فحص الإعداد وإعادة تشغيله بدلًا من قبوله دون تحقق.

لقطة مقرّبة للوحة دائرة إلكترونية تُظهر شرائح دقيقة ومكوّنات

النتيجة ذات صلة بهندسة الوكلاء لأنها تعزل خيارًا تصميميًا تتركه معظم المنظومات ضمنيًا: هل تُكتسب القدرة بتوسيع نموذج واحد أم بتنسيق عدة نماذج أصغر فوق أساس مشترك. فريق من خمسة نماذج يتجاوز اختبارًا صعبًا للبرمجة أمام نموذج واحد أكبر هو ادعاء يمكن اختباره مباشرة في أي منظومة وكلاء، بالنماذج نفسها ومجموعة المهام نفسها والتحكيم نفسه. يمكن للفرق التي تقيّم استراتيجيات التنسيق مقارنة سير العمل المنشور بخط أساسها الخاص دون إعادة بناء إطار الاختبار من ورقة بحثية.

ما لا تُثبته التغطية هو الفارق عن Fable 5، أو عدد المحاولات خلف النتيجة المعلنة، أو كيفية تنسيق النماذج الخمسة وتجميع مخرجاتها. هذه التفاصيل مهمة قبل التعامل مع سير العمل كوصفة عامة، ومستودع الأمثلة هو المكان المناسب للتحقق منها. موقف الاستوديو هو أن الادعاء يستحق إعادة الإنتاج قبل تكراره.

لنتحدث!