أظهر بحث جديد أن نموذجًا لغويًا مفتوحًا بحجم 27B استطاع إعادة كتابة أوزانه بنفسه عبر الاستدلال فقط، دون تدرّج أو تدريب، محققًا تحسنًا بمقدار 6.6 نقاط على مسائل لم يرها من قبل.

2 دقيقة قراءة

نموذج لغوي مفتوح 27B يعيد كتابة أوزانه بنفسه دون تدريب أو تدرّج

ما الذي حدث؟

نشرت ورقة بحثية على arXiv (رقم 2611.21885) نتائج تجربة تُظهر، وفق مؤلفيها، لأول مرة أن نموذجًا لغويًا مفتوحًا بحجم 27 مليار معامل (27B) يستطيع إعادة كتابة أوزانه بنفسه عبر استدلاله الذاتي، دون استخدام التدرّج (gradients) أو إعادة تدريب. أطلق الباحثون على هذه العملية اسم «إعادة الكتابة الذاتية» (self-rewriting)، حيث يعمل النموذج كمُحسِّن لنفسه.

في العمل السابق، قام نموذج متقدم بتعديل نموذج أصغر بكثير. أما هنا، فقد أُعطي النموذج أوزانه وإجاباته المُقيَّمة وقدرته على تشغيل نفسه، فشخّص فشله وأعاد كتابة الأوزان المسؤولة عنه.

النتائج الرئيسية

  • تحسّن على مسائل غير مرئية: تعديل النموذج لنفسه رفع دقته بمقدار 6.6 نقاط على مسائل لم يتدرب عليها.
  • تحسّن متتابع: اختبر النموذج تعديلاته على مسائل تدريبية ولم يقدّم إلا ما نجح منها، واستمرت دقته في الارتفاع عبر ثماني جلسات متتالية.
  • إصلاح الذات: استطاع النموذج إصلاح نسخة تالفة من نفسه كانت تحل تقريبًا لا شيء، دون إعادة تدريب ودون قراءة الأوزان الأصلية، ليعيدها إلى أكثر من 80% من دقتها الأصلية على مهام صور لم يرها.
  • القدرة تظهر مع الحجم: في عائلة نماذج واحدة، لم تُجرِ النماذج الأصغر أي تعديل أو أضرّت بنفسها، بينما تحسّن النموذج الأكبر وأصلح نفسه.

كيف تختلف عن الطرق الحالية؟

الطريقة ما تفعله التكلفة
التدريب التقليدي تحديث الأوزان عبر التدرّج عالية، تتطلب بيانات وحوسبة
توسيع الاستدلال (test-time scaling) حساب إضافي وقت الإجابة يزول بعد المهمة
إعادة الكتابة الذاتية تعديل الأوزان عبر الاستدلال فقط تُدمج في الأوزان دون تكلفة لكل إجابة

لماذا يهم هذا؟

تقول الورقة إن الحد الفاصل بين التدريب والاستدلال هو قيد في أدواتنا وليس خاصية للذكاء. وإذا صحّت النتائج، فإن إعادة الكتابة الذاتية قد تكون خطوة نحو التحسين الذاتي التكراري (recursive self-improvement)، حيث يستمر النموذج في تطوير نفسه دون نموذج أكبر أو هندسة أوامر أو تدريب مسبق أو لاحق.

ما الذي يجب الحذر منه؟

النتائج أولية وموصوفة في ورقة بحثية لم تخضع بعد لمراجعة الأقران، ولم تُطلق كأداة إنتاجية. كما أن التجربة اقتصرت على نموذج واحد بحجم 27B وعلى مهام محددة. لا تزال الأسئلة مفتوحة حول قابلية التعميم، والاستقرار على المدى الطويل، ومخاطر التعديل الذاتي غير الخاضع للرقابة.

تنويه: هذا المقال يلخّص معلومات من المصدر المذكور. للأرقام والتواريخ الرسمية، راجع الرابط الأصلي. لا نضيف تفاصيل غير منشورة في المصدر.

أسئلة شائعة

ما هي إعادة كتابة الأوزان الذاتية (self-rewriting)؟

هي قدرة النموذج على تعديل أوزانه الداخلية بنفسه عبر الاستدلال فقط، دون الحاجة إلى تدرّج أو إعادة تدريب، مما يسمح له بتحسين أدائه مباشرة.

كيف تختلف هذه التقنية عن توسيع الاستدلال (test-time scaling)؟

توسيع الاستدلال يضيف حسابًا إضافيًا وقت الإجابة يزول بعد انتهاء المهمة، بينما إعادة كتابة الأوزان تُخزّن التحسين داخل الأوزان نفسها دون تكلفة إضافية لكل إجابة.

هل يمكن لفرق الذكاء الاصطناعي في المنطقة تبني هذه التقنية الآن؟

الورقة بحثية ولم تُطلق كأداة إنتاجية بعد، لكنها تفتح مجالًا لتقليل الاعتماد على إعادة التدريب المكلف، وهو أمر جوهري للفرق التي تعمل بموارد محدودة.

المصدر: arXiv cs.AI

ملخص بمساعدة الذكاء الاصطناعي من المصدر أعلاه. القصص عالية الثقة تُنشر تلقائياً، والبقية تنتظر مراجعة، ولا تُضاف وقائع غير موجودة في المصدر.