إبداع نماذج الانتشار: تفسير رياضي من أبحاث جوجل
Google/DeepMind
أظهر باحثو جوجل أن قدرة نماذج الانتشار على توليد بيانات جديدة، بدلاً من مجرد حفظ مجموعة التدريب، هي نتيجة رياضية لتنعيم دالة النقاط (score function) أثناء تدريب الشبكة العصبية. التنعيم يجبر النموذج على الاستيفاء بين نقاط البيانات، مما يخلق عينات جديدة ومعقولة.
قدم باحثون من جوجل ريسيرتش دراسة تشرح طبيعة الإبداع في نماذج الانتشار. أظهروا أن قدرة النموذج على توليد بيانات جديدة، بدلاً من مجرد نسخ أمثلة التدريب، هي نتيجة قابلة للتنبؤ رياضيًا لكيفية تدريب الشبكات العصبية. أثناء التدريب، تعمل الشبكة العصبية بشكل طبيعي على تنعيم دالة النتيجة - وهو حقل متجه يوجه عملية إزالة التشويش. هذا التنعيم، الذي يُسمى تنعيم النتيجة، يتسبب في توقف الجسيمات عند مواضع وسطية بدلاً من إعادة إنتاج نقاط التدريب تمامًا، مما يُنشئ عينات جديدة معقولة. في الفضاءات عالية الأبعاد، يظهر التأثير فقط على طول الاتجاهات المماسة لشُعب البيانات الكامنة، دون إبطاء التقارب مع الشُعب نفسه. وبالتالي، يحقق النموذج توازنًا بين الجودة والجدة: الصور واقعية وأصلية في آن واحد. تم تقديم العمل في مؤتمر ICLR 2026.
المصدر: Google Research —
الأصلي
