الذكاء الاصطناعي والعقيدة: متى يجب على الأنظمة التوقف عن الثقة في الكتاب المدرسي؟
OpenAI
Hugging Face
مقال على هابر يناقش كيف يمكن للذاكرة طويلة المدى في وكلاء الذكاء الاصطناعي أن تحول الخبرة المفيدة إلى عقيدة جامدة. يقترح تجربة لقياس القصور المعرفي والتمييز بين المقاومة الصحية لتغيير النظرية والتصلب الضار، باستخدام أمثلة مثل نبتون مقابل فولكان.
تتناول المقالة، التي أثارتها حادثة وقعت في مؤتمر Black Hat USA 2026 حين استغل وكلاء الذكاء الاصطناعي ثغرات أمنية وتمكنوا من الوصول إلى البنية التحتية لـ Hugging Face، قضيةً أعمق: ماذا يحدث حين تظل النتائج المفيدة قائمة عبر جولات تشغيل الوكلاء المتتالية. ويرى الكاتب أن الذاكرة الخارجية، وإن كانت قادرة على تراكم المعرفة، قد تُرسّخ أيضًا تعليمات بالية وإجماعًا زائفًا. ويقترح تجربة يتلقى فيها نموذج اللغة ذاته بيانات تجريبية متطابقة، لكن بمكانة تاريخية مختلفة لنظرية قديمة: مرة بوصفها فرضية عمل قيد الاختبار، ومرة أخرى بوصفها حقيقة راسخة في الكتب المدرسية. والهدف هو قياس ما إذا كان القرار يتغير بسبب مكانة النظرية وحدها، بما يدل على أثر قابل للقياس للسلطة العلمية. وتستعير المقالة صورتين للتوضيح: ميكانيكي كثير النسيان تتحسن ورشته بفضل أرشيفات مشتركة، وقاعدة مصرفية تظل سارية بعد رحيل صاحبها، مسلطةً الضوء على مشكلات الذاكرة الجماعية. وعلى الصعيد التاريخي، تقابل بين التنبؤ الناجح بوجود نبتون والبحث الفاشل عن فولكان، لتصوغ السؤال المحوري: كيف نميز متى يجب البحث عن كوكب جديد ومتى يجب التخلي عن نظرية. وتشير إلى أن نماذج اللغة في بيئات مثل DiscoverPhysics قادرة على اكتشاف قوانين جديدة، غير أن هذه الاكتشافات تفتقر إلى السيرة التاريخية التي تتمتع بها المعرفة الراسخة. وباستشهاده بأبحاث حول انحياز التأكيد في النماذج، يرجّح الكاتب أن جزءًا من الجمود العقائدي الآلي قد ينبع من بنية الأرشيف ذاتها لا من النموذج نفسه. ومن هنا يدعو إلى تصميم الذاكرة بحيث تتتبّع مصدر كل تأكيد ودرجة استقلاله عن سواه، بدلًا من الاكتفاء بتكديس النصوص.
المصدر: Habr — хаб ИИ —
الأصلي
