أطلق اثنان من الموظفين السابقين في OpenAI موقعًا يُدعى In the Weights، يحاول الإجابة على سؤال تجريبي: كم من المعلومات يتذكرها النموذج الكبير حقًا دون الاستعانة بمحرّك بحث ويب؟ مع تحوّل عدد متزايد من المستخدمين إلى روبوتات المحادثة للحصول على المعلومات، أصبحت هذه الاختبارات ذات معنى عملي.
اختبار التعرف على الأسماء باستخدام نماذج متعددة
في اسم الموقع، تشير "weights" إلى معلمات النموذج. يرى المطوران توماس ديمسون وجوي فلين أن "البحث عن الذات" في محركات البحث التقليدية لم يعد الطريقة الوحيدة لقياس وجود الفرد على الإنترنت، بل أصبح قدرة النموذج على ذكر الشخص مباشرة مؤشرًا آخر للرؤية.
في Weights، سيتم طرح أسئلة مشابهة مثل "من هو某某" على نماذج مختلفة، مع طلب ما يصل إلى 10 نتائج، ووصف موجز، ودرجة ثقة. ثم يقوم الموقع بتصنيف الوصفات المتشابهة، ثم إنشاء درجة قوة تقيس درجة "تذكر" النموذج لهذا الاسم.
القوائم تتغير، وقد تظهر هلوسات
النماذج الحالية المشمولة في الاختبار تشمل Grok و Gemini وعدد من إصدارات GPT و Claude و Llama، بالإضافة إلى بعض النماذج الأقل شيوعًا. كما سيعرض صفحة النتائج أي النماذج قدمت إجابات، وأي الإجابات قد تحتوي على هلوسات أو لبس.
على سبيل المثال، كاتب TechCrunch أنتوني ها حصل على درجة 641، مما يضعه في أعلى 6% من جميع الأسماء. ومع ذلك، فإن الترتيب يتغير باستمرار. في وقت نشر التقرير، كان الممثل ماكولاي كولكين في المرتبة الأولى، يليه المغني لوتشيانو بافاريوتي.
كما أشار التقرير إلى أن GPT-5.4 Mini وصف Anthony Ha كشكل غامض لاسم قد يشير إلى أشخاص متعددين، بدلاً من التعرف المباشر عليه كشخص محدد. وتم تصنيف مثل هذه الحالات أيضًا من قبل الموقع كهلوسات محتملة.
المطورون يستثمرون في الوضوح الجديد في عصر النماذج
قال ديمسون في مقابلة إنه وفلاين يرغبان في تطوير مشاريع تعيد إشعال الإبداع بعد مغادرتهما OpenAI. وكان كلاهما قد انضم إلى OpenAI بعد استحواذها على شركة التصميم الخاصة بهما، Global Illumination.
يعتقد أنه بحلول عام 2026، مع استمرار تحول حركة المرور نحو النماذج الكبيرة، لم تعد عمليات البحث التفاخرية على غرار Google هي الهدف الأهم. فبدلاً من ترتيب نتائج الويب، يصبح وجود معلوماتك "داخل معلمات النموذج" شكلاً جديداً من أشكال الوجود على الإنترنت.
كما أشار المطورون إلى أنهم سيواصلون دراسة سبب حصول نفس سلسلة النماذج على نتائج مختلفة، وأي نوع من الأشخاص تميل النماذج المختلفة إلى "تذكّر" أكثر، وأي الأشخاص يجب أن يكون لديهم صفحة على ويكيبيديا ولكن لم يتم إنشاؤها بعد.