Scientist World من برينستون يجعل 1000 ورقة بحثية قابلة للتشغيل، وعلماء الذكاء الاصطناعي المتقدمون يتفوقون على النتيجة البشرية في 74% من الحالات

لماذا يهم

تطلب معظم معايير الذكاء الاصطناعي للبحث من النموذج تكرار نتيجة معروفة. أما Scientist World فيحوّل كل ورقة إلى بيئة فيها سؤال بحثي مفتوح وطريقة المؤلفين كخط أساس، ثم يقارن عالم الذكاء الاصطناعي بما حققه المؤلفون البشر. ويذكر المؤلفون أن الأنظمة المتقدمة تتفوق على البشر بالفعل في 74% من الحالات ضمن أول ألف بيئة. هذا قياس ذاتي في مرحلة ما قبل النشر، وخط الإنتاج الذي يبني البيئات ويتحقق منها آلي أيضًا، لذا يُراقب التكرار المستقل والتعريف الدقيق للفوز.