Scientist World aus Princeton macht 1.000 Arbeiten ausführbar; KI-Wissenschaftler der Spitzenklasse schlagen das menschliche Ergebnis in 74 % der Fälle
Das arXiv-Preprint veröffentlicht 1.000 geprüfte Umgebungen und 6.400 Stunden Forschungsspuren und gibt an, das Training habe die Forschungsideen eines kleinen Modells um 158 % gesteigert; die Zahlen stammen von den Autoren und sind nicht begutachtet.
Warum es wichtig ist
Die meisten KI-Benchmarks für Forschung verlangen von einem Modell, ein bekanntes Ergebnis zu wiederholen. Scientist World macht jede Arbeit zu einer Umgebung mit offener Forschungsfrage und der Methode der Autoren als Baseline und misst den KI-Wissenschaftler an dem, was die menschlichen Autoren erreicht haben. Die Autoren berichten, dass Spitzensysteme die Menschen in den ersten 1.000 Umgebungen bereits in 74 % der Fälle schlagen. Das ist eine selbst berichtete Messung im Preprint-Stadium, und die Pipeline, die Umgebungen baut und prüft, ist selbst automatisiert; unabhängige Replikation und die genaue Definition eines Sieges sind zu beobachten.
Die wichtigsten Fakten
- Preprint arXiv:2611.08478, eingereicht am 5. Nov. 2026
- Autoren: Taiming Lu, Sachin Konan, Zhuang Liu (Princeton)
- Erste Veröffentlichung: 1.000 geprüfte Umgebungen
- KI-Wissenschaftler der Spitzenklasse schlagen die menschlichen Forscher in 74 % der Fälle
- 6.400 Stunden Forschungsspuren veröffentlicht
- Training steigerte die Ideenfindung eines kleinen Modells um 158 %