Ai2 stellt ToyBlocks open source für kontrollierte Robotik-Lernexperimente bereit
Hugging-Face-Blog: FoundationWorld-Tischsimulation mit Auto-Demos, 85.336 Long-Horizon-Demonstrationen, Molmo-2- und ManiFlow-Modellen sowie 50 % Zero-Shot-Sim-to-Real-Erfolg beim Buchstabieren auf einem Franka-Arm.
Warum es wichtig ist
ToyBlocks ist Ai2s erste FoundationWorld: eine enge Block-und-Arm-Domäne, damit Robotik-Lernfehler nachvollziehbar werden, indem Trainingsdaten und Evals kontrolliert werden. Das Release enthält Generatoren, Assets, Trainings- und Evaluationscode sowie zwei trainierte Modelle. Frühe VLA-Generalisierungstests waren schwach bis zu Fine-Tuning-Tricks; hierarchisches Molmo 2 + ManiFlow transferierte auf einen physischen Franka mit ähnlichen Skill-Raten wie in der Simulation. Beobachten: größeres Dataset und integriertes RL.
Die wichtigsten Fakten
- Auf Hugging-Face-Blog veröffentlicht 2026-11-06T14:00:48Z
- 85.336 Long-Horizon-Demonstrationen (~1.600 Stunden, 144M Frames)
- Molmo2-4B-tb-Planer + ManiFlow-tb Low-Level-Steuerung
- Hierarchisches System 50 % Erfolg beim Buchstabieren auf physischem Franka (15/30)
- ManiFlow-Atomskills ~80 % Sim und ~81 % real