Ai2 libera ToyBlocks como código abierto para experimentos controlados de aprendizaje robótico
Blog de Hugging Face: simulación de mesa FoundationWorld con demos automáticas, 85.336 demostraciones de largo horizonte, modelos Molmo 2 + ManiFlow y 50% de éxito sim-to-real en deletreo en un brazo Franka.
Por qué importa
ToyBlocks es el primer FoundationWorld de Ai2: un dominio estrecho de bloques y brazo para que los fallos de aprendizaje robótico sean rastreables al controlar datos y evaluaciones. La entrega incluye generadores, assets, código de entrenamiento y evaluación, y dos modelos entrenados. Las primeras pruebas de generalización VLA fueron flojas hasta trucos de fine-tuning; Molmo 2 + ManiFlow jerárquico se transfirió a un Franka físico con tasas de skill similares a la simulación. Atención al dataset mayor y al RL integrado prometidos.
Datos clave
- Publicado en el blog de Hugging Face 2026-11-06T14:00:48Z
- 85.336 demostraciones de largo horizonte (~1.600 horas, 144M frames)
- Planificador Molmo2-4B-tb + control de bajo nivel ManiFlow-tb
- Sistema jerárquico 50% de éxito en deletreo en Franka físico (15/30)
- Skills atómicas ManiFlow ~80% sim y ~81% real