Runway lança o Praxis-1, modelo aberto de 27 bilhões de parâmetros para controle de robôs que lidera o RoboLab-120 da NVIDIA
O modelo de ação do mundo prevê vídeo e ações do robô ao mesmo tempo; pesos e código de inferência e ajuste fino saem sob Apache 2.0, inclusive para uso comercial.
Por que importa
A maioria das políticas abertas para robôs depende de dados de teleoperação, lentos e caros de coletar. O Praxis-1 parte do pré-treinamento em vídeo em grande escala da Runway, que diz que vídeo da web equivale a vídeo de robôs teleoperados como dado de pré-treinamento, deslocando o gargalo para quanto vídeo geral um modelo consegue aprender. Liberar pesos e código de ajuste sob Apache 2.0 permite que qualquer equipe o adapte ao próprio hardware. Lidera o RoboLab-120 da NVIDIA à frente de FLUX 3 Action, Cosmos3 Nano e π0.5. Fique de olho em resultados independentes em outros robôs.
Fatos principais
- Transformer de difusão com mistura de especialistas e 27 bilhões de parâmetros
- 46,2% de sucesso no RoboLab-120 em 1.200 episódios
- FLUX 3 Action 42,9%, Cosmos3 Nano 36,8%, π0.5 28,0%
- Pesos e código sob Apache 2.0, uso comercial permitido
- Ajustado no RT-1: 80,0% no SimplerEnv contra 52,4% da política original
- Parceiros de lançamento: Noble Machines, Standard Bots e Ultra