Pesquisadores da Panasonic, UC Berkeley, Nvidia e Stanford apresentam o T-Rex, modelo de robô que reage ao toque dos dedos

O modelo de visão, linguagem e ação planeja a cerca de 5 Hz e corrige pelo tato a cerca de 20 Hz; a Panasonic diz que superou outros métodos em 12 tarefas reais com contato, em avaliação própria.
Por que importa
A maioria dos modelos de visão, linguagem e ação guia robôs principalmente por imagens de câmera e trata o tato como informação estática, o que dificulta o controle fino de força. O T-Rex divide o trabalho: um módulo mais lento planeja com visão e linguagem e outro mais rápido lê sensores nas pontas dos dedos e ajusta a pegada em tempo real, detectando deslizes ou pressão excessiva sem refazer o reconhecimento de imagem. As tarefas incluíam virar páginas, mover ovos, girar chaves e rosquear lâmpadas. A Panasonic mira fábricas e logística; vale acompanhar se outros replicam os resultados do arXiv.
Fatos principais
- Planejamento com visão e linguagem a cerca de 5 Hz
- Correção tátil a cerca de 20 Hz
- Dados de treino com mais de 200 objetos do dia a dia
- Avaliado em 12 tarefas reais com contato
- Parceiros: UC Berkeley, Nvidia, Stanford, Universidade Sapienza de Roma, ItalAI