Investigadores de Panasonic, UC Berkeley, Nvidia y Stanford presentan T-Rex, un modelo robótico que reacciona al tacto de los dedos
El modelo de visión, lenguaje y acción planifica a unos 5 Hz y corrige con el tacto a unos 20 Hz; Panasonic dice que superó a otros métodos en 12 tareas reales con contacto, según su propia evaluación.
Por qué importa
La mayoría de los modelos de visión, lenguaje y acción guían a los robots sobre todo con imágenes de cámara y tratan el tacto como información estática, lo que dificulta el control fino de la fuerza. T-Rex divide el trabajo: un módulo más lento planifica con visión y lenguaje y otro más rápido lee los sensores de las yemas y ajusta el agarre en tiempo real, de modo que detecta deslizamientos o presiones excesivas sin repetir el reconocimiento de imagen. Las tareas incluían pasar páginas, mover huevos, girar llaves y enroscar bombillas. Panasonic lo orienta a fábricas y logística; habrá que ver si otros replican los resultados de arXiv.
Datos clave
- Planificación con visión y lenguaje a unos 5 Hz
- Corrección táctil a unos 20 Hz
- Datos de entrenamiento con más de 200 objetos cotidianos
- Evaluado en 12 tareas reales con contacto
- Socios: UC Berkeley, Nvidia, Stanford, Universidad Sapienza de Roma, ItalAI