アント・グループ傘下のRobbyant、ロボットハンド向け触覚基盤モデルLingBot-Touchをオープンソース化
磁気・ピエゾ抵抗・視触覚センサーの記録4,983時間で事前学習し、重みをApache-2.0で公開。実機26タスクでの改善は同社自身の結果で、独立した再現はまだない。
なぜ重要か
ロボット向け基盤モデルの多くは視覚と言語から学ぶ一方、触覚データは互換性のない多様なセンサーから得られる。LingBot-Touchは3種類のセンサーを個別のトークナイザーで共通のTransformerに取り込み、Robbyantは事前学習で見ていない触覚ハードにも転移できるとしている。同社によると、2種類の器用なハンドで、試した4つの行動方策はいずれも生の触覚信号や触覚なしよりLingBot-Touchのトークンを使った場合に最も成績が良かった。外部の研究室が再現できるか、別途配布とされる推論コードが公開されるかが焦点だ。
要点
- 事前学習:4,983時間、464,431エピソード、約13.3億フレーム
- センサー:磁気、ピエゾ抵抗、視触覚
- 最小構成:546万パラメータ(HaT-Tiny)
- 実機の器用操作26タスクで各20回試行
- 重みはApache-2.0でHugging Faceに公開