LingBot-Touch: Унифицированная модель ИИ для гетерогенных тактильных датчиков

Исследователи представили LingBot-Touch, новаторскую тактильную фундаментальную модель, предназначенную для унификации и расширения тактильного представления через гетерогенные датчики. Опубликованная на arXiv в 2026-11-09 и представленная на HuggingFace Daily Papers на следующий день, модель решает ключевые проблемы в роботизированной манипуляции, связывая физику, специфичную для датчиков, и позволяя бесшовную интеграцию в различные тактильные системы.

Унифицированное представление через тактильные датчики

LingBot-Touch использует архитектуру на основе JEPA, построенную вокруг общего Transformer и предсказания латентного представления из спатиотемпоральных тактильных контекстов. Этот дизайн позволяет модели обрабатывать данные от пьезорезистивных, магнитных и визуально-тактильных датчиков в рамках единого латентного пространства. Полученные тактильные токены являются plug-and-play, что позволяет интеграцию в модели политики, такие как политика диффузии и фреймворки язык-действие-визуализация (VLA), включая π_0.5 и LingBot-VLA.

Ключевые свойства и производительность

Исследование подчеркивает четыре критических свойства LingBot-Touch:

• Унифицированный: Гетерогенные тактильные данные взаимно улучшают обучение представлению.
• Переносимый: Модель без усилий переносится на новые датчики и роботизированные платформы без дополнительного обучения.
• Эффективный: Поддерживает высокочастотную дальнейшую интерпретацию, даже с легким каркасом Vision Transformer (ViT).
• Масштабируемый: Производительность улучшается по мере увеличения объема данных для тактильного обучения.

Обширные эксперименты, включая симуляции и использования реальных роботов, демонстрируют, что LingBot-Touch улучшает задачи ловкой манипуляции, обеспечивая при этом вычислительную эффективность. Масштабируемость и адаптивность модели делают её многообещающим инструментом для продвижения тактильного обучения и проектирования робототехнического оборудования.

Доступность с открытым исходным кодом

Реализация LingBot-Touch является открытым исходным кодом и доступна на GitHub под лицензией Apache 2.0 . Репозиторий получил 103 звезд и поддерживает высокочастотное интерпретирование и перенос между задачами, что делает его доступным для исследователей и разработчиков, стремящихся использовать тактильные данные в робототехнике.

Это развитие подчеркивает потенциал интеграции тактильных данных между датчиками для масштабирования воплощенного интеллекта, предлагая ценные идеи для будущих достижений в робототехнике и технологии датчиков.