РОБОТОТЕХНИКА

Базовые модели робототехники нуждаются в эталонах, которые измеряют физический мир

Базовые модели робототехники переходят от впечатляющих демонстраций к более строгой оценке. Следующий вопрос заключается в том, можно ли измерять воплощённый ИИ по показателям безопасности, надежности, переноса задач и восстановления после хаотичных реальных сбоев.

Майкл Г ·

Базовые модели робототехники нуждаются в эталонах, которые измеряют физический мир
Mantis.

Фундаментальные модели робототехники мы вступаем в фазу, когда демонстраций уже недостаточно. Робот, который складывает одно полотенце, открывает один ящик или выполняет одну лабораторную задачу на видео, может быть впечатляющим, но коммерческий вопрос заключается в том, сможет ли система переносить опыт, восстанавливаться и безопасно работать, когда мир меняется.

Это делает оценку центром области. Воплощённый ИИ должен рассуждать о восприятии, движении, контакте, времени, инструментах и присутствии человека. Каждый уровень вводит режимы сбоев, которые не появляются в текстовых эталонах.

Физический мир наказывает за короткие пути

Языковые модели часто могут справиться с плохим предложением. Роботы могут ломать предметы, блокировать проходы, причинять вред людям или повреждать себя. Эталон для воплощённый ИИ следовательно, необходимо измерять не только завершение, но и безопасный отказ, неопределенность, частота вмешательств и поведение при восстановлении.

Оценка воплощённого ИИ должна измерять качество действий, переносимость, вмешательство и безопасное восстановление, а не только выполнение задачи. Изображение: Mantis.
Оценка воплощённого ИИ должна измерять качество действий, переносимость, вмешательство и безопасное восстановление, а не только выполнение задачи. Изображение: Mantis.

Отрасли также нужны ориентиры, которые устойчивы к переобучению. Если каждая лаборатория тестирует одни и те же настольные задачи, прогресс будет выглядеть чище, чем при развертывании. Настоящие дома, фабрики, больницы и складские помещения содержат беспорядок, изменения освещения, человеческие вмешательства и крайние случаи, которые трудно смоделировать.

Перевод — это настоящая награда

Обещание фундаментальных моделей в робототехнике заключается в transfer: обучение на многих задачах, воплощениях, sensors, и среде, чтобы система могла адаптироваться к новой ситуации без индивидуального программирования. Это также самая трудная вещь для доказательства. Полезный эталон должен показывать, когда модель обобщает, а когда она просто запоминает распределение демонстраций.

Бенчмарки робототехники требуют тестов на заводском этаже и в реальной среде, которые выявляют сложные крайние случаи. Изображение: Mantis.
Бенчмарки робототехники требуют тестов на заводском этаже и в реальной среде, которые выявляют сложные крайние случаи. Изображение: Mantis.

Здесь пересекаются безопасность и экономика. Робот, которому постоянно требуется помощь человека, может быть успешным в исследовательском плане, но он не является масштабируемым продуктом. Коммерческая робототехника требует предсказуемого времени работы, четких ограничений и модели поддержки, которая не нивелирует экономию на рабочей силе.

Темы: робототехника, базовые модели, воплощённый ИИ, оценка

Канонический адрес статьи