«Бионическая рука работает с первой попытки»: Meta показала протез smartARM, который сам подбирает хват по камере в ладони

«Стакан, потом ложка» как многошаговый процесс

Многие традиционные протезы кисти требуют, чтобы человек вручную переключался между шаблонами хвата под разные предметы, и из-за этого брать повседневные вещи неудобно.

Даже естественное бытовое действие — взять стакан, а затем ложку — превращается в многошаговую процедуру.

smartARM решает эту задачу не механикой, а восприятием: стартап разработал связку ИИ-железа и софта, которая понимает окружение и автоматически подбирает подходящий хват, чтобы человек интуитивно переходил между повседневными делами.

Сам стартап описывают как vision-first прототип бионической руки: он строится на открытом программном обеспечении, а очки Meta AI подключаются к нему как необязательное дополнение.

Камера в ладони и открытая модель зрения DINOv2

Рука «видит» через камеру, встроенную непосредственно в ладонь.

Команда использует DINOv2 — открытую модель зрения Meta — чтобы распознавать повседневные предметы всего по нескольким эталонным фотографиям и передавать результат в софт выбора хвата.

Захват и подъём объектов происходят за счёт прямого чтения визуальных признаков: без предварительного понимания предмета и без дополнительного программирования.

Практическая разница — в скорости адаптации: рука подстраивается под объекты, натренированные по нескольким фотографиям, почти мгновенно, тогда как раньше на это могли уходить недели.

DINOv2 — не закрытый компонент конкретного протеза, а публичный проект Meta AI Research (FAIR): его модели предобучены на датасете из 142 млн изображений без разметки и аннотаций.

Признаки этих моделей можно использовать с классификаторами простоты линейного слоя в разных задачах компьютерного зрения: они устойчивы и работают в новых доменах без дообучения.

В ключевых тезисах публикации связка описана прямо: очки Meta AI, открытые модели зрения и Device Access Toolkit используются, чтобы сделать протезы доступнее для большего числа людей, а DINOv2 отвечает за простое управление — без ручного переключения режимов и с заметно укороченной кривой обучения.

Очки Meta AI как второй сенсор

smartARM подключает очки Meta AI и Meta Wearables Device Access Toolkit, чтобы расширить распознавание и понимание объектов: очки дают дополнительные данные с эгоцентрической точки зрения.

Формулировка Meta предельно конкретна: очки добавляют руке контекст, который помогает лучше понять, с чем именно пытается взаимодействовать пользователь.

Через приложение на телефоне пользователи могут добавлять новые объекты — так у всего сообщества smartARM появляется способ персонализировать протез под собственные бытовые нужды.

Toolkit — публичная документация для разработчиков: набор поддерживает iOS и Android, а на аппаратной стороне сейчас заявлены Ray-Ban Meta (Gen 1 и Gen 2), Ray-Ban Meta Optics и Meta Ray-Ban Display.

Требования к версиям операционных систем совпадают с приложением Meta AI, что снижает порог входа для команд, которые строят приложения для очков.

Практический смысл такой схемы в том, что набор предметов, на которые реагирует рука, задаёт не производитель на заводе, а сам пользователь — через уже знакомое ему мобильное приложение.

Что говорит пользователь, а что — основатель smartARM

Давний пользователь smartARM и бывший игрок NFL Shaquem Griffin описал ощущения так: «Из всей техники, что в неё упакована, для меня важнее всего масштабируемость и доступность. Это будущее потребительских протезов».

Основатель и CEO smartARM Hamayal Choudhry формулирует инженерную позицию так: «Сделать способную руку — только часть задачи. Не менее важно сделать её интуитивной в использовании».

По его словам, распознавание обычных предметов и подбор подходящего хвата нужны, чтобы человек сосредотачивался на том, что он хочет сделать, а не на том, как управлять протезом.

Доступность как отдельная линия Meta

Meta описывает историю smartARM как часть более широкого движения: люди и компании используют ИИ-железо и софт, чтобы делать жизнь проще и доступнее для всех.

Материал продолжает линию предыдущей публикации компании о носимых ИИ-устройствах для людей с инвалидностью, вышедшей в мае 2026 года.

Формально smartARM остаётся прототипом, а очки — опциональной добавкой, однако связка открытой модели зрения и пользовательской персонализации через телефон показывает, куда смещается конкуренция в потребительских протезах.