Разработка моделей для роботов уперлась не в алгоритмы и GPU, а в данные. Hugging Face представил Grabette — открытую систему, которая позволяет собирать их без самого робота. Это недорогой способ для записи манипуляций, устраняющий необходимость в дорогостоящем оборудовании и сложных настройках.
Grabette — это ручной гриппер, оснащенный двумя камерами: широкоугольной «рыбий глаз» для контекстного обзора и RGBD-камерой для надежного отслеживания траектории движения по шести степеням свободы (6-DoF). Система регистрирует действия пользователя, а затем эти данные могут быть использованы для обучения робота. Сама Grabette вдохновлена проектом Universal Manipulation Interface (UMI) Стэнфордского университета, который уже доказал эффективность такого подхода.
Данные, записанные с помощью Grabette, можно обрабатывать прямо в браузере. Система интегрирована с современной открытой экосистемой: для работы с датасетами используется LeRobot, а для их публикации — Hugging Face Hub. Такой подход делает сбор демонстраций доступным для широкого круга пользователей, которые могут внести свой вклад в создание большого, открытого и совместного датасета манипуляций, который ни одна лаборатория не смогла бы собрать в одиночку.
В семейство Grabette также входит Gripette — роботизированный концевой эффектор, аппаратный аналог ручного устройства. Он предназначен для выполнения движений, которым научился робот после обучения на данных, собранных Grabette.
Grabette указывает на фокус Hugging Face на демократизацию доступа к данным для робототехники. Если сбор данных станет таким же простым, как съемка видео, это ускорит разработку физического ИИ. Однако успех проекта будет зависеть от активности сообщества и готовности делиться собранными датасетами.