Мозговые волны — следующий прорыв в решении проблемы нехватки данных для физического ИИ

Компания Encord, занимающаяся разработкой инструментов для обработки данных для обучения ИИ, тестирует новый подход к решению проблемы нехватки физических данных для роботов. Совместно с немецким нейротехнологическим стартапом Zander Labs изучается, как измерение мозговых волн может улучшить качество данных, необходимых для обучения роботов.

В ходе эксперимента сотрудник Encord Эндрю Сеха (Andrew Ceja), которого называют пилотом, носит специальный гарнитура с датчиком, измеряющим его мозговые волны, пока он играет в Дженгу. Цель — создать набор данных, включающий не только визуальную информацию, но и информацию о ментальном состоянии, таком как ошибки, намерения и удивление. Такой подход может помочь моделям эффективнее определять, когда необходимо применить большие вычислительные мощности.

Винит Велмуруган (Vineeth Velmurugan), руководитель отдела обучения роботов в Encord, ранее работавший в лаборатории робототехники OpenAI и Berkshire Grey, называет это «кровавым краем» решения проблемы нехватки данных для роботов. Он подчеркивает, что традиционный подход к сбору данных из публичных источников не работает для физических задач, потому что таких данных просто недостаточно. По оценкам Велмуругана, необходим набор данных примерно в пять раз больше, чем коллекция видео YouTube.

Encord уже использует несколько методов сбора данных, включая эгоцентрическое видео с камер сотрудников на заводах и системы ведущих-следящих роботизированных рук, которые имитируют движения человека. В дополнение к мозговым волнам тестируются также датчики на предплечьях, измеряющие электрические сигналы мышц, для создания трехмерной модели положения руки. Данные аннотируются с подробными физическими описаниями, такими как «правая рука затягивает болт», которые, по словам Велмуругана, в 100 раз ценнее простого видео, хотя их производство стоит в 20 раз дороже.

Основная проблема — стоимость производства физических данных, в отличие от текстовых данных, которые можно получить почти бесплатно. Несмотря на это, Велмуруган считает, что прогресс возможен, поскольку Encord, сотрудничая со многими робототехническими компаниями, способен замечать тенденции быстрее, чем любой отдельный клиент.