ЭЭГ-сигналы мозга обучают роботов точнее видео

Стартап Encord тестирует нестандартный подход к обучению роботов: операторы в лаборатории в Сан-Леандро, Калифорния, надевают ЭЭГ-гарнитуру немецкого стартапа Zander Labs и выполняют физические задачи руками или с помощью дистанционно управляемых роботизированных рук. Нейрогарнитура в реальном времени фиксирует состояния мозга — удивление, обнаружение ошибки, намерение — и добавляет эти метки в обучающий датасет.

1Зачем это нужно

Главное ограничение в развитии физического AI сегодня — не вычислительная мощность, а нехватка качественных обучающих данных о реальных движениях. По оценкам Encord, для обучения гуманоидного робота требуется примерно в пять раз больше видео, чем есть на всём YouTube.

Плотно аннотированные данные с мозговыми метками стоят в 100 раз дороже базового эгоцентричного видео, но их сбор обходится лишь в 20 раз дороже. Это делает подход экономически перспективным — при условии, что разметка действительно улучшает качество моделей. Encord пока проводит пилот, чтобы проверить это до масштабирования.

2Что дальше

Нейронаучный руководитель эксперимента Лукас Герке из Zander Labs называет подход «кровоточащим краем» индустрии. Помимо ЭЭГ, Encord собирает данные с камер на теле операторов и датчиков мышечных сигналов на предплечье. Если гипотеза подтвердится, мозговые волны могут стать стандартным инструментом разметки в роботике — так же, как захват движения стал нормой в анимации.