инструменты 1 мин

Как превратить обед в тренировочные данные для роботов: опыт с Shift

Немецкий стартап Microagi через проект Shift предлагает бесплатные услуги (повара, уборка) в обмен на запись процесса с первого лица — данные идут на обучение домашних роботов. Автор опробовал сервис: к нему пришёл повар в шлеме с камерой, приготовил три блюда и всё записал. Цель — собрать массив эгоцентрических видео для обучения гуманоидов бытовым задачам.

Если домашние роботы действительно станут массовыми, кто-то должен их научить мыть посуду и резать овощи — и эти данные стоят денег. Shift показывает, как монетизировать обычные бытовые действия и превратить их в актив.

Что произошло

Немецкий стартап Microagi запустил проект Shift — предлагает бесплатные домашние услуги (готовку, уборку) в обмен на разрешение записать весь процесс на камеру. Повар приходит с камерой на бейсболке, готовит трёхблюдный обед, а всё видео с его руками и действиями сливается в датасет для обучения роботов.

Автор из Wired испытал сервис в Сан-Франциско: повар Олли пришёл, прицепил к кепке камеру размером с GoPro, приготовил гаспачо, лосось с соусом и тирамису — всё записалось. Цель Shift — собрать огромный массив эгоцентрических видео (съёмка от первого лица, руки человека в кадре), которых сейчас критически не хватает для обучения гуманоидов бытовым задачам.

CEO Microagi Беркан Килич считает, что уже через год появятся доступные домашние роботы, способные выполнять большинство задач — как робот-пылесос в 2020-м. Shift также стремится создать маркетплейс, где люди будут продавать собственные записи действий за деньги (гиг-экономика данных).

Автор отмечает: пока LLM качали текст из интернета, для роботов такого океана данных нет — поэтому твоя кухня и движения рук так ценны, что за них дают бесплатного повара.

Автор: Павел Заславский · Источник: wired.com

Разработчикам. Открывается новая ниша — эгоцентрические датасеты для обучения гуманоидов. Если раньше фокус был на компьютерном зрении и NLP, теперь критичны видео от первого лица с мелкой моторикой. Можно строить пайплайны сбора, разметки и синтетической генерации таких данных — спрос будет расти.

Бизнесу. Модель «бесплатные услуги за данные» создаёт новый канал привлечения клиентов и одновременно источник тренировочных данных. Если у вас сервисный бизнес (клининг, доставка, ремонт) — можно монетизировать записи процессов, продавая их робототехническим компаниям или обучая собственных ботов.

Инвесторам. Рынок домашних гуманоидов требует массивных датасетов реальных действий — Shift занимает эту нишу раньше других. Если Microagi права и роботы появятся через год, спрос на эгоцентрические данные взлетит. Риск: переоценка скорости внедрения роботов и регуляторные барьеры, но сам тренд на embodied AI набирает обороты.

Хайп65
Реальная польза45
Заработать55
  • Запустить собственный маркетплейс эгоцентрических данных: платформу, где фрилансеры записывают бытовые задачи (готовка, ремонт, укладка вещей) и продают видео разработчикам роботов.
  • Создать SDK для стандартизации съёмки от первого лица — шлемы, крепления, разметка ключевых точек рук. Продавать его стартапам и корпорациям, которые собирают данные для embodied AI.
  • Предложить сервисным компаниям (клининг, доставка еды) монетизацию записей: установить камеры на курьеров и уборщиков, продавать анонимизированные данные робототехам.
  • Построить синтетический генератор эгоцентрических видео на базе Sora/Runway — дополнять реальные записи искусственными, чтобы ускорить обучение роботов редким задачам.
  • Создать B2C-продукт: приложение-тренер для домашних дел, которое записывает твои действия, даёт фидбек по эффективности и параллельно продаёт данные (с согласия) робототехам — ты учишься готовить, робот тоже.
  • Переоценка скорости: CEO обещает хороших роботов через год, но реальные гуманоиды пока глючат даже в лабораториях. Если прорыва не будет, собранные данные обесценятся.
  • Приватность: записывать чужие квартиры — минное поле. Один скандал с утечкой видео интерьеров или лиц — и регуляторы прикроют проект.
  • Проблема масштаба: даже тысячи записей — капля в море для обучения универсального робота. Если конкуренты наладят синтетическую генерацию данных, реальные съёмки станут не нужны.
  • Безопасность: робот с ножом, обученный на пёстрых любительских данных, — реальная угроза. Один сбой — и вместо ужина получаешь травму. Ответственность размыта, страховка не покрывает.

Shift — это не про роботов через год (спойлер: их не будет), а про то, что кто-то первым додумался монетизировать бытовые движения рук. Пока все качают текст и картинки, эти ребята собирают то, чего ещё нет в открытом доступе — видео от первого лица с мелкой моторикой. Если гуманоиды действительно пойдут в массы (а это вопрос не года, а лет пяти-десяти), такие датасеты станут золотом.

Но есть нюанс: приватность. Записывать чужие квартиры, пусть и с согласия, — это ходьба по минному полю. Один скандал с утечкой видео — и регуляторы прикроют лавочку. Плюс неясно, насколько реальные записи вообще нужны, если Sora и компания научатся генерировать синтетические эгоцентрические видео. Пока Shift занимает нишу раньше других, но ставка рискованная.

Ещё по теме

Комментарии