Mimic Robotics представляет «передовые видео-действенные модели» на заводе Audi

Компания Mimic Robotics представила FLUX-mimic - новую модель Video-Action, созданную совместно с Black Forest Labs. Она позволяет роботам учиться и выполнять сложные манипуляционные задачи в реальных промышленных условиях.

Что такое FLUX-mimic

Mimic Robotics занимается физическим ИИ и разрабатывает Video-Action-модели для промышленной автоматизации. FLUX-mimic соединила опыт Mimic в обучении роботов, ловких манипуляциях и внедрении в производство с передовой архитектурой визуального интеллекта от Black Forest Labs - их новой моделью FLUX 3.

Ранняя работа Mimic, «mimic-video», положила начало Video-Action-моделям: они брали предобученную модель генерации видео и добавляли ей способность предсказывать действия робота. FLUX-mimic развивает эту основу, но уже с архитектурой, заточенной под физический ИИ.

Принципиальное отличие от других моделей

Большинство современных конвейеров обучения роботов строятся на Vision-Language-Action-моделях. Их основа предобучена на статичных парах «изображение-текст». Поэтому физическую динамику им приходится учить почти с нуля - на скудных и дорогих данных с реальных роботов.

FLUX-mimic работает иначе. Она строится на генеративной видеомодели, которая уже понимает динамику и поведение благодаря обучению на огромных массивах видео. А затем к ней добавляют декодер действий, который предсказывает движения робота напрямую из визуального прогноза.

Резкое сокращение времени обучения

Результат: в зависимости от сложности задачи, модель можно донастроить под конкретную манипуляцию всего за 30 минут данных с робота. Раньше на это уходило 30 часов и больше. Огромный скачок - циклы внедрения сократились с месяцев до недель.

Робин Ромбах, сооснователь и CEO Black Forest Labs, говорит: «Робототехника - одно из самых наглядных доказательств визуального интеллекта. Чтобы генерировать убедительное видео, модель должна понять, как устроен физический мир. Это же понимание позволяет в нём действовать.

Объединив изученную модель мира FLUX 3 с экспертизой Mimic в обучении и внедрении роботов, FLUX-mimic упрощает адаптацию роботов к новым задачам и производственным средам. Вместо того чтобы программировать их под одну единственную операцию».

Партнёрство с Audi

Mimic уже внедряет FLUX-mimic вместе с такими лидерами производства, как Audi. Компании изучают, как передовые Video-Action-модели могут сократить время развёртывания, инженерные затраты и объём обучения роботов для реальной промышленной автоматизации.

Audi управляет одной из самых автоматизированных производственных сетей в автопроме. Поэтому они точно видят, где традиционная автоматизация всё ещё пасует.

Несмотря на десятилетия инвестиций в промышленных роботов, задачи с гибкими деталями и тонкими манипуляциями остаются ручными. Разнообразие вариантов в премиальном автопроизводстве делает перепрограммирование роботов слишком дорогим.

Системы на основе обучения меняют эту логику. И открывают путь к долгосрочному видению Audi: превратить заводы в умные фабрики, где ИИ и роботы становятся помощниками для сотрудников. Они берут на себя повторяющуюся и физически тяжёлую работу, предлагая адресную поддержку.

Мнение партнёров

Кристоф Шнайдер из производственной лаборатории Audi говорит: «В партнёрстве с Mimic мы тестируем и внедряем FLUX-mimic. Мы видели, как эти роботы решают сложные задачи с мягкими телами - то, что было просто невозможно для обычной робототехники.

Эта новая технология может серьёзно помочь нашим сотрудникам, повысить эффективность и расширить гибкую автоматизацию на производстве и в логистике. Для нас партнёрство с такими пионерами, как Mimic и Black Forest Labs, - ключ к продвижению физического ИИ и проверке этих инноваций в реальных производственных условиях».

Штефан-Даниэль Граверт, сооснователь и директор по продуктам Mimic Robotics, добавляет: «Audi - именно тот производственный партнёр, для которого мы создавали FLUX-mimic.

Их производственная среда требует автоматизации, достаточно гибкой для неструктурированных задач, достаточно надёжной для непрерывной работы и такой, которую можно внедрить без месяцев инженерных издержек. Через это партнёрство с Audi мы хотим доказать, что FLUX-mimic способна соответствовать этим требованиям на реальных производственных линиях».

На главном фото: инженер-основатель Бенедек Форраи обучает робота Mimic. Снимок предоставлен ETH Zurich.

Теги: Mimic Robotics, FLUX-mimic, Audi, промышленная автоматизация, физический ИИ, обучение роботов