Израильская научно-исследовательская лаборатория Decart представила интерактивную модель мира Oasis 3, способную генерировать фотореалистичный видеопоток с последовательными сценами вождения в реальном времени. Стартап ориентируется на производителей беспилотников, которым требуются масштабные симуляции сценариев вождения. Разработчики рассчитывают прийти в робототехнику и иные формы физического ИИ и формируют экосистему, построенную вокруг моделей мира.

Стартап собрал комьюнити из более чем 100 тыс. разработчиков, многие из которых формируют продукты на основе модели реального времени Lucy. Преимущества Oasis 3 – фотореалистичные модели и многокамерные окружения (переднеориентированное и пара боковых), а также бесконечная генерирующая способность и дешевизна работы моделей на оборудовании Nvidia, Amazon и Google (по словам разработчиков, модели стартапа настолько эффективны, что потратили «значительно меньше $100 млн за всю историю компании»). 

Доступ к Oasis 3 оценивается в $0,02 в секунду, корпоративное ценообразование зависит от использования. После инвестиций со стороны Toyota, Adobe и eBay, оценка Decart приблизилась к $4 млрд.

Ключевые недостатки модели – отсутствие симуляции физики (машины просто проезжают друг через друга) и авторегрессивность (модель генерирует один кадр за раз и обращается к прошлым генерациям, чтобы решить, что за ними последует, что, в свою очередь, повышает сложность вычислений). Каждый кадр обходится примерно в 8 тыс. токенов. Разработчики рассчитывают со временем расширить возможности по хранению контекста и сжатию памяти в меньшие объемы токенов.

Новость отражает тренд на демократизацию мировых моделей и повышение их доступности – этот процесс мы наблюдали с LLM. Модели «кормят» данными «физический ИИ» - еще одну ключевую компоненту грядущей роботизации.

✓ подписаться на tg - канал PROrobots и на канал в VK