На выставке CES 2025 генеральный директор NVIDIA Дженсен Хуанг представил новую платформу с передовыми генеративными моделями для развития систем физического искусственного интеллекта, включая автономные транспортные средства и роботов.
Платформа Cosmos World Foundation Models (WFM) предоставляет разработчикам возможность создавать большие объемы фотореалистичных синтетических данных на основе физических законов для обучения существующих моделей. Модели Cosmos будут доступны по открытой лицензии для ускорения работы сообщества разработчиков робототехники и автономного транспорта.
Среди компаний, внедривших Cosmos, — ведущие производители роботов и автомобилей, включая 1X, Agile Robots, Agility, Figure AI, Foretellix, Fourier, Galbot, Hillbot, IntBot, Neura Robotics, Skild AI, Virtual Incision, Waabi и XPENG, а также Uber.
Разработчики смогут настраивать модели WFM на основе различных данных, включая видеозаписи поездок автономных автомобилей и передвижения роботов по складу. Модели Cosmos WFM способны генерировать физически корректные видео на основе текста, изображений, видео и данных с датчиков роботов или информации о движении.
Благодаря технологии обработки данных на базе NVIDIA AI и CUDA, работающей на платформе NVIDIA Blackwell, разработчики смогут обрабатывать, систематизировать и маркировать 20 миллионов часов видео за 14 дней вместо 3,4 лет при использовании только CPU.
Компании, ведущие деятельность в области физического ИИ, уже внедряют технологии Cosmos. Открытая платформа включает инструмент улучшения текстовых запросов для повышения точности. Видеоролики, созданные на основе моделей Cosmos и API-каталога Nvidia, содержат водяные знаки для идентификации контента, созданного ИИ, чтобы уменьшить вероятность распространения дезинформации.