NVIDIA опубликовала четыре новых чекпойнта с открытыми весами для семейства моделей Cosmos 3. Об этом сообщается в публикации на Hugging Face от 5 ноября 2026 года. Все четыре модели - дообученные версии Cosmos 3 Nano, у каждой по 16 млрд обучаемых параметров.
Что выпустили
- Cosmos3-Nano-Transfer-Auto создаёт синтетические данные для вождения в офлайн-режиме. Модель генерирует синхронное видео максимум с 11 камер, включая fisheye, и умеет добавлять LiDAR. Погоду, освещение и время суток задают текстовым запросом.
- Cosmos3-Nano-Sim-Auto - потоковая версия той же модели. Она выдаёт короткие фрагменты картинки с камер и данных LiDAR за несколько шагов шумоподавления, поэтому симуляция может идти долго и реагировать на меняющиеся команды управления.
- Cosmos3-Nano-Sim-Transfer принимает от физического симулятора пространственные подсказки (глубину, сегментацию, контуры) и текстовый запрос, а на выходе отдаёт цветное видео, которое может обработать политика робота. Физика и эталонное состояние сцены остаются на стороне симулятора.
- Cosmos3-Nano-Sim-Bimanual предсказывает следующие кадры видео по действиям робота или камеры. Модель работает с двурукими конфигурациями YAM и AgiBot, управлять ею можно политикой или джойстиками.
Лицензия и требования
Веса распространяются по лицензии OpenMDW1.1: она разрешает коммерческое и некоммерческое использование на её условиях. Для запуска чекпойнта Bimanual нужны Linux, GPU от NVIDIA, Docker и NVIDIA Container Toolkit. По словам NVIDIA, опубликованную конфигурацию проверяли на одном GB200, и это не минимальный объём памяти.
Как адаптировать модели
NVIDIA также публикует рецепты дообучения из четырёх этапов: от адаптации к своей предметной области и дистилляции до обучения на собственной сгенерированной истории модели. Команды могут подогнать Transfer-Auto под свою раскладку камер и LiDAR, а затем дистиллировать её в потоковую модель. В публикации советуют проверять результат на отложенных эпизодах: короткий удачный прогон показывает, что конвейер запускается, но не доказывает, что модель сошлась.
Авторы честно признают, что самые трудные задачи пока не решены. Следующий шаг - измерить, где эти модели помогают обучать и оценивать политики, а где их возможностей не хватает.
Что это значит
Это исследовательский и инженерный релиз для разработчиков в робототехнике и беспилотном вождении. Он не затрагивает процессы продаж, поддержки и операций, которые автоматизирует большинство B2B-команд.