Компания Nvidia представила набор новых мировых моделей ИИ, библиотек и другой инфраструктуры для разработчиков робототехники. Наиболее заметным из нововведений стала модель Cosmos Reason — 7-миллиардная мультимодальная система с функцией «рассуждений», предназначенная для физических приложений ИИ и роботов.
К уже существующим мировым моделям Cosmos [https://techcrunch.com/2025/01/06/nvidia-releases-its-own-brand-of-world-models/] добавились Cosmos Transfer-2, ускоряющий генерацию синтетических данных из 3D-сцен симуляций или пространственных управляющих сигналов, а также оптимизированная для скорости «облегчённая» версия Cosmos Transfers.
В своём анонсе на конференции SIGGRAPH компания отметила, что эти модели созданы для генерации синтетических текстовых, графических и видеодатасетов, используемых в обучении роботов и ИИ-агентов.
По словам Nvidia, Cosmos Reason позволяет роботам и агентам «рассуждать» благодаря встроенным возможностям анализа памяти и понимания физических законов, что помогает модели «планировать последующие действия воплощённого агента». Разработчик утверждает, что систему можно применять для курирования данных, планирования действий роботов и анализа видео.
Также анонсированы новые библиотеки нейронной реконструкции, включая инструмент для рендеринга, позволяющий симулировать реальный мир в 3D на основе данных сенсоров. Эта технология интегрирована в открытый симулятор CARLA — популярную платформу для разработчиков. Обновлён и SDK фреймворка Omniverse.
В дополнение представлены серверные решения для робототехнических задач: Nvidia RTX Pro Blackwell Servers предлагают единую архитектуру для рабочих нагрузок, а облачная платформа управления Nvidia DGX Cloud расширяет возможности разработки.
Эти анонсы отражают стратегию полупроводникового гиганта по усилению присутствия в робототехнике, где компания видит новый перспективный рынок для своих GPU, дополняющий текущий спрос со стороны AI-датацентров.