На конференции SIGGRAPH 2025 компания Nvidia представила ряд передовых разработок в области искусственного интеллекта и робототехники, направленных на ускорение создания интеллектуальных систем. Центральное место в презентации заняла модель Cosmos Reason — мощный инструмент для развития «физического ИИ», позволяющий роботам и агентам ИИ понимать и взаимодействовать с реальным миром. Cosmos Reason — это модель с 7 миллиардами параметров, разработанная для приложений физического ИИ и робототехники. Она позволяет ИИ-агентам интерпретировать физические взаимодействия, используя накопленные знания, понимание физики и «здравый смысл». Это открывает новые возможности для таких задач, как планирование действий роботов, автоматизированная каталогизация данных и видеоаналитика.
Модель уже находит применение: партнеры Nvidia, такие как Uber, используют ее для анализа поведения беспилотных автомобилей, а VAST Data и Milestone Systems — для интеллектуального мониторинга дорожного движения. В дополнение к Cosmos Reason, Nvidia также представила Cosmos Transfer-2 — усовершенствованную модель для ускорения генерации синтетических данных из 3D-симуляций или пространственных входных данных. Была также выпущена дистиллированная версия Cosmos Transfers для повышения эффективности обучения. Эти инструменты призваны упростить и ускорить процесс создания реалистичных данных, необходимых для обучения роботов.
Для поддержки этих разработок Nvidia представила новую серверную архитектуру RTX Pro Blackwell. Эти серверы обеспечивают единую платформу для всех этапов разработки робототехники, включая обучение моделей ИИ, генерацию синтетических данных и симуляцию. По заявлению Nvidia, серверы на базе Blackwell могут достигать до 45 раз более высокой производительности и в 18 раз большей энергоэффективности по сравнению с системами, работающими только на центральных процессорах. Это достигается благодаря использованию тензорных ядер пятого поколения с поддержкой формата FP4, что увеличивает производительность вывода в шесть раз по сравнению с предыдущим поколением.
Интеграция новых библиотек нейронной реконструкции, включая технику рендеринга для 3D-симуляции реального мира с использованием сенсорных данных, в популярный симулятор CARLA, еще больше расширяет возможности разработчиков. CARLA, используемая более чем 150 000 разработчиков, теперь может использовать эти новые инструменты для создания более точных и детализированных симуляций. Эти достижения подчеркивают стремление Nvidia к развитию робототехники, предоставляя разработчикам мощные инструменты и инфраструктуру для создания более интеллектуальных и способных роботизированных систем. Компания активно сотрудничает с ведущими игроками отрасли, такими как Accenture, Boston Dynamics и Hexagon, чтобы ускорить внедрение этих технологий в различных секторах экономики.