Nvidia Omniverse

Основные статьи:

• САПР Системы автоматизированного проектирования
• SaaS - История. Философия. Драйверы развития

NVIDIA Omniverse - это открытая облачная платформа, которая позволяет ускорять рабочие процессы проектирования и моделирования и совместно работать в реальном времени над проектами фотореалистичного качества. Omniverse дает возможность создателям, инженерам и исследователям сотрудничать в виртуальных мирах, которые все связаны между собой.

2021

Представлен NVIDIA Omniverse Replicator

На конференции GTC в ноябре NVIDIA представила движок Omniverse Replicator для генерации синтетических данных, который создает физически корректные синтетические данные для обучения глубоких нейронных сетей.генерации синтетических данных, который создает физически корректные синтетические данные для обучения глубоких нейронных сетей.

Omniverse Replicator добавляет к дорогостоящим, вручную маркированным данным реального мира, которые могут содержать ошибки и быть неполными, возможность создания больших и разнообразных физически точных данных, адаптированных к потребностям разработчиков автономных машин и робототехники. Это также позволяет генерировать данные, которые трудно или невозможно маркировать людям, например, скорость, глубину, закрытые объекты, неблагоприятные погодные условия или отслеживание движения объектов между датчиками.

В своих первых реализациях движка компания представила два приложения для генерации синтетических данных: одно для NVIDIA DRIVE Sim, виртуального мира для размещения цифровых двойников автономных транспортных средств, и другое для NVIDIA Isaac Sim, виртуального мира для цифровых двойников роботов-манипуляторов.

Эти два виртуальных мира Omniverse, созданных на базе законов физики, позволяют разработчикам запускать модели ИИ, заполнять пробелы в реальных данных и маркировать данные так, как это не могут сделать люди. Данные, генерируемые в этих виртуальных мирах, могут охватывать широкий спектр разнообразных сценариев, включая редкие или опасные условия, которые нельзя безопасно создавать в реальном мире.

Omniverse Replicator будет доступен разработчикам в 2022 году для создания движков генерации данных для конкретных предметных областей.

Полный список анонсов ноябрьской GTC 2021 доступен здесь.

Анонс NVIDIA Omniverse Avatar для создания аватаров

Платформа для создания аватаров на базе ИИ – NVIDIA Omniverse Avatar – стала одной из ключевых новинок, представленных на конференции NVIDIA GTC в ноябре 2021 года. Будучи частью платформы Omniverse, решение объединяет технологии NVIDIA в области речевого ИИ, компьютерного зрения, понимания естественного языка, рекомендательных систем и технологий моделирования.

Аватары, созданные на этой платформе, представляют собой интерактивных персонажей с 3D графикой на базе трассировки лучей. Они могут видеть, говорить, разговаривать на самые разные темы и понимать высказанные намерения собеседника. Omniverse Avatar позволяет создавать умных помощников, которых легко настраивать практически для любой отрасли: например, для взаимодействия с клиентами при заказах в ресторане, совершении банковских операций, назначении личных встреч, бронировании и т. д.

К примеру, при заказе еды система искусственного интеллекта, представленная аватаром на экране, может общаться в режиме реального времени, используя методы распознавания речи и естественного интеллекта, а также задействовать компьютерное зрение, чтобы уловить настроение человека и порекомендовать ему блюда.

Полный список анонсов ноябрьской GTC 2021 доступен здесь.

Интеграция с Blender

10 августа 2021 года компания Nvidia объявила о крупном расширении NVIDIA Omniverse за счет интеграции с Blender и Adobe.

Nvidia Omniverse

По информации компании, Blender, инструмент для 3D-анимации с открытым исходным кодом, получил поддержку формата Universal Scene Description (USD) и таким образом открыл художникам доступ к производственным конвейерам Omniverse. Adobe совместно с NVIDIA работает над плагином Substance 3D, который обеспечит поддержку Substance Material для Omniverse и откроет возможности редактирования материалов для пользователей Omniverse и Substance 3D.

NVIDIA Omniverse позволяет дизайнерам, художникам и редакторам работать вместе в реальном времени в различных программных приложениях в общем виртуальном мире из любого места. На август 2021 года платформу тестируют специалисты из более чем 500 компаний, включая SHoP Architects, South Park и Lockheed Martin. С момента запуска открытой бета-версии в декабре 2020 года Omniverse скачали более 50 000 раз.

Метавселенная - это иммерсивный и связанный виртуальный мир. В нем художники могут создавать цифровые сцены, архитекторы - красивые здания, а инженеры - продукты для домов. Эти творения можно перенести в физический мир после того, как они будут отточены в цифровом мире.

Nvidia Omniverse

Ключом к внедрению Omniverse в отрасли является открытый формат USD от Pixar - основа платформы совместной работы и моделирования Omniverse, который позволяет большим командам работать одновременно в разных приложениях над одной 3D-сценой. Этот открытый стандарт дает партнерам по программному обеспечению несколько способов расширения и подключения к Omniverse: через поддержку USD, создание плагина или Omniverse Connector.

Apple, Pixar и NVIDIA объединили усилия, чтобы наделить USD возможностями физики и используют открытые стандарты, чтобы обеспечить поддержку рабочих процессов 3D на миллиардах устройств. Blender и NVIDIA совместно добавили поддержку USD в версию Blender 3.0 для миллионов художников, использующих это программное обеспечение.

NVIDIA добавляет поддержку USD и материалов в альфа-версии Blender 3.0, которая скоро будет доступна для разработчиков.

NVIDIA и Adobe совместно работают над плагином Substance 3D, который откроет возможности редактирования материалов для пользователей Omniverse и Substance 3D. Художники и дизайнеры смогут работать напрямую с материалами Substance, полученными из платформы Substance 3D Asset или созданными в приложениях Substance 3D, что в целом оптимизирует рабочий процесс в 3D.

Экосистема NVIDIA Omniverse на август 2021 года продолжает расти, объединяя приложения от разных разработчиков программного обеспечения, таких как Adobe, Autodesk, Bentley Systems, Blender, Clo Virtual Fashion, Epic Games, Esri, Golaem, Graphisoft, Lightmap, Maxon, McNeel & Associates, Onshape от PTC, Reallusion, Trimble и wrnch Inc.

NVIDIA Omniverse Enterprise на август 2021 года доступна только участникам программы раннего доступа. Платформа будет широко доступна в конце 2021 года по подписке через партнеров NVIDIA, включая ASUS, BOXX Technologies, Dell Technologies, HP, Lenovo, PNY и Supermicro.

Выход Omniverse Enterprise

В декабре 2020 года NVIDIA открыла бета-доступ к платформе для дизайна и коллабораций Omniverse. А в рамках ежегодной конференции GTC 12 апреля 2021 года компания анонсировала Omniverse Enterprise – платформу для совместной работы с 3D-графикой в различных организациях. Она включает сервер для создания и просмотра приложений и возможности виртуальной рабочей станции. Платформа может применяться в организациях любого размера, позволяя географически распределенным командам 3D разработчиков работать совместно над комплексными проектами.

Omniverse – это фундаментальная платформа нашей стратегии в области виртуальной и дополненной реальности, наших стратегий в области дизайна и коллаборации, - пояснил гендиректор NVIDIA Дженсен Хуанг. – Это также платформа для нашей стратегии по виртуальным мирам метавселенной, роботизации и ИИ в автономных машинах. Вы увидите все больше разработок, связанных с Omniverse. И ее можно назвать одним из недостающих звеньев, которое очень важно для следующего поколения технологий автономного ИИ.

По данным NVIDIA, на момент анонса более 400 компаний используют Omniverse. К примеру, BMW с помощью этой платформы создала цифрового двойника одного из своих заводов.

А Bentley Systems, разработчик ПО для профессионалов в сфере строительства и управления инфраструктурой, станет первой сторонней компанией, которая создаст на основе Omniverse пакет приложений.

20 лет назад все это было научной фантастикой, 10 лет назад это было мечтой, а сегодня мы в этом живем», - отметил Дженсен Хуанг в завершение своего выступления на открытии GTC.

По данным NVIDIA, ее онлайн-конференция привлекла беспрецедентное число участников – более 180 тыс. зарегистрированных посетителей, что в три раза больше, чем крупнейшая GTC, имевшая место ранее.

Полный список анонсов на GTC 2021 доступен здесь.

2020

Запуск открытой бета-версии платформы Nvidia Omniverse

15 декабря 2020 года Nvidia сообщила о старте открытой бета NVIDIA Omniverse.

Платформа повышает эффективность, продуктивность и гибкость, поскольку команды из одной комнаты и из любой точки мира могут войти в Omniverse и вместе работать над проектами с фотореалистичным рендерингом в реальном времени.

В рамках открытой бета-версии выпущено несколько приложений Omniverse, которые можно использовать в рамках Omniverse, в том числе Omniverse View для специалистов в области архитектуры, проектирования и строительства; Omniverse Create для дизайнеров, создателей контента и специалистов в области медиа, развлечений и производства/разработки продукции; и Omniverse Kaolin для экспертов в области глубокого обучения.

В начале 2021 года компания обещает представить Omniverse Audio2Face, приложение для лицевой анимации на базе ИИ; Omniverse Machinima для геймеров GeForce RTX; и Isaac Sim 2021.1 для разработки роботов.

Ключевая особенность Omniverse - это возможность легко работать одновременно в разных программных приложениях. Создателям контента, дизайнерам и инженерам через Omniverse Connectors доступны ведущие отраслевые приложения, такие как Autodesk Maya и Revit, Adobe Photoshop, Substance Designer, Substance Painter, McNeel Rhino, Trimble SketchUp и Epic Unreal Engine. Многие другие находятся в разработке, в том числе для Blender, Houdini, 3ds Max и Motion Builder.

NVIDIA Omniverse сыграла решающую роль в физически точном моделировании виртуального мира.

В октябре 2020 года было продемонстрировано, как DRIVE Sim использует возможности фотореалистичного моделирования в реальном времени для полной физически точной виртуальной проверки автономных транспортных средств.

Версия Nvidia Isaac Sim 2021.1, выпущенная в феврале 2020 года, полностью построена на Omniverse и предлагает точные, надежные и простые в использовании инструменты моделирования в робототехнике. Исследователи и разработчики со всего мира могут использовать это приложение в Omniverse, чтобы улучшить моделирование и обучение в области робототехники.

В сфере исследований Omniverse сочетает инструменты научной визуализации с высококачественной компьютерной графикой. NVIDIA продемонстрировала симуляцию COVID-19, визуализированную в Omniverse, где каждый всплеск белка коронавируса представлен более чем 1,8 миллионами треугольников, отрисованных графическими процессорами NVIDIA RTX.

Запуск платформы

В середине мая 2020 года Nvidia выпустила в публичный доступ платформу для совместной работы над компьютерной графикой и 3D-моделирования. Речь идёт о решении Omniverse, которое производитель называет «Google Docs для архитекторов, инженеров и конструкторов».

Платформа предоставляет дизайнерам и разработчикам «порталы», связывающие между собой режиме реального времени их рабочие среды, например, Autodesk Maya, Adobe Photoshop и Unreal Engine. Используя Omniverse, каждый член команды может без задержек видеть все изменения, внесённые другими.

Nvidia запустила «Google Docs для архитекторов и конструкторов»

Для обмена информацией о моделях, анимации, визуальных эффектах и рендеринге сервис использует открытую технологию Pixar Universal Scene Description (USD). Также отмечается поддержка языка для передачи данных о материалах объектов Material Definition Language, разработанного в Nvidia.

Как отмечает издание VentureBeat, для создания визуальных эффектов, архитектурных компьютерных объектов и конструирования, как правило, требуется несколько людей, которые должны работать совместно, но зачастую удалённо. Кроме того, результаты работы нужно показывать заказчикам. Для всего этого применяется несколько программных инструментов, между которыми необходимо постоянно передавать данные. Nvidia решила эту проблему при помощи облачной среды Omniverse, которая позволяет дизайнерам, архитекторам и разработчикам взаимодействовать между собой и клиентами, где бы они ни находились.

Прежде такая совместная работа выполнялась через экспорт и импорт больших наборов данных и файлов визуализации. Все изменилось, когда студия Pixar перевела пакет USD в разряд свободного программного обеспечения.

USD представляет собой систему для кодирования масштабируемых, иерархически связанных, статических и распределённых во времени данных. Основным назначением USD является организация обмена данными между приложениями для создания цифрового контента. Это решение является основой Omniverse.^[1]

Примечания