Nvidia считает себя аппаратным повелителем «метавселенной» и сделала несколько намеков на работу параллельной трехмерной вселенной, в которой наши мультяшные личности могут работать, играть и взаимодействовать.
Компания по производству чипов добавила новую инфраструктуру в Omniverse — базовый аппаратно-программный движок, который действует как ядро планеты, объединяя виртуальные сообщества в альтернативную трехмерную вселенную. Omniverse также используется для создания аватаров, чтобы улучшить реальный опыт в автомобилях, больницах и роботах.
«Мы не говорим людям заменить то, что они делают, мы улучшаем то, что они делают», — сказал Ричард Керрис, вице-президент платформы Omniverse, во время брифинга для прессы.
Объявления об Omniverse появились во время Технологическая конференция GPU На этой неделе. Генеральный директор Nvidia Дженсен Хуанг поговорим о многих из этих объявлений во вторник.
Дженсен таким, каким вы его никогда раньше не видели. Источник: Нвидиа. нажмите, чтобы увеличить
Одно из таких объявлений Аватар Omniverse, который может генерировать интерактивные интеллектуальные аватары с искусственным интеллектом для таких вещей, как помощь посетителям в заказе еды или помощь водителям в самостоятельной парковке или навигации по дорогам.
Nvidia привела пример разговорного аватара для замены серверов в ресторанах. При заказе еды система ИИ, представленная аватаром на экране, может общаться в режиме реального времени, используя методы распознавания речи и естественного интеллекта, а также использовать компьютерное зрение, чтобы улавливать настроение человека и рекомендовать блюда на основе базы знаний.
Для этого аватар должен будет запускать несколько моделей ИИ — например, речь, распознавание изображений и контекст — одновременно, что может быть проблемой. Компания создала Unified Compute Framework, которая моделирует ИИ как микросервисы, поэтому приложения могут работать в одиночных или гибридных системах.
у нвидиа уже есть базовые системы ИИ как модель Megatron-Turing Natural Language Generation — монолитный язык-трансформер, разработанный совместно с Microsoft. Теперь система будет предлагаться на оборудовании DGX AI.
Omniverse Avatar также является базовой технологией в Драйв Консьерж — автомобильный помощник с искусственным интеллектом, который является «личным консьержем в машине, который будет на связи для вас», — сказал Дипу Талла, вице-президент и генеральный менеджер Embedded and Edge Computing.
Системы искусственного интеллекта в автомобилях, представленные интерактивными персонажами, могут понимать водителя и пассажиров автомобиля по привычкам, голосу и взаимодействиям. Соответственно, система ИИ может звонить по телефону или предлагать рекомендации ближайших мест, где можно поесть.
Используя камеры и другие датчики, система также может видеть, спит ли водитель, или предупреждать водителя, если он что-то забыл в машине. Сообщения системы ИИ представлены интерактивными персонажами или интерфейсами на экранах.
Старая собака, новые трюки
Концепция метавселенной не нова — она существовала в Second Life от Linden Lab или в таких играх, как The Sims. Nvidia надеется сломать проприетарные стены и создать единую метавселенную, чтобы пользователи теоретически могли перемещаться между вселенными, созданными разными компаниями.
Во время брифинга Nvidia не упомянула о помощи Facebook в реализации своего видения будущего вокруг метавселенной, которая находится в центре его ребрендинга на Мета.
Но Nvidia уговаривает другие компании перенести свою 3D-работу на платформу Omniverse через свои программные соединители. В этот список входят ArcGIS cityДвижок, который помогает создавать городскую среду в 3D, и голосовой движок Replica Studio с искусственным интеллектом, который может имитировать настоящий голос анимированных персонажей.
«Что делает все это возможным, так это основа USD, или Universal Scene Description. USD — это HTML 3D — важный элемент, потому что он позволяет всем этим программным продуктам использовать виртуальные миры, о которых мы говорим», — сказал Керрис. USD был создан Pixar для совместного использования 3D-ресурсов.
Nvidia также объявила Всеобщее предприятие – предложение по подписке со стеком программного обеспечения, помогающее компаниям создавать 3D-рабочие процессы, которые можно подключить к платформе Omniverse. Предложение по цене 9,000 долларов в год ориентировано на такие отраслевые вертикали, как инженерия и развлечения, и будет доступно через реселлеров, в том числе Dell, Lenovo, PNY и Supermicro.
Компания также использует платформу Omniverse для создания синтетических данных для обучения «цифровых двойников» или виртуальных симуляций объектов реального мира. ISAAC SIM может обучать роботов с помощью синтетических данных, основанных на реальной и виртуальной информации. SIM-карта позволяет вводить новые объекты, камеры и освещение для создания пользовательских наборов данных, на которых можно обучать роботов.
Автомобильным эквивалентом является Drive SIM, который может создавать реалистичные сцены с помощью симулированных камер для автономного вождения. SIM использует реальные данные для обучения моделей искусственного интеллекта для автономного вождения. Модели объективов камер смоделированы и учитывают явления реального мира, такие как размытость изображения при движении, скользящий затвор и мерцание светодиодов.
Nvidia тесно сотрудничает с производителями сенсоров, чтобы точно воспроизвести данные Drive SIM. По словам Дэнни Шапиро, вице-президента Nvidia по автомобилям, все модели камеры, радара, лидара и ультразвукового датчика отслеживаются с использованием графической технологии RTX.
Компания вплела некоторые аппаратные анонсы в общий нарратив Omniverse.
Присоединяйтесь к новому поколению
Плата разработчика Jetson AGX Orin следующего поколения будет доступны производителям в первом квартале следующего года. Он имеет 12 ядер ЦП на основе конструкций Arm Cortex-A78, 32 ГБ оперативной памяти LPDDR5 и обеспечивает производительность 200 TOPS (тера операций в секунду).
Ассоциация Управляйте Гиперионом 8 — это вычислительная платформа для автомобилей с двойными однокристальными системами Drive Orin, обеспечивающая производительность до 500 TOPS. Платформа имеет 12 камер, девять радаров, один лидар и 12 ультразвуковых датчиков. Он будет использоваться в автомобилях, выпущенных в 2024 году, и имеет модульную конструкцию, поэтому автопроизводители могут использовать только те функции, которые им нужны. Автомобили со старыми компьютерами Nvidia можно обновить до Drive Hyperion 8.
Nvidia также объявила о Квант-2 Коммутатор InfiniBand, состоящий из 57 миллиардов транзисторов, изготавливается по 7-нм техпроцессу Taiwan Semiconductor Manufacturing Co. Нам сказали, что он может обрабатывать 66.5 миллиардов пакетов в секунду и имеет 64 порта для передачи данных со скоростью 400 Гбит/с или 128 портов для передачи со скоростью 200 Гбит/с.
Компания также высказалась Морфей — структура искусственного интеллекта, представленная ранее в этом году, которая позволяет поставщикам кибербезопасности выявлять и предупреждать компании о ненормальном поведении в сети или центре обработки данных. Платформа идентифицирует незначительные изменения в приложениях, пользователях или сетевом трафике для выявления аномалий и подозрительного поведения.
Morpheus получает необходимые данные от Nvidia BlueField SmartNIC/модулей обработки данных, которые были наделены новыми возможностями благодаря обновлению DOCA SDK, которое используется для DPU Bluefield так же, как CUDA для графических процессоров Nvidia.
Обновление DOCA — версия 1.2 — также может «создавать измеряемые облачные сервисы, которые контролируют доступ к ресурсам, проверяют каждое приложение и пользователя [и] изолируют потенциально скомпрометированные машины». DOCA 1.2 также позволяет устройствам Bluefield выполнять аутентификацию программного и аппаратного обеспечения, применять криптографию данных на скорости линии и поддерживать распределенные брандмауэры, работающие на SmartNIC. Nvidia сказала Регистр Пало-Альто наблюдает 5-кратное улучшение производительности брандмауэра при запуске инструментов в распределенном режиме на сетевых адаптерах SmartNIC.
Говоря об ИИ, гигант GPU также расширенный свою программу Launchpad, где он будет предлагать краткосрочный доступ к аппаратному и программному обеспечению ИИ через центры обработки данных Equinix в США, Европе, Японии и Сингапуре. Последние три местоположения — это первые присутствия Launchpad за пределами США, что дает Nvidia надежду на то, что его функция в качестве площадки для ИИ может получить более широкое распространение.
Еще одно новое предложение — это новая версия диалогового инструмента искусственного интеллекта RIVA, который говорят чтобы иметь возможность создавать индивидуальный человеческий голос за день, основываясь всего на 30 минутах образца речи. Nvidia считает, что это как раз то, что нужно организациям, которые хотят предлагать настраиваемые речевые интерфейсы. ®
Источник: https://go.theregister.com/feed/www.theregister.com/2021/11/09/nvidia_metaverse/
