Nvidia sees itself as a hardware overlord of the “metaverse” and dropped some hints about the operation of a parallel 3D universe in which our cartoon selves can work, play and interact.
Bisnis chip telah menambahkan pipa baru di Omniverse – mesin perangkat keras dan perangkat lunak dasar yang bertindak sebagai inti planet yang menggabungkan komunitas virtual dalam dunia 3D alternatif. Omniverse juga digunakan untuk membuat avatar guna meningkatkan pengalaman dunia nyata di mobil, rumah sakit, dan robot.
“We’re not telling people to replace what they do, we are enhancing what they do,” said Richard Kerris, vice president of the Omniverse platform, during a press briefing.
The Omniverse announcements came during the company’s Konferensi Teknologi GPU minggu ini. CEO Nvidia Jensen Huang akan bicara tentang banyak dari pengumuman ini pada hari Selasa.
jensen as you’ve never seen him before. Source: Nvidia. Click to enlarge
Salah satu pengumuman tersebut adalah Avatar Segala Alam, yang dapat menghasilkan avatar AI yang interaktif dan cerdas untuk hal-hal seperti membantu pengunjung memesan makanan, atau membantu pengemudi memarkir sendiri atau menavigasi jalan dengan lebih baik.
Nvidia gave an example of a conversational avatar to replace servers in restaurants. When ordering food, an AI system – represented by an on-screen avatar – could converse in real time using speech recognition and natural intelligence techniques, and use computer vision to capture a person’s mood, and recommend dishes based on the knowledge base.
Untuk itu, avatar tersebut perlu menjalankan beberapa model AI – misalnya, ucapan, pengenalan gambar, dan konteks – secara bersamaan, yang dapat menjadi sebuah tantangan. Perusahaan telah menciptakan Unified Compute Framework yang memodelkan AI sebagai layanan mikro, sehingga aplikasi dapat berjalan dalam sistem tunggal atau hybrid.
Nvidia sudah memilikinya sistem AI yang mendasarinya seperti model Megatron-Turing Natural Language Generation – bahasa transformator monolitik yang dikembangkan bersama dengan Microsoft. Sistem ini sekarang akan ditawarkan pada perangkat keras DGX AI-nya.
Omniverse Avatar juga merupakan teknologi yang mendasarinya Mengemudi Pramutamu – an in-car AI assistant that is a “personal concierge in the car that will be on call for you,” said Deepu Talla, vice president and general manager of Embedded and Edge Computing.
AI systems in cars represented by interactive characters can understand a driver and the car’s occupants through habits, voice and interactions. Accordingly the AI system can make phone calls or offer recommendations of nearby places to eat.
Using cameras and other sensors, the system can also see if a driver is asleep, or alert a rider if they forget something in the car. The AI system’s messages are represented through interactive characters or interfaces on screens.
Anjing tua, trik baru
The metaverse concept isn’t new – it has existed through Linden Lab’s Second Life, or games like The Sims. Nvidia hopes to break proprietary walls and create a united metaverse so users to theoretically jump between universes created by different companies.
Selama pengarahan, Nvidia tidak menyebutkan cara membantu Facebook mencapai visinya tentang masa depan seputar metaverse, yang merupakan inti dari rebrandingnya menjadi meta.
But Nvidia is roping other companies into bringing their 3D work to the Omniverse platform through its software connectors. That list includes Esri’s Mesin kota ArcGIS, which helps create urban environments in 3D, and Replica Studio’s AI voice engine, which can simulate real voice for animated characters
“What makes this all possible is the foundation of USD, or Universal Scene Description. USD is the HTML of 3D – an important element because it allows for all these software products to take advantage of the virtual worlds we are talking about,” Kerris said. USD was created by Pixar to share 3D assets in a collaborative way.
Nvidia juga mengumumkan Perusahaan Omniverse – penawaran berlangganan dengan tumpukan perangkat lunak untuk membantu perusahaan membuat alur kerja 3D yang dapat dihubungkan ke platform Omniverse. Dengan harga $9,000 per tahun, penawaran ini ditargetkan pada industri vertikal seperti teknik dan hiburan, dan akan tersedia melalui pengecer yang mencakup Dell, Lenovo, PNY, dan Supermicro.
The company is also using the Omniverse platform to generate synthetic data on which to train “digital twins,” or virtual simulations of real-world objects. The ISAAC SIM can train robots through synthetic data based on real-world and virtual information. The SIM allows the introduction of new objects, camera views and lighting to create custom data sets on which to train robots.
Persamaan otomotifnya adalah Drive SIM, yang dapat menciptakan pemandangan realistis melalui kamera simulasi untuk berkendara otonom. SIM memperhitungkan data dunia nyata untuk melatih model AI mengemudi otonom. Model lensa kamera disimulasikan dan mengambil fenomena dunia nyata seperti gerakan kabur, rana bergulir, dan kedipan LED.
Nvidia is working closely with sensor makers to replicate Drive SIM data accurately. The camera, radar, lidar and ultrasonic sensor models are all path-traced using RTX graphics technology, according to Danny Shapiro, Nvidia’s vice president for automotive.
Perusahaan ini mengaitkan beberapa pengumuman perangkat keras dalam keseluruhan narasi Omniverse.
Bergabunglah dengan generasi baru
Papan pengembang Jetson AGX Orin generasi berikutnya akan tersedia untuk pembuat pada kuartal pertama tahun depan. Ini memiliki 12 inti CPU berdasarkan desain Arm Cortex-A78, RAM LPDDR32 5GB dan memberikan kinerja 200 TOPS (Tera Operations Per Second).
Grafik Pengemudi Hyperion 8 adalah platform komputasi untuk mobil yang memiliki SoC Drive Orin ganda dan memberikan kinerja hingga 500 TOPS. Platform ini memiliki 12 kamera, sembilan radar, satu lidar, dan 12 sensor ultrasonik. Ini akan digunakan pada kendaraan yang diproduksi pada tahun 2024, dan memiliki desain modular sehingga pembuat mobil hanya dapat menggunakan fitur yang mereka butuhkan. Mobil dengan komputer Nvidia lama dapat diupgrade ke Drive Hyperion 8.
Nvidia juga mengumumkan Kuantum-2 InfiniBand switch, which has 57 billion transistors and is being made using Taiwan Semiconductor Manufacturing Co’s 7nm process. It can process 66.5 billion packets per second, and has 64 ports for 400Gbit/sec data transfers, or 128 ports for 200Gbit/sec transfers, we’re told.
Perusahaan juga angkat bicara Morpheus – kerangka kerja AI yang diungkapkan awal tahun ini yang memungkinkan vendor keamanan siber mengidentifikasi dan memperingatkan perusahaan terhadap perilaku tidak wajar di jaringan atau pusat data. Kerangka kerja ini mengidentifikasi perubahan halus pada aplikasi, pengguna, atau lalu lintas jaringan untuk mengidentifikasi anomali dan perilaku mencurigakan.
Morpheus draws the data it needs from Nvidia’s BlueField SmartNICs/Data Processing Units, which have been imbued with new powers thanks to an upgrade to the DOCA SDK that is to Bluefield DPUs as CUDA is to Nvidia’s GPUs.
The DOCA upgrade – version 1.2 – can also “build metered cloud services that control resource access, validate each application and user [and] isolate potentially compromised machines.” DOCA 1.2 also lets Bluefield devices authenticate software and hardware authentication, apply line-rate data cryptography, and support distributed firewalls that run on the SmartNIC. Nvidia told Pendaftaran Palo Alto telah melihat peningkatan kinerja firewall sebesar 5x saat menjalankan alat dalam mode terdistribusi di SmartNIC.
Berbicara tentang AI, raksasa GPU juga demikian diperluas its Launchpad program, where it will offer short-term access to AI hardware and software through Equinix data centers in the US, Europe, Japan and Singapore. The latter three locations are Launchpad’s first presences outside the USA, giving Nvidia hope that its function as an AI on-ramp might be more widely adopted.
Penawaran baru lainnya adalah bagian baru dari alat AI percakapan RIVA yang dikatakan to be capable of creating a custom human-like voice in a day, based on just 30 minutes of sample speech. Nvidia thinks that’s just the ticket for orgs that want to offer custom speech interfaces. ®
Sumber: https://go.theregister.com/feed/www.theregister.com/2021/11/09/nvidia_metaverse/
