Nvidia ser på seg selv som en maskinvareoverherre over "metaverset" og ga noen hint om driften av et parallelt 3D-univers der tegneserie-jeget vårt kan jobbe, spille og samhandle.
Chip-biz har lagt til nye rørleggerarbeid i Omniverse – en underliggende maskinvare- og programvaremotor som fungerer som en planetkjerne som smelter sammen virtuelle samfunn i et alternativt 3D-univers. Omniverse brukes også til å lage avatarer for å forbedre virkelige opplevelser i biler, sykehus og roboter.
"Vi ber ikke folk om å erstatte det de gjør, vi forbedrer det de gjør," sa Richard Kerris, visepresident for Omniverse-plattformen, under en pressebriefing.
Omniverse-kunngjøringene kom under selskapets GPU Technology Conference denne uka. Nvidia-sjef Jensen Huang vil snakke om mange av disse kunngjøringene på tirsdag.
jensen som du aldri har sett ham før. Kilde: Nvidia. Klikk for å forstørre
En slik kunngjøring er Omniverse Avatar, som kan generere interaktive, intelligente AI-avatarer for ting som å hjelpe spisegjester med å bestille mat, eller hjelpe en sjåfør med å parkere eller navigere bedre på veiene.
Nvidia ga et eksempel på en samtaleavatar for å erstatte servere på restauranter. Når du bestiller mat, kan et AI-system – representert ved en avatar på skjermen – snakke i sanntid ved å bruke talegjenkjenning og naturlige intelligensteknikker, og bruke datasyn for å fange en persons humør, og anbefale retter basert på kunnskapsbasen.
For det må avataren kjøre flere AI-modeller – for eksempel tale, bildegjenkjenning og kontekst – samtidig, noe som kan være en utfordring. Selskapet har laget Unified Compute Framework som modellerer AI som mikrotjenester, slik at apper kan kjøres i et enkelt eller hybridsystem.
Nvidia har allerede underliggende AI-systemer som Megatron-Turing Natural Language Generation-modellen – et monolitisk transformatorspråk utviklet i samarbeid med Microsoft. Systemet vil nå tilbys på DGX AI-maskinvaren.
Omniverse Avatar er også den underliggende teknologien i Drive Concierge – en AI-assistent i bilen som er en "personlig concierge i bilen som vil være på vakt for deg," sa Deepu Talla, visepresident og daglig leder for Embedded and Edge Computing.
AI-systemer i biler representert av interaktive karakterer kan forstå en sjåfør og bilens passasjerer gjennom vaner, stemme og interaksjoner. Følgelig kan AI-systemet foreta telefonsamtaler eller gi anbefalinger om spisesteder i nærheten.
Ved hjelp av kameraer og andre sensorer kan systemet også se om en sjåfør sover, eller varsle en rytter hvis de glemmer noe i bilen. AI-systemets meldinger er representert gjennom interaktive karakterer eller grensesnitt på skjermer.
Gammel hund, nye triks
Metaverse-konseptet er ikke nytt – det har eksistert gjennom Linden Labs Second Life, eller spill som The Sims. Nvidia håper å bryte proprietære vegger og skape et samlet metavers slik at brukere teoretisk kan hoppe mellom universer skapt av forskjellige selskaper.
Under orienteringen henviste ikke Nvidia til å hjelpe Facebook med å møte sin visjon om en fremtid rundt metaversen, som er i sentrum for omprofileringen til Meta.
Men Nvidia lokker andre selskaper til å bringe 3D-arbeidet sitt til Omniverse-plattformen gjennom sine programvarekoblinger. Den listen inkluderer Esri ArcGIS cityEngine, som bidrar til å skape urbane miljøer i 3D, og Replica Studios AI-stemmemotor, som kan simulere ekte stemme for animerte karakterer
"Det som gjør alt dette mulig er grunnlaget for USD, eller Universal Scene Description. USD er HTML-en til 3D – et viktig element fordi det gjør det mulig for alle disse programvareproduktene å dra nytte av de virtuelle verdenene vi snakker om, sa Kerris. USD ble opprettet av Pixar for å dele 3D-ressurser på en samarbeidsmåte.
Nvidia kunngjorde også Omniverse Enterprise – et abonnementstilbud med en programvarestabel for å hjelpe bedrifter med å lage 3D-arbeidsflyter som kan kobles til Omniverse-plattformen. Priset til $9,000 XNUMX per år, er tilbudet rettet mot industrivertikaler som engineering og underholdning, og vil være tilgjengelig gjennom forhandlere som inkluderer Dell, Lenovo, PNY og Supermicro.
Selskapet bruker også Omniverse-plattformen til å generere syntetiske data for å trene «digitale tvillinger» eller virtuelle simuleringer av objekter fra den virkelige verden. ISAAC SIM kan trene roboter gjennom syntetiske data basert på virkelige og virtuelle opplysninger. SIM-kortet gjør det mulig å introdusere nye objekter, kameravisninger og belysning for å lage tilpassede datasett for opplæring av roboter.
En bilekvivalent er Drive SIM, som kan skape realistiske scener gjennom simulerte kameraer for autonom kjøring. SIM-en tar hensyn til data fra den virkelige verden for å trene AI-modeller med autonom kjøring. Kameralinsemodellene er simulert og tar inn virkelige fenomener som bevegelsesuskarphet, rullende lukker og LED-flimmer.
Nvidia jobber tett med sensorprodusenter for å replikere Drive SIM-data nøyaktig. Kamera-, radar-, lidar- og ultralydsensormodellene spores alle ved hjelp av RTX-grafikkteknologi, ifølge Danny Shapiro, Nvidias visepresident for bil.
Selskapet flettet sammen noen maskinvarekunngjøringer i den generelle Omniverse-fortellingen.
Bli med i den nye generasjonen
Neste generasjons Jetson AGX Orin utviklerkort vil være tilgjengelig for produsenter i første kvartal neste år. Den har 12 CPU-kjerner basert på Arm Cortex-A78-design, 32 GB LPDDR5 RAM og leverer 200 TOPS (Tera Operations Per Second) ytelse.
De Driver for Hyperion 8 er en dataplattform for biler som har doble Drive Orin SoCs og leverer ytelse på opptil 500 TOPS. Plattformen har 12 kameraer, ni radarer, en lidar og 12 ultralydsensorer. Den vil gå inn i kjøretøy produsert i 2024, og har en modulær design slik at bilprodusenter bare kan bruke funksjonene de trenger. Biler med eldre Nvidia-datamaskiner kan oppgraderes til Drive Hyperion 8.
Nvidia kunngjorde også Quantum-2 InfiniBand-svitsj, som har 57 milliarder transistorer og lages ved hjelp av Taiwan Semiconductor Manufacturing Cos 7nm-prosess. Den kan behandle 66.5 milliarder pakker per sekund, og har 64 porter for 400 Gbit/sek dataoverføringer, eller 128 porter for 200Gbit/sek overføringer, blir vi fortalt.
Selskapet snakket også opp Morpheus – et AI-rammeverk det avslørte tidligere i år som lar cybersikkerhetsleverandører identifisere og varsle selskaper om uregelmessig oppførsel i et nettverk eller datasenter. Rammeverket identifiserer subtile endringer i applikasjoner, brukere eller nettverkstrafikk for å identifisere uregelmessigheter og mistenkelig oppførsel.
Morpheus henter dataene den trenger fra Nvidias BlueField SmartNICs/Data Processing Units, som har fått nye krefter takket være en oppgradering til DOCA SDK som er til Bluefield DPUer som CUDA er til Nvidias GPUer.
DOCA-oppgraderingen – versjon 1.2 – kan også "bygge målte skytjenester som kontrollerer ressurstilgang, validerer hver applikasjon og bruker [og] isolerer potensielt kompromitterte maskiner." DOCA 1.2 lar også Bluefield-enheter autentisere programvare- og maskinvareautentisering, bruke linjehastighetsdatakryptering og støtte distribuerte brannmurer som kjører på SmartNIC. Nvidia fortalte Registeret Palo Alto har sett en 5 ganger forbedring i brannmurytelse når verktøyene kjøres i distribuert modus på SmartNICs.
Snakker om AI, GPU-giganten også utvidet sitt Launchpad-program, hvor det vil tilby kortsiktig tilgang til AI-maskinvare og -programvare gjennom Equinix-datasentre i USA, Europa, Japan og Singapore. De tre sistnevnte stedene er Launchpads første tilstedeværelse utenfor USA, noe som gir Nvidia håp om at funksjonen som en AI-rampe kan bli mer utbredt.
Et annet nytt tilbud er et nytt kutt av RIVA-konversasjons-AI-verktøyet er sagt å være i stand til å lage en tilpasset menneskelignende stemme på en dag, basert på bare 30 minutter med eksempeltale. Nvidia tror det bare er billetten for organisasjoner som ønsker å tilby tilpassede talegrensesnitt. ®
Kilde: https://go.theregister.com/feed/www.theregister.com/2021/11/09/nvidia_metaverse/
