Meta To Demo Retinal Varifocal & Light Field Passthrough

Meta To Demo Retinal Varifocal & Light Field Passthrough

Időbélyeg: 31. július 2023. 5:16
Forrás csomópont: 2192516

A Meta két új kutatási prototípus fejhallgatót mutat be a jövő héten a SIGGRAPH 2023 kiállításon.

A SIGGRAPH egy évente megrendezésre kerülő konferencia, ahol a kutatók bemutatják a számítógépes grafikus hardver és szoftver áttöréseit. Tavaly Meta mutatkozott be csillagkeletkezési, egy HDR-kijelző kutatási prototípusa 20,000 XNUMX nites fényerővel, ami a legmagasabb az ismert headset közül.

Idén a Meta két prototípus headsetet mutat be: Butterscotch Varifocal a retina-közeli felbontást és a varifokális optikát fogja bemutatni, míg Flamera proves out a novel reprojection-free approach to real world passthrough.

Starburst: Eyes-In a Meta 20K Nit HDR Display Tech

A nagy dinamikatartomány (HDR) a kulcsa a következő generációs VR-kijelzőknek? Gyakorlati idő a Meta legújabb demójával és a kijelzőrendszer-kutatások vezetőjével készült interjú azt sugallja, hogy ez nagyon kulcsfontosságú lesz. Olvasson tovább a részletekért. A legutóbbi vancouveri SIGGRAPH konferencián David Heaney és én elmentünk

A UploadVR-es Ian Hamilton és én tavaly szemügyre vette a Starburstet, and I’m travelling to SIGGRAPH 2023 next week to try out the new prototypes.

Az egyértelműség kedvéért, mind a Butterscotch Varifocal, mind a Flamera kutatási prototípusok, amelyek célja a távoli fejhallgató-technológia érzésének vizsgálata. Egyiknek sem valós termékké kell válnia, és a Meta kifejezetten figyelmeztet, hogy mindegyik megközelítés „soha nem kerül be a fogyasztók számára készült termékké”.

Butterscotch Varifocal: Retina felbontás változó fókusszal

A szögfelbontás a fejre szerelhető kijelzők felbontásának valódi mértéke, mivel a fejhallgatók látómezőinek különbségeit figyelembe veszi azáltal, hogy leírja, hogy ténylegesen hány pixelt lát a látás egyes fokaiban, azaz a pixel per fok (PPD). Például, ha két headset ugyanazt a kijelzőt használja, de az egyiknek kétszer szélesebb a látómezeje, akkor a felbontása ugyanannyi, de csak a PPD fele.

A „retinális” kifejezés az emberi szem által észlelhetőnél nagyobb szögfelbontás leírására szolgál. Az általánosan elfogadott küszöb 60 PPD.

Ma egyetlen fogyasztói VR headset sem éri meg ezt – a Quest Pro körülbelül 22 PPD-t ér el, míg Bigscreen Beyond claims 32 PPD and the $2000 Varjo Aero eléri a 35. Varjoét 5500 dolláros üzleti fejhallgatók valóban eléri a retina felbontását, de csak egy apró téglalapban a nézet közepén.

Tavaly, Meta megmutatta magát a Butterscotch nevű kutatási prototípus, amely elérte az 55 PDD-t. Feltételezett célja a retina felbontásának érzetének demonstrálása és kutatása volt, látómezeje pedig csak körülbelül feleakkora, mint a Quest 2.

A Butterscotch Varifocal a Butterscotch következő fejlesztése, amely a retina szögfelbontását a Half-Dome prototípus varifokális optikájával kombinálja.

A Butterscotch Varifocal motorjai beállítják a kijelző fókusztávolságát.

Félkupola először 2018-ben mutatták be. Beépített szemkövetés segítségével gyorsan, mechanikusan mozgatja a kijelzőket előre és hátra a fókusz dinamikus beállításához.

A piacon kapható összes fejhallgató fix fókuszú lencsékkel rendelkezik. Minden szem külön perspektívát kap, de a kép fix fókusztávolságra fókuszál, általában néhány méterrel távolabb. Szemei ​​a megtekintett virtuális objektumra mutatnak (konvergálnak vagy eltérnek), de valójában nem tud fókuszálni (alkalmazkodni) az objektum virtuális távolságához.

Ezt vergencia-akkomodáció konfliktusnak nevezik. Ez megerőlteti a szemet, és közelről elmosódottá teheti a virtuális objektumokat. Ennek megoldása fontos, hogy a VR valóságosabb legyen, és vizuálisan kényelmesebb legyen a hosszú távú használat során.

A Butterscotch Varifocal 25 cm-től a végtelenig képes befogadni, így a közeli vagy távoli tárgyakra fókuszálhat.

A Meta azt állítja, hogy a retina felbontás és a variofokális optika kombinációja azt jelenti, hogy a headset „éles, tiszta látványt nyújt, amely vetekszik a szabad szemmel láthatóval”.

Flamera: Reprojection-Free Lightfield Passthrough

A Flamera a reprojekciómentes áthaladás prototípusa. A Meta úgy írja le, mint „számítógépes kamera, amely fénymezős technológiát használ”.

Az olyan headsetek, mint a Quest Pro, az Apple Vision Pro és a közelgő Quest 3, elülső kamerákkal mutatják be a valós világot. De mivel ezek a kamerák az Ön valódi szemétől eltérő helyzetben vannak, képfeldolgozó algoritmusokat kell használniuk a kamera nézeteinek újravetítéséhez, hogy megmutassák, mit látna a szeme.

Ez egy tökéletlen folyamat, amely növeli a késleltetést, és képfeldolgozási műtermékeket eredményez – még akkor is, ha az egyre jobb újabb hardverrel.

A Flamera célja, hogy teljesen megkerülje az újravetítési megközelítést az alapoktól kezdődően az áthaladás szem előtt tartásával felépített hardvertervezéssel. A Meta a következőképpen írja le a működését:

A hagyományos, objektívsorral rendelkező fénymezős kamerákkal ellentétben a Flamera (gondoljunk csak „lapos fényképezőgépre”) stratégiailag egy rekeszt helyez el a tömb minden objektívje mögé. Ezek a nyílások fizikailag blokkolják a nem kívánt fénysugarakat, így csak a kívánt sugarak érik el a szemet (míg a hagyományos fénymezős kamerák nem csak ezeket a fénysugarakat rögzítenék, ami elfogadhatatlanul alacsony képfelbontást eredményez). Az alkalmazott architektúra emellett a véges szenzorpixeleket a fénymező releváns részeire koncentrálja, ami sokkal nagyobb felbontású képeket eredményez.

A nyers szenzoradatok kis fénykörnek tűnnek, amelyek mindegyike csak egy részét tartalmazza a fejhallgatón kívüli fizikai világ kívánt nézetének. A Flamera átrendezi a képpontokat, és egy durva mélységtérképet becsül meg, hogy lehetővé tegye a mélységfüggő rekonstrukciót.

[Beágyazott tartalmat]

Ez, állítja Meta, sokkal alacsonyabb késleltetésű és sokkal kevesebb műterméket eredményez.

Időbélyeg:

Még több UploadVR