Meta sagt, dass der neue Prototyp seine hochmoderne Forschung und Entwicklung in ein marktfähiges Headset stecken wird

Zurück im Juni Meta enthüllte seine neuesten XR-Forschungs- und Entwicklungsbemühungen anhand einer Handvoll verschiedener Prototypen entwickelt, um verschiedene Konzepte zu erproben. Der nächste Schritt, so das Unternehmen, besteht darin, alles in einem einzigen Paket zusammenzufassen, das eines Tages echte Benutzer erreichen könnte.

Wenn Sie Zeit damit verbringen, sich über die neuesten XR-Forschungen auf dem Laufenden zu halten (wie wir es gerne tun), werden Sie wissen, dass es bei der überwiegenden Mehrheit der Arbeit darum geht, zu beweisen, dass etwas existiert möglich, aber nicht unbedingt darüber, ob es ist oder nicht lebensfähig als Technologie, die zu einem echten Produkt verarbeitet werden könnte – wo Herausforderungen wie Kosten, Herstellung und Haltbarkeit selbst die innovativsten Technologien zunichte machen können.

Nehmen Sie zum Beispiel die „Starburst“-HDR-VR-Headset-Prototyp, den Meta kürzlich enthüllte. Das Ziel der Forschung war es, einfach zu bauen etwas, das funktioniert hat So konnte das Team die Auswirkungen von 20,000 nit HDR auf die Immersion quantifizieren. Aber aus Sicht der Marktfähigkeit ist die im Prototyp verwendete Technologie viel zu groß, verbraucht zu viel Strom und wird viel zu heiß, um in ein echtes Produkt eingebaut zu werden, ohne die zugrunde liegende Architektur vollständig zu ändern.

Und das ist bei vielen der F&E-Prototypen von Meta der Fall – sie sind darauf ausgelegt zeigen ein Konzept, aber sie sind nicht unbedingt auf Marktreife ausgelegt.

Aber Metas nächster Prototyp, sagte das Unternehmen nebenbei Enthüllung seiner neuesten Forschung und Entwicklung im Juni, ist nicht nur ein Versuch, ein Konzept zu demonstrieren, sondern einen Großteil der neuesten Forschungsergebnisse des Unternehmens in einem einzigen Headset zusammenzuführen – und in einer Architektur, die tatsächlich die Grundlage für zukünftige Produkte bilden könnte.

Das bedeutet nicht, dass es billig wäre und es bedeutet nicht, dass es einfach wäre, aber wenn es so zusammenkommt, wie das Unternehmen hofft, wird es „ein Spielveränderer für das visuelle VR-Erlebnis“, sagt Michael Abrash, Chief Scientist bei Meta Reality Labs.

Das Prototypkonzept heißt Mirror Lake, und obwohl Meta darauf achtet, dass es noch nicht einmal gebaut wurde, sagt das Unternehmen, sein Ziel sei es, viele seiner neuesten Innovationen in dieses einzelne System zu packen.

Laut Douglas Lanman, Director of Display Systems Research bei Meta Reality Labs, wird Mirror Lake elektronische Varifokallinsen (einschließlich Sehkorrektur), Multi-View-Eye-Tracking, holografische Pancake-Linsen, Advanced Passthrough, Reverse Passthrough und eine Laser-Hintergrundbeleuchtung enthalten ein brillenähnlicher Formfaktor. Lassen Sie uns diese kurz nacheinander aufschlüsseln.

Elektronische Gleitsichtgläser

Elektronische Gleitsichtgläser würden es dem Headset ermöglichen, jedem Auge einzeln die richtige Tiefe anzuzeigen, und außerdem die Notwendigkeit einer Brille beseitigen. Dies würde das Headset nicht nur immersiver, sondern auch komfortabler machen, da es den seit langem bestehenden „Vergenz-Unterbringungs-Konflikt“ lösen würde, der die meisten Headsets betrifft.

Multi-View-Eye-Tracking

Multi-View-Eye-Tracking könnte die Genauigkeit des Eye-Tracking erhöhen (was ein Grundpfeiler für andere Funktionen wie die dynamische Verzerrungskorrektur ist), indem es dem System mehr Ansichten des Auges des Benutzers gibt. Die meisten Eye-Tracking-Headsets haben heute eine Kamera in der Linse in einem spitzen Winkel, die das Auge des Benutzers beobachtet, um seine Bewegung einzuschätzen. Aber dieser scharfe Winkel macht es schwieriger, eine genaue Schätzung zu erhalten. Laut Meta könnte Mirror Lake eine zusätzliche Eye-Tracking-Kamera in jeder Strebe des Kopfbands in der Nähe der Schläfe des Benutzers einbauen. Diese Kamera würde eine bessere Sicht auf das Auge des Benutzers erhalten, indem sie eine Reflexion von einem holografischen Film betrachtet, der in die Linsen des Headsets eingebettet ist.

Holografische Pancake-Linsen

Holografische Pancake-Linsen sind neuartige Linsen, die dünner und leichter sind und gleichzeitig ermöglichen, dass das Auge des Benutzers näher an der Linse ist, wodurch das Volumen des Headsets erheblich reduziert wird.

Erweitertes Passthrough

Erweiterte Passthrough-Funktionen ermöglichen eine schärfere und realistischere Sicht durch das Headset für Mixed-Reality-Funktionen. Lanman ging nicht sehr detailliert auf eine sogenannte „neuronale Passthrough-Kamera“ ein, die für Mirror Lake vorgeschlagen wurde, aber angeblich wird dies einer Next-Gen-Version der Passthrough+-Funktion von Quest 2 ähneln, die auf eine genaue Tiefendarstellung abzielt und niedrig Latenz.

Reverse Passthrough

Reverse Passthrough ist eine etwas abgefahrene Technologie, die die Augen des Benutzers auf die Außenseite des Headsets projiziert, damit andere sie sehen können. Da Augen ein so wichtiger Teil der Kommunikation sind, soll diese Funktion es weniger seltsam machen, sich mit jemandem zu unterhalten, der ein Headset trägt.

Laser-Hintergrundbeleuchtung

Laser-Hintergrundbeleuchtung würde es dem Headset ermöglichen, eine größere Farbpalette anzuzeigen, um genauer darzustellen, was ein Benutzer im wirklichen Leben sehen würde. Es könnte auch für ein helleres Display mit einem größeren Dynamikbereich sorgen.

- - - - -

Meta hat viele dieser Technologien unabhängig in verschiedenen Prototypen demonstriert, aber Lanman sagt, dass das Ziel darin besteht, dass Mirror Lake um eine „praktische Architektur“ herum aufgebaut wird; etwas, das außerhalb einer Laborumgebung durchführbar ist – etwas, das tatsächlich die Grundlage für ein echtes Produkt bilden könnte.

Abrash, Chief Scientist bei Meta Reality Labs, sagte, Mirror Lake könne erahnen, wie ein „komplettes Next-Gen-Display [VR]-System aussehen könnte“, warnt aber auch davor, dass die Architektur bis zum Headset nicht endgültig bewiesen (oder widerlegt) werden könne ist tatsächlich gebaut.

Es wird noch Jahre dauern, bis so etwas wie Mirror Lake tatsächlich auf den Markt kommt. Das kommende Headset von Meta, derzeit bekannt als Project Cambria, wird nur einen Bruchteil der Fähigkeiten von Mirror Lake beinhalten. Sogar der Prototyp von Holocake 2 – der weiter fortgeschritten ist als Cambria – ist immer noch einige Schritte hinter dem zurück, was Meta sich mit Mirror Lake vorstellt.

Dennoch besteht Meta-CEO Mark Zuckerberg darauf, dass die Milliarden investiert das Unternehmen in seine XR-F&E-Bemühungen ist nicht nur akademisch.

„Wir sind das Unternehmen, das am ernsthaftesten und engagiertesten ist, im Grunde zu prüfen, wo VR und AR in 10 Jahren stehen müssen. [Wir fragen] ‚Was sind die Probleme, die wir lösen müssen‘ und arbeiten einfach systematisch an jedem einzelnen von ihnen, um Fortschritte zu erzielen“, sagt Zuckerberg. „Es ist noch ein langer Weg, aber ich freue mich darauf, all diese Technologien in den kommenden Jahren in unsere Produkte einzubringen.“