La plate-forme de présence de Facebook propose de nouveaux outils de réalité mixte

La société déclare que sa nouvelle plate-forme servira de colonne vertébrale à son métaverse en croissance rapide.

Lors de la conférence Facebook Connect d'aujourd'hui, Facebook a dévoilé sa vision du métaverse dans une série d'annonces passionnantes. Cela inclut la plate-forme de présence, une suite de nouveaux outils qui vous permettront de créer des expériences plus connectées qui vous permettront de vous déplacer facilement entre les mondes.

En plus de vous garder connecté, la plate-forme de présence propose également un ensemble d'outils incroyables que vous pouvez utiliser pour créer un large éventail d'environnements de réalité mixte, d'interactions et d'expériences vocales uniques. Ces nouvelles fonctionnalités, ainsi que les éléments de base du métaverse qui existent déjà, serviront de colonne vertébrale à l'expérience métaverse de Facebook. 

Kit de développement logiciel Insight 

Insight SDK vous permet de créer des expériences de réalité mixte qui offrent un véritable sentiment de présence. Plus tôt dans l'année, Facebook a expédié API de relais expérimentale aux développeurs et les a encouragés à créer un contenu de réalité mixte révolutionnaire. Les développeurs n'ont pas perdu de temps pour créer des expériences uniques qui ont efficacement mis en valeur le potentiel de la technologie Oculus Passthrough.

Facebook a annoncé aujourd'hui que tout le monde aura accès à la technologie Passthrough dans la prochaine version, vous permettant de créer, tester et expédier des expériences à l'aide des fonctionnalités Passthrough.

L'accès des développeurs à Spatial Anchors a également été annoncé. Ces cadres de référence verrouillés dans le monde vous permettent de créer et de placer en permanence du contenu virtuel dans un espace physique. Les objets virtuels attachés aux ancres spatiales resteront dans leurs positions désignées d'une session à l'autre. Ensuite, il y a Spatial Anchors Experimental, qui vous permettra de créer des ancres spatiales dans des poses 6DoF spécifiques, de suivre la pose 6DoF par rapport à un casque VR, de conserver les ancres spatiales sur l'appareil, puis de récupérer une liste des ancres spatiales actuellement suivies.

En utilisant ensemble Passthrough et Spatial Anchors, les développeurs ont accès à des fonctionnalités supplémentaires de Scene Understanding. Grâce à Scene Understanding, vous pouvez créer facilement des expériences complexes et sensibles à la scène qui interagissent avec votre environnement à l'aide de Scene Model, qui vous donnera une représentation géométrique et somatique de votre espace vous permettant de créer des expériences de réalité mixte à l'échelle de la pièce.

Vous pouvez, par exemple, attacher un écran virtuel à un mur physique ou naviguer dans un personnage virtuel avecocclusion réaliste dans tout votre environnement réel. De plus, cette technologie vous permet d'apporter des objets physiques en VR. Pour créer ce modèle de scène, Facebook fournira un flux de capture de scène guidé par le système qui vous permet de vous promener et de capturer votre scène. Les capacités de compréhension de scène seront disponibles en tant que capacité expérimentale au début de l'année prochaine.

Bien sûr, la confidentialité est importante. Facebook a conçu Passthrough, Spatial Anchors et Scene Understanding afin que les développeurs puissent créer des expériences de réalité mixte sans utiliser d'images ou de vidéos brutes de vos capteurs Quest.

SDK D'INTERACTIONS

Avec Interaction SDK Experimental, Facebook vous permet d'intégrer plus facilement les mains et les interactions centrées sur le contrôleur en VR. La bibliothèque Unity, disponible au début de l'année prochaine, sera livrée avec un ensemble de composants d'interaction prêts à l'emploi, tels que saisir, pousser, cibler et sélectionner. Les composants peuvent être utilisés ensemble, indépendamment ou intégrés dans d'autres interactions. Interaction SDK vous facilite la tâche en résolvant de nombreux défis d'interaction difficiles liés au suivi des mains basé sur la vision par ordinateur. Il offre des modèles d'interaction standardisés et empêche les régressions à mesure que la technologie évolue. Enfin, vous pouvez également créer vos propres gestes personnalisés. 

SDK CLAVIER SUIVI

Les capacités de clavier suivi pour les développeurs ont été annoncées l'année dernière. Peu de choses ont été mentionnées à ce sujet, si ce n'est que la société travaille dur pour lancer un SDK de clavier suivi au début de l'année prochaine dans le cadre de Presence Platform.

Kit de développement vocal

Voice SDK Experimental est un ensemble de fonctionnalités axées sur l'utilisation du langage naturel, vous permettant de créer une navigation mains libres et un gameplay piloté par la voix. Les cas d'utilisation potentiels de ce type de technologie sont pratiquement infinis. Imaginez une expérience où vous gagnez une bataille en criant un sort magique ou en utilisant votre propre voix pour faire du troc avec un marchand en jeu. Voice SDK sera alimenté par la plate-forme de langage naturel Wit.ai de Facebook.

La plate-forme de présence et la SDK de la plate-forme Oculus sont conçus pour fonctionner ensemble, vous pourrez donc les utiliser en tandem pour créer des expériences de réalité mixte et des interactions naturelles sur les appareils Oculus Quest. La documentation pour les développeurs sera disponible dans les prochaines versions de Facebook afin que vous puissiez commencer le prototypage. 

Pour montrer le potentiel de sa plateforme de présence, Facebook a créé un exemple d'expérience appelé Le monde au-delà pour vous de vérifier. 

Crédit d'image vedette : Facebook

Source : https://vrscout.com/news/facebooks-presence-platform-offers-new-mixed-reality-tools/