Facebook a annoncé une nouvelle API qui permettra aux développeurs d’intégrer la vidéo des capteurs du Quest 2 dans leurs jeux et applications, créant ainsi une expérience de réalité mixte. Avec l’API Passthrough, les développeurs pourront non seulement mélanger les images en noir et blanc des capteurs du casque dans leurs expériences, mais ils pourront également personnaliser la façon dont il finit par regarder le joueur, appliquer des effets et même faire apparaître le monde réel sur des surfaces spécifiques.

L’annonce de Facebook comprend des exemples de la façon dont l’API pourrait améliorer le logiciel de productivité en permettant l’intégration de claviers et de bureaux réels, et comment les jeux pourraient inclure vos meubles réels pour que les ennemis se cachent derrière. Il est également facile d’imaginer d’autres expériences amusantes qui mélangent votre environnement réel avec un monde virtuel – que diriez-vous des énigmes Portal-esque que vous résolvez dans votre propre maison, ou la possibilité de voir vos murs recouverts de peinture virtuelle ?

Facebook a dit TéléchargerVR que l’API n’était actuellement que pour le Quest 2 lorsqu’on lui a posé des questions sur la compatibilité avec le Quest de première génération. Dans le message d’annonce, Facebook indique que le traitement des images pour l’API est effectué sur l’appareil et que les applications l’utilisant ne pourront pas voir ou stocker les images des capteurs du Quest 2.

Facebook ajoute la version expérimentale de l’API à ses futurs outils de développement, et elle sera d’abord disponible pour les programmeurs utilisant Unity pour créer leur logiciel. Facebook promet que l’API sera prise en charge par d’autres plates-formes de développement à l’avenir.

Les casques Quest, Quest 2 et Rift S disposent déjà d’une version de la technologie Passthrough, qui permet aux utilisateurs d’avoir un aperçu rapide de ce qui se passe autour d’eux dans le monde réel. Facebook vous permet également de définir Passthrough comme environnement virtuel, vous offrant une version de votre environnement réel (bien qu’en noir et blanc) dans laquelle vous pouvez naviguer dans l’interface utilisateur d’Oculus. Il a même montré cette capacité dans une vidéo sur sa fonctionnalité Infinite Office.

La possibilité d’intégrer votre environnement réel dans un monde virtuel a longtemps été l’une des promesses les plus excitantes des casques avec caméras intégrées. Microsoft a même invoqué l’idée lorsqu’il a nommé sa plate-forme de réalité virtuelle Windows Mixed Reality (quel que soit le montant réellement fourni).

Cependant, l’actualité de l’API d’Oculus ne signifie pas que vous pourrez prendre votre casque et vivre une expérience de réalité mixte aujourd’hui. Dans son annonce, Facebook dit qu’il cherche à permettre aux développeurs de livrer des logiciels utilisant Passthrough aux joueurs « plus tard cette année ». Pourtant, la disponibilité de cette API pour les développeurs est passionnante, car elle devrait permettre de nouveaux types d’expériences sur la plate-forme Oculus.