Bien que la technologie VR ait parcouru un long chemin depuis sa création à la fin 19th siècle * ahem * Au XXe siècle, les méthodes d'interaction avec un monde virtuel sont restées en grande partie les mêmes. Grâce à l'utilisation de boutons et de contrôleurs, l'utilisation d'un casque VR semble toujours très lourde malgré sa capacité à ajouter des actions réelles dans un espace virtuel.
Mais que faire si vous n'aviez pas besoin d'un contrôleur? Et si vous pouviez tout contrôler de manière transparente à l'aide de vos deux mains ?
C'est exactement ce sur quoi Oculus a travaillé. Au début de 2020, le casque Oculus Quest VR permettra de véritables entrées manuelles directement de vos mains dans l'espace virtuel, transformant vos mains réelles en contrôleurs VR.

Créé en collaboration avec Facebook Reality Labs, le système s'appuie sur les quatre caméras monochromes de l'Oculus Quest pour suivre les mouvements de votre main et les refléter dans l'espace virtuel. En utilisant des techniques d'apprentissage en profondeur et un suivi basé sur un modèle, le casque peut traiter vos actions (telles que pointer, pincer et élargir vos doigts) et les considérer comme des questions d'interaction.


Une fois que vous allumez l'Oculus Quest, les réseaux de neurones profonds prédisent l'emplacement de vos mains et construisent un espace 3D pour vos mains et vos doigts. C'est dans cet espace que vous pouvez agiter vos mains bon gré mal gré et le Quest créera un modèle 3D de la position de vos mains et de la géométrie de la surface. Cela permet au casque de suivre avec précision tous les mouvements de votre main et de les traduire dans le monde virtuel sans aucun décalage.

Cette nouvelle interface permettra non seulement aux utilisateurs actuels de VR d'utiliser plus facilement leurs casques, mais elle réduira également la barrière d'entrée pour les nouveaux utilisateurs de la technologie. Étant donné que plus de gens savent utiliser leurs mains qu'un contrôleur, l'interaction avec l'Oculus Quest devient plus intuitive avec la nouvelle technologie de suivi des mains. Imaginez pouvoir mettre en pause, lire et rembobiner des vidéos avec quelques simples gestes de la main, ou permettre aux personnes sourdes et muettes d'interagir avec d'autres en ligne en utilisant la langue des signes.
Combinez cela avec les capacités des développeurs à créer des applications à l'aide de la technologie, et Oculus a lui-même un tout nouveau terrain de jeu sans contrôleur avec lequel travailler. Nous ne manquerons pas de publier plus d'informations à l'approche de sa sortie, mais pour l'instant, vous pouvez consulter les informations détaillées de Facebook blog récents sur la collaboration ainsi que sur Oculus annonce sur leur blog.