Fonctionnement de la technologie de suivi des mains Oculus Quest


Les Oculus Quest (à la fois l'original et deuxième modèle ) ont une histoire intéressante de fonctionnalités ajoutées longtemps après la sortie du matériel dans la nature. Le plus célèbre d'entre eux est Lien Oculus, qui transforme efficacement la quête en un Oculus Rift. Cette fonctionnalité a rencontré un tel succès qu'Oculus a décidé de mettre fin à tous ses casques à l'exception du Quest.

Le suivi manuel n'a pas fait tout ce que Oculus Link a fait, mais c'est toujours une fonctionnalité étonnante avec beaucoup de potentiel. Avec le suivi manuel, vous n’avez pas du tout besoin de contrôleurs. Vos propres mains sont numérisées dans le monde de la réalité virtuelle!

Si vous avez un Quête ou envisagez d'en acheter un, cela vaut la peine de savoir comment fonctionne le suivi manuel et ce qu'il peut apporter à l'expérience de réalité virtuelle.

Comment Quest suit le monde

L'Oculus Quest utilise un outil innovant approche vers le suivi de mouvement qui est communément appelé suivi «à l'envers», ce qui est très différent de la façon dont le suivi de mouvement fonctionnait dans le passé.

Lorsque les premiers casques de nouvelle génération sont sortis au milieu des années 2010, ils utilisaient une ou plusieurs caméras de suivi externes. Des lumières de suivi de mouvement spéciales sur le casque indiquaient à la caméra exactement où se trouvait le casque par rapport à celui-ci. Avec des mathématiques intelligentes, ces données pourraient ensuite être converties en un suivi de mouvement très précis dans l'espace 3D. C'est ainsi que les casques VR haut de gamme offrent «six degrés de liberté», également appelés 6DoF.

La quête déplace la caméra capteur sur le casque lui-même, dans ce cas, en les plaçant à des endroits stratégiques de l'appareil. D'autres casques peuvent utiliser encore plus de caméras pour améliorer la précision. Ces quatre caméras permettent à la quête de regarder le monde réel qui vous entoure et de déterminer votre position dans cet espace.

C’est ce qui permet à la quête d’être autonome et portable. C'est aussi la fonctionnalité qui permet en premier lieu le suivi manuel avec l'Oculus.

Les contrôleurs tactiles Oculus standard

Pour comprendre ce qui rend le suivi manuel Oculus si impressionnant , nous devons commencer par les contrôleurs physiques plutôt banals qui accompagnent l'Oculus Quest. Chacun est entièrement suivi de mouvement par des capteurs internes et des marqueurs de suivi de mouvement spéciaux qui indiquent aux caméras embarquées du Quest où se trouvent les contrôleurs par rapport au casque.

Lorsque vous tenez les contrôleurs tactiles en VR, ils ' re suivi avec une précision étonnante. En utilisant les boutons de poignée et de déclenchement sur le contrôleur, le logiciel VR peut créer une expérience convaincante de saisir et de manipuler des objets. Ceci est utilisé à bon escient dans des jeux tels que Half-Life Alyx et La montée, où les objets captivants dans le monde de la réalité virtuelle sont un élément central du gameplay.

Les contrôleurs tactiles également offrir un retour haptique grâce à des dispositifs appelés «actionneurs linéaires», qui peuvent créer des sensations physiques de heurt, de vibrations et autres sensations tactiles. Les manettes et les boutons offrent également un moyen familier de se déplacer dans un espace de réalité virtuelle lorsque vous ne pouvez pas vous déplacer physiquement dans votre espace réel.

Le principal inconvénient de ceci par rapport au suivi manuel est que vous avez des crochets pour les mains. Vous pouvez effectuer de simples mouvements de pincement avec vos mains virtuelles, mais c'est tout. Cela ne semble pas être une limitation majeure lorsque les jeux sont conçus autour des contrôleurs, mais le suivi manuel ouvre un spectre de nouvelles possibilités en VR.

Ce que fait Oculus Hand-Tracking

Quand le suivi des mains est activé, vous verrez une représentation précise de vos vraies mains dans le monde de la réalité virtuelle. Chaque mouvement de vos doigts ou de votre poignet sera reflété dans leurs sosies virtuels.

Le suivi des mains n'est plus une fonctionnalité bêta de Quest. Il est désormais intégré au système d'exploitation et à de nombreuses applications Quest de première partie. Le premier avantage majeur ici est que si vous voulez juste rapidement mettre sur votre Quest et regarder un film en VR ou parcourir l'App Store, vous n'avez pas à faire l'effort d'attacher les contrôleurs tactiles. En utilisant seulement vos mains, vous pouvez accéder aux menus système et naviguer facilement.

Maintenant que le suivi manuel est une fonctionnalité officielle de Quest, les développeurs d'applications tierces peuvent l'ajouter à leurs applications. Il existe déjà un certain nombre d'applications qui font un excellent usage de la fonction de suivi manuel d'Oculus, mais nous sommes sûrs que les développeurs trouveront de nombreuses autres façons intéressantes par lesquelles le suivi manuel direct peut transformer l'expérience de réalité virtuelle

Comment Oculus Hand-tracking fonctionne

Les résultats du hand-tracking sont assez étonnants, mais comment cela fonctionne-t-il réellement? Évidemment, Oculus ne publiera pas les détails exacts de sa solution propriétaire, mais nous connaissons les technologies et les principes impliqués.

Premièrement, les caméras embarquées sont essentielles au fonctionnement du suivi manuel. Non seulement ils fournissent des informations de profondeur stéréoscopiques, mais également des données visuelles à traiter par vision industrielle. Qu'est-ce que la vision industrielle? C'est une branche de intelligence artificielle, en particulier un domaine appelé apprentissage automatique. C'est la même technologie qui permet à l'application appareil photo de votre téléphone d'identifier rapidement les visages sur une photo.

Essentiellement, le logiciel doit apprendre ce qui dans les données d'image fournies par la caméra est une main et ce qui ne l'est pas. Cela a probablement été fait en montrant au logiciel des milliers et des milliers de mains dans différents environnements jusqu'à ce qu'il puisse trouver de manière fiable un moyen rapide et efficace de les distinguer de tout ce qui se trouve dans votre pièce.

Une fois que le logiciel peut créer modèles virtuels précis et en temps réel de vos mains, les développeurs d'applications peuvent les utiliser pour tout ce à quoi ils peuvent penser. Vous pouvez désormais manipuler avec précision des objets en réalité virtuelle!

Expériences suivies à la main qui valent la peine d'être essayées

Si vous possédez un Oculus Quest, vous pouvez essayer la fonction de suivi des mains d'Oculus sans avoir à en acheter application particulière. Comme mentionné ci-dessus, cela fonctionne dans l'environnement principal de Quest ainsi que dans quelques applications propriétaires. En ce qui concerne les expériences tierces, quelques-unes méritent d'être soulignées.

La ligne est une expérience narrative à 4,99 $ qui sert également de démo technologique parfaite pour le suivi des mains. Il raconte l'histoire d'une ville modèle réduit qui fonctionne sur des roulettes et des pistes.

Notre héros Pedro est amoureux de Rosa, mais il ne peut pas échapper à son destin. Jusqu'à ce que quelque chose de nouveau arrive un jour. Vous interagissez avec leur monde de modèles réduits en utilisant votre main pour tourner les boutons, tirer les leviers et jouer avec tout ce que vous pouvez. C'est une expérience linéaire et courte, mais qui peut montrer le suivi manuel de manière très divertissante en 15 minutes environ.

Valse du sorcier (9,99 $) est une autre excellente vitrine de la technologie. Vous pouvez utiliser vos mains pour lancer des sorts et interagir avec à peu près tout dans le monde de la réalité virtuelle qui vous entoure. Si vous avez toujours voulu vivre le fantasme d'être un sorcier capable de tirer des éclairs de ses mains, ce jeu est fait pour vous!

Que pensez-vous du suivi des mains sur Quest? L'as tu essayé? Quels jeux recommanderiez-vous? Partagez vos idées dans les commentaires.

Articles Similaires:


11.03.2021