Aperçu du jeu. Le cercle noir au centre est la sphère correspondant au cœur. L’anneau qui l’entoure est la cible. L’utilisateur lance une sphère pour essayer de briser la cible. Crédit : Yasuhiro Suzuki.
Au cours des dernières décennies, les avancées technologiques ont permis le développement de jeux vidéo de plus en plus sophistiqués, immersifs et réalistes. L’une des avancées les plus remarquables est la réalité virtuelle (RV), qui permet aux utilisateurs de faire l’expérience de jeux ou d’autres environnements simulés comme s’ils y naviguaient réellement, grâce à l’utilisation d’appareils électroniques portables.
La plupart des systèmes de RV existants se concentrent principalement sur le sens de la vision, en utilisant des casques qui permettent aux utilisateurs de voir ce qui se passe dans un jeu ou dans un autre environnement simulé juste devant leurs yeux, plutôt que sur un écran placé devant eux. Bien que cela puisse conduire à des expériences visuelles très engageantes, ces expériences ne sont pas toujours accompagnées d’autres types d’entrées sensorielles.
Des chercheurs de l’école d’informatique de l’université de Nagoya au Japon ont récemment créé un nouveau jeu de RV qui intègre des expériences audiovisuelles immersives à la perception tactile. Ce jeu, présenté dans un article publié dans le Journal of Robotics, Networking and Artificial Life, utilise les données biométriques d’un joueur pour créer un objet sphérique dans l’espace RV qui bat en alignement avec son cœur. Le joueur peut ainsi percevoir les battements de son cœur via cet objet de manière visuelle, auditive et tactile.
« La sensation tactile a un effet plus important sur la sensibilité que les perceptions audiovisuelles », ont écrit les chercheurs dans leur article. Par conséquent, si les sens tactile et audiovisuel sont combinés, nous pouvons créer une « présence virtuelle » dans l’espace de la RV ».
Le but du jeu de RV développé par les chercheurs est de briser une série de cibles en lançant un objet sphérique sur celles-ci. Dans l’environnement simulé, cet objet sphérique est connecté à un fil qui semble provenir de l’endroit où se tient le joueur.
L’idée des chercheurs était essentiellement de donner l’impression que la sphère est reliée au cœur du joueur et bat donc à son rythme, par une combinaison de stimuli visuels, auditifs et tactiles. À la fin du jeu, après que le joueur ait détruit toutes les cibles, il lui est demandé de couper le fil qui le relie à l’objet sphérique, à l’aide d’une paire de ciseaux qui apparaît dans l’environnement simulé et qui peut être manipulée via le contrôleur. Si le jeu produit l’effet souhaité (c’est-à-dire donner l’impression que la sphère est connectée au cœur de l’utilisateur), le joueur doit éprouver une sensation étrange en coupant le fil ou peut même hésiter à le faire.
« Dans notre système, les informations biologiques d’un utilisateur sont liées aux données audiovisuelles présentées », expliquent les chercheurs dans leur article. « Un joueur joue avec des objets virtuels par le biais de mouvements physiques du corps et le système renvoie les informations biométriques et fournit la modification des données biométriques par le biais de la présentation sensorielle à l’utilisateur ».
Le nouveau jeu de RV multisensoriel a été développé en utilisant Unity, une plateforme renommée pour la conception de jeux vidéo créée par Unity Technology Inc. Les dispositifs utilisés pour mettre en œuvre le jeu comprennent un écran, un contrôleur et un système de suivi HTC Vive VR montés sur la tête, ainsi qu’un dispositif de présentation tactile qui a été intégré à l’intérieur de l’unité de contrôle. Les informations biométriques du joueur sont collectées à l’aide d’un stéthoscope avec microphone intégré, qui est connecté à un PC par un mini-câble stéréo. Pour réduire le bruit du microphone et améliorer la détection des battements de cœur du joueur, l’équipe a également utilisé un filtre passe-bas de 500 Hz.
À l’avenir, les chercheurs prévoient de mener d’autres études visant à évaluer l’efficacité de leur jeu à produire l’effet souhaité. Les résultats qu’ils ont obtenus jusqu’à présent semblent prometteurs, car la plupart des utilisateurs qui ont joué au jeu ont ressenti le lien entre le battement de leur cœur et l’objet sphérique dans l’environnement simulé.
Un utilisateur qui a essayé le jeu pour l’enquête préliminaire a déclaré : « La sphère (correspondant au cœur) est vivante parce que les changements dus au mouvement physique sont renvoyés par le retour tactile », ont écrit les chercheurs dans leur article. « Certains commentaires ont prévu que cela affecte la sensibilité, comme ‘j’ai un sentiment’ et ‘j’hésite à couper le fil à la fin' ». Comme tâches futures, outre l’évaluation des utilisateurs, l’amélioration de la vitesse d’exécution de l’analyse des informations biologiques dans le système sera significative pour sa mise en œuvre à plus grande échelle ».
https://techxplore.com/news/2020-10-virtual-reality-game-tactile-biometric.html
https://www.atlantis-press.com/journals/jrnal/125944524
