Un utilisateur portant deux bracelets TapID est capable de jouer d’un piano virtuel.
À l’heure actuelle, si vous voulez qu’une installation de RV « sache » ce que font vos doigts, vous devez soit porter des gants spéciaux, soit placer vos mains directement devant une caméra. Un nouveau système, cependant, permet de garder un œil sur les doigts grâce à un simple bracelet.
Connue sous le nom de TapID, cette technologie expérimentale est développée par une équipe de l’institut de recherche suisse ETH Zurich. Elle se base sur le fait que lorsqu’un de nos doigts tape sur une surface dure, il produit une vibration qui lui est propre.
Dans le système TapID, un bracelet en caoutchouc équipé de deux accéléromètres détecte ces vibrations lorsqu’elles se propagent dans les os du poignet. Un logiciel basé sur l’apprentissage automatique, installé sur un ordinateur relié au système, analyse les données du bracelet en temps réel. Il détermine quel doigt est tapé à quel moment, en fonction des profils vibratoires détectés.
Vue rapprochée du prototype actuel du bracelet TapID
Si l’utilisateur porte des lunettes VR, une interface virtuelle, comme un piano ou un clavier d’ordinateur, peut être projetée sur une surface du monde réel, comme un bureau. Une caméra intégrée aux lunettes permet alors de savoir quel doigt est adjacent à quelle touche, de sorte que le système sait quelle touche est pressée lorsque le bracelet TapID détecte une pression du doigt.
Bien qu’il existe des dispositifs de RV qui utilisent uniquement des caméras pour détecter les pressions du doigt, ils ne sont généralement pas aussi sensibles que les claviers physiques. En revanche, lors de tests effectués en laboratoire sur 18 volontaires, TapID s’est avéré beaucoup plus performant que ces systèmes. Une fois que la technologie aura été perfectionnée, elle pourrait être intégrée non seulement à un bracelet autonome, mais aussi à des dispositifs portables existants tels que les montres intelligentes.
https://ethz.ch/en/news-and-events/eth-news/news/2021/03/virtual-reality-at-your-fingertips.html
https://siplab.org/projects/TapID
