PalmPad : Taper sur sa paume avec une seule caméra RGB
Une équipe de l'Université Tsinghua a développé PalmPad, une nouvelle technologie d'interaction en réalité mixte. Utilisant seulement une caméra RGB et un Arduino, PalmPad projette un clavier virtuel sur la paume de la main de l'utilisateur. L'utilisateur tape en touchant les touches virtuelles avec son index de l'autre main. Le système surmonte les limitations précédentes de suivi imprécis du bout des doigts et de mauvaise détection tactile grâce à un traitement vidéo sophistiqué et un CNN pour un positionnement précis du bout des doigts. Un Arduino UNO détecte le contact doigt-paume en utilisant des changements d'impédance, atteignant une précision de reconnaissance tactile de 97 %. PalmPad offre une approche pratique et innovante pour l'interaction en réalité mixte.