PalmPad: Teclado na Palma da Mão com uma Única Câmera RGB

Uma equipe da Universidade Tsinghua desenvolveu o PalmPad, uma nova tecnologia de interação de realidade mista. Usando apenas uma câmera RGB e um Arduino, o PalmPad projeta um teclado virtual na palma da mão do usuário. O usuário digita tocando nas teclas virtuais com o dedo indicador da mão oposta. O sistema supera as limitações anteriores de rastreamento de ponta dos dedos não confiável e detecção de toque ruim por meio de processamento de vídeo sofisticado e uma CNN para posicionamento preciso da ponta dos dedos. Um Arduino UNO detecta o contato dedo-palma usando mudanças de impedância, atingindo 97% de precisão de reconhecimento de toque. O PalmPad oferece uma abordagem conveniente e inovadora para interação de realidade mista.