Esta semana, pesquisadores da Microsoft e da Carnegie Mellon estão lançando o OmniTouch, um sistema que transforma qualquer superfície em uma tela sensível ao toque.
Composto por uma câmera com sensor de profundidade e um pico projetor baseado em laser (mais sobre isso em um segundo), a engenhoca parece uma versão de panqueca achatada do R2D2 e fica no ombro do usuário.
O usuário primeiro cria uma tela onde quiser – como uma mão, um braço, uma parede, uma mesa ou um bloco de papel – e então, como acontece com qualquer outra tela sensível ao toque, usa os dedos para navegar nela.
A tela é criada com o pico projetor baseado em laser, que é um sistema eletrônico colocado em um minúsculo chip. Ele transforma a imagem em um sinal eletrônico, que então emite luzes laser de cores diferentes. Estes, por sua vez, são copiados e projetados por espelhos, pixel por pixel, na superfície selecionada.
A câmera com sensor de profundidade detecta então quando os dedos do usuário estão tocando a “tela” (a superfície que o usuário designou) e “pressionando” um botão nela.
Para que a tecnologia funcionasse, os pesquisadores precisavam ensinar o sistema a reconhecer os dedos, que são cruciais para a tecnologia porque criam telas, selecionam botões, ampliam o zoom e assim por diante. Eles dissecaram as qualidades dos dedos e desenvolveram um método para determinar quando um dedo estava “clicando” em alguma coisa.
Neste caso, estamos detectando proximidade em um nível muito preciso. O sistema decide que o dedo está tocando a superfície se estiver próximo o suficiente para estabelecer contato. Isso foi bastante complicado e usamos um mapa de profundidade para determinar a proximidade. Na prática, um dedo é visto como “clicado” quando a distância ao pairar cai para um centímetro ou menos acima de uma superfície, e conseguimos até manter o estado clicado para operações de arrastar.
A tecnologia foi revelada na UIST 2011, uma conferência sobre inovações nas formas como os humanos interagem com os computadores em Santa Bárbara, Califórnia, de 16 a 19 de outubro. Benko e Carnegie Mellon Ph.D. os alunos Chris Harrison e Andrew D. Wilson, da Microsoft, escreveram sobre a tecnologia neste artigo.
Assista ao vídeo para ver como os usuários podem criar uma tela, mover uma imagem na tela, aumentar e diminuir o zoom, pintar usando uma paleta de cores, selecionar botões em um menu e muito mais.
Este vídeo explica como o sistema aprendeu a identificar e rastrear o movimento dos dedos, a fim de detectar comandos no sistema.