Os investigadores da Microsoft Research Asia e do Institute of Computing Technology estão a colaborar para verificar até que ponto as capacidades do Kinect em seguir os movimentos corporais podem ser usadas para reconhecer linguagem gestual. O blogue da Microsoft explica que os resultados iniciais mostram que a tecnologia do Kinect pode ajudar as pessoas que usam esta linguagem a melhor interagir com computadores, de uma forma semelhante ao que fazem os programas de reconhecimento de voz.
O sistema utiliza o Kinect para Windows e um Translation Mode que traduz a linguagem gestual para texto ou voz. Neste momento, é suportada a Lingagem Gestual Americana.
“Do nosso ponto de vista, a contribuição mais significante é que o projeto demonstra a possibilidade de reconhecer linguagem gestual com sensores 3D e 2D de baixo custo e já disponíveis [no mercado]”, afirmou o professor Xilin Chen, no blogue.