VISUALIZAÇÃO EM TEMPO REAL DA ESTRUTURA ESQUELÉTICA DE UMA MÃO HUMANA USANDO REALIDADE AUMENTADA

Resumo

Com o avanço e barateamento das câmeras de profundidade, novas aplicações são possíveis nas mais diversas áreas de conhecimento. Este artigo apresenta o desenvolvimento de um sistema de Realidade Aumentada para visualização em tempo real da estrutura esquelética de uma mão humana, utilizando para isso um sensor compacto de visão em profundidade: a câmera Leap Motion Controller. O objetivo é avaliar tanto a precisão como o tempo de resposta para a exibição da mão do usuário apenas com os ossos constituintes, sendo capaz de reproduzir tanto poses individual dos dedos como movimentos e posicionamento de toda a mão. Para garantir a eficiência da exibição do modelo em 3D, foi utilizado o motor de jogos Unity. O trabalho descreve como foi feito o mapeamento de cada uma das juntas sobre um modelo hierárquico de armadura de animação, que por sua vez altera a geometria de uma malha 3D de ossos humanos. Ao final, os resultados e as limitações técnicas desta abordagem são descritos, assim como possíveis trabalhos futuros.