Integración de técnicas de interacción natural y multitáctil

Abstract

Interacción natural refiere a un conjunto de técnicas de Interacción Persona-Computadora que, al basarse en componentes naturales del usuario y su entorno, poseen la característica de ser invisibles (p.ej. interfaces basadas en gestos). Por otra parte, multitáctil refiere a aquellos sistemas capaces de ser manipulados mediante el contacto directo (p.ej. la pantalla de una tableta o un teléfono inteligente, una mesa inteligente, etc.). ANIMuS (A Natural Interactive MUltitouch Surface), como se le llamó a este proyecto, pertenece al área Interacción Persona-Computadora y busca estudiar la integración de técnicas multitáctil e interacción natural, teniendo como objetivo utilizar ambas en simultáneo como principal vía de interacción del usuario con el sistema, aumentando una interfaz multitáctil con interacción natural. Para lograr dicho objetivo, se busca conformar un framework sobre el que se puedan desarrollar distintas aplicaciones que se beneficien de este tipo de interacción híbrida. Por lo tanto, la idea conceptual por detrás de este proyecto es obtener una superficie interactiva con la que el usuario pueda interactuar naturalmente, ya sea mediante gestos corporales y/o mediante el contacto directo. La solución integra varios componentes, tanto de hardware como de software . Por un lado, se incluyen sensores Microsoft Kinect mediante los que se puede hacer un seguimiento de los movimientos corporales del usuario, también conocido como body-tracking . Mientras que por otro lado, se cuenta con sensores Leap Motion que permiten realizar un seguimiento más preciso de los movimientos de las manos y los dedos del usuario, comúnmente conocidos como finger-tracking . De esta forma, se pretende sacar el mayor provecho de las cualidades de cada uno de estos sensores. Adicionalmente, se integran múltiples componentes software como bibliotecas de visión por computadora para análisis de imágenes y mapas de profundidad, bibliotecas de aprendizaje automático para reconocimiento de gestos, entre otras. Este trabajo se enmarca en otro de mayor alcance denominado CUIN: Computación Ubicua e Interacción Natural , llevado a cabo por docentes del Laboratorio de Medios del Instituto de Computación (InCo) de la Facultad de Ingeniería de la Universidad de la República en conjunto con investigadores del Centro de Investigación Básica en Psicología (CIBPsi). El proyecto tiene como objetivo investigar y analizar la incorporación de las técnicas anteriormente mencionadas a todos los componentes típicos de una oficina (paredes, mesas, etc.) para obtener una oficina futurista en la que la interacción sea completamente ubicua y lo suficientemente interactiva como para que pueda ser manipulada completamente de forma natural.