Investigadores de la Universidad de Binghamton, Universidad Estatal de Nueva York, han desarrollado una nueva tecnología que permite a los usuarios interactuar en un entorno de realidad virtual utilizando solo gestos con la boca.
La proliferación de pantallas accesibles de realidad virtual montadas en la cabeza ofrece a los usuarios experiencias visuales inmersivas realistas. Sin embargo, las pantallas montadas en la cabeza ocluyen la mitad superior de la cara del usuario y evitan el reconocimiento de la acción facial de toda la cara. Para combatir este problema, BinghamtonLa profesora universitaria de informática Lijun Yin y su equipo crearon un nuevo marco que interpreta los gestos de la boca como un medio para la interacción dentro de la realidad virtual en tiempo real.
El equipo de Yin probó la aplicación en un grupo de estudiantes de posgrado. Una vez que un usuario colocó una pantalla montada en la cabeza, se les presentó un juego simplista; el objetivo del juego era guiar al avatar del jugador alrededor de un bosque y comer comomuchos pasteles como sea posible. Los jugadores tuvieron que seleccionar su dirección de movimiento usando la rotación de la cabeza, moverse usando los gestos de la boca y solo podían comer el pastel sonriendo. El sistema fue capaz de describir y clasificar los movimientos de la boca del usuario, y logró altas tasas de reconocimiento correctas.El sistema también se ha demostrado y validado a través de una aplicación de realidad virtual en tiempo real.
"Esperamos que esto sea aplicable a más de una persona, tal vez dos. Piense en entrevistas y comunicación por Skype", dijo Yin. "Imagínese si se siente como si estuviera en el mismo espacio geométrico, cara a cara, y el programa de computadorapuede representar eficientemente sus expresiones faciales y replicarlas para que parezca real "
Aunque la tecnología todavía está en la fase de prototipo, Yin cree que su tecnología es aplicable a una gran cantidad de campos.
"El mundo virtual no es solo para entretenimiento. Por ejemplo, el cuidado de la salud usa la realidad virtual para ayudar a los pacientes discapacitados", dijo Yin. "Los profesionales médicos o incluso el personal militar pueden realizar ejercicios de entrenamiento que quizás no sea posible experimentar en realidadvida. Esta tecnología permite que la experiencia sea más realista ".
Los estudiantes Umur Aybars Ciftci y Xing Zhang contribuyeron a esta investigación.
El documento, "Reconocimiento e interacción de la acción facial parcialmente ocluida en aplicaciones de realidad virtual", se presentó en la Conferencia Internacional IEEE 2017 sobre Multimedia y Expo.
Fuente de la historia :
Materiales proporcionado por Universidad de Binghamton . Nota: El contenido puede ser editado por estilo y longitud.
Referencia del diario :
Cita esta página :