Siéntate en el Magic Bench de Disney Research y es posible que tengas una mano de elefante con un orbe resplandeciente. O puede que te llueva. O un pequeño burro podría pasear y patear el banco.
Es una experiencia combinada de realidad aumentada y mixta, pero no del tipo que implica usar una pantalla montada en la cabeza o usar un dispositivo portátil. En cambio, el entorno está instrumentado en lugar del individuo, lo que permite a las personas compartir la experiencia mágica en grupo.
Las personas sentadas en el Magic Bench pueden verse a sí mismas en una imagen reflejada en una pantalla grande frente a ellas, creando un punto de vista en tercera persona. La escena se reconstruye utilizando un sensor de profundidad, lo que permite a los participantes ocupar el mismo 3Despacio como un personaje u objeto generado por computadora, en lugar de superponer un video a otro.
"Esta plataforma crea una experiencia inmersiva multisensorial en la que un grupo puede interactuar directamente con un personaje animado", dijo Moshe Mahler, artista digital principal de Disney Research. "Nuestro mantra para este proyecto fue: escuchar a un personaje venir, verellos entran al espacio y sienten que se sientan a tu lado "
El equipo de investigación presentará y demostrará el Magic Bench en SIGGRAPH 2017, la Conferencia de gráficos por computadora y técnicas interactivas, que comenzará el 30 de julio en Los Ángeles.
Los investigadores utilizaron una cámara a color y un sensor de profundidad para crear una reconstrucción 3D en tiempo real, texturizada con video HD del banco, los alrededores y los participantes. El algoritmo reconstruye la escena, alineando la información de la cámara RGB con la información del sensor de profundidad.
Para eliminar las sombras de profundidad que ocurren en áreas donde el sensor de profundidad no tiene una línea de visión correspondiente con la cámara a color, un algoritmo modificado crea un fondo 2D. Las reconstrucciones 3D y 2D se colocan en el espacio virtual y se completan con personajes y efectos 3Dde tal manera que el renderizado en tiempo real resultante sea un compuesto continuo, totalmente capaz de interactuar con física virtual, luces y sombras.
"El banco en sí mismo juega un papel crítico", dijo Mahler. "No solo contiene actuadores hápticos, sino que nos limita varios problemas de una manera elegante. Conocemos la ubicación y el número de participantes, y podemos inferir sumirada. Crea un escenario con un primer plano y un fondo, con los participantes sentados en el medio. Incluso sirve como controlador; la experiencia de realidad mixta no comienza hasta que alguien se sienta y diferentes formaciones de personas sentadas crean diferentes tiposde experiencias "
The Magic Bench fue obra de un gran equipo de científicos de Disney Research. Además de Mahler, incluye a Kyna McIntosh, John Mars, James Krahe, Jim McCann, Alexander Rivera, Jake Marsico, Ali Israr y Shawn Lawson.
Fuente de la historia :
Materiales proporcionados por Investigación de Disney . Nota: El contenido puede ser editado por estilo y longitud.
Cite esta página :