En la Web ya circulan conceptos que combinan a Pokémon GO con el casco HoloLens mientras Microsoft trabaja para sumar más usuarios a Windows 10. La división de investigación de Redmond, sin embargo, sigue desarrollando tecnologías que podrían reescribir varias reglas en la realidad virtual, la realidad aumentada y la telepresencia. Hoy presentamos Fusion4D, un sistema de captura de movimientos complejos en alta definición, con filtrado automático de ruido y en tiempo real.
El reconocimiento de gestos, la captura de movimiento, las cámaras de alta velocidad y de extrema definición, junto con la destreza para exprimir al máximo estas herramientas, han inaugurado una nueva era en el desarrollo de películas, videojuegos, series y aplicaciones. Un ejemplo sólido es Hellblade, título que exploramos un poco más de cerca en abril pasado y cuyo detrás de escenas revela detalles técnicos impresionantes. La mejor noticia es que el hardware no viene solo: el software es cada vez más flexible, preciso e inteligente, lo que tarde o temprano permite lograr producciones de mayor calidad a un costo menor. Algunas tecnologías aún permanecen atrapadas en el laboratorio, pero gracias a divisiones como Microsoft Research podemos vislumbrar lo que viene. Hoy es el turno de Fusion4D.
¿Qué es Fusion4D?
La descripción oficial para Fusion4D es algo así como «captura de alto rendimiento de escenas desafiantes en tiempo real», pero esa introducción no hace justicia a lo que vemos en el vídeo. Básicamente, estamos ante un algoritmo capaz de realizar reconstrucciones coherentes y dinámicas de alta calidad en tiempo real. Son procesos muy complejos, en especial cuando consideramos «capturas no rígidas» con un alto perfil aleatorio, como por ejemplo, el movimiento de la falda en un vestido.
La demo y el modelo 3D
En la demo que presenta el vídeo, el modelo 3D fue generado a partir de ocho cámaras de profundidad, sobre el cual se combinan cuadros RGB, datos de profundidad y segmentación, asistiendo en el proceso de texturizado. La habilidad de aprendizaje en el algoritmo se traduce en un filtrado de ruido sorprendente.
Hacia una solución comercial
El hecho de no tener que establecer parámetros previos de configuración, y la posibilidad —aunque todavía remota— de abandonar los trajes de elastano (léase lycra o spandex), los puntos en el rostro y las luces brillantes, hacen de Fusion4D una tecnología que necesitamos vigilar paso a paso. Un dato curioso: varios de los investigadores que trabajaron en el proyecto abandonaron Microsoft para formar una compañía llamada PerceptiveIO. ¿Acaso veremos una solución comercial?
