mayo 14, 2021

El video volumétrico se está convirtiendo en un contenido clave para la realidad virtual

Desde una perspectiva técnica, ha habido pocos cambios en la forma en que hemos consumido los medios durante más de 100 años. El consumo de medios tradicionales, tanto en video 2D como 3D, es en gran medida pasivo. No le da la capacidad de moverse o interactuar con la escena. Así es como el video volumétrico se está convirtiendo en un contenido clave para la realidad virtual.

Hemos tenido 130 años de película, pero en la superficie, el arte y la ciencia de hacer películas y animaciones han experimentado una enorme evolución.

La escena de realidad virtual (VR) y realidad aumentada (AR) en rápido crecimiento está preparada para revolucionar la forma en que consumimos los medios.

Con la ayuda de la realidad mixta, ya no somos solo espectadores pasivos. Podemos recorrer virtualmente las escenas e interactuar con los contenidos de una manera realista y atractiva.

Muchas de las experiencias actuales de realidad virtual todavía ofrecen grados limitados de libertad.

Por ejemplo, un video 360 tradicional renderizado en realidad virtual todavía es visible solo desde una única perspectiva. La posición del camarógrafo lo guía a través de la experiencia. No te da la libertad de explorar completamente el entorno por tu cuenta.

Cómo aportar contenido de realidad virtual más atractivo y realista

La solución para crear una mayor inmersión en la realidad virtual es el video volumétrico. La tecnología de captura volumétrica le permite capturar simultáneamente imágenes de personas y objetos reales con muchas cámaras.

Capture genera modelos 3D hiperrealistas que se mueven de forma natural y orgánica. Nos permite ver objetos en cualquier momento y en ángulo, con seis grados de libertad.

La configuración para la adquisición volumétrica requiere una amplia gama de cámaras e iluminación capaces de detectar una adquisición de 360 ​​grados en profundidad.

La configuración también requiere un procesador que combine todas las imágenes. El procesamiento puede llevar muchas horas incluso con tarjetas gráficas de gama alta.

Sin embargo, el doloroso proceso de instalación y procesamiento son recompensados ​​por los modelos 3D de la más alta calidad. Estos modelos de alta calidad se están convirtiendo en el núcleo de la realidad virtual.

El uso de la tecnología de captura de video volumétrico ha explotado con el surgimiento de la realidad virtual.

La necesidad de una mayor inmersión y personajes realistas en la realidad virtual ha hecho que muchos productores de contenido confíen cada vez más en el formato volumétrico.

El video volumétrico que se muestra en realidad virtual.

La popularidad del video volumétrico ha visto surgir muchas nuevas empresas que ahora brindan servicios de captura de video volumétrico. Todos tienen diferentes enfoques y configuraciones. La industria está creciendo a un ritmo tal que, según una investigación de mercado, se espera que tenga un valor de $ 2,78 mil millones para 2023.

Adquisición volumétrica

A pesar de su creciente popularidad, la adquisición volumétrica todavía está experimentando algunos cuellos de botella en su implementación. El costo y la portabilidad son los principales problemas que limitan la adopción. Sin embargo, ya podemos ver que están llegando mejoras de hardware y software que probablemente reducirán los costos y la complejidad al aumentar la facilidad de uso.

A medida que la realidad virtual se propague lentamente a la corriente principal, la tecnología se convertirá en la razón de ser.

Los productores de contenido de realidad virtual y realidad virtual encontrarán indispensable cumplir con las rigurosas demandas de inmersión y realismo.

Cómo funciona la captura de video volumétrica

Configuración de captura volumétrica de Microsoft.

La captura de video volumétrica funciona con el mismo principio de fotogrametría y solo graba objetos en movimiento.

Las resoluciones de las cámaras utilizadas en la adquisición volumétrica varían, pero capturan grandes cantidades de datos que pueden tardar una eternidad en procesarse.

Varias cámaras capturan la escena desde diferentes ángulos en estudios de adquisición volumétrica especialmente diseñados. Genere una verdadera representación 3D del espacio. Existen varios sistemas de captura de video volumétrico, por ejemplo Intel Capture o Microsoft Mixed Reality Studios.

El estudio está envuelto en una pantalla verde y una gran instalación fotográfica. Capture múltiples vistas de la persona parada o actuando en el medio.

Una vez que se han registrado los movimientos de la persona, puede limpiar todas las cosas no deseadas.

Potente software de computadora interpola y triangula información visual superpuesta. El software de la computadora genera una llamada nube de puntos. La nube de puntos se compone de varios puntos en el espacio que contienen información geométrica y de profundidad.

Los datos generados por el software de la computadora siguen siendo en gran medida una matriz «ruidosa» o una representación del original.

Por lo tanto, los datos deben filtrarse y pulirse conectando los puntos finos y generando mallas 3D más familiares. Los datos tendrán las texturas apropiadas de la captura volumétrica aplicada a ellos.

El proceso de filtrado de nubes de puntos no está completamente automatizado en algunas configuraciones de adquisición volumétrica y puede implicar una limpieza y corrección manual.

Software de edición de video volumétrico.

Los píxeles que contienen profundidad y color son el producto final.

El contenido que creó puede ser para realidad virtual, pero en realidad no se limita a él. Puede reutilizar su creación en cualquier plataforma, incluida AR o en la web.

Los recursos virtuales creados por adquisición volumétrica simplifican la creación de contenido virtual. Las personas pueden usarlos para crear nuevas historias o imágenes sin depender de un equipo o estar físicamente presentes en el set.

Desafíos con la captura de video volumétrica

Intel ha construido el estudio de video volumétrico más grande del mundo.

Si bien las oportunidades para videos volumétricos son ilimitadas gracias al crecimiento en la adopción de la realidad virtual, la tecnología aún plantea un problema práctico de cambio.

El cambio tiene que ver principalmente con los datos. Las cámaras en los sistemas adquieren grandes cantidades de datos. En consecuencia, los creadores de contenido volumétrico tienen que lidiar con algunas limitaciones casi debilitantes.

A menudo, estas restricciones pueden limitar el potencial y el alcance del uso de la tecnología de video volumétrico en diferentes dispositivos.

Esperamos que este desafío se aborde pronto a través de mejoras e innovaciones de hardware y software.

Los creadores de contenido que trabajan con tecnología de captura volumétrica también enfrentan los desafíos del flujo de trabajo.

Los creadores tienen que trabajar con una gran cantidad de software de posproducción para combinar cosas y simplificar el flujo de trabajo.

La mayoría de estas opciones de punto juntos son software patentado.

Además del desafío de las herramientas de software, el flujo de trabajo de video volumétrico también enfrentará un desafío «personas y talentos». Tienes que formar un equipo colaborativo con habilidades diferentes y especializadas para ver el proyecto.

Nuevos enfoques para nuevos jugadores.

Software de adquisición volumétrica y calibración automática de 4 Microsoft Azure Kinect.

Varias nuevas empresas están invirtiendo en videos volumétricos y están planteando enfoques más nuevos y más simples.

EF EVE dot com ofrece una configuración de adquisición volumétrica mediante el uso de múltiples Microsoft Azure Kinect y otras cámaras 3D populares.

EF EVE es actualmente el único software en el mercado que puede calibrar automáticamente hasta 10 sensores.

El sistema EF EVE le permite grabar, editar, exportar y publicar videos volumétricos a través de su software Volcapp y Creator. El producto creó un flujo de trabajo lineal que permite a los creadores realizar todas las tareas bajo un mismo techo.

Este tipo de compañías de software de video volumétrico están trayendo configuraciones más asequibles y portátiles que están democratizando la tecnología de captura de video volumétrico. Con los esfuerzos de EF EVE y otras compañías de software, este tipo de producción de video volumétrico será accesible para cientos de nuevas compañías e instituciones, ¡y podría ser suyo también!

Crédito de la imagen: David Attenborough, «Hold the World».

Ieva Stelingyte

Desde 2014, mi vida cotidiana implica trabajar con la adquisición volumétrica y la creación de videos volumétricos para Web, VR y AR. Soy cofundador de EF EVE.

Deja una respuesta

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *