Futuro ‘Apple El hardware de Glass podría extruir contenido 3D AR y VR a partir de videos planos

Apple está desarrollando un sistema que podría generar entornos de realidad mixta o realidad virtual a partir de contenido de video plano, permitiendo a los usuarios recorrer y explorar clips que de otra manera solo serían bidimensionales.

Los usuarios pueden participar en una experiencia de SR en un dispositivo, ya sea un dispositivo de mano como un iPhone o iPad o un dispositivo montado en la cabeza como el que se rumorea “Apple Vidrio “. Podían interactuar con el entorno SR a través de uno o más sentidos, incluidos la vista, el gusto, el olfato y el tacto.

Sin embargo, la mayor parte de la patente se centra en un sistema que podría generar caracteres, objetos y entornos SR a partir de contenido de video plano. En otras palabras, podría convertir un programa de televisión en un entorno de realidad virtual que un usuario podría explorar con los dispositivos antes mencionados.

  

“Un usuario puede desear experimentar el contenido de video (p. Ej., Un episodio de televisión o una película) como si estuviera en la escena con los personajes. En otras palabras, el usuario desea ver el contenido de video como una experiencia de SR en lugar de simplemente ver el contenido de video en un televisor u otro dispositivo de visualización “, dice la patente.

Crédito: Apple

Crédito: Apple

Como Apple Observa que la mayor parte del contenido de SR se “crea minuciosamente” con anticipación y se agrega a una biblioteca de la que el usuario puede elegir. Sin embargo, la patente describe un método para generar reconstrucciones SR bajo demanda de contenido de video “aprovechando activos digitales” para trasladar “sin problemas y rápidamente” contenido plano a una experiencia SR.

El sistema funciona identificando un “realizador de trama” en una escena, sintetizando una descripción de escena y generando una reconstrucción de la escena “impulsando un primer activo digital asociado con el primer realizador de trama de acuerdo con la descripción de la escena para la escena”. ”

Como Apple señala, los activos digitales podrían corresponder a un modelo de videojuego para “efectuadores de la trama”, que define como personajes o actores en el contenido del video.

Si bien el sistema podría generar una reconstrucción de SR basada en el contenido de video, también podría extraer información del contenido de texto asociado y datos externos. Pueden ser fotos de actores en los videoclips, altura y medidas de los actores, varias vistas de una escena y otros datos.

“En algunas implementaciones, los activos digitales se generan sobre la marcha basándose, al menos en parte, en el contenido de video y los datos externos asociados con el contenido de video. En algunas implementaciones, los datos externos asociados con el contenido de video corresponden a imágenes de actores , altura y otras medidas de los actores, varias vistas (por ejemplo, vistas en planta, laterales, en perspectiva, etc.) de conjuntos y objetos, y / o similares ”, dice la patente.

Curiosamente, Apple también señala que un sistema de generación SR similar podría crear escenas interactivas basadas en audio y contenido asociado, incluidos audiolibros, dramas de radio y otro contenido de solo audio.

Varias porciones de la patente también detallan la distinción entre objetos de acción (u objetos con los que interactúa un personaje) y objetos inactivos. Esa distinción podría permitir que el sistema SR sepa de antemano qué tipo de objetos en una escena deben ser interactivos.

La patente enumera a Ian M. Richter, Daniel Ulbricht, Jean-Daniel E. Nahmias, Omar Elafifi y Peter Meier como inventores. De ellos, Meier ha trabajado en una patente de RA que cubre objetos en movimiento en tiempo real, y Richter ha sido nombrado inventor de un sistema montado en la cabeza que podría reconocer los gestos de la cabeza.

Apple presenta numerosas patentes semanalmente, y no hay garantía de que la tecnología descrita en ellas llegue alguna vez al mercado. Del mismo modo, las solicitudes de patente no dan ninguna indicación sobre cuándo Apple puede lanzar un nuevo producto con la tecnología.