Apple AR puede grabar sonido espacial completo necesitando menos micrófonos

Applees impulso para tener Apple El hardware AR con audio de alta calidad ha llevado a la investigación sobre cómo crear un sonido espacial completo sin que los desarrolladores tengan que grabar con una gran cantidad de micrófonos.

Apple ha perseguido persistentemente la idea de que Apple La RA requiere un excelente audio y video en “Apple Glass “u otros dispositivos. Anteriormente, esa unidad incluía el desarrollo de un nuevo formato de audio, pero ahora Apple está analizando más a fondo cómo se puede grabar dicho audio.

El “Procesamiento de señales de audio para audio espacial” es una patente recientemente otorgada que se ocupa de realizar grabaciones de audio de alta calidad que funcionen en un espacio 3D, sin necesidad necesariamente de una gran cantidad de equipo.

  

“La reproducción de audio en 3D se puede describir como el procesamiento de una señal de audio (como una señal de micrófono u otro contenido de audio grabado)”, dice Apple, “para producir un sonido producido por altavoces estéreo, altavoces de sonido envolvente, conjuntos de altavoces o auriculares que el oyente percibe como proveniente de una dirección particular o alrededor del oyente en un espacio tridimensional”.

“Por ejemplo”, continúa la patente, “una o más de estas fuentes de sonido virtuales se pueden generar en un programa de sonido que el oyente percibirá como detrás, por encima o por debajo del oyente, o panorámicas desde un lado del oyente. a otro.”

El beneficio del audio 3D es que hace Apple AR una experiencia más envolvente y realista. Sin emabargo, Apple dice que la forma en que se captura este audio se puede hacer de dos maneras, a las que se refiere como lineal o paramétrica.

En esencia, el método lineal significa grabar varios micrófonos que en realidad están dispuestos en un espacio físico 3D. El método paramétrico significa calcular cómo reproducir audio para que parezca haber sido grabado en dicho entorno.

“[In linear systems a] Es posible que se necesite una gran cantidad de micrófonos para lograr una resolución espacial de calidad “, dice la patente.” Sin embargo, la cantidad de micrófonos que están presentes en los dispositivos puede estar limitada por factores físicos (por ejemplo, espacio y consumo de energía) y factores económicos ( por ejemplo, costo y complejidad del dispositivo) “.

Linear tiene la ventaja de que coloca “una carga computacional ligera en un procesador”, porque el elemento espacial proviene de donde se grabó el audio en relación con todos los micrófonos.

“En contraste”, afirma Apple, “el procesamiento de sonido espacial paramétrico puede ofrecer una resolución espacial considerablemente mejorada para un recuento de micrófonos relativamente bajo, lo que se logra haciendo algunas suposiciones subyacentes sobre el campo de sonido que se está grabando”.

Detalle de la patente que muestra un flujo de trabajo de procesamiento para tomar sonido grabado y reproducirlo en un espacio 3D

Detalle de la patente que muestra un flujo de trabajo de procesamiento para tomar sonido grabado y reproducirlo en un espacio 3D

“Por ejemplo, una de esas suposiciones es que, en cada momento y en cada frecuencia (es decir, en cada subbanda procesada) solo hay una fuente de sonido activa”, continúa la patente. ”

Sin embargo, eso no es necesariamente cierto, y cuando “esta suposición se viola, en condiciones moderadamente reverberantes, altamente reverberantes o difusas, la salida de audio resultante puede contaminarse con artefactos de procesamiento no deseados”.

En consecuencia, la patente trata sobre métodos de procesamiento de audio para “aumentar la resolución espacial que se puede lograr con una matriz de micrófonos con un número bajo de micrófonos, al tiempo que se reduce la probabilidad de procesar artefactos y se reduce el costo o la complejidad del procesamiento”.

AppleLa patente detalla cómo se puede procesar cualquier audio 3D para reproducirlo a través de cualquier sistema, no específicamente AR. “El sistema (que puede adoptar la forma de un dispositivo o artículo de fabricación) puede ser, por ejemplo, una computadora portátil, una computadora de escritorio, un teléfono móvil, un teléfono inteligente, una tableta, un altavoz inteligente o un sistema de información y entretenimiento. sistema para un automóvil u otro vehículo “, dice.

Ya tenemos el 16MacBook Pro de pulgadas que afirma tener parlantes con calidad de estudio y parlantes mejorados en comparación con los modelos anteriores en su chasis. Aplicando AppleLa nueva patente podría significar que los modelos futuros podrán grabar audio en 3D sin una serie de micrófonos externos.

Esta patente se acredita a ocho inventores, incluidos Juha O. Merimaa, Martin E. Johnson y Joshua D. Atkins. Estos tres se han enumerado anteriormente en aplicaciones relacionadas que tienen que ver con la producción de audio 3D preciso para AR.