El futuro iPhone puede preprocesar el video en el sensor de imagen para reducir el tama√Īo y reducir la demanda de energ√≠a

Apple est√° buscando formas de reducir la cantidad de procesamiento que un iPhone u otro dispositivo tiene que hacer en el sensor de imagen para producir videos de alta calidad, con el objetivo de ahorrar tanto el tama√Īo del archivo como la energ√≠a de la bater√≠a.

Actualmente las cámaras en iPhones, iPads o cualquier otro dispositivo, tienen un sensor de imagen que registra toda la luz que recibe. Luego, esos datos de video se pasan a un procesador que crea la imagen. Pero ese procesamiento en la CPU del dispositivo principal puede ser intensivo y hacer que la batería del dispositivo se agote rápidamente.

“Generaci√≥n de im√°genes est√°ticas con una c√°mara de eventos”, un nuevo

  

“> Solicitud de patente de EE. UU.

que propone procesar solo las partes de una imagen de video que han cambiado desde el cuadro anterior.

“Las c√°maras tradicionales utilizan sensores de imagen sincronizados para adquirir informaci√≥n visual de una escena”, dice la aplicaci√≥n. “Cada fotograma de datos que se registra normalmente se procesa posteriormente de alguna manera [and in] En muchas c√°maras tradicionales, cada cuadro de datos lleva informaci√≥n de todos los p√≠xeles “.

“Llevar informaci√≥n de todos los p√≠xeles a menudo conduce a la redundancia, y la redundancia generalmente aumenta a medida que aumenta la cantidad de contenido din√°mico en una escena”, contin√ļa. “A medida que los sensores de imagen utilizan una resoluci√≥n espacial y / o temporal m√°s alta, es muy probable que aumente la cantidad de datos incluidos en un cuadro”.

En otras palabras, a medida que las cámaras del iPhone obtienen una resolución más alta y las personas las usan para grabar videos más largos, aumenta el volumen de datos que se procesan.

“Los marcos con m√°s datos generalmente requieren hardware adicional con mayor capacitancia, lo que tiende a aumentar la complejidad, el costo y / o el consumo de energ√≠a”, dice la aplicaci√≥n. “Cuando el posprocesamiento se realiza en un dispositivo m√≥vil alimentado por bater√≠a, los marcos de posprocesamiento con una cantidad significativamente mayor de datos suelen agotar la bater√≠a del dispositivo m√≥vil mucho m√°s r√°pido”.

A continuaci√≥n, la aplicaci√≥n describe m√©todos en los que “una c√°mara de eventos indica cambios en p√≠xeles individuales”. En lugar de capturar todo, la “c√°mara genera datos en respuesta a la detecci√≥n de un cambio en su campo de visi√≥n”.

Normalmente, cuando una imagen se procesa y se convierte en un formato JPEG o similar, los p√≠xeles que no han cambiado se descartan para que el tama√Īo del archivo se pueda reducir. En AppleSeg√ļn la propuesta, esos p√≠xeles ni siquiera llegar√≠an al procesador.

Detalle de la patente que describe la detección de cambios de píxeles

Detalle de la patente que describe la detección de cambios de píxeles

“[Pixel]sensores de eventos que detectan cambios en p√≠xeles individuales [can thereby allow] p√≠xeles individuales para operar de forma aut√≥noma “, contin√ļa.” Los p√≠xeles que no registran cambios en su intensidad no producen datos. Como resultado, los p√≠xeles que corresponden a objetos est√°ticos (por ejemplo, objetos que no se mueven) no activan una salida por el sensor de eventos de p√≠xeles, mientras que los p√≠xeles que corresponden a objetos variables (por ejemplo, objetos que se mueven) activan una salida por el sensor de eventos de p√≠xeles “.

La solicitud de patente se acredita a Aleksandr M. Movshovich y Arthur Yasheng Zhang. El primero tiene m√ļltiples patentes anteriores en im√°genes de televisi√≥n.