¿La inteligencia artificial está haciendo estallar la cámara de tu teléfono?

Desde el nacimiento de los chips de IA para teléfonos móviles, esta serie ha rastreado, analizado e informado muchos cambios nuevos en el campo de los teléfonos móviles. Pero si me pidieran que resumiera dónde ha ocurrido el mayor cambio desde la colisión de la IA y los teléfonos móviles, tal vez solo haya una respuesta: la cámara.

Desde un punto de vista de lógica técnica, los teléfonos móviles equipados con unidades de procesamiento aritmético de IA, combinados con las capacidades de procesamiento de imágenes de sus propias GPU, tienen las mejoras más significativas en la generación, el reconocimiento y el procesamiento de contenido de imágenes. Ya sean videos de belleza, belleza o belleza, los algoritmos pueden brindarle belleza.

Pero, de hecho, las empresas confidenciales de alto nivel adoptan invariablemente la IA, y puede haber contradicciones industriales y problemas prácticos más profundos. La IA de los teléfonos móviles aporta más que simples mejoras, como “fotos más atractivas”.

Haremos referencia a Huawei Mate 10, iPhone X y Google Pixel 2, tres smartphones con capacidades de IA y unidades informáticas, para discutir los cambios que la IA ha traído a las funciones de cámara y disparo de los teléfonos móviles.

Alguna vez pensamos que los teléfonos móviles solo podían hacer llamadas y enviar mensajes de texto. Luego, con fuerza, los teléfonos móviles se convirtieron en los teléfonos inteligentes "universales" de hoy. Las cámaras pueden estar experimentando una explosión similar con la llegada de la IA.

La fotografía móvil ha entrado en aguas profundas y sólo la IA puede crear diferencias.

¿Por qué los principales teléfonos insignia de Apple, Google y Huawei anunciaron su entrada a la era de la IA en tan solo unos meses?

La razón más directa es obviamente que la guerra de capacidades fotográficas entre máquinas de alta gama es inevitable cada año, y ahora ha entrado en una etapa extremadamente feroz de bayoneta roja.

Algunas personas creen que la Ley de Moore está a punto de fallar en el hardware óptico y las unidades de cámara de los teléfonos móviles. A medida que las cámaras con lentes duales, grandes aperturas y más de 10 millones de píxeles se han convertido en equipo estándar, la comunidad central de cámaras parece haberse solidificado. Sin embargo, los teléfonos móviles todavía tienen que producirse y mejorarse cada año. Lo que es aún más aterrador es que en los teléfonos de gama alta, la parte de la cámara es absolutamente sangrienta y no debe dejarse de lado; también es un dolor de cabeza para los desarrolladores y gerentes de producto detrás de los teléfonos móviles.

Incluso el líder Apple ha tenido problemas con las cámaras en los últimos años. Incluso si abre las fotos en algunos sitios web de reseñas profesionales, es posible que los usuarios comunes no puedan notar la diferencia entre las dos generaciones de modelos y los modelos de la competencia.

Después de todo, no todo el mundo es fotógrafo y artista con una resolución tan detallada. Entonces, para que los consumidores sigan percibiendo que las capacidades de la cámara están cambiando, tienen que encontrar una manera de salir de la unidad de la cámara, por lo que la IA parece ser la mejor opción.

La introducción de la tecnología de inteligencia artificial puede significar que los teléfonos móviles puedan depender de cambios en el hardware básico y una gran cantidad de algoritmos para ayudar a mejorar la experiencia de disparo y grabación. Crea más formas de jugar y una experiencia más sencilla, y deshazte del enredo interminable en algunas áreas como la apertura y los píxeles. Para los fabricantes de teléfonos móviles ansiosos por nuevos puntos de crecimiento del consumo, esto es definitivamente una sorpresa.

Más importante aún, existen muchos modos y métodos para aplicar la potencia informática y los algoritmos de la IA en la grabación de fotografías con teléfonos móviles. Es difícil imaginar que un buque insignia desarrollado en secreto se quedara atrapado en los detalles de las aplicaciones de IA. Esto ya se puede ver en la diferenciación entre Huawei Mate 10 y iPhone 8/X, y esto es sólo el comienzo. A medida que maduren más tecnologías y ecología del desarrollo, la brecha entre los dos modelos emblemáticos no hará más que ampliarse. Esto es lo que quieren los fabricantes de teléfonos móviles.

Del amargo mar de la competencia homogénea, me temo que solo podemos confiar en la IA. Entonces, la IA está llegando. ...

Batalla decisiva: algoritmos y capacidades de hardware para llenar escenas especiales

Por supuesto, la IA puede cambiar las batallas de disparos móviles. Esto de ninguna manera significa que la lucha no continuará.

De hecho, antes de comenzar una nueva jugabilidad, la última batalla filmada por la IA para teléfonos móviles todavía se centrará en el campo de batalla que los teléfonos móviles convencionales han estado atacando durante muchos años: el rodaje de escenas especiales.

Las llamadas escenas especiales aquí incluyen escenas nocturnas, luz intensa, luz oscura, captura dinámica y hay muchos ejemplos de aplicaciones específicas. Debido a que las cámaras de los teléfonos móviles están destinadas a no tener profundidad, no pueden soportar los efectos de imagen en entornos de luz extrema como las cámaras SLR. Por lo tanto, disparar en entornos oscuros y con mucha luz se ha convertido poco a poco en un elemento básico a la hora de evaluar las capacidades de la cámara de un teléfono móvil.

Si observa la clasificación de DxOMARK de resultados de disparos con teléfonos móviles, encontrará que los cinco primeros están básicamente ocupados por teléfonos con IA. La importante incorporación a las capacidades de la cámara de estos teléfonos móviles proviene de la capacidad del algoritmo para capturar y equilibrar el entorno de iluminación. Por ejemplo, Google Pixel 2 utilizará algoritmos complejos, como dividir la información recopilada por la cámara y módulos de aprendizaje profundo, para lograr efectos mentales y volver a dibujar la fuente de luz. Por eso obtuvimos altas calificaciones en el procesamiento de luz blanca.

En esta imagen de evaluación de DxOMARK, puede ver que con la ayuda del algoritmo AI, la relación entre la luz y la sombra del teléfono insignia ha mejorado significativamente en comparación con el modo óptico puro anterior. especialmente en la correspondencia de la relación estructural entre luz y sombra superior.

La tecnología de captura algorítmica no solo se utiliza en fotografía estática, sino también en entornos en movimiento de alta velocidad para lograr un enfoque y reconocimiento + disparo a ultra alta velocidad en entornos oscuros.

La grabación con IA+ desde un teléfono móvil también puede lograr una belleza dinámica y un embellecimiento de vídeo bajo movimientos complejos y una luz especial. Utilizando algoritmos y hardware subyacentes, los teléfonos inteligentes pueden lograr muchas funciones que no se pueden lograr solo con las cámaras.

Pero esto es sólo una promoción. El verdadero significado de la llegada de la IA es que ha cambiado mucho el llamado "sentido común"...

Salvador masculino heterosexual: utilice la capacidad de reconocimiento de la IA para liberar a la humanidad.

Por favor, asume que eres un hombre heterosexual al que no le gusta tomar fotografías, pero ama a su novia... ¿Cuál es tu primer sentimiento cuando usas un teléfono móvil caro para tomar fotografías de tu novia?

¿Estás feliz? ¿Extraño? No, tu primera sensación es que es demasiado complicado y estás cansado. Descubrirás que hay muchas funciones en el teléfono móvil, a veces HDR, a veces belleza y cuidado de la piel, a veces gran apertura para desenfocar el fondo, a veces modo de profundidad de campo... Si pillas a alguien con mal genio, lo harás. Tira el teléfono o a tu novia.

De hecho, se generarán operaciones tan complejas y nombres propios. Porque para poder fotografiar diferentes objetos y escenas, los teléfonos móviles deben imitar el modo de la cámara y ofrecer diferentes estrategias de exposición, balance de blancos y enfoque. Pero más funciones significan operaciones más complejas y todavía hay más personas discapacitadas en el mundo. ¿Se puede omitir este paso?

Quizás algo muy interesante acerca de la incorporación de la IA a los teléfonos móviles es que una de las principales capacidades de la IA es reconocer y comprender imágenes. En otras palabras, activar automáticamente las funciones correspondientes a través de la información de la imagen reconocida puede significar que los hombres heterosexuales que son incompetentes para tomar fotografías pueden ser liberados.

Por ejemplo, el Pixel 2 de Google hace un buen uso de las capacidades de reconocimiento de IA para tomar fotografías. Escondido en su unidad de cámara hay un algoritmo de red neuronal que se utiliza específicamente para identificar información sobre las personas fotografiadas. Luego se transmite al backend para el procesamiento de imágenes por etapas correspondiente.

Por supuesto, el objetivo principal de la tecnología de Google es permitir que la cámara obtenga la capacidad de desenfocar el fondo de fotografías de belleza con doble cámara. El reconocimiento + disparo del Huawei Mate 10, que es el modo de "fotografía inteligente" que promueve, parece ser una solución más radical. El método de procesamiento del Mate 10 consiste en utilizar la NPU para conocer de antemano las características de información de la imagen, obteniendo así la capacidad de clasificar los objetos fotografiados. Luego organízalo en 13 modos de fotografía.

Cuando la cámara activa este modo mientras dispara, el teléfono se ajustará automáticamente al modo correspondiente.

De hecho, es probable que este modo de reconocer primero y luego disparar se convierta en un estándar común en un corto período de tiempo, reemplazando incluso algunas funciones de uso común. Después de todo, en nuestra vida diaria y social, el propósito y el efecto esperado de tomar fotografías son muy consistentes. Resumir estas características a través de las capacidades de aprendizaje profundo que brinda la IA y cumplir de manera inteligente las expectativas de los usuarios puede ser la norma en la fotografía del futuro.

Tal vez en un futuro cercano, cuando vayas a la playa, esté lloviendo, encuentres neblina en el área escénica y no haya grandes estrellas en Hollywood, puedas usar IA para crear cielos azules, blancos Nubes, montañas verdes y aguas verdes, e incluso ocasionalmente obtienes algunas estrellas. .....

Por supuesto, las capacidades de reconocimiento y disparo de la IA realmente deberían ser liberadas por los ancianos, los niños y la mayoría de las personas comunes y corrientes que sólo ocasionalmente usan sus teléfonos móviles para tomar fotografías. Después de todo, la mayoría de nosotros no tenemos tiempo para aprender cursos complejos y perfeccionar nuestra magnífica estética, pero aún esperamos que los momentos cuidadosamente preparados puedan dejar recuerdos más hermosos.

La IA hace que el mundo sea más justo, tal vez.

El big bang que ha ocurrido: las cámaras no sirven sólo para tomar fotografías.

Los dos modos de cámara AI+ visibles se presentan arriba: disparo con elevación AI y disparo con cambio AI. La IA también brinda a las cámaras otro tipo de empoderamiento: no solo para disparar.

Actualmente hay dos ideas sobre esta función: la primera, representada por el iPhone X, se centra en las capacidades de percepción y combina cámaras y componentes de detección para producir nuevas experiencias y funciones.

Además del nuevo sensor, la cámara del iPhone X también añade un sistema de sensores bastante complejo. Especialmente en la cámara frontal, la cámara de profundidad original en "Bangs" se utiliza para realizar identificación biométrica y captura dinámica, y para realizar funciones especiales como Animoji y efectos de iluminación de retratos.

Además, Face ID también utiliza un reconocimiento de luz estructurado funcional similar. El sensor de iluminación también ayuda a los usuarios a desbloquear el teléfono en condiciones de poca luz. Esta idea puede significar que en el futuro las cámaras no sólo "verán" sino también "percibirán" el mundo exterior. En la actualidad, las únicas funciones son el reconocimiento facial y algunas funciones especiales, pero no debería faltar mucho para desarrollar más funciones utilizando hardware y algoritmos.

Otro modelo consiste en obtener capacidades de aprendizaje de datos y crecimiento de agentes a través de las capacidades de visión artificial de la propia cámara. Las cámaras de IA con memoria y capacidades de aprendizaje no solo registran información de la imagen, sino que también completan el aprendizaje y la comprensión de esta información a nivel local. Adaptándose así a los hábitos del usuario y consiguiendo una mejor experiencia de disparo.

Ambos métodos significan que la IA de los teléfonos móviles aporta algo más que mejoras en las capacidades de la cámara. En cambio, las cámaras son un método de recopilación de información y se incorporan a un sistema de mayor capacidad. De esta manera, cultivar la capacidad del teléfono móvil para identificar, procesar múltiples datos y generar contenido con precisión es crucial para el futuro.

Quizás el verdadero valor que la IA móvil aporta al mundo de los gráficos se hará evidente cuando los desarrolladores comiencen a pensar colectivamente en lo que significan estas capacidades.

La IA puede cambiar muchos aspectos de los teléfonos móviles, pero fundamentalmente lo que quiere cambiar es la forma de interacción humano-ordenador que se considera de sentido común.