Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Me encontré con una opinión que resultó bastante extendida: los algoritmos de IA en las cámaras de los teléfonos inteligentes son filtros y nada más, te permiten decorar tus fotos, pero no tienen otro significado que ese. Hasta cierto punto, tal punto de vista tiene derecho a existir, especialmente si no quieres entender ni siquiera las cosas más simples. Pero tratemos de recordar cuándo y cómo comenzó la era de las cámaras con IA en los teléfonos inteligentes y hacia dónde se está desarrollando el mercado.

Muy a menudo me encuentro con una referencia a las cámaras de Sony, en las que la detección automática de escenas apareció como una de las primeras, por analogía con lo que hacen los teléfonos inteligentes modernos, se consideran el prototipo de las cámaras con IA. Quizás tal interpretación estaría justificada si no fuera por una objeción: una cámara AI no puede existir sin un procesador potente que procese todas las imágenes, tanto las imágenes ya tomadas como las que aún no han sido fotografiadas. El primer fabricante en apostar por la IA como el futuro del mercado no solo de cámaras, sino de dispositivos en general, fue Huawei. En octubre de 2017, la empresa mostró su buque insignia Mate 10/10 Pro en Múnich. Este es el primer dispositivo para el que se usó la frase "IA incorporada", se mencionó que se usa para fotografía, pero no lo separaron en un término separado. Se hizo hincapié en el conjunto de chips Kirin 970, por primera vez apareció un procesador separado para cálculos de IA, este es un tipo especial de tareas y algoritmos. Los procesadores convencionales pueden ejecutar dichos algoritmos, pero no están optimizados para ellos y, como resultado, su rendimiento deja mucho que desear. Por lo tanto, un procesador separado responsable de la computación de IA se convirtió en un desarrollo lógico del mercado de conjuntos de chips, y el hecho de que se usara principalmente para fotografía y cámaras integradas es bastante lógico.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Entonces no se escribió sobre el caso de que el dispositivo tiene algoritmos de IA, se hizo popular más tarde, y la ola de tales modelos llegó en 2019, cuando el procesamiento de imágenes de IA se convirtió en la función predeterminada en todos los teléfonos inteligentes modernos. Por ejemplo, en la carcasa del Huawei P Smart 2019, se puede ver la inscripción AI Camera, que en cierta medida es un tributo al marketing y a la popularidad que ha ganado esta opción a los ojos de los compradores.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

De alguna manera traté de averiguar cómo los compradores comunes entienden la cámara AI. De pie en una tienda en el centro de Moscú como vendedor, hablé con los clientes y les pregunté sobre esta función. La mayoría de las respuestas se redujeron al hecho de que la cámara en sí misma entiende lo que está frente a ella y mejora las fotos en consecuencia. Los rostros de las personas están privados de defectos, la hierba se tiñe de verde, el cielo se vuelve azul. Me atrevería a sugerir que la mayoría de las personas definen la IA en el teléfono exactamente de esta manera y nada más. De hecho, estamos hablando del hecho de que la cámara del teléfono puede entender qué es exactamente lo que está fotografiando y cambiar la configuración en función de esto. Inicialmente, Huawei tenía varias docenas de escenarios de este tipo, pero el problema es el comienzo. Para el lanzamiento del Huawei P20 Pro, las redes neuronales fueron entrenadas para identificar 19 categorías de imágenes, había alrededor de 500 escenarios en total. En Mate 20 Pro, el número de categorías aumentó a 25 y el número total de escenarios superó los 1500. En este momento, su número es aún mayor y está en constante crecimiento.

La fotografía computacional ha llegado a nuestras vidas con firmeza y desde hace mucho tiempo. En la oscuridad, a menudo es imposible obtener una toma de rostro nítida y de alta calidad para poder rastrear cabellos individuales. Esto significa que puede tomar aproximadamente el mismo cabello de la base del teléfono, agregarlo a la foto y obtener una imagen que se verá fundamentalmente diferente. La idea es simple, pero la implementación en la práctica es mucho más difícil de lo que parece. Sin embargo, esto ya se ha implementado y Huawei incluso fue más allá.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

En la presentación del Huawei P30 Pro, se nos mostró el escenario Moon Shot, esta es una imagen de la Luna. El teléfono entiende que lo apuntaste a la luna, usaste el zoom, y en ese momento toma una “foto”. Mi indignación no tuvo límites, ya que entendí que la óptica del dispositivo no podía tomar tal fotografía, y parecía una falsificación. Unos meses más tarde, cambié de opinión, y la razón es que esta es exactamente la misma foto computacional. El smartphone determina el sujeto que estás fotografiando, en nuestro caso es la Luna, y luego lo sustituye desde la base. Hay muchas imágenes de alta calidad de la Luna, hay muchas para elegir. Pero nunca has podido tomar una foto de la luna con tu teléfono inteligente. Inmediatamente te dieron esta oportunidad, y cautiva. Esto no es un reflejo de la realidad, a excepción de la posición de la Luna en la imagen, otros detalles, como una ventana o un árbol que cayó en el marco. Más bien, es una especie de trabajo del editor, que sustituye una imagen de alta calidad del objeto.

Y este ejemplo describe perfectamente hacia dónde se dirige la fotografía computacional, muchos objetos no serán naturales, se tomarán de bases de datos de imágenes existentes o los algoritmos de IA los dibujarán de la forma en que queremos verlos. Es hora de olvidar que una vez que hubo naturalidad, un reflejo del mundo real, la fotografía se volvió manipuladora mucho antes de la llegada de los teléfonos inteligentes, no refleja el mundo real. Ahora estas manipulaciones simplemente están alcanzando un nivel fundamentalmente diferente, legalizándose hasta cierto punto. Inicialmente, esto provoca rechazo, rechazo persistente. Pero después de una reflexión madura, comienzas a comprender que el mundo entero estará dispuesto de esta manera y vale la pena aceptarlo cuanto antes para no preocuparte por tus ilusiones después. El peinado de tu novia en la foto, la textura de la piel y otros detalles son todos una lejana aproximación a la realidad, además, pocas personas se preocupan por la realidad misma. Más bien, la cuestión aquí es cómo mantener la línea entre la belleza de la imagen y la distorsión de la imagen original, cómo encontrar el equilibrio adecuado. Son los algoritmos de IA los que los buscarán.

Ahora echemos un vistazo a las imágenes preparadas, los algoritmos de IA también están involucrados aquí, en la galería puede ver cómo las imágenes se distribuyen automáticamente en carpetas: el teléfono inteligente entiende qué categoría es cuál y cada año aprende a tomar cada vez mejores fotos.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

En el mismo Huawei, crean especialmente un chip AI para sus procesadores, cada año su rendimiento crece y sigue siendo uno de los más altos. La razón es que son estos algoritmos los que se están volviendo importantes y se están moviendo gradualmente más allá de las cámaras y la toma de fotografías. Las imágenes tomadas deben reconocerse, el algoritmo de IA determina si hay personas en la imagen, quiénes son y qué están haciendo (alegría, tristeza, diversión, etc.; esta es la definición de emociones), cosas y objetos, colores y mucho más. Parece tarea de niños, pero abre todo un abanico de nuevas posibilidades. Por ejemplo, la cámara de su teléfono puede aprender a reconocer gestos y responder en consecuencia. El mismo Mate 30 Pro tiene reconocimiento de gestos, puedes tomar una captura de pantalla apretando el puño sobre la pantalla.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Hasta cierto punto, la IA es el conocimiento del mundo exterior, y la mayoría de los algoritmos son completamente autónomos, no requiere una conexión a la red. Y decir que AI es solo una cámara es imposible, debe considerar la cámara como un sensor externo que proporciona información para el teléfono inteligente y los algoritmos que están integrados en él. Apenas estamos al comienzo de ya que los algoritmos se volverán más complejos e intrincados y ofrecerán un nivel completamente nuevo de personalización. en el futuro.

No establecí un objetivo en un pequeño material para detenerme en todos los algoritmos de IA, los detalles de su trabajo, este es más bien un artículo para que pueda evaluar la dirección del desarrollo, obtener una visión general de hacia dónde se dirige la industria. .

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Me encontré con una opinión que resultó bastante extendida: los algoritmos de IA en las cámaras de los teléfonos inteligentes son filtros y nada más, te permiten decorar tus fotos, pero no tienen otro significado que ese. Hasta cierto punto, tal punto de vista tiene derecho a existir, especialmente si no quieres entender ni siquiera las cosas más simples. Pero tratemos de recordar cuándo y cómo comenzó la era de las cámaras con IA en los teléfonos inteligentes y hacia dónde se está desarrollando el mercado.

Muy a menudo me encuentro con una referencia a las cámaras de Sony, en las que la detección automática de escenas apareció como una de las primeras, por analogía con lo que hacen los teléfonos inteligentes modernos, se consideran el prototipo de las cámaras con IA. Quizás tal interpretación estaría justificada si no fuera por una objeción: una cámara AI no puede existir sin un procesador potente que procese todas las imágenes, tanto las imágenes ya tomadas como las que aún no han sido fotografiadas. El primer fabricante en apostar por la IA como el futuro del mercado no solo de cámaras, sino de dispositivos en general, fue Huawei. En octubre de 2017, la empresa mostró su buque insignia Mate 10/10 Pro en Múnich. Este es el primer dispositivo para el que se usó la frase "IA incorporada", se mencionó que se usa para fotografía, pero no lo separaron en un término separado. Se hizo hincapié en el conjunto de chips Kirin 970, por primera vez apareció un procesador separado para cálculos de IA, este es un tipo especial de tareas y algoritmos. Los procesadores convencionales pueden ejecutar dichos algoritmos, pero no están optimizados para ellos y, como resultado, su rendimiento deja mucho que desear. Por lo tanto, un procesador separado responsable de la computación de IA se convirtió en un desarrollo lógico del mercado de conjuntos de chips, y el hecho de que se usara principalmente para fotografía y cámaras integradas es bastante lógico.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Entonces no se escribió sobre el caso de que el dispositivo tiene algoritmos de IA, se hizo popular más tarde, y la ola de tales modelos llegó en 2019, cuando el procesamiento de imágenes de IA se convirtió en la función predeterminada en todos los teléfonos inteligentes modernos. Por ejemplo, en la carcasa del Huawei P Smart 2019, se puede ver la inscripción AI Camera, que en cierta medida es un tributo al marketing y a la popularidad que ha ganado esta opción a los ojos de los compradores.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

De alguna manera traté de averiguar cómo los compradores comunes entienden la cámara AI. De pie en una tienda en el centro de Moscú como vendedor, hablé con los clientes y les pregunté sobre esta función. La mayoría de las respuestas se redujeron al hecho de que la cámara en sí misma entiende lo que está frente a ella y mejora las fotos en consecuencia. Elimina los defectos de los rostros de las personas, tiñe la hierba de verde, hace que el cielo sea azul. Me atrevería a sugerir que la mayoría de las personas definen la IA en el teléfono exactamente de esta manera y nada más. De hecho, estamos hablando del hecho de que la cámara del teléfono puede entender qué es exactamente lo que está fotografiando y cambiar la configuración en función de esto. Inicialmente, Huawei tenía varias docenas de escenarios de este tipo, pero el problema es el comienzo. Para el lanzamiento del Huawei P20 Pro, las redes neuronales fueron entrenadas para determinar 19 categorías de imágenes, había alrededor de 500 escenarios en total. En Mate 20 Pro, el número de categorías aumentó a 25 y el número total de escenarios superó los 1500. En este momento, su número es aún mayor y está en constante crecimiento.

En la práctica, la interfaz de la cámara tiene una "IA maestra" (IA significa inteligencia artificial, la abreviatura es exactamente la misma), puede activarla o desactivarla.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Cuando el asistente se esté ejecutando, verá una sugerencia, por ejemplo, apunte la cámara hacia el texto, e inmediatamente aparecerá una ventana que dice que esto es texto.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Funciona exactamente de la misma manera cuando apunta la cámara a un gato o un perro, flores y otros objetos, el teléfono inteligente determina qué está mirando la cámara y establece la mejor configuración para que su imagen para las redes sociales o para la suya propia. el uso es de la mejor calidad. Alguien habla de abogar por la “naturalidad”, pero esta es una tendencia tan en peligro de extinción que simplemente no hay nada que discutir, la mayoría de las fotos que ves en la red tienen una u otra edición, libre o involuntaria. No hay duda de que la mayoría de la gente quiere apuntar la cámara al sujeto y obtener una buena imagen. Una minoría quiere algún tipo de naturalidad, cómo se ve el tema en su imaginación. Pero es más bien nostalgia por sus ideas, nada más.

La fotografía computacional ha llegado a nuestras vidas con firmeza y desde hace mucho tiempo. En la oscuridad, a menudo es imposible obtener una toma de rostro nítida y de alta calidad para poder rastrear cabellos individuales. Esto significa que puede tomar aproximadamente el mismo cabello de la base del teléfono, agregarlo a la foto y obtener una imagen que se verá fundamentalmente diferente. La idea es simple, pero la implementación en la práctica es mucho más difícil de lo que parece. Sin embargo, esto ya se ha implementado y Huawei incluso fue más allá.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

En la presentación del Huawei P30 Pro, se nos mostró el escenario Moon Shot, esta es una imagen de la Luna. El teléfono entiende que lo apuntaste a la luna, usaste el zoom, y en ese momento toma una “foto”. Mi indignación no tuvo límites, ya que entendí que la óptica del dispositivo no podía tomar tal fotografía, y parecía una falsificación. Unos meses más tarde, cambié de opinión, y la razón es que esta es exactamente la misma foto computacional. El smartphone determina el sujeto que estás fotografiando, en nuestro caso es la Luna, y luego lo sustituye desde la base. Hay muchas imágenes de alta calidad de la Luna, hay muchas para elegir. Pero nunca has podido tomar una foto de la luna con tu teléfono inteligente. Inmediatamente te dieron esta oportunidad, y cautiva. Esto no es un reflejo de la realidad, a excepción de la posición de la Luna en la imagen, otros detalles, como una ventana o un árbol que cayó en el marco. Más bien, es una especie de trabajo del editor, que sustituye una imagen de alta calidad del objeto.

Y este ejemplo describe perfectamente hacia dónde se dirige la fotografía computacional, muchos objetos no serán naturales, se tomarán de bases de datos de imágenes existentes o los algoritmos de IA los dibujarán de la forma en que queremos verlos. Es hora de olvidar que una vez que hubo naturalidad, un reflejo del mundo real, la fotografía se volvió manipuladora mucho antes de la llegada de los teléfonos inteligentes, no refleja el mundo real. Ahora estas manipulaciones simplemente están alcanzando un nivel fundamentalmente diferente, legalizándose hasta cierto punto. Inicialmente, esto provoca rechazo, rechazo persistente. Pero después de una reflexión madura, comienzas a comprender que el mundo entero estará dispuesto de esta manera y vale la pena aceptarlo cuanto antes para no preocuparte por tus ilusiones después. El peinado de tu novia en la foto, la textura de la piel y otros detalles son todos una lejana aproximación a la realidad, además, pocas personas se preocupan por la realidad misma. Más bien, la cuestión aquí es cómo mantener la línea entre la belleza de la imagen y la distorsión de la imagen original, cómo encontrar el equilibrio adecuado. Son los algoritmos de IA los que los buscarán.

Ahora echemos un vistazo a las imágenes preparadas, los algoritmos de IA también están involucrados aquí, en la galería puede ver cómo las imágenes se distribuyen automáticamente en carpetas: el teléfono inteligente entiende qué categoría es cuál y cada año aprende a tomar cada vez mejores fotos.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

En el mismo Huawei, crean especialmente un chip AI para sus procesadores, cada año su rendimiento crece y sigue siendo uno de los más altos. La razón es que son estos algoritmos los que se están volviendo importantes y se están moviendo gradualmente más allá de las cámaras y la toma de fotografías. Las imágenes tomadas deben reconocerse, el algoritmo de IA determina si hay personas en la imagen, quiénes son y qué están haciendo (alegría, tristeza, diversión, etc.; esta es la definición de emociones), cosas y objetos, colores y mucho más. Parece tarea de niños, pero abre todo un abanico de nuevas posibilidades. Por ejemplo, la cámara de su teléfono puede aprender a reconocer gestos y responder en consecuencia. El mismo Mate 30 Pro tiene reconocimiento de gestos, puedes tomar una captura de pantalla apretando el puño sobre la pantalla.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Hasta cierto punto, la IA es el conocimiento del mundo exterior y la mayoría de los algoritmos son completamente autónomos, no requiere una conexión a la red. Y decir que AI es solo una cámara es imposible, debe considerar la cámara como un sensor externo que proporciona información para el teléfono inteligente y los algoritmos que están integrados en él. Apenas estamos al comienzo de ya que los algoritmos se volverán más complejos e intrincados y ofrecerán un nivel completamente nuevo de personalización. en el futuro.

No establecí un objetivo en un pequeño material para detenerme en todos los algoritmos de IA, los detalles de su trabajo, este es más bien un artículo para que pueda evaluar la dirección del desarrollo, obtener una visión general de hacia dónde se dirige la industria. .

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Me encontré con una opinión que resultó bastante extendida: los algoritmos de IA en las cámaras de los teléfonos inteligentes son filtros y nada más, te permiten decorar tus fotos, pero no tienen otro significado que ese. Hasta cierto punto, tal punto de vista tiene derecho a existir, especialmente si no quieres entender ni siquiera las cosas más simples. Pero tratemos de recordar cuándo y cómo comenzó la era de las cámaras con IA en los teléfonos inteligentes y hacia dónde se está desarrollando el mercado.

Muy a menudo me encuentro con una referencia a las cámaras de Sony, en las que la detección automática de escenas apareció como una de las primeras, por analogía con lo que hacen los teléfonos inteligentes modernos, se consideran el prototipo de las cámaras con IA. Quizás tal interpretación estaría justificada si no fuera por una objeción: una cámara AI no puede existir sin un procesador potente que procese todas las imágenes, tanto las imágenes ya tomadas como las que aún no han sido fotografiadas. El primer fabricante en apostar por la IA como el futuro del mercado no solo de cámaras, sino de dispositivos en general, fue Huawei. En octubre de 2017, la empresa mostró su buque insignia Mate 10/10 Pro en Múnich. Este es el primer dispositivo para el que se usó la frase "IA incorporada", se mencionó que se usa para fotografía, pero no lo separaron en un término separado. Se hizo hincapié en el conjunto de chips Kirin 970, por primera vez apareció un procesador separado para cálculos de IA, este es un tipo especial de tareas y algoritmos. Los procesadores convencionales pueden ejecutar dichos algoritmos, pero no están optimizados para ellos y, como resultado, su rendimiento deja mucho que desear. Por lo tanto, un procesador separado responsable de la computación de IA se convirtió en un desarrollo lógico del mercado de conjuntos de chips, y el hecho de que se usara principalmente para fotografía y cámaras integradas es bastante lógico.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Entonces no se escribió sobre el caso de que el dispositivo tiene algoritmos de IA, se hizo popular más tarde, y la ola de tales modelos llegó en 2019, cuando el procesamiento de imágenes de IA se convirtió en la función predeterminada en todos los teléfonos inteligentes modernos. Por ejemplo, en la carcasa del Huawei P Smart 2019, se puede ver la inscripción AI Camera, que en cierta medida es un tributo al marketing y a la popularidad que ha ganado esta opción a los ojos de los compradores.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

De alguna manera traté de averiguar cómo los compradores comunes entienden la cámara AI. De pie en una tienda en el centro de Moscú como vendedor, hablé con los clientes y les pregunté sobre esta función. La mayoría de las respuestas se redujeron al hecho de que la cámara en sí misma entiende lo que está frente a ella y mejora las fotos en consecuencia. Elimina los defectos de los rostros de las personas, tiñe la hierba de verde, hace que el cielo sea azul. Me atrevería a sugerir que la mayoría de las personas definen la IA en el teléfono exactamente de esta manera y nada más. De hecho, estamos hablando del hecho de que la cámara del teléfono puede entender qué es exactamente lo que está fotografiando y cambiar la configuración en función de esto. Inicialmente, Huawei tenía varias docenas de escenarios de este tipo, pero el problema es el comienzo. Para el lanzamiento del Huawei P20 Pro, las redes neuronales fueron entrenadas para determinar 19 categorías de imágenes, había alrededor de 500 escenarios en total. En Mate 20 Pro, el número de categorías aumentó a 25 y el número total de escenarios superó los 1500. En este momento, su número es aún mayor y está en constante crecimiento.

En la práctica, la interfaz de la cámara tiene una "IA maestra" (IA significa inteligencia artificial, la abreviatura es exactamente la misma), puede activarla o desactivarla.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Cuando el asistente se esté ejecutando, verá una sugerencia, por ejemplo, apunte la cámara hacia el texto, e inmediatamente aparecerá una ventana que dice que esto es texto.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Funciona exactamente de la misma manera cuando apunta la cámara a un gato o un perro, flores y otros objetos, el teléfono inteligente determina qué está mirando la cámara y establece la mejor configuración para que su imagen para las redes sociales o para la suya propia. el uso es de la mejor calidad. Alguien habla de abogar por la “naturalidad”, pero esta es una tendencia tan en peligro de extinción que simplemente no hay nada que discutir, la mayoría de las fotos que ves en la red tienen una u otra edición, libre o involuntaria. No hay duda de que la mayoría de la gente quiere apuntar la cámara al sujeto y obtener una buena imagen. Una minoría quiere algún tipo de naturalidad, cómo se ve el tema en su imaginación. Pero es más bien nostalgia por sus ideas, nada más.

La fotografía computacional ha llegado a nuestras vidas con firmeza y desde hace mucho tiempo. En la oscuridad, a menudo es imposible obtener una toma de rostro nítida y de alta calidad para poder rastrear cabellos individuales. Esto significa que puede tomar aproximadamente el mismo cabello de la base del teléfono, agregarlo a la foto y obtener una imagen que se verá fundamentalmente diferente. La idea es simple, pero la implementación en la práctica es mucho más difícil de lo que parece. Sin embargo, esto ya se ha implementado y Huawei incluso fue más allá.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

En la presentación del Huawei P30 Pro, se nos mostró el escenario Moon Shot, esta es una imagen de la Luna. El teléfono entiende que lo apuntaste a la luna, usaste el zoom, y en ese momento toma una “foto”. Mi indignación no tuvo límites, ya que entendí que la óptica del dispositivo no podía tomar tal fotografía, y parecía una falsificación. Unos meses más tarde, cambié de opinión, y la razón es que esta es exactamente la misma foto computacional. El smartphone determina el sujeto que estás fotografiando, en nuestro caso es la Luna, y luego lo sustituye desde la base. Hay muchas imágenes de alta calidad de la Luna, hay muchas para elegir. Pero nunca has podido tomar una foto de la luna con tu teléfono inteligente. Inmediatamente te dieron esta oportunidad, y cautiva. Esto no es un reflejo de la realidad, a excepción de la posición de la Luna en la imagen, otros detalles, como una ventana o un árbol que cayó en el marco. Más bien, es una especie de trabajo del editor, que sustituye una imagen de alta calidad del objeto.

Y este ejemplo describe perfectamente hacia dónde se dirige la fotografía computacional, muchos objetos no serán naturales, se tomarán de bases de datos de imágenes existentes o los algoritmos de IA los dibujarán de la forma en que queremos verlos. Es hora de olvidar que una vez que hubo naturalidad, un reflejo del mundo real, la fotografía se volvió manipuladora mucho antes de la llegada de los teléfonos inteligentes, no refleja el mundo real. Ahora estas manipulaciones simplemente están alcanzando un nivel fundamentalmente diferente, legalizándose hasta cierto punto. Inicialmente, esto provoca rechazo, rechazo persistente. Pero después de una reflexión madura, comienzas a comprender que el mundo entero estará dispuesto de esta manera y vale la pena aceptarlo cuanto antes para no preocuparte por tus ilusiones después. El peinado de tu novia en la foto, la textura de la piel y otros detalles son todos una lejana aproximación a la realidad, además, pocas personas se preocupan por la realidad misma. Más bien, la cuestión aquí es cómo mantener la línea entre la belleza de la imagen y la distorsión de la imagen original, cómo encontrar el equilibrio adecuado. Son los algoritmos de IA los que los buscarán.

Ahora echemos un vistazo a las imágenes preparadas, los algoritmos de IA también están involucrados aquí, en la galería puede ver cómo las imágenes se distribuyen automáticamente en carpetas: el teléfono inteligente entiende qué categoría es cuál y cada año aprende a tomar cada vez mejores fotos.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

En el mismo Huawei, crean especialmente un chip AI para sus procesadores, cada año su rendimiento crece y sigue siendo uno de los más altos. La razón es que son estos algoritmos los que se están volviendo importantes y se están moviendo gradualmente más allá de las cámaras y la toma de fotografías. Las imágenes tomadas deben reconocerse, el algoritmo de IA determina si hay personas en la imagen, quiénes son y qué están haciendo (alegría, tristeza, diversión, etc.; esta es la definición de emociones), cosas y objetos, colores y mucho más. Parece tarea de niños, pero abre todo un abanico de nuevas posibilidades. Por ejemplo, la cámara de su teléfono puede aprender a reconocer gestos y responder en consecuencia. El mismo Mate 30 Pro tiene reconocimiento de gestos, puedes tomar una captura de pantalla apretando el puño sobre la pantalla.

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Hasta cierto punto, la IA es el conocimiento del mundo exterior y la mayoría de los algoritmos son completamente autónomos, no requiere una conexión a la red. Y decir que AI es solo una cámara es imposible, debe considerar la cámara como un sensor externo que proporciona información para el teléfono inteligente y los algoritmos que están integrados en él. Apenas estamos al comienzo de ya que los algoritmos se volverán más complejos e intrincados y ofrecerán un nivel completamente nuevo de personalización. en el futuro.

No establecí un objetivo en un pequeño material para detenerme en todos los algoritmos de IA, los detalles de su trabajo, este es más bien un artículo para que pueda evaluar la dirección del desarrollo, obtener una visión general de hacia dónde se dirige la industria. .

Inteligencia artificial o procesamiento de IA en cámaras de teléfonos inteligentes

Me encontré con una opinión que resultó bastante extendida: los algoritmos de IA en las cámaras de los teléfonos inteligentes son filtros y nada más, te permiten decorar tus fotos, pero no tienen otro significado que ese. Hasta cierto punto, tal punto de vista tiene derecho a existir, especialmente si no quieres entender ni siquiera las cosas más simples. Pero tratemos de recordar cuándo y cómo comenzó la era de las cámaras con IA en los teléfonos inteligentes y hacia dónde se está desarrollando el mercado.

Muy a menudo me encuentro con una referencia a las cámaras de Sony, en las que la detección automática de escenas apareció como una de las primeras, por analogía con lo que hacen los teléfonos inteligentes modernos, se consideran el prototipo de las cámaras con IA. Quizás tal interpretación estaría justificada si no fuera por una objeción: una cámara AI no puede existir sin un procesador potente que procese todas las imágenes, tanto las imágenes ya tomadas como las que aún no han sido fotografiadas. El primer fabricante en apostar por la IA como el futuro del mercado no solo de cámaras, sino de dispositivos en general, fue Huawei. En octubre de 2017, la empresa mostró su buque insignia Mate 10/10 Pro en Múnich. Este es el primer dispositivo para el que se usó la frase "IA incorporada", se mencionó que se usa para fotografía, pero no lo separaron en un término separado. Se hizo hincapié en el conjunto de chips Kirin 970, por primera vez apareció un procesador separado para cálculos de IA, este es un tipo especial de tareas y algoritmos. Los procesadores convencionales pueden ejecutar dichos algoritmos, pero no están optimizados para ellos y, como resultado, su rendimiento deja mucho que desear. Por lo tanto, un procesador separado responsable de la computación de IA se convirtió en un desarrollo lógico del mercado de conjuntos de chips, y el hecho de que se usara principalmente para fotografía y cámaras integradas es bastante lógico.

Entonces no se escribió sobre el caso de que el dispositivo tiene algoritmos de IA, se hizo popular más tarde, y la ola de tales modelos llegó en 2019, cuando el procesamiento de imágenes de IA se convirtió en la función predeterminada en todos los teléfonos inteligentes modernos. Por ejemplo, en la carcasa del Huawei P Smart 2019, se puede ver la inscripción AI Camera, que en cierta medida es un tributo al marketing y a la popularidad que ha ganado esta opción a los ojos de los compradores.

De alguna manera traté de averiguar cómo los compradores comunes entienden la cámara AI. De pie en una tienda en el centro de Moscú como vendedor, hablé con los clientes y les pregunté sobre esta función. La mayoría de las respuestas se redujeron al hecho de que la cámara en sí misma entiende lo que está frente a ella y mejora las fotos en consecuencia. Elimina los defectos de los rostros de las personas, tiñe la hierba de verde, hace que el cielo sea azul. Me atrevería a sugerir que la mayoría de las personas definen la IA en el teléfono exactamente de esta manera y nada más. De hecho, estamos hablando del hecho de que la cámara del teléfono puede entender qué es exactamente lo que está fotografiando y cambiar la configuración en función de esto. Inicialmente, Huawei tenía varias docenas de escenarios de este tipo, pero el problema es el comienzo. Para el lanzamiento del Huawei P20 Pro, las redes neuronales fueron entrenadas para determinar 19 categorías de imágenes, había alrededor de 500 escenarios en total. En Mate 20 Pro, el número de categorías aumentó a 25 y el número total de escenarios superó los 1500. En este momento, su número es aún mayor y está en constante crecimiento.

En la práctica, la interfaz de la cámara tiene una "IA maestra" (IA significa inteligencia artificial, la abreviatura es exactamente la misma), puede activarla o desactivarla.

Cuando el asistente se esté ejecutando, verá una sugerencia, por ejemplo, apunte la cámara hacia el texto, e inmediatamente aparecerá una ventana que dice que esto es texto.

Funciona exactamente de la misma manera cuando apunta la cámara a un gato o un perro, flores y otros objetos, el teléfono inteligente determina qué está mirando la cámara y establece la mejor configuración para que su imagen para las redes sociales o para la suya propia. el uso es de la mejor calidad. Alguien habla de abogar por la “naturalidad”, pero esta es una tendencia tan en peligro de extinción que simplemente no hay nada que discutir, la mayoría de las fotos que ves en la red tienen una u otra edición, libre o involuntaria. No hay duda de que la mayoría de la gente quiere apuntar la cámara al sujeto y obtener una buena imagen. Una minoría quiere algún tipo de naturalidad, cómo se ve el tema en su imaginación. Pero es más bien nostalgia por sus ideas, nada más.

La fotografía computacional ha llegado a nuestras vidas con firmeza y desde hace mucho tiempo. En la oscuridad, a menudo es imposible obtener una toma de rostro nítida y de alta calidad para poder rastrear cabellos individuales. Esto significa que puede tomar aproximadamente el mismo cabello de la base del teléfono, agregarlo a la foto y obtener una imagen que se verá fundamentalmente diferente. La idea es simple, pero la implementación en la práctica es mucho más difícil de lo que parece. Sin embargo, esto ya se ha implementado y Huawei incluso fue más allá.

En la presentación del Huawei P30 Pro, se nos mostró el escenario Moon Shot, esta es una imagen de la Luna. El teléfono entiende que lo apuntaste a la luna, usaste el zoom, y en ese momento toma una “foto”. Mi indignación no tuvo límites, ya que entendí que la óptica del dispositivo no podía tomar tal fotografía, y parecía una falsificación. Unos meses más tarde, cambié de opinión, y la razón es que esta es exactamente la misma foto computacional. El smartphone determina el sujeto que estás fotografiando, en nuestro caso es la Luna, y luego lo sustituye desde la base. Hay muchas imágenes de alta calidad de la Luna, hay muchas para elegir. Pero nunca has podido tomar una foto de la luna con tu teléfono inteligente. Inmediatamente te dieron esta oportunidad, y cautiva. Esto no es un reflejo de la realidad, a excepción de la posición de la Luna en la imagen, otros detalles, como una ventana o un árbol que cayó en el marco. Más bien, es una especie de trabajo del editor, que sustituye una imagen de alta calidad del objeto.

Y este ejemplo describe perfectamente hacia dónde se dirige la fotografía computacional, muchos objetos no serán naturales, se tomarán de bases de datos de imágenes existentes o los algoritmos de IA los dibujarán de la forma en que queremos verlos. Es hora de olvidar que una vez que hubo naturalidad, un reflejo del mundo real, la fotografía se volvió manipuladora mucho antes de la llegada de los teléfonos inteligentes, no refleja el mundo real. Ahora estas manipulaciones simplemente están alcanzando un nivel fundamentalmente diferente, legalizándose hasta cierto punto. Inicialmente, esto provoca rechazo, rechazo persistente. Pero después de una reflexión madura, comienzas a comprender que el mundo entero estará dispuesto de esta manera y vale la pena aceptarlo cuanto antes para no preocuparte por tus ilusiones después. El peinado de tu novia en la foto, la textura de la piel y otros detalles son todos una lejana aproximación a la realidad, además, pocas personas se preocupan por la realidad misma. Más bien, la cuestión aquí es cómo mantener la línea entre la belleza de la imagen y la distorsión de la imagen original, cómo encontrar el equilibrio adecuado. Son los algoritmos de IA los que los buscarán.

Ahora echemos un vistazo a las imágenes preparadas, los algoritmos de IA también están involucrados aquí, en la galería puede ver cómo las imágenes se distribuyen automáticamente en carpetas: el teléfono inteligente entiende qué categoría es cuál y cada año aprende a tomar cada vez mejores fotos.

En el mismo Huawei, crean especialmente un chip AI para sus procesadores, cada año su rendimiento crece y sigue siendo uno de los más altos. La razón es que son estos algoritmos los que se están volviendo importantes y se están moviendo gradualmente más allá de las cámaras y la toma de fotografías. Las imágenes tomadas deben reconocerse, el algoritmo de IA determina si hay personas en la imagen, quiénes son y qué están haciendo (alegría, tristeza, diversión, etc.; esta es la definición de emociones), cosas y objetos, colores y mucho más. Parece tarea de niños, pero abre todo un abanico de nuevas posibilidades. Por ejemplo, la cámara de su teléfono puede aprender a reconocer gestos y responder en consecuencia. El mismo Mate 30 Pro tiene reconocimiento de gestos, puedes tomar una captura de pantalla apretando el puño sobre la pantalla.

Hasta cierto punto, la IA es el conocimiento del mundo exterior y la mayoría de los algoritmos son completamente autónomos, no requiere una conexión a la red. Y decir que AI es solo una cámara es imposible, debe considerar la cámara como un sensor externo que proporciona información para el teléfono inteligente y los algoritmos que están integrados en él. Estamos solo al comienzo del viaje, ya que en el futuro los algoritmos se volverán más complejos, intrincados y al mismo tiempo ofrecerán un nivel de personalización completamente diferente.

Hasta cierto punto, la IA es el conocimiento del mundo exterior y la mayoría de los algoritmos son completamente autónomos, no requiere una conexión a la red. Y decir que AI es solo una cámara es imposible, debe considerar la cámara como un sensor externo que proporciona información para el teléfono inteligente y los algoritmos que están integrados en él. solo estamos en al comienzo del viaje, ya que en el futuro los algoritmos se volverán más complejos, intrincados y al mismo tiempo ofrecerán un nivel de personalización completamente diferente.

No establecí un objetivo en un pequeño material para detenerme en todos los algoritmos de IA, los detalles de su trabajo, este es más bien un artículo para que pueda evaluar la dirección del desarrollo, obtener una visión general de hacia dónde se dirige la industria. .