¿Cómo quitar la sombra en una imagen?
Un equipo de informáticos de Google, MIT y la Universidad de California en Berkeley ha creado una impresionante herramienta de «eliminación de sombras» impulsada por IA que puede quitar las sombras duras de los retratos de manera realista , mientras deja intactas las sombras naturales. Los resultados son impresionantes.
El documento que describe esta tecnología se publicó originalmente en mayo, pero comenzó a llamar más la atención el fin de semana pasado cuando el canal de YouTube Two Minute Papers.
La tecnología en sí se basa no en una, sino en dos redes neuronales: una para eliminar las sombras «extrañas» que proyectan objetos no deseados, como un sombrero o una mano levantada para bloquear el sol en los ojos, y la otra para suavizar las sombras faciales naturales. y agregue «una luz de relleno sintética» para mejorar la relación de iluminación una vez que se hayan eliminado las sombras no deseadas.
Two Minute Papers resume bien la técnica en el siguiente video:
Usando estas dos redes, el equipo puede (en su mayor parte) eliminar de manera realista las sombras extrañas que son tanto naturales como agregadas allí por una computadora. Por supuesto, algunos de los resultados aún pueden parecer un poco «artificiales», y no todas las sombras no deseadas se abordan cuando se presentan con imágenes naturales tomadas en la naturaleza.
«Nuestro modelo propuesto no está exento de limitaciones …», se lee en el documento. «Cuando las sombras extrañas contienen muchas estructuras finamente detalladas (que están infrarrepresentadas en el entrenamiento), nuestra salida puede retener residuos visibles de esas».
Puede ver eso en algunas de las fotos de muestra donde las sombras son proyectadas por pelos sueltos, por ejemplo:
Pero con suficientes datos de entrenamiento, esta y otras limitaciones podrían superarse, permitiendo “ediciones” simples con un solo clic en aplicaciones como Google Photos de la suite de Adobe que pueden eliminar de manera convincente sombras duras sin hacer que su imagen parezca demasiado falsa.
Incluso con sus limitaciones actuales, los investigadores están bastante orgullosos de lo que han logrado:
Dada una sola imagen de un sujeto humano tomada en un entorno desconocido y sin restricciones, nuestro sistema completo es capaz de eliminar sombras extrañas no deseadas, suavizar las sombras faciales intensas y equilibrar la relación de iluminación de la imagen para producir una imagen de retrato realista y favorecedora.
Imágenes de muestra creadas con esta técnica a continuación:
Para obtener más información sobre esta técnica, explorar más datos de prueba o leer el documento de investigación completo por ti mismo, dirígete al sitio web de Portrait Shadow Manipulation aquí . Y si desea explorar más magia de edición de fotos basada en IA, consulte esta IA que puede convertir pinturas en fotografías, o esta que intenta «volver a iluminar» los retratos de manera realista después de haberlos tomado.
(a través de Reddit )