El MIT han desarrollado un algoritmo que elimina de fotos reflexión en las ventanas Bashny.Net

Si vienes a la ventana y tratar de tomar una foto a través del vidrio, será difícil evitar el reflejo de su propia figura. Instalación de residuos será más notable que el espacio oscuro en el exterior. Los fotógrafos profesionales resuelven este problema, resumiendo el lente de la cámara derecha contra el cristal y la aplicación de una variedad de otros métodos, por ejemplo, filtros de polarización. Pero a menudo hay disponibles solo "ojo" del smartphone o la capacidad de disparar es limitada, y con la presencia de reflexiones que aguantar. Los investigadores del MIT han encontrado una solución algorítmica a este problema.

El algoritmo se presentará en junio en la Conferencia sobre la Visión por Computador y Reconocimiento de Patrones (Computer Vision y Reconocimiento de Patrones), pero ahora доступны algunos de los detalles. Para el trabajo el hecho de que las reflexiones se repiten varias veces debido a la estructura de ventanas. Sobre la base de este principio en una amplia variedad de casos, la limpieza automática se realiza fotos digitales.

De acuerdo con el primer autor de Yichang Shi (YiChang Shih), en Boston para la retención de calor en la temporada de frío a menudo se utiliza ventanas de doble acristalamiento. Por lo tanto, por lo general tenemos dos reflexiones de cada uno de los vasos. Pero esto no significa que el algoritmo sólo funcionará para las ventanas dobles, uno de vidrio grueso también da dos reflexiones, uno del lado interior de la segunda desde fuera. Sin dar información sobre la segunda tarea de reflexión es para eliminar elementos innecesarios casi sin solución, porque el resultado es la suma de las fotos de imágenes externas y reflejos en el vidrio. Si A + B = C, entonces A y B para recuperar sólo para C no será posible.

La segunda reflexión da la información necesaria para corregir la imagen. Los valores de los píxeles individuales de reflexiones tienen aproximadamente la misma, y ​​es más fácil de encontrar la solución adecuada, pero su número sigue siendo alta. Para seleccionar el Shi deseado y otro co-autor - profesor de ciencias de la computación y la ingeniería informática Fredo Durand y Bill Freeman (supervisores de trabajo) y Dilip Krishnan (PhD, que ahora trabaja en Google Investigación) - esta en el algoritmo de la expectativa de que como un reflejo, por lo y vistas extraíbles tienen regularidades estadísticas que se llaman imagen natural.

Se supone que en las representaciones gráficas no modificados del mundo exterior a nivel de grupos de píxeles cambios bruscos de color son raros, y si se producen, los límites precisos. Si algunos píxeles representan un límite entre el objeto azul y rojo, que se espera que en un lado de la imagen tendrá un tinte azul, y el otro - el rojo. En el campo de la visión por ordenador se implementa normalmente por el principio de gradiente, que caracteriza a cada bloque de píxeles en una dirección común y la intensidad del proceso de cambio de color. Sin embargo, Shi y sus colegas encontraron que esta técnica, en este caso no funciona demasiado bien.





Por lo tanto Daniel Freeman Zoran del grupo y Yair Weiss, de la Universidad Hebrea de Jerusalén han creado un algoritmo que divide la imagen en grupos de bloques de 8 × 8 píxeles. Para cada uno de los grupos se analizaron usando 50 mil. Imágenes de entrenamiento, y sobre la base de los datos se obtuvieron de manera fiable para distinguir reflexiones de la imagen de la ventana. Para probar Shi y sus colegas realizaron una búsqueda y foto Google hospedaje Flickr, haciendo preguntas de la forma "problemas con la reflexión en la ventana en la foto." Después de la eliminación de los resultados, que no estaban en las imágenes, se recogieron 197 imágenes. De estos 96 casos, el cambio entre las dos imágenes era lo suficientemente amplia como para cargar el algoritmo.

Profesor de Ingeniería Eléctrica en el Technion Israel Yoav Shehner dijo que los intentos para eliminar estos elementos no deseados en las fotos tomadas antes, pero algunos de los métodos utilizados por una sola reflexión. El problema se vuelve mucho más complicada, y el éxito fue sólo parcial manera automatizada para la reflexión independiente de la imagen restaurada no lo era. Trabajo Shi es un gran avance en varios frentes. Shehner cree que con el tiempo, si el algoritmo está finalizado, será capaz de entrar en el paquete común de algoritmos de procesamiento de la fotografía y de visión por computador digitales para ayudar en los robots. Los investigadores no informaron sobre la posibilidad de eliminar la imagen de la reflexión del fotógrafo, pero, probablemente, es posible utilizar. Este último puede estar interesado en la aplicación de la ley y voyeurista.

El algoritmo se presentará en junio en una conferencia en Boston Visión por Computador y Reconocimiento de Patrones.
<sub>Fotos: Массачусетский Instituto de Tecnología de . Sub>

Fuente: geektimes.ru/post/250678/</sub>