Las redes neuronales aprenden a decorar un vídeo en blanco y negro

Un par de semanas atrás en Geektimes material publicado que aprendió la red neuronal para pintar una foto en blanco y negro. Las redes neurales han sido durante mucho tiempo capaz de mucho, no sólo para trabajar con fotos. Pero esto es probablemente una de las manifestaciones más reveladores de redes de oportunidades. Incluso más indicativo es la "personalización de la imagen de" AI DeepDream de Google, aunque las imágenes resultantes son más psicodélica ..., digamos.
Ahora la red neuronal aprendió a pintar en las películas en blanco y negro. Esto fue anunciado por mar_cnu. La herramienta adecuada para la coloración de blanco y negro y era sus esfuerzos para crear una película. Y aunque el resultado no puede ser llamado perfecto, todo es bastante bueno.
Como material de partida se escogió viejo trailer de la película francesa del año 1964 año. Aquí está el fragmento:
Desarrollador explicó su elección por el hecho de que el remolque tiene todo lo necesario - la selva, río, personas, casas, carreteras. Eso es lo que sucedió después de que el procesamiento de vídeo:
Como se puede ver, el resultado no es lo ideal, como se ha descrito anteriormente. Pero una de las razones de esto puede ser la fuente de vídeo en sí. No está claro, ya que todas las películas de la época, a menudo en la "imagen" de todo fusionado, por lo que es lógico que hay dificultades en el programa.
Esto se hizo en todas las condiciones siguientes: 1
. Encontramos el vídeo original;
2. La fuente se convierte con la ayuda de este servicio aquí;
3. Ejecutar el script
para el archivo de vídeo / *
hacer
echo "$ archivo"
º colorize.lua "$ archivo" «de color - $ {} archivo% .jpg .png»
hecho
4. ffmpeg -i «el color del marco% 04d.png» -c: v libx264 colorvideo.mp4
5. ffmpeg -i blackandwhitevideo.webm audio.mp3
6. 6) ffmpeg -i -i colorvideo.mp4 audio.mp3 -c: v libx264 -c: una copia -strict
Para el servicio, como señaló correctamente a los usuarios, la tarea más difícil es llevar a cabo una transición suave entre las imágenes individuales. Si se pone el vídeo en pausa, a menudo capaces de "capturar" el cuadro con colores casi perfectas. Pero una transición suave entre bastidores - es un desafío por separado.
Fuente: geektimes.ru/post/275086/