Alguém usou redes neurais para adicionar cor a esta filmagem aprimorada de 1896
O que é melhor do que aumentar a qualidade de um filme de 1896 para 4K 60 FPS? Dando o próximo passo lógico e adicionando cor, é claro. Dando continuidade ao trabalho de Denis Shiryaev, outro YouTuber adicionou cor ao filme L’arrivée d’un train en gare de La Ciotat, para todos nós desfrutarmos. É surpreendentemente bem-sucedido, com apenas alguns erros gritantes.
As redes neurais podem ser uma ótima maneira de realizar trabalhos complicados rapidamente. Mas treinar uma rede neural não envolve dizer a ela tudo o que fazer. Em vez disso, muitas vezes é um caso de trabalho para trás.
Se você deseja treinar uma rede neural para melhorar uma imagem, comece com fotos de alta resolução e reduza sua qualidade. As imagens reduzidas tornam-se um ponto de partida para as redes neurais aprenderem, e as imagens originais de alta qualidade se tornam a “resposta certa".
Quando Denis Shiryaev usou várias ferramentas para aprimorar L’arrivée d’un train en gare de La Ciotat, eles adivinharam como melhorar o vídeo, adicionar novos quadros e suavizar tudo. Os resultados foram impressionantes.
Agora, outro YouTuber (vídeos Deoldify) pegou essa filmagem e usou as ferramentas DeOldify para adicionar cor. O DeOldify funciona como muitas ferramentas de rede neural, mas com um toque adicional. O DeOldify conta com duas redes neurais, uma que adiciona cor ao vídeo e outra que critica o resultado.
Uma rede neural ensina a outra a trabalhar melhor e produzir resultados mais realistas. O resultado final é uma versão colorida razoavelmente convincente de L’arrivée d’un train en gare de La Ciotat.
Os entusiastas do trem, no entanto, serão rápidos em apontar que a IA errou em detalhes importantes. O trem visto no vídeo deve ter pintura verde, pois as locomotivas da ferrovia PLM sempre apresentavam essas cores na época. Olhe atentamente para os reflexos que saem do trem e você verá pontos que também não foram adequadamente coloridos.
Ainda assim, os resultados são impressionantes, especialmente quando você para para pensar que um humano não fez nada do trabalho. Com tempo e esforço, os resultados e a precisão melhorarão.