Quelqu’un a utilisé des réseaux de neurones pour ajouter de la couleur à cette vidéo améliorée de 1896

Quoi de mieux que de convertir un film de 1896 en qualité 4K 60 FPS? Passer à l’étape logique suivante et ajouter de la couleur, bien sûr. Dans la continuité du travail de Denis Shiryaev, un autre YouTuber a mis en couleur le film L’arrivée d’un train en gare de La Ciotat, pour le plaisir de tous. C’est étonnamment réussi, avec seulement quelques erreurs flagrantes.

Les réseaux de neurones peuvent être un excellent moyen d’effectuer rapidement un travail compliqué. Mais, former un réseau de neurones n’implique pas de lui dire tout ce qu’il faut faire. Au lieu de cela, il s’agit souvent de travailler à rebours.

Si vous souhaitez former un réseau de neurones pour mettre à l’échelle une image, vous commencez avec des photos haute résolution et réduisez leur qualité. Les images sous-échantillonnées deviennent un point de départ pour les réseaux de neurones, et les images originales de haute qualité deviennent la « bonne réponse ».

Lorsque Denis Shiryaev a utilisé plusieurs outils pour mettre à l’échelle L’arrivée d’un train en gare de La Ciotat, ils ont tenté de deviner comment améliorer la vidéo, ajouter de nouvelles images et lisser le tout. Les résultats étaient impressionnants.

Maintenant, un autre YouTuber (vidéos Deoldify) a pris cette séquence et a utilisé les outils DeOldify pour ajouter de la couleur. DeOldify fonctionne comme de nombreux outils de réseau neuronal, mais avec une touche supplémentaire. DeOldify s’appuie sur deux réseaux de neurones, un qui ajoute de la couleur à la vidéo et un autre qui critique le résultat.

Un réseau de neurones apprend à l’autre à mieux fonctionner et à produire des résultats plus réalistes. Le résultat final est une version couleur assez convaincante de L’arrivée d’un train en gare de La Ciotat.

Les amateurs de train, cependant, seront prompts à souligner que l’IA s’est trompée sur des détails importants. Le train vu dans la vidéo devrait présenter une livrée verte, car les locomotives appartenant au chemin de fer PLM présentaient toujours ces couleurs à l’époque. Regardez attentivement les reflets provenant du train et vous verrez des taches qui n’étaient pas suffisamment colorées non plus.

Pourtant, les résultats sont impressionnants, surtout quand on s’arrête pour penser qu’un humain n’a fait aucun travail. Avec du temps et des efforts, les résultats et la précision s’amélioreront.