Qualcuno ha usato le reti neurali per aggiungere colore a questo filmato migliorato del 1896
Cosa c’è di meglio dell’upscaling di un film da 1896 a 4K 60 FPS di qualità? Fare il prossimo passo logico e aggiungere colore, ovviamente. Dopo il lavoro di Denis Shiryaev, un altro YouTuber ha aggiunto colore al film L’arrivée d’un train en gare de La Ciotat, per il divertimento di tutti noi. Ha un successo sorprendente, con solo alcuni errori evidenti.
Le reti neurali possono essere un ottimo modo per svolgere rapidamente un lavoro complicato. Ma addestrare una rete neurale non implica dirgli ogni singola cosa da fare. Invece, è spesso il caso di lavorare all’indietro.
Se vuoi addestrare una rete neurale per l’upscaling di un’immagine, inizi con foto ad alta risoluzione e riduci la loro qualità. Le immagini sottocampionate diventano un punto di partenza per le reti neurali da cui imparare e le immagini originali di alta qualità diventano la "risposta giusta".
Quando Denis Shiryaev ha utilizzato diversi strumenti per migliorare L’arrivée d’ un train en gare de La Ciotat, hanno ipotizzato come migliorare il video, aggiungere nuovi fotogrammi e appianare tutto. I risultati sono stati impressionanti.
Ora, un altro YouTuber (video Deoldify) ha preso quel filmato e ha utilizzato gli strumenti DeOldify per aggiungere colore. DeOldify funziona come molti strumenti di rete neurale, ma con una svolta in più. DeOldify si basa su due reti neurali, una che aggiunge colore al video e un’altra che critica il risultato.
Una rete neurale insegna all’altra a funzionare meglio e a produrre risultati più realistici. Il risultato finale è una versione a colori abbastanza convincente di L’arrivée d’ un train en gare de La Ciotat.
Gli appassionati di treni, tuttavia, si affretteranno a sottolineare che l’IA ha sbagliato dettagli importanti. Il treno visto nel video dovrebbe presentare una livrea verde, poiché le locomotive di proprietà della ferrovia PLM all’epoca presentavano sempre quei colori. Osserva da vicino i riflessi che escono dal treno e vedrai anche dei punti che non sono stati adeguatamente colorati.
Tuttavia, i risultati sono impressionanti, soprattutto quando ti fermi a pensare che un essere umano non ha fatto nulla del lavoro. Con il tempo e lo sforzo, i risultati e la precisione miglioreranno.