Ktoś użył sieci neuronowych, aby dodać kolor do tego ulepszonego materiału z 1896 r.

Co jest lepszego niż skalowanie filmu z 1896 do jakości 4K 60 FPS? Oczywiście zrobienie kolejnego logicznego kroku i dodanie koloru. Kontynuując pracę Denisa Shiryaeva, inny YouTuber dodał kolor do filmu L’arrivée d’ un train en gare de La Ciotat, aby wszyscy mogli się nim cieszyć. Jest zaskakująco udany, z kilkoma rażącymi błędami.

Sieci neuronowe mogą być świetnym sposobem na szybkie wykonanie skomplikowanej pracy. Ale trenowanie sieci neuronowej nie wymaga mówienia jej wszystkiego, co ma zrobić. Zamiast tego często jest to praca wstecz.

Jeśli chcesz wytrenować sieć neuronową w celu przeskalowania obrazu, zaczynasz od zdjęć w wysokiej rozdzielczości i obniżasz ich jakość. Obrazy z próbkowaniem w dół stają się punktem wyjścia, z którego sieci neuronowe mogą się uczyć, a oryginalne obrazy wysokiej jakości stają się „właściwą odpowiedzią".

Kiedy Denis Shiryaev użył kilku narzędzi do upscalingu L’arrivée d’ un train en gare de La Ciotat, zgadywali, jak ulepszyć wideo, dodać nowe klatki i wszystko wygładzić. Wyniki były imponujące.

Teraz inny YouTuber (filmy Deoldify) wziął ten materiał i użył narzędzi DeOldify, aby dodać kolor. DeOldify działa jak wiele narzędzi sieci neuronowych, ale z dodatkowym akcentem. DeOldify opiera się na dwóch sieciach neuronowych, jednej, która dodaje kolor do wideo, a drugiej, która krytykuje wynik.

Jedna sieć neuronowa uczy drugą, jak lepiej pracować i dawać bardziej realistyczne wyniki. Ostatecznym rezultatem jest dość przekonująca wersja kolorystyczna L’arrivée d’un train en gare de La Ciotat.

Jednak entuzjaści pociągów szybko zauważą, że sztuczna inteligencja pomyliła ważne szczegóły. Pociąg widziany na filmie powinien mieć zielone barwy, ponieważ lokomotywy należące do kolei PLM zawsze miały wtedy te kolory. Przyjrzyj się uważnie odbiciom z pociągu, a zobaczysz plamy, które nie zostały odpowiednio pokolorowane.

Mimo to wyniki są imponujące, zwłaszcza gdy przestaniesz myśleć, że człowiek nie wykonał żadnej pracy. Z czasem i wysiłkiem poprawią się wyniki i dokładność.