(Denis Shiryaev/YouTube/Brüder Lumière) 1896 veröffentlicht, Die Ankunft eines Zuges am Bahnhof La Ciotat ist eines der frühesten Beispiele des Filmemachens, das wir haben – der 50-sekündige Stummfilm, der zeigt, wie ein Postzug in den Bahnhof La Ciotat einfährt, wirkt nach heutigen Maßstäben eintönig, hätte aber im 19. Jahrhundert das Publikum zum ersten Mal mit bewegten Bildern in Erstaunen versetzt Zeit.
Jetzt das bekanntermaßen altes, kratziges Filmrelikt wurde dank der Leistung von in herrliche 4K-Aufnahmen mit 60 Bildern pro Sekunde hochskaliert künstliche Intelligenz – verwenden Neuronale Netze um fehlende Pixel und fehlende Frames auszufüllen, die von Anfang an nicht vorhanden waren.
Es ist die Arbeit des Entwicklers und YouTubers Denis Shiryaev, und wenn Sie sich seine ansehen neue Einstellung es wirkt wie ein moderner Film, der in Schwarzweiß gedreht wurde. Details zur Kleidung und zur Schleppe selbst sind leicht zu erkennen; alles läuft reibungslos und synchron; und man kann weit in die Ferne sehen.
Neben dem Hinzufügen einer neuen Audiospur hat Shiryaev hier zwei Algorithmen verwendet: Der erste ist der Gigapixel-KI von Topaz Labs, das sich mit der Vergrößerung der Bilder detaillierter ausfüllt.
Dazu analysiert es eine große Anzahl von Bildern, während diese verkleinert werden, und lernt, welche Informationen dabei verloren gehen. Mit diesem Training ist die KI in der Lage, rückwärts zu arbeiten und Informationen hinzuzufügen, wenn die Bilder vergrößert werden.
Das zweite bisschen KI-Magie wird hinzugefügt von DAIN (oder Depth-Aware Video Frame Interpolation), entwickelt von einem Team aus Forschern und Google-Ingenieuren.
DAIN füllt auch Details aus, wie Gigapixel AI, aber dieses Mal werden ganze Bilder anstelle einzelner Pixel eingefügt, wodurch die Bildrate auf glatte 60 Bilder pro Sekunde erhöht wird.
Auch hier wird ein Archiv vorhandener Videos als Schulungsmaterial verwendet und versucht herauszufinden, was in den Lücken sein sollte, indem sowohl die Vorher- und Nachherbilder als auch die verschiedenen Tiefenstufen einer Aufnahme beurteilt werden.
Bedenken Sie, dass die zusätzlichen Details, die Sie in dieser Restaurierung sehen, möglicherweise nicht bis zum letzten Pixel tatsächlich das sind, was im Filmmaterial zu sehen war – stattdessen handelt es sich um die besten Schätzungen von Computeralgorithmen, die auf riesigen Bibliotheken ähnlicher Fotos und Videos trainiert wurden .
Das Original Die Ankunft eines Zuges am Bahnhof La Ciotat wurde von der gefilmt Lichtbrüder , mit 35-mm-Film in einem Kinematograph Kamera (die auch als Projektor diente).
Wir sollten auch darauf hinweisen, dass im Vergleich zu einigen sehr schlecht aussehende Kopien mit niedriger Auflösung des Films online, die Quellvideo Auch das verwendete Shiryaev ist von sehr guter Qualität, was wahrscheinlich auf frühere Restaurierungstechniken zurückzuführen ist.
Leider enthält das Quellvideo keine Details zur Herstellung, aber es scheint auf irgendeine Weise digital verbessert worden zu sein.
Was auch immer die Geschichte hinter der verwendeten Quelle ist, die neue Version verleiht dem Filmmaterial zusätzliche Auflösung und Glätte und liefert uns ein weiteres Beispiel dafür, wie KI-Engines ihre eigenen erstellen können digitale Realität .
Es bestehen zwar berechtigte Bedenken bzgl Deepfake-Fotos und Videos – Szenen nachstellen, die es nie gab – diese Hochskalierung eines klassischen Stummfilms zeigt die positiven Möglichkeiten, wie neuronale Netze eingesetzt werden können.
Schauen Sie sich einige davon an älter Versionen von Die Ankunft eines Zuges am Bahnhof La Ciotat Wenn Sie auf YouTube herumschwirren, können Sie sehen, welchen Unterschied digitale Verarbeitung und künstliche Verbesserungen machen können. Der Film ist sogar erhältlich in Farbe jetzt auch.