Fast Neural Style Transfer: Echtzeit-Filmkunst aus dem Computer
In dieser Bachelorarbeit wurde einen Demonstrator für Echtzeit-Filmkunst aus dem Computer entwickelt, um angehenden Studierenden und Besuchern der Hochschule einen Einblick in die aktuellen Möglichkeiten des Maschinellen Lernens zu geben. Der Demonstrator stilisiert Bilder und Videosequenzen in Echtzeit mittels Fast Style Transfer anhand eines vorgegebenen Stilbildes. So können diese Inputs beispielsweise in einen Comic-Clip oder in ein Van Gogh-Bild verwandelt werden. Beim Style Transfer handelt es sich um ein Verfahren, das den Stil eines Bildes mit dem Inhalt eines zweiten Bildes kombiniert. Für die Realisierung des Fast Style Transfers mussten künstliche neuronale Netze auf bestimmte Stile (zum Beispiel Kunstbilder wie die Sternennacht von Vincent van Gogh) trainiert werden. Dank diesen vortrainierten Netzen ist es möglich, ein Bild innerhalb von ca. 40 ms in den gewünschten Stil zu transferieren, was eine Echtzeitanzeige der Stiltransformation ermöglicht. Ein weiteres Ziel der Arbeit bestand darin, eine Webseite zu erstellen, die es ermöglicht, eigene Bilder mit selbst gewähltem Stil-Bild zu kombinieren.
Marc Hofer