ÖNB Postkarten StyleGAN

Gene Kogan und Sofia Crespo haben im Juni 2019 einen Workshop zum Thema Machine Learning im Rahmen des ÖNB Labs Symposiums gehalten. In diesem wurden unterschiedliche Verfahren zum Synthetisieren, Transferieren und Remixen von Bildern aus den Beständen der ÖNB Labs vorgestellt. Zu diesen Verfahren zählen unter anderen Generative Adversarial Networks (GAN), in denen zwei gegnerische Netzwerke operieren. Eines der Netzwerke generiert Ergebnisse, während das andere die wesentlichen Bildcharakteristika dieser Ergebnisse mit „echten“ Daten vergleicht und deren Unterschiede aufzeigt. Das generierende Netzwerk wird dahingehend optimiert, dass die erstellten von den realen Daten nicht mehr zu unterscheiden sind. Im Anschluss an die Veranstaltung, haben die Künstler und Forscher ein StyleGAN basierend auf den historischen Postkarten, die in den ÖNB Labs als Datenset angeboten werden, trainiert. Das Ergebnis, welches hier in Form eines Videos dargestellt wird ist – um es mit den Worten der Erschaffer zu sagen – surprisingly nice.

Mittels der beim ÖNB Symposium vorgestellten Infrastruktur RunwayML haben Gene und Sofia ein StyleGAN auf Basis der ÖNB Postkarten trainiert. Das Resultat wurde als Video aufbereitet:

Tools

Werkzeuge für die Erstellung des Videos

BeschreibungLink

RunwayML

Machine Learning Infrastruktur

https://runwayml.com/

Daten

Verwendete Datensets für StyleGAN-Training

BeschreibungLink

Historische Ansichtskarten

Das Datenset enthält die Vorderseiten von Postkarten aus dem frühen 20. Jahrhundert

Link

Downloads

Weitere Materialien zu diesem Thema

BeschreibungLink

GitLab Repository

Ein Repository mit dem generierten Video

Link