City by nAight

Dieses kleine Animation-Short ist als Experiment an einem Abend entstanden. Anfang November 2022 vertiefte ich mich in die zu dem Zeitpunkt aktuellen Möglichkeiten von KI-unterstütztem kreativen Arbeiten.
Ich erstellte in Blender eine Wolkenkratzer-Szenerie und baute eine kurze Kamerafahrt von der Straße durch die Wolkekratzer nach oben über die Stadt, sodass man die Hochhäuser von oben sehen kann. Mit dem damals gerade erschienen Blender Stable Diffusion Addon AI Render ließ ich die Frames, in einen verträumten regnerischen impressionistischen Stil im Sonnenuntergang verwandeln. Im Addon gab ich nehmen dem Prompt und der Ausgabequalität noch an, dass die Entstehung der Frames immer beeinflusst vom vorherigen erstellt werden sollen, sodass man eine möglichst flüssige und angenehme Bewegung bekommt. Die fertig generierten Frames ließ ich mit Upscayl die Auflösung hochskalieren. Upscayl ist eine Software, die eine grafische Oberfläche anbietet, die die Verwendung von Real-ESRGAN, einem Bild-Upcale-KI, sehr vereinfacht. Dazu läuft sie offline auf dem Computer, sodass keine Kosten anfallen.
Danach wählte ich einen Frame der die Stimmung des Videos gut zeigt und nutzte die Image-to-Music-KI, um einen passenden Soundtrack zu bekommen. Nach drei Durchläufen war ich zufrieden und erstellte in Premiere das Video.

Making of

Die Frames wurden jeweils in unter 2 Sekunden mit Blender Eevee, der schnellsten Blender Render-Engine, gerendert. Der fertige Frame wurde dann vom Blender Stable Diffusion-Addon an Dreamstudio.ai gesendet, wo es dann auf Basis meines Prompts umgewandelt wurde und ging dann an mich zurück. Die Bildgenerierung vom Addon hat ungefähr 10 Sekunden gedauert.