THE RISE OF THE UNKNOWN ARTIST
Through my experimental research on AI-generated image generation, I came up with the idea of generating a comic style as the basis of a short film with which I could tell a story that led to animated short sequences from the image material generated in Midjourney when further processed with Runway Gen2. The difficulty of generating high-quality, usable AI-generated content between a still image and a moving animation definitely shows the potential that the application has when prepared appropriately.
The use of prompts in Midjourney and the adaptation and reformulation of the prompts in combination with camera settings and different sequence modulations in Runway Gen2 made it possible to build a content archive from which a storyline could ultimately be created with the help of voice recordings, subtitles and sound design.
In Ableton Live, vocal recordings were down-pitched and modulated with effects to give the main protagonist's voice a certain mystique. In combination with scenes from underground club culture and in animated collage clips that were created from the still image material, the possibility arose to fabricate a narrative plot that can be expanded sequentially.
The AI-generated image gallery shows the stills developed in Midjourney, from which the animated sequences in RunwayGL were subsequently created.
"The rise of the unknown artist" ist ein Animations-Kurzfilm, der in düsterem Cinema Noir Comic Stil den Aufstieg eines unbekannten Techno-Produzenten erzählt. Der Film wurde ausschließlich mit KI durch die Kombination von 50 Bildern in Midjourney generiert, die im Anschluß mit RunwayGen2 zu animierten Sequenzen weiterverarbeitet wurden. Mit Ableton Live 11 wurde die Story vertont und anschließend in Adobe Premiere Pro geschnitten.
Durch meine experimentelle Forschung an KI-generierter Bilderzeugung kam ich auf die Idee, einen Comic Stil als Grundlage eines Kurzfilms zu generieren, mit dem ich eine Geschichte erzählen konnte, die aus dem in Midjourney erzeugten Bildmaterial in der Weiterverarbeitung mit Runway Gen2 zu animierten Kurzsequenzen führte. Die Schwierigkeit zwischen Standbild und bewegter Animation einen verwertbaren KI generierten Content zu generieren, zeigt auf jeden fall, welches Potential hinter der Anwendung bei entsprechender Aufbereitung steckt.
Mit den Prompts von Midjourney und die Adaption und Umformulierung der Prompts in Kombination mit Kamera-Einstellungen und unterschiedlichen Sequenzmodulationen in Runway Gen2 ermöglichte den Aufbau eines Content-Archivs, aus dem sich letztendlich eine Storyboard mit Hilfe von Voice-Recordings, Untertiteln und Sounddesign schaffen ließ. In Ableton Live wurden Stimmaufnahmen gepitcht und mit Effekten moduliert, um der Stimme des Hauptprotagonisten eine gewisse Mystik zu verleihen. In Kombination mit Szenen aus der Untergrund-Clubkultur und in animierten Collage-Clips, die aus dem Standbild-Material entstanden, ergab sich die Möglichkeit, einen narrativen Plot zu fingieren, der sequenziell erweiterbar bleibt.
Die KI-generierte Bildergallerie zeigt die in Midjourney entwickelten Stills, aus denen im weiteren Verlauf die animierten Sequenzen in RunwayGL entstanden sind.
GALLERY
