DreamStudio: Variationen über Alice und die Raupe
Nachdem gestern abend Hugging Face vermutlich wegen Überlastung mal wieder eine Auszeit genommen hatte1 und ich daher nicht mit der AI Comic Factory weiter spielen konnte, hatte ich DreamStudio angeworfen, um ein wenig zu testen, ob und wie diese Anwendung Bilder mit konsistenten Charakteren generieren kann.
Dazu habe ich erst einmal ein Referenzbild mit dem Prompt A blue (caterpillar) sits upright on a giant mushroom and smokes from a (pipe). (little girl alice) with blonde hair and blue eyes visits him and asks a question2 und dem Negativ-Prompt double person erzeugt. Als Modell habe ich Stable Diffusion XL in der Version (stable-diffusion-xl-1024-v1-0) und als Filter Comic Book gewählt.
Von diesem Referenzbild habe ich dann eine Reihe von Variationen erzeugt (insgesamt sechzehn Bilder). Die sechs gelungensten von ihnen (im Hinblick auf möglichst konsistente Charaktere) waren diese:
Mit einem Klick auf die Vorschaubilder kommt Ihr je zu eine Seite mit einer Vergrößerung.
Die Bilder sind auch dank des Filters Comic Book so überzeugend geraten. Allerdings habe ich viele Prompt-Variationen durchspielen müssen, bis ich ein Referenzbild hatte, mit dem ich weiterarbeiten konnte.
Das Ergebnis dieses Versuches läßt mich hoffen, daß ich tatsächlich mit der Technik der Referenzbilder in Stable Diffusion-Applikationen wie DreamStudio, Leonardo AI oder Playground AI konsistente Charaktere für eine komplette, bebilderte, interaktive Geschichte zum Beispiel mit Twine generieren kann.
Ich plane nämlich eine Fortsetzung meiner Twine-Tutorials (mit dem (Default-) Storyformat Harlowe), die auch dieses Mal wieder im Wunderland-Kosmos spielen soll, und da wäre es doch schön, wenn ich mit diesen Bildgeneratoren einigermaßen brauchbare Bilder erzeugen könnte. Denn, um – leicht abgewandelt – Alice zu zitieren: »Was ist eine Geschichte wert ohne Bilder? Gar nichts!« Still digging!
Bilder: Variationen über Alice und die Raupe, erstellt mit DreamStudio. Prompt: »A blue (caterpillar) sits upright on a giant mushroom and smokes from a (pipe). (little girl alice) with blonde hair and blue eyes visits him and asks a question«. Negativer Prompt: »double person«. Model: stable-diffusion-xl-1024-v1-0 Filter: Comic Book.
Fußnoten
Seitdem ich – dank dieses Artikels – mehr über die Hintergründe von Hugging Face weiß, das sich mehr als Community, denn als Unternehmen begreift, die gegen die Monopolisierung der KI-Forschung durch die Big-Tech-Unternehmen anstinken wollen, habe ich für die gelegentlichen Ausfälle wegen Serverüberlastung großes Verständnis.↩︎
DreamStudio ist eine Stable Diffusion-Applikation. Daher sollte sie die Priorisierung durch Klammern im Prompt verstehen.↩︎