ControlNet macht Stable Diffusion noch mächtiger

Georg Neumann
Februar 19, 2023

Vor ein paar Tagen wurde ControlNet veröffentlicht. Eine neurale Netzwerkstruktur, die latent diffusion Modellen extra Konditionen hinzufügt. Den Techtalk bei Seite geschoben: Stable Diffusion kann jetzt um einiges mehr.

Durch das Hinzufügen der verschiedenen Konditionen können jetzt per img2img Verständnis für menschliche Posen, Formen, Skizzen und sogar einzelne Flächen implementiert werden, wodurch sich ganz neue Möglichkeiten eröffnen.

Stable Diffusion ist ein ganzes Stück schlauer geworden.
Georg Neumann Tweet

Bildinhalte austauschen?
Easy mit Canny Edge.

Pix2Pix war gestern – durch die Edge Maps wird der Original Bildaufbau beibehalten und durch den Prompt ersetzt.

Interiordesign eines Raumes anpassen?
Ein Klick mit Line Maps.

Besonders für Architekten und Inneneinrichter höchst spannend.

Stilisierung von Bildern?
Noch viel besser als vorher.

Die HED Maps erlauben es möglichst viele markante Details aus dem Ursprungsbild in neue Ergebnisse mit anderen Stilen zu übertragen.

Bilder aus Skizzen erstellen?
Unglaubliche Ergebnisse.

Das ging schon früher mit img2img – aber nun auch auf einem ganz neuen Level.

Skizzen aus Bildern erstellen, aus denen dann wiederum neue Bilder entstehen?
Faulheit siegt!

Der Usecase aus der Github-Page spricht für sich.

Bilder aus Skizzen erstellen?
Unglaubliche Ergebnisse.

Das ging schon früher mit img2img – aber nun auch auf einem ganz neuen Level.

Menschliche Posen aus einem Bild auf neue übertragen? ENDLICH! Das openpose Model machts möglich.

Nächster Step: Hände 🥳

Natürlich habe ich das Ganze für euch direkt getestet.

Testreihe im Scribble Mode

Stable Diffusion – Model: Analog Diffusion (SD 1.5)

Testreihe mit Openpose Model

Stable Diffusion – Model: Analog Diffusion (SD 1.5)

Du willst auch das Skillset rund um Stable Diffusion erlernen? Dann komm in unser Bootcamp oder sprich uns zu einer individuellen Beratung an.

Quelle Grafiken oben: GitHub – lllyasviel

Wer hat's geschrieben?

Georg Neumann

Ich bin Georg. Früher habe ich Pixel geschubst, heute trainiere ich Bild-KI Modelle. Seit 2022 habe ich mich voll und ganz der generativen KI verschrieben – nicht nur als User, sondern als Gestalter. Ich liebe es, die Grenzen von Modellen wie Flux und Z-Image auszuloten und Workflows zu bauen, die Marketingteams wirklich voranbringen. Mit meinem KI Marketing Bootcamp und Projekten wie meinen Kinderbüchern zeige ich, dass KI und Kreativität keine Gegensätze sind. Ich bin der Nerd, der dich an die Hand nimmt und sicher durch die Transformation führt.

Alle Beiträge

Das könnte Dich auch interessieren:

Aktuelles

Nudging und KI: Warum sanfte Stupser beim Lernen mit KI nicht reichen

Nudging ist eines dieser Konzepte, die so elegant klingen, dass man sie sofort auf alles anwenden will. Ein kleiner Stupser in die richtige Richtung, eine geschickte Voreinstellung, eine kaum merkliche Veränderung der Umgebung, und schon verhalten sich Menschen besser. Funktioniert in Kantinen, beim Organspende-Register, bei Cookie-Bannern. Warum nicht auch beim Lernen mit KI? Ich höre die Idee regelmäßig in Seminaren, besonders von Führungskräften: „Können wir nicht einfach ein paar Nudges einbauen? Ein Pop-up, das fragt:

2. April 2026

KI im Einsatz

12 KI-Nudges: Kleine Stupser für mehr KI-Praxis

KI-Nudges, um besser in die Praxis zu kommen! Doch was ist das überhaupt? Nudges sind kleine Schubser für dein Verhalten. Man kennt sie zum Beispiel aus der Kantine: Wenn statt dem Schnitzel der Salat vorne steht, kann das ein geplanter Schubser sein, damit du zur gesünderen Wahl greifst. Ich habe mir überlegt, mit welchen Nudges man die praktische Nutzung von KI verbessern kann. Im Nudging-Artikel habe ich beschrieben, warum klassisches Nudging beim Lernen mit KI

2. April 2026

KI im Einsatz

Vibecoding im Marketing: Warum Marketer jetzt programmieren lernen, ohne programmieren zu lernen

Vor drei Monaten hätte ich nicht geglaubt, dass ich das schreibe: Ich baue gerade eine Browser Extension. Sie erfasst, wie Menschen KI generierte Texte editieren. Ein Forschungstool für meine Arbeit. Ich kann nicht programmieren. Ich habe nicht programmieren gelernt. Und trotzdem funktioniert das Ding. Der Grund hat einen Namen, der gerade durch die Tech Welt geistert: Agent Coding. Oder, wie Andrej Karpathy es Anfang 2025 nannte: Vibecoding. Die Idee ist simpel und radikal zugleich. Du

23. März 2026

Aktuelles

„Was euch nicht gehört, könnt ihr nicht verkaufen“ – Was drei Urteile für deinen KI-Einsatz bedeuten

Drei deutsche Gerichte haben innerhalb weniger Monate die Spielregeln für generative KI neu geschrieben. Die These ist unbequem, aber belastbar: Wer KI-Output als eigene kreative Leistung verkauft, ohne den menschlichen Gestaltungsbeitrag nachweisen zu können, steht rechtlich mit leeren Händen da. Und haftet trotzdem für alles, was rauskommt. Das betrifft nicht irgendwelche Tech-Konzerne in Kalifornien. Das betrifft jede Agentur, die nächste Woche ein KI-generiertes Logo an einen Kunden liefert. INPUT: Was die KI frisst – und

23. März 2026

ixel-Art-Illustration eines Detektivs im Trenchcoat und mit Sonnenbrille. Er hält ein leuchtend grünes Dokument mit der Aufschrift 'skills.md' in der Hand. Rechts daneben ist ein aufsteigender Aktienchart mit der Überschrift 'STONKS' zu sehen, sowie kleine Symbole für ein Gehirn, ein Zahnrad und eine Tastatur. Der Detektiv hat eine Sprechblase: 'SKILLS.MD: MUCH WOW, VERY AGENT.'

KI im Einsatz

Agent Skills schreiben: Anleitung mit Marketing-Beispielen

Im Analyse-Artikel über Skills Engineering habe ich beschrieben, warum strukturiertes Prozesswissen die nächste Stufe der KI-Nutzung ist. Dieser Beitrag ist die praktische Seite: Wie schreibt man einen Agent Skill? Was gehört rein, was nicht? Und wie sieht das für typische Marketing-Aufgaben aus? Was ein Agent Skill technisch ist Ein Agent Skill ist auf seine allereinfachste Weise einfach eine Textdatei namens SKILL.md. Nicht mehr, also nicht verrückt machen lassen, nur weil das fancy klingt. Absolut machbar

13. März 2026

Uncategorized

Schau ins Denkprotokoll: Was KI-Modelle verraten, wenn man sie laut denken lässt

Ich habe Claude Schere, Stein, Papier spielen lassen. Drei Runden. Claude hat jede einzelne gewonnen. Beeindruckend? Auf den ersten Blick schon. Bis ich ins Denkprotokoll geschaut habe. Dort stand, sinngemäß: „Ich sehe die Wahl des Nutzers, bevor ich meine eigene treffe. Das ist nicht fair.“ Das Ergebnis (3:0 für Claude) sagt wenig. Das Denkprotokoll sagt alles. Ich zeige dieses Beispiel inzwischen in fast jedem Seminar, weil es in dreißig Sekunden demonstriert, was die meisten KI-Nutzer

13. März 2026

ControlNet macht Stable Diffusion noch mächtiger

Bildinhalte austauschen?Easy mit Canny Edge.

Interiordesign eines Raumes anpassen? Ein Klick mit Line Maps.

Stilisierung von Bildern? Noch viel besser als vorher.

Bilder aus Skizzen erstellen? Unglaubliche Ergebnisse.

Skizzen aus Bildern erstellen, aus denen dann wiederum neue Bilder entstehen? Faulheit siegt!

Bilder aus Skizzen erstellen? Unglaubliche Ergebnisse.

Menschliche Posen aus einem Bild auf neue übertragen? ENDLICH! Das openpose Model machts möglich.

Testreihe im Scribble Mode

Testreihe mit Openpose Model

Du willst auch das Skillset rund um Stable Diffusion erlernen? Dann komm in unser Bootcamp oder sprich uns zu einer individuellen Beratung an.

Wer hat's geschrieben?

Georg Neumann

Hey Du. Willst du AI Content Manager werden?

🚀 Exklusive Back-to-School-Aktion 🚀

Abonniere unseren Newsletter 🥳

Bildinhalte austauschen?
Easy mit Canny Edge.

Interiordesign eines Raumes anpassen?
Ein Klick mit Line Maps.

Stilisierung von Bildern?
Noch viel besser als vorher.

Bilder aus Skizzen erstellen?
Unglaubliche Ergebnisse.

Skizzen aus Bildern erstellen, aus denen dann wiederum neue Bilder entstehen?
Faulheit siegt!

Bilder aus Skizzen erstellen?
Unglaubliche Ergebnisse.