ControlNet macht Stable Diffusion noch mächtiger

Georg Neumann
Februar 19, 2023

Vor ein paar Tagen wurde ControlNet veröffentlicht. Eine neurale Netzwerkstruktur, die latent diffusion Modellen extra Konditionen hinzufügt. Den Techtalk bei Seite geschoben: Stable Diffusion kann jetzt um einiges mehr.

Durch das Hinzufügen der verschiedenen Konditionen können jetzt per img2img Verständnis für menschliche Posen, Formen, Skizzen und sogar einzelne Flächen implementiert werden, wodurch sich ganz neue Möglichkeiten eröffnen.

Stable Diffusion ist ein ganzes Stück schlauer geworden.
Georg Neumann Tweet

Bildinhalte austauschen?
Easy mit Canny Edge.

Pix2Pix war gestern – durch die Edge Maps wird der Original Bildaufbau beibehalten und durch den Prompt ersetzt.

Interiordesign eines Raumes anpassen?
Ein Klick mit Line Maps.

Besonders für Architekten und Inneneinrichter höchst spannend.

Stilisierung von Bildern?
Noch viel besser als vorher.

Die HED Maps erlauben es möglichst viele markante Details aus dem Ursprungsbild in neue Ergebnisse mit anderen Stilen zu übertragen.

Bilder aus Skizzen erstellen?
Unglaubliche Ergebnisse.

Das ging schon früher mit img2img – aber nun auch auf einem ganz neuen Level.

Skizzen aus Bildern erstellen, aus denen dann wiederum neue Bilder entstehen?
Faulheit siegt!

Der Usecase aus der Github-Page spricht für sich.

Bilder aus Skizzen erstellen?
Unglaubliche Ergebnisse.

Das ging schon früher mit img2img – aber nun auch auf einem ganz neuen Level.

Menschliche Posen aus einem Bild auf neue übertragen? ENDLICH! Das openpose Model machts möglich.

Nächster Step: Hände 🥳

Natürlich habe ich das Ganze für euch direkt getestet.

Testreihe im Scribble Mode

Stable Diffusion – Model: Analog Diffusion (SD 1.5)

Testreihe mit Openpose Model

Stable Diffusion – Model: Analog Diffusion (SD 1.5)

Du willst auch das Skillset rund um Stable Diffusion erlernen? Dann komm in unser Bootcamp oder sprich uns zu einer individuellen Beratung an.

Quelle Grafiken oben: GitHub – lllyasviel

Das könnte Dich auch interessieren:

KI im Einsatz

4 Methoden, 1 Ziel: KI Charakterkonsistenz im Praxis-Test – Midjourney v7, ChatGPT, FLUX.1 Kontext & LoRA-Training

Dein Avatar soll in jeder Szene gleich aussehen? Dann kennst du vermutlich das Problem: KI-Tools ‚vergessen‘ gerne, wie dein Charakter aussieht. Mal sind die Augen anders, mal die Frisur, mal die kompletten Gesichtszüge. Die gute Nachricht: Es gibt bewährte Methoden für echte Charakterkonsistenz. Wir haben uns vier verschiedene Ansätze genauer angeschaut, getestet und zeigen dir anhand praktischer Beispiele, welche Methode wann funktioniert – und wo die Grenzen liegen. Inhaltsverzeichnis Die vier Wege zur Charakterkonsistenz

12. Juni 2025

KI News

In-Context Editing mit FLUX.1 Kontext: Eine neue Ära für die KI-gestützte Bildbearbeitung

Es gibt eine bemerkenswerte Entwicklung im Bereich der KI-Bildgenerierung, die Aufmerksamkeit verdient: FLUX.1 Kontext, entwickelt von den Black Forest Labs. Diese Technologie hat das Potenzial, die Arbeitsweise von Marketern im Umgang mit visuellen Inhalten nachhaltig zu beeinflussen. Inhaltsverzeichnis Der Kernansatz von FLUX.1 Kontext ist die „In-Context Image Generation“. Das bedeutet, Nutzer können KI-Bilder nicht nur auf Basis von Texteingaben, sondern auch unter Verwendung bestehender Bilder als Referenz erstellen. Ein wesentliches Merkmal ist die Möglichkeit, diese

30. Mai 2025

Aktuelles

Google I/O 2025: Imagen 4, Veo 3 & Flow – Die neue Generation der KI-Bild- und Videogenerierung

Google hat auf der I/O-Konferenz 2025 sein neues KI-Bildgeneratormodell Imagen 4 vorgestellt. Die Ankündigung markiert einen bedeutenden Fortschritt im Bereich der KI-gestützten Bildgenerierung und bringt zahlreiche Verbesserungen gegenüber dem Vorgänger Imagen 3. Das Modell wurde am 20. Mai 2025 offiziell enthüllt und ist seitdem in verschiedenen Google-Produkten und -Diensten integriert Inhaltsverzeichnis Google, Google, Google… Was gibt’s Neues nach der großen Konferenz? Gerade erst hat Google wieder die Tech-Welt in Atem gehalten: Nach der I/O-Konferenz

21. Mai 2025

KI im Einsatz

Tagebuch einer Lernreise: Wie ich mit KI und n8n Prozesse automatisiere

Inhaltsverzeichnis Moin! Ich bin Kathi, Teil des KI Marketing Bootcamps, und setze mich gerade intensiv damit auseinander, wie man sich mit Automatisierungen das Leben leichter machen kann. Aktuell tauche ich tief in das Tool n8n ein – ein mächtiges No-Code-Werkzeug, mit dem sich wiederkehrende Abläufe im Marketing-Alltag automatisieren lassen. Unterstützt werde ich dabei von Marcel, der mir als Coach zeigt, wie man Prozesse strukturiert analysiert, visualisiert und schließlich so aufbaut, dass sie uns

16. Mai 2025

Aktuelles

Adobe Firefly Image 4: Qualität besser – aber viele runzeln die Stirn

„Adobe holt auf – aber reicht das?“ Georg hat’s letzte Woche auf LinkedIn treffend formuliert. Das neue Image 4 Modell liefert sichtbar bessere Ergebnisse – Gesichter, Hände, Details: alles deutlich realistischer. Aber dann kommt der Moment, in dem viele unwillkürlich die Stirn runzeln: Nur zehn Bilder pro Monat kostenlos, auch für zahlende Creative-Cloud-Nutzer:innen. Wer mehr will – oder Zugang zu den neuen externen Modellen wie Google Imagen oder OpenAI Image 1 – darf zusätzlich zahlen.

7. Mai 2025

Aktuelles

Mistral Le Chat: Was die kostenlose Beta jetzt wirklich kann

Mistral Le Chat ist kein neues Tool – bereits 2024 als Open-Source-Alternative zu ChatGPT vorgestellt, war es vor allem in Entwicklerkreisen ein Gesprächsthema. Doch während das Unternehmen Mistral durch seine leistungsfähigen Modelle wie „Mixtral“ früh Aufmerksamkeit bekam, blieb der hauseigene Chatbot für viele eher im Hintergrund. Mit dem Update im Winter und dem aktuellen Beta-Zugang hat sich das verändert. Die Webversion von Le Chat bietet inzwischen eine ganze Reihe praktischer Funktionen – und das

7. Mai 2025

ControlNet macht Stable Diffusion noch mächtiger

Bildinhalte austauschen?
Easy mit Canny Edge.

Interiordesign eines Raumes anpassen?
Ein Klick mit Line Maps.

Stilisierung von Bildern?
Noch viel besser als vorher.

Bilder aus Skizzen erstellen?
Unglaubliche Ergebnisse.

Skizzen aus Bildern erstellen, aus denen dann wiederum neue Bilder entstehen?
Faulheit siegt!

Bilder aus Skizzen erstellen?
Unglaubliche Ergebnisse.

Menschliche Posen aus einem Bild auf neue übertragen? ENDLICH! Das openpose Model machts möglich.

Testreihe im Scribble Mode

Testreihe mit Openpose Model

Du willst auch das Skillset rund um Stable Diffusion erlernen? Dann komm in unser Bootcamp oder sprich uns zu einer individuellen Beratung an.

Zum Newsletter anmelden

Sitemap

Kontakt

Rechtliches

ControlNet macht Stable Diffusion noch mächtiger

Bildinhalte austauschen?Easy mit Canny Edge.

Interiordesign eines Raumes anpassen? Ein Klick mit Line Maps.

Stilisierung von Bildern? Noch viel besser als vorher.

Bilder aus Skizzen erstellen? Unglaubliche Ergebnisse.

Skizzen aus Bildern erstellen, aus denen dann wiederum neue Bilder entstehen? Faulheit siegt!

Bilder aus Skizzen erstellen? Unglaubliche Ergebnisse.

Menschliche Posen aus einem Bild auf neue übertragen? ENDLICH! Das openpose Model machts möglich.

Testreihe im Scribble Mode

Testreihe mit Openpose Model

Du willst auch das Skillset rund um Stable Diffusion erlernen? Dann komm in unser Bootcamp oder sprich uns zu einer individuellen Beratung an.

Zum Newsletter anmelden

Sitemap

Kontakt

Rechtliches

🚀 Exklusive Back-to-School-Aktion 🚀

Abonniere unseren Newsletter 🥳

Bildinhalte austauschen?
Easy mit Canny Edge.

Interiordesign eines Raumes anpassen?
Ein Klick mit Line Maps.

Stilisierung von Bildern?
Noch viel besser als vorher.

Bilder aus Skizzen erstellen?
Unglaubliche Ergebnisse.

Skizzen aus Bildern erstellen, aus denen dann wiederum neue Bilder entstehen?
Faulheit siegt!

Bilder aus Skizzen erstellen?
Unglaubliche Ergebnisse.