Lvmin Zhang, Anyi Rao, Maneesh Agrawala Modell

ControlNet.

Bildkomposition bei der Generierung steuern

4.35 / 5Katalogbewertung
Offizielle Website

Eigenständige Architektur zur Konditionierung von Diffusionsmodellen. Sie kann ein zusätzliches Bild mit der räumlichen Struktur der Szene verwenden.

Offizielles ControlNet-Repository mit Beschreibung der Erzeugungsbedingungen.
Repository der Autoren von ControlNet mit Beispielen für die räumliche Steuerung. Quelle öffnen

Eine zusätzliche Bedingung für die Generierung

ControlNet fügt der Textanfrage Daten zur Rahmenstruktur hinzu. In der ursprünglichen Arbeit zeigen die Autoren die Steuerung nach Konturen, Linien, Tiefe und Position. Jede Bedingung braucht eine geeignete Waage. Dies hilft, die Anordnung der Details zwischen den Optionen zu halten. Inhalt und Stil geben den Text an, und die Bedingung ist für einen Teil der räumlichen Organisation verantwortlich. Für die Arbeit wird ein kompatibles Basismodell benötigt.

Varianten aus einer Raumskizze

Skizzieren Sie eine Werkstatt mit einem Fenster links, einem Tisch in der Mitte und einer freien Wand rechts. Zeichnen Sie saubere Linien und wählen Sie Gewichte für den passenden Eingabetyp. Erzeugen Sie verschiedene Beleuchtungen mit derselben Skizze. Prüfen Sie, ob der Abstand zwischen Tisch und Fenster erhalten bleibt. Wenn das Modell unbeabsichtigte Bleistiftstriche übernimmt, bereinigen Sie die Vorlage oder verringern Sie den Einfluss der Bedingung. Ändern Sie beim Vergleich jeweils eine Einstellung.

Wenn Sie einen Gegenstand benötigen, überprüfen Sie auch den Rest des Bildes. Eine starke Bindung an die Linien kann auf die Wände der Kante übertragen werden, die Hilfs waren.

Kompatibilität vor einer Serie prüfen

Überprüfen Sie, für welches Modell die Gewichte bestimmt sind, und notieren Sie ihre Namen zusammen mit den Abfrageparametern. Der Bildprozessor des Originalbildes beeinflusst auch das Ergebnis. Zur Kontrolle speichern Sie die Option ohne strukturelle Bedingung und vergleichen Sie die Zusammensetzung. Wenn das Bild einem anderen Autor gehört, vereinbaren Sie die Bedingungen für die Verwendung vor der Veröffentlichung des Ergebnisses. Überprüfen Sie die Gewichte separat.

Für welche Aufgaben geeignet

  • Benutzerdefinierte Skizzen-Komposition speichern
  • Vergleichen Sie die Stilisierungsoptionen einer Szene
Funktionen

Stärken

  • Verwalten einer bestimmten Bildstruktur
  • Verschiedene Arten von zusätzlichen Bedingungen
Zu berücksichtigen

Einschränkungen

  • Ein kompatibles Basismodell ist erforderlich
  • Eine harte Bedingung kann unnötige Linien betonen

Auswahl und Bedingungen

Kostenlose Nutzung
Ja
Testphase
Nicht bestätigt
Keine Registrierung erforderlich
Nicht bestätigt
Russische Benutzeroberfläche
Nicht bestätigt
Lokale Installation
Ja
API
Nicht bestätigt

„Nicht bestätigt“ bedeutet, dass nicht genügend Informationen vorliegen. Die Funktion kann dennoch verfügbar sein; prüfen Sie die Angaben des Entwicklers.

Eingabeformate
Text, Bild
Ergebnis
Bild

Bedingungen

Das Modell ist an ein kompatibles Diffusionssystem angeschlossen. Wählen Sie die Gewichte für das Basismodell und den Typ des Strukturbildes.

Von der Aufgabe zum ersten Ergebnis

Praxisbeispiel

Aufgabe
Benutzerdefinierte Skizzen-Komposition speichern
Was Sie vorbereiten sollten
Eine kurze Beschreibung der geplanten Illustration und das gewählte Seitenverhältnis.

Aufgabenbeschreibung oder Prompt

Redaktionelle Illustration: eine kleine Werkstatt, auf dem Tisch ein Notizbuch und eine grüne Schreibtischlampe, weiches Tageslicht, einfache Komposition und freier Platz links für eine Überschrift. Keine Beschriftungen, Logos oder Wasserzeichen.

Erwartetes Ergebnis

Eine Illustration mit klarer Komposition und Platz für Text; dies ist eine Aufgabenbeschreibung, kein veröffentlichtes Generierungsergebnis.

So prüfen Sie das Ergebnis

  • Prüfen Sie die Geometrie der Gegenstände und unbeabsichtigte Beschriftungen.
  • Prüfen Sie Abmessungen, Lizenz und Bedingungen für die kommerzielle Nutzung des gewählten Modus.

Ein redaktionelles Lernbeispiel für eine Aufgabenbeschreibung, kein Ergebnis eines eigenen Praxistests des Dienstes. Prüfen Sie die Verfügbarkeit des benötigten Modus, die Rechte am Ausgangsmaterial und die Bedingungen für die Nutzung des Ergebnisses.

Details überprüfen

Offizielle Quellen

  1. Code und Beispiele für ControlNet
  2. Artikel von ControlNet

Die Beschreibung basiert auf den Materialien des Entwicklers. Die Funktionen, Preise und Verfügbarkeit können variieren. Bitte überprüfen Sie die Quelle vor der Verwendung.