Midjourney kann jetzt konsistente Charaktere erstellen: Midjourney hat eine seiner am häufigsten geforderten Funktionen eingeführt: die Fähigkeit, Charaktere konsistent über neue Bilder hinweg zu rekreieren. Dies war bisher eine große Herausforderung für KI-Bildgeneratoren. Die meisten von ihnen basieren auf sogenannten “Diffusionsmodellen”, ähnlich dem von Stability AI entwickelten Open-Source-Bildgenerierungsalgorithmus Stable Diffusion. Diese Modelle arbeiten ungefähr so, dass sie Texteingaben eines Nutzers entgegennehmen und versuchen, Pixel für Pixel ein Bild zu erstellen, das dieser Beschreibung entspricht. Sie lernen dabei aus ähnlichen Bildern und Text-Tags in ihrem umfangreichen (und kontroversen) Trainingsdatensatz von Millionen von menschengemachten Bildern.
Warum konsistente Charaktere für generative KI-Bildgebung so mächtig – und schwer fassbar – sind
Wie auch bei textbasierten großen Sprachmodellen (LLMs) wie OpenAIs ChatGPT oder Cohere’s neuem Command-R, liegt das Problem bei allen generativen KI-Anwendungen in ihrer Inkonsistenz: Die KI generiert bei jedem eingegebenen Prompt etwas Neues, auch wenn der Prompt wiederholt wird oder einige der gleichen Schlüsselwörter verwendet werden. Dies ist großartig für die Erzeugung völlig neuer Inhalte. Aber was ist, wenn man beim Storyboarding eines Films, eines Romans, eines grafischen Romans oder Comics dieselben Charaktere durch verschiedene Szenen, Settings und mit unterschiedlichen Gesichtsausdrücken und Requisiten bewegen möchte?
Midjourneys neuer Ansatz zur Lösung dieses Problems
Midjourney nimmt sich nun dieser Herausforderung an und führt ein neues Tag, “–cref” (kurz für “character reference”), ein. Nutzer können dieses Tag am Ende ihrer Textprompts im Midjourney Discord hinzufügen und versuchen, die Gesichtszüge, den Körpertyp und sogar die Kleidung eines Charakters von einer URL, die der Nutzer nach besagtem Tag einfügt, abzugleichen.
So funktioniert das neue Feature: Zuerst generiert oder holt sich der Nutzer die URL eines zuvor generierten Charakters. Dann gibt er einen neuen Prompt ein, beispielsweise “wearing a white tuxedo standing in a villa –cref [URL]”, und fügt die URL des zuvor generierten Bildes ein. Midjourney versucht dann, denselben Charakter wie zuvor in der neu eingegebenen Umgebung zu generieren.
Wie man das neue Merkmal für konsistente Charaktere von Midjourney nutzt
Und hier ist die vollständige Notiz des Gründers David Holz dazu:
Hey @alle @hier, wir testen heute ein neues “Charakterreferenz”-Feature. Dies ist ähnlich wie das “Stilreferenz”-Feature, aber anstatt einen Referenzstil abzugleichen, versucht es, den Charakter an ein “Charakterreferenz”-Bild anzupassen.
Wie es funktioniert
Gib –cref URL nach deinem Prompt mit einer URL zu einem Bild eines Charakters ein Du kannst –cw verwenden, um die Referenzstärke von 100 bis 0 zu ändern Stärke 100 (–cw 100) ist Standard und verwendet das Gesicht, die Haare und die Kleidung Bei Stärke 0 (–cw 0) konzentriert es sich nur auf das Gesicht (gut für das Ändern von Outfits / Haaren usw.) Wofür es gedacht ist
Dieses Feature funktioniert am besten bei Charakteren, die aus Midjourney-Bildern erstellt wurden. Es ist nicht für echte Menschen / Fotos gedacht (und wird diese wahrscheinlich verzerren, wie es normale Bild-Prompts tun) Cref funktioniert ähnlich wie normale Bild-Prompts, außer dass es sich auf die Charaktermerkmale konzentriert Die Genauigkeit dieser Technik ist begrenzt, sie wird keine exakten Grübchen / Sommersprossen / oder T-Shirt-Logos kopieren. Cref funktioniert sowohl für Niji- als auch für normale MJ-Modelle und kann auch mit –sref kombiniert werden Erweiterte Funktionen
Du kannst mehr als eine URL verwenden, um die Informationen / Charaktere aus mehreren Bildern zu mischen, wie dies –cref URL1 URL2 (das ist ähnlich wie mehrere Bild- oder Stil-Prompts) Wie funktioniert es in der Web-Alpha?
Ziehe oder füge ein Bild in die Vorstellungsbalken ein, es hat jetzt drei Symbole. Durch das Auswählen dieser wird festgelegt, ob es sich um einen Bild-Prompt, eine Stilreferenz oder eine Charakterreferenz handelt. Shift+select eine Option, um ein Bild für mehrere Kategorien zu verwenden Denkt daran, dass, während MJ V6 in der Alpha ist, dieses und andere Features plötzlich ändern können, aber die offizielle V6-Beta kommt bald. Wir würden uns über jedermanns Gedanken in ideas-and-features freuen. Wir hoffen, ihr genießt diese frühe Veröffentlichung und hofft, sie hilft euch dabei, mit dem Erstellen von Geschichten und Welten zu spielen.
Midjourney Cref-Schritt für Schritt Anleitung
- Erstelle ein Bild einer Figur in Midjourney v6
2. Speichere das Bild
3. Klicke im Discord-Server von Midjourney mit einem RECHTSKLICK auf das Bild und KOPIERE DEN LINK (“Copy Link”)
4. Schreibe einen neuen Prompt. Am Ende des Prompts fügst Du –cref “DEIN BILD LINK EINFÜGEN”.
Ein neues Bild mit dem Charakter wird erzeugt, der dem Original-Bild sehr ähnlich ist.
Fazit Midjourney kann jetzt konsistente Charaktere erstellen: Eine neue Ära für KI-generierte Charakterdarstellungen
Diese Entwicklung ist ein großer Schritt vorwärts für KI-Bildgeneratoren und könnte Midjourney von einem coolen Spielzeug oder Ideenquelle zu einem professionelleren Werkzeug machen. Die Fähigkeit, Charaktere konsistent über mehrere Bilder hinweg darzustellen, öffnet neue Türen für Künstler und Schöpfer in vielen Bereichen wie Film, Bücher und Grafikdesign.
#KuenstlicheIntelligenz #artificialintelligence #KI #AI #Midjourney #Charaktergenerierung #Bildgenerierung #KIInnovation #digitaleKunst #Technologie