Demo-Projekt: Stable Diffusion Text-zu-Bild / Bild-zu-Bild

Im Rahmen eines selbstinitiierten, 4-monatigen Projektes habe ich unter anderem diese kleine Demo-App entwickelt um meine zentralen Kompetenzen als - AI-Engineerin - sowohl in der technischen Umsetzung als auch in der strukturierten Entwicklung komplexer Workflows zu präsentieren. Es bildet grundlegende Stable-Diffusion-Prozesse ab, während ich zusätzlich in anderen GPU-basierten Umgebungen erweiterte Text-to-Image und Image-to-Image-Pipelines realisiert habe. Genau dieses mehrstufige System mit ControlNet-Inpainting und segmentbasierten Komponenten stellt eine vollwertige Systemlandschaft dar und demonstriert meine Fähigkeit, komplexe KI-Systeme konzeptionell zu modellieren und zu orchestrieren.

Im Anschluss daran habe ich Grundstrukturen eines autonomen Code-Refactoring-Agenten mit semantischem Gedächtnis entwickelt und implementiert. Dieser Prozess hat meine Python-Kenntnisse weiter vertieft und mein Verständnis für durchdachte Softwarearchitekturen und saubere, wartbare Programmier-Strukturen geschärft.

Dieses ganzheitliche Denken baut direkt auf meinem fundierten, über viele Monate systematisch und mathematisch erarbeiteten Verständnis von KI-Modellarchitekturen, Trainingsmethoden und System-Orchestrierung auf, dass ich differenzierter auf meiner Webseite https://pevptdzn.manus.space/ beschrieben habe. So entstehen KI-Lösungen, die nicht nur technisch überzeugen, sondern vor allem echten Mehrwert in Unternehmensprozessen liefern – genau das, was mich als IT-Spezialistin und KI-Expertin ausmacht.

Zudem führt der Link Roadmap zu einer durchdachten, skalierbaren, professionellen Code-Architektur für Text-to-Image- und Image-to-Image-Entwicklung die die gesamte Komplexität einer professionellen Bild-Umsetzung verdeutlicht.

Die hiermit gezeigten Fähigkeiten meinerseits sind sicherlich auf andere Projekte übertragbar.

Die Anwendung läuft derzeit auf CPU ist jedoch vollständig GPU-fähig. Deshalb muss bei jeder Generierung eine längere Wartezeit eingeplant werden.

Bei Verbindungsabbrüchen - insbesondere bei CPU-Nutzung - wird die aktuelle Generierung zunächst serverseitig vollständig abgeschlossen, bevor neue Anfragen bearbeitet werden. Das generierte Bild wird in diesem Fall nicht angezeigt. Die Meldung Connection re-established signalisiert, dass die Verbindung wiederhergestellt wurde, die laufende Verarbeitung jedoch priorisiert wird. In der Konsequenz werden neue Generierungsanfragen in eine Warteschlange gestellt und erst nach vollständigem Abschluss der aktuellen serverseitigen Berechnung verarbeitet.

Die Anwendung nutzt Gradio auf Hugging Face Spaces - eine Technologie, die keine temporäre Speicherung generierter Bilder vorsieht. Jede Verbindung wird als unabhängige Sitzung behandelt. Dies wird besonders bei CPU-Nutzung relevant, da längere Transformationszeiten die Wahrscheinlichkeit für Timeouts und Seiten-Neuladungen erhöhen. Obwohl die Bildgenerierung serverseitig vollständig abgeschlossen wird, kann das Ergebnis bei Verbindungsunterbrechungen nicht an die neu geladene Seite übermittelt werden.

Die Bild-zu-Bild-Transformation ermöglicht die gezielte Modifikation bestehender Bildelemente - beispielsweise die Umwandlung einer Laterne in eine Fackel, einer Katze in einen Hund, oder die Versetzung einer Person vom Büro an einen tropischen Strand bei Beibehaltung des Gesichts.

Es können keine neuen Objekte generiert, sondern ausschließlich vorhandene Elemente transformiert werden.

Der Tab unterstützt zwei operative Modi:

• Umgebungstransformation: Veränderung der Umgebung bei Beibehaltung eines markierten Bildbereichs (z.B. Person)
• Fokustransformation: Veränderung eines markierten Bereichs (z.B. Objekt) bei Beibehaltung der Umgebung

Es können sowohl selbst generierte Bilder als auch externe Bilder bis 4096×4096 Pixel hochgeladen und transformiert werden.

Achtung: Der Hintergrundwechsel klappt am besten, wenn die Maske maximal die Hälfte des Bildes ausmacht.

Je höher die Auflösung des hochgeladenen Bildes ist, desto länger dauert das Auswählen des zu bearbeitenden Bildbereiches.

Alle transformierten Ausgaben werden aufgrund der gewählten Stable-Diffusion-Architektur bei 512×512 Pixeln verarbeitet und dann auf die Originalgröße skaliert.

Das System optimiert Prompts in beiden Arbeitsbereichen durch semantische KI-Analyse (Vektorähnlichkeit). Es erkennt sinngleiche Formulierungen und fügt bei Bedarf unterschiedliche Qualitäts-Booster, in Abhängigkeit vom zu generierenden/transformierenden Bild, aus einer Vektordatenbank hinzu.

Optimale Workflow-Empfehlung: Zur Gewährleistung optimaler Ergebnisse werden Bilder im Format 512×512 Pixel verarbeitet. Ein effizienter Workflow umfasst:

1. Generierung von Basis-Bildern über Text-zu-Bild
2. Gezielte Transformation über Bild-zu-Bild
3. Optionale Textintegration auf generierten oder originalen Basis-Bildern
4. Optionale Skalierung für generierte Basis-Bilder

Upscaler:

Zur Erzielung höherer Auflösungen steht im Arbeitsbereich Text-zu-Bild ein Upscaler per API zur Verfügung, der die 512×512-Basisbilder ohne Qualitätsverlust auf unterschiedliche Größen skalieren kann.

Audio-Unterstützung:

Während der Bildgenerierung kann in diesem Bereich eine Hintergrundmusik-Funktion aktiviert werden, die die Generierungszeit füllt. Der integrierte Audio-Player wird beim Tab-Wechsel unterbrochen.

Die Textintegration ist verfügbar für generierte Bilder in beiden Arbeitsbereichen sowie für externe Bildquellen im Arbeitsbereich Bild zu Bild. Es werden alle gängigen Bildformate (JPG, PNG, WEBP, BMP, TIFF) unterstützt. Die maximale Dateigröße beträgt 15 MB.

📱💻🖥️ Plattformübergreifende Kompatibilität:

Die Anwendung ist vollständig optimiert für Desktop, Tablet und Smartphone - nutzbar mit Maus, Touchscreen oder kombinierter Bedienung.

📱 Mobile Nutzung: Hinweis zur Anzeige: Beim Wechsel von der Startseite zur Anwendung kann es auf einigen Mobilgeräten vorkommen, dass der Inhalt zunächst im unteren Bereich angezeigt wird. Bitte scrollen Sie gegebenenfalls nach oben, um die vollständige Oberfläche zu sehen. Dies ist eine technische Einschränkung der Hugging Face Plattform.

Für eine präzise Abstimmung der zentralen Parameter – Prompt, Negativ-Prompt, Veränderungsstärke (Strength), Inferenz-Schritte (Steps) und Prompt-Stärke (Guidance) – liefern leistungsfähige Sprachmodelle wie GPT, Grok oder DeepSeek hochqualitative, kontextbezogene Vorschläge. Prompt und Negativ-Prompt sollten auf Englisch eingegeben werden, da "Stable Diffusion" mit Bild-Text-Paaren auf Englisch trainiert wurde und CLIP einen Tokenizer für ein englisches Vokabular nutzt. Der CLIP-Tokenizer hat außerdem ein Limit von 77 Token, wodurch längere Prompteingaben automatisch abgeschnitten werden. Deutsche Wörter werden zwar übersetzt, führen aber zu Verzerrungen.

Beim allerersten Aufruf der Anwendung (oder nach längerer Inaktivität) kann das Laden der Stable-Diffusion-Modelle und aller benötigten Komponenten in den Arbeitsspeicher 30–90 Sekunden dauern.

Dies geschieht nur einmal pro Session bzw. nach Neustart des Spaces – danach sind alle Generierungen deutlich schneller.