Stable Diffusion Inpainting - Alles, was Sie wissen müssen

Das Stable Diffusion-Modell zum Übermalen ist eine technologische Funktion von Stable Diffusion, die viele Benutzer beim Auffüllen von beschädigten Bereichen oder fehlenden Teilen eines Bildes als nützlich empfunden haben. Es ist auch nützlich, um Teile eines Fotos zu entfernen, die Sie nicht sehen möchten. Diese Technik erzeugt in der Tat realistische Bilder, die so aussehen, wie es der Benutzer wünscht und die einem bestimmten Zweck dienen.

Wenn Sie sich der wachsenden Community der digitalen Creator anschließen möchten, die mit Stable Diffusion malen, ist dieser Artikel genau das Richtige für Sie. In diesem Blog erfahren Sie alles, was Sie über Stable Diffusion Inpainting wissen müssen. Außerdem erfahren Sie, wie Sie Inpainting mit dem Stable Diffusion-Modell in der Praxis einsetzen können, welche Einsatzmöglichkeiten es in verschiedenen Bereichen gibt, welche einzigartigen Vorteile es bietet und erhalten Expertentipps, wie Sie mit Stable Diffusion Inpainting das Beste herausholen.

Teil 1. Was ist Stable Diffusion Inpainting?

Inpainting ist eine Funktion, mit der Sie Teile eines Fotos durch ein anderes Foto ersetzen können, indem Sie eine Textprompt-Anleitung verwenden. Stable Diffusion hat diese Funktion in seine Tools aufgenommen, um den Benutzern mehr Bearbeitungsmöglichkeiten zu geben, wenn sie ihre kreativen Vorstellungen zum Leben erwecken wollen.

Der Arbeitsablauf ist einfach: Sie stellen ein Originalfoto, ein Maskenfoto, das den zu ersetzenden Teil umreißt und einen Textprompt bereit. Jetzt verwendet das Stable Diffusion-Modell das neue Foto, um den maskierten Teil durch ein beliebiges Objekt oder Szenario zu ersetzen, das Sie in Ihrem Textprompt beschrieben haben.

Das ist alles!

Das Stable Diffusion Inpainting Tool ist nützlich, um neue Bilder mit anderen Motiven als die vorhandenen oder ursprünglichen Bilder zu erstellen. Außerdem ist es möglich, alte oder beschädigte Bilder zu restaurieren, indem die unschönen Teile durch optisch ansprechendere Objekte ersetzt werden.

Beachten Sie, dass Sie bei einer leistungsstarken KI-Technologie wie Stable Diffusion durchgehende Tests durchführen müssen, um sicherzustellen, dass das Originalbild, der Textprompt, das Maskenbild und die gewünschte Ausgabe alle synchron sind. Der nächste Abschnitt widmet sich also diesem Thema.

Teil 1. Wie funktioniert die Stable Diffusion Inpainting Technik?

Möchten Sie wissen, wie das Inpainting mit Stable Diffusion funktioniert? Dann lesen Sie einfach weiter, um mehr über die drei Stable Diffusion Inpainting-Apps zu erfahren, die Sie zu diesem Zweck problemlos verwenden können.

3 Praktische Inpainting-Apps mit Stable Diffusion Modell:

1. Hugging Face Stable Diffusion Multi Inpainting

Die erste Methode des Stable Diffusion Inpainting ist das Hugging Face Multi-Inpainting Tool. Folgen Sie der nachstehenden Anleitung, um zu erfahren, wie dieses Tool funktioniert:

• Besuchen Sie Hugging Face Stable Diffusion Inpainting online.
• Ziehen Sie das Bild, das Sie bearbeiten möchten, per Drag & Drop oder klicken Sie auf die mittlere Arbeitsfläche, um Ihr Bild aus dem Store Ihres Geräts oder Computers hochzuladen.

• Aktivieren Sie die Option zum Überpinseln des Bereichs, den Sie entfernen möchten oder geben Sie den oder die Teile ein, die Sie maskieren möchten.

• Geben Sie Ihren beschreibenden Text ein, um anzugeben, was der Editor in den maskierten Teil einfügen soll. Wählen Sie "Ausführen" und warten Sie ein paar Sekunden auf das endgültige Ergebnis. Sie können von vorne beginnen, wenn Sie unzufrieden sind oder das neue Bild herunterladen.

2. Getimg.ai Editor

Die zweite praktische Inpainting-App mit dem Stable Diffusion-Modell, die wir empfehlen, ist der Getimg.ai-Editor. Um dieses Tool zu verwenden, befolgen Sie die nachstehenden Richtlinien:

• Melden Sie sich online beim Getimg.ai-Editor an und klicken Sie auf das "+" Zeichen in der Mitte der Seite, um ein neues Bild hinzuzufügen, das Sie auf die leere Arbeitsfläche malen möchten.

• Klicken Sie auf das Radiergummi Symbol, wählen Sie die gewünschte Pinselgröße und ziehen Sie den Radiergummi-Pinsel über die Bereiche des Fotos, die Sie maskieren möchten. Vergewissern Sie sich, dass alles, was Sie ersetzen möchten, vollständig mit Ihrem Radiergummi bedeckt ist.

• Um ein neues Objekt hinzuzufügen, wählen Sie "Übermalen" und ziehen Sie dann den "Generation Frame", um den maskierten Teil abzudecken. Gehen Sie dann in das Feld unter "Prompt" und geben Sie ein, was Sie über dem maskierten Bereich erstellen möchten. Klicken Sie nun auf "Erzeugen".

• Nach Ihrem Prompt zeigt der Stable Diffusion Inpainting-Editor vier Variationen von neuen Bildern an. Klicken Sie auf den Pfeil nach rechts, um die einzelnen Bilder zu betrachten und wählen Sie das Bild aus, das Ihnen am besten gefällt, bevor Sie "Akzeptieren" wählen. In der Abbildung unten haben wir die letzte Variante gewählt.

• Sie können den Vorgang abbrechen und von vorne beginnen, wenn Ihnen das Ergebnis nicht gefällt. Möglicherweise müssen Sie jedoch Ihren Prompt anpassen, damit sich dieser KI-Editor mehr auf das von Ihnen gewünschte Ergebnis konzentrieren kann. Hier sehen Sie ein Vorher-Nachher-Bild des Inpainting-Prozesses:

3. Inpainter Vercel App

Die Inpainter Vercel App nutzt das Replicate Stable Diffusion Inpainting Online Tool, um einen Teil eines Bildes durch einen anderen Ihrer Wahl zu ersetzen. Folgen Sie der Anleitung unten, um dieses Tool zu verwenden:

• Besuchen Sie Replicate Stable Diffusion Inpainting online und wählen Sie die Schaltfläche "Malen starten".

• Sie haben zwei Möglichkeiten: Ziehen Sie ein Bild aus dem Speicher Ihres Geräts oder geben Sie einen beschreibenden Textprompt ein, um mit dem Malen von vorne zu beginnen. Klicken Sie auf "Generieren".

• Warten Sie einige Sekunden, bis Inpainter Ihr Bild generiert hat, wenn Sie einen Text-Prompt verwendet haben; fügen Sie dann weitere Prompts hinzu, wenn Sie das Bild ändern möchten. Wenn nicht, fahren Sie mit der nächsten Stufe fort.

• Verwenden Sie die Maus Ihres Computers oder den Bildschirm Ihres Telefons, um das zu ersetzende Objekt einzugeben und geben Sie das Objekt ein, das Sie in den ausgefüllten Bereich setzen möchten. Wählen Sie nun erneut "Generieren".

Verschiedene Verwendungszwecke in verschiedenen Bereichen

Die Inpainting Stable Diffusion ist in verschiedenen Bereichen für verschiedene Zwecke nützlich, wie unten beschrieben:

• In der Architektur kann es verwendet werden, um beschädigte Abschnitte oder unvollständige Bereiche von Gebäudeentwürfen zu reparieren, um den Bauarbeitern präzisere und vollständigere Informationen an die Hand zu geben.
• In der Medizin ist Inpainting nützlich, um suboptimale Ergebnisse von MRT-Aufnahmen der Gehirne von Patienten zu mildern. Wenn zum Beispiel der Kopf eines Patienten während eines solchen Eingriffs fixiert ist, kann die Bildgebung zuschneiden, was zu Datenverlusten und ungenauen Diagnosen führt. Hier sorgt das Inpainting dafür, dass die Scans hochwertig und vollständig sind.
• In der Fotografie wird Inpainting verwendet, um Unreinheiten im Gesicht oder auf der Haut von Menschen auf Fotos zu glätten oder zu entfernen.
• Es wird auch verwendet, um fehlende oder beschädigte Frames bei der Restaurierung von Videos wiederherzustellen.

Vor- und Nachteile von Stable Diffusion Inpainting

Vorteile:

Zu den wichtigsten Vorteilen dieses Editors gehören die folgenden:

• Es ist wichtig, alte Fotos in ihrem alten Glanz wiederherzustellen und sogar noch mehr. Mit Inpainting können Sie Kratzer, Risse, rote Augen oder Staubflecken aus Bildern entfernen, um sie ansprechender zu gestalten.
• Die hier verwendete Wärmegleichung ist mathematisch stabil, d.h. sie verursacht keine Divergenz oder Instabilität bei der Neuverteilung von Intensitätswerten auf die Bildfelder, die aufgefüllt werden müssen. Das führt zu einem glatten und natürlichen Ergebnis.
• Es unterstützt die Wiederherstellung komplex strukturierter Bilder, Kanten, Texturen und scharfer Übergänge mit einem nahtlosen Finish.
• Das Stable Diffusion Inpainting-Modell erzeugt effiziente Ergebnisse schneller als die meisten Bearbeitungstechniken.
• Es erzeugt qualitativ hochwertige Endauflösungen und ermöglicht es Ihnen, verschiedene Kunststile und Kombinationen zu erkunden.

Nachteile:

Im Folgenden werden einige wichtige Einschränkungen und Vorurteile dieses Editors erläutert:

• Perfekter Realismus lässt sich mit diesem Modell des Inpaintings nicht erreichen.
• Bei komplexeren Aufgaben schneidet das Stable Diffusion Modell für Inpainting nicht so gut ab wie erwartet. Solche Aufgaben wie gemusterte oder strukturierte Oberflächen können bei der Bearbeitung mit einem Stable Diffusion Inpainting Tool unpassend und unnatürlich erscheinen.
• Dieses Inpainting-Modell wurde anhand englischer Bildunterschriften entwickelt und trainiert, so dass die Generierung von Bildern, die in anderen sprachlichen Prompts beschrieben werden, unmöglich ist. Und wenn dies der Fall ist, sind die Ergebnisse schlechter als die Bilder der englischen Prompts.
• Es besteht das Sicherheitsrisiko, dass Ihr KI-generiertes Bild in die falschen Hände gerät, da sensible Daten in dieser Form gespeichert sind.
• Das könnte irreführend sein, denn dieses Tool kann beliebige Aspekte eines Bildes in einer natürlichen Form hinzufügen und ersetzen, die von der Realität abweichen kann.

Experten-Tipps:

1. Verwenden Sie qualitativ hochwertige Quellbilder, um genaue und effiziente Inpainting-Ergebnisse zu gewährleisten (versuchen Sie den Media.io AI Photo Enhancer, um qualitativ hochwertige Quellbilder zu erhalten).

2. Kombinieren Sie Stable Diffusion Inpainting mit anderen KI-Bildverarbeitungstechniken wie den Media.io AI Object Remover (um unerwünschte Objekte aus Ihrem Foto zu entfernen), Photo Restorer (um alte Bilder in neue zu verwandeln) und AI BG Remover (um den Fotohintergrund nach Belieben zu ändern).

3. Optimieren Sie Ihr Endergebnis, indem Sie die Parameter für Stable Diffusion-Inpainting anpassen.

4. Verfolgen Sie Foren und Blogs und lesen Sie Forschungsberichte, um auf dem neuesten Stand der KI-Bildverarbeitungstechnologie zu sein.