kann ich invokeai auch direkt in open Webui integrieren?
- User
kann ich invokeai auch direkt in open Webui integrieren?
Assistant
Kurze Antwort:
Ja, du kannst InvokeAI mit Open WebUI integrieren, indem du die API von InvokeAI nutzt und Open WebUI so anpasst, dass es Anfragen zur Bildgenerierung an InvokeAI sendet. Allerdings ist dies keine "out-of-the-box"-Lösung und erfordert technische Anpassungen.
Schritt-für-Schritt-Integration:
-
InvokeAI-API aktivieren:
- Starte InvokeAI mit der API-Schnittstelle. Dies erreichst du durch:
invokeai --web --host 0.0.0.0 --port 9090 - Die API-Dokumentation findest du unter:
http://localhost:9090/docs (lokal) oder in der offiziellen Dokumentation.
- Starte InvokeAI mit der API-Schnittstelle. Dies erreichst du durch:
-
Open WebUI anpassen:
-
Option 1: Eigenes Frontend-Plugin entwickeln
Erstelle ein benutzerdefiniertes Plugin/Frontend-Element in Open WebUI, das:- Eingabefelder für Prompts (z. B.
positive_prompt,negative_prompt,steps,cfg_scale) anzeigt. - API-Aufrufe an
http://<invokeai-host>:9090/api/v1/generatesendet (POST). - Beispiel-Request:
{ "prompt": "Ein surrealistischer Fuchs, digital art", "steps": 30, "cfg_scale": 7.5 } - Die Antwort enthält das generierte Bild (
base64oder URL), das im Chat angezeigt wird.
- Eingabefelder für Prompts (z. B.
-
Option 2: Backend-Integration via Ollama Functions (fortgeschritten)
Nutze Ollamas Function Calling, um InvokeAI-Aufrufe aus LLM-Antworten zu triggern.
Beispiel:- Der LLM erkennt eine Bildgenerierungsanfrage.
- Open WebUI ruft dein benutzerdefiniertes Skript auf, das die InvokeAI-API nutzt.
- Das Ergebnis wird als Bild im Chat zurückgegeben.
-
-
Sicherheit & Konfiguration:
- Stelle sicher, dass Open WebUI auf die InvokeAI-API zugreifen darf (CORS, Firewall, Netzwerk-IPs).
- Verwende Environment Variables in Open WebUI, um die InvokeAI-URL zu konfigurieren (z. B.
INVOKEAI_API=http://localhost:9090).
Alternativen, falls dir Coding zu aufwendig ist:
- InvokeAI als separater Tab:
Öffne InvokeAI in einem eigenen Browser-Tab neben Open WebUI. Keine Integration, aber einfach. - Benutzerdefinierte Docker-Compose:
Binde beide Dienste in einerdocker-compose.ymlzusammen und nutze ein gemeinsames Netzwerk:services: open-webui: image: ghcr.io/open-webui/open-webui:main ports: ["3000:8080"] invokeai: image: invokeai/invokeai:latest ports: ["9090:9090"]
Wichtige Hinweise:
- Kein offizielles Plugin:
Es gibt derzeit (Stand 2024) kein vorgefertigtes Plugin für InvokeAI in Open WebUI. Du musst selbst Code schreiben oder die Community um Hilfe bitten. - Ähnliche Projekte als Inspiration:
Studiere Plugins für andere Generatoren (z. B. Stable Diffusion in Open WebUI), um die Mechanik zu verstehen. - Community-Fragen:
Stelle konkrete Anfragen im Open WebUI GitHub Discussions oder InvokeAI Discord.
Falls du Hilfe bei der Implementierung brauchst, teile deine technischen Anforderungen (z. B. "Wie sende ich API-Requests aus Open WebUI?"), und ich gebe dir Code-Snippets! 🚀
-
Other models, same or similar prompt
Responses were produced in different, uncontrolled contexts (system prompts, settings, prior turns). This is not a benchmark.