inference.eu

Automatisierung · Flowise

Flowise mit Open-Source-Modellen aus der EU nutzen

Flowise ist ein quelloffener Low-Code-Baukasten für Chatbots, Agenten und RAG-Pipelines. Seine ChatOpenAI-Nodes akzeptieren einen eigenen Base Path. So laufen Ihre Chatflows und Agentflows auf Open-Weight-Modellen bei inference.eu, verarbeitet in europäischen Rechenzentren.

  1. 01API-Format: OpenAI
  2. 02Rechenzentren in der EU
  3. 03Durch einen AV-Vertrag abgedeckt

In wenigen Minuten eingerichtet

  1. 1

    Erstellen Sie in Ihrem inference.eu-Konto einen API-Schlüssel.

  2. 2

    Legen Sie in Flowise unter Credentials OpenAI-API-Zugangsdaten namens inference.eu an und fügen Sie Ihren Schlüssel ein.

  3. 3

    Ziehen Sie in einem Chatflow den Node ChatOpenAI Custom aus Chat Models auf die Fläche und verbinden Sie die neuen Zugangsdaten.

  4. 4

    Geben Sie die Modell-ID von inference.eu ein, etwa kimi-k3, öffnen Sie Additional Parameters und setzen Sie Base Path auf die Basis-URL von inference.eu.

  5. 5

    Verbinden Sie den Node mit einer Chain oder einem Agenten und senden Sie im Chat-Fenster eine Testnachricht.

yaml
# Credential: Credentials > Add Credential > OpenAI API
Credential Name: inference.eu
OpenAI Api Key: <your INFERENCE_EU_API_KEY>

# Node: Chat Models > ChatOpenAI Custom
Connect Credential: inference.eu
Model Name: kimi-k3
Streaming: true
# Additional Parameters
Base Path: https://api.inference.eu/v1

Was Flowise ist

Flowise ist ein quelloffener visueller Baukasten für Anwendungen mit Sprachmodellen. Sie ziehen Nodes auf eine Arbeitsfläche und bauen Chatflows aus LangChain-Komponenten sowie Agentflows mit mehreren Agenten, Tools, Bedingungen und menschlicher Prüfung. Fertige Flows binden Sie als Chat-Widget ein oder rufen sie über eine API auf. Flowise läuft selbst gehostet mit Node.js oder Docker oder als Cloud-Dienst.

Chat-Modelle sind Nodes auf der Fläche. Flowise dokumentiert eigene Basis-URLs für seine ChatOpenAI-Nodes, damit sie mit jedem OpenAI-kompatiblen Dienst sprechen, und der Node ChatOpenAI Custom akzeptiert beliebige Modellnamen. Zusammen verbinden sie Ihre Flows mit inference.eu.

So funktioniert die Konfiguration

Legen Sie OpenAI-API-Zugangsdaten mit Ihrem Schlüssel von inference.eu an. Flowise speichert Zugangsdaten verschlüsselt und macht sie in allen Flows wiederverwendbar. Fügen Sie dann den Node ChatOpenAI Custom hinzu, verbinden Sie die Zugangsdaten und tragen Sie unter Model Name die Modell-ID von inference.eu ein.

Setzen Sie unter Additional Parameters den Base Path auf die Basis-URL von inference.eu mit Endung /v1. Auch der normale ChatOpenAI-Node hat ein Feld Base Path, seine Modellliste enthält aber die Namen von OpenAI. ChatOpenAI Custom ist daher die einfachere Wahl. Agentflow-Nodes lassen Sie ChatOpenAI Custom auf dieselbe Weise als Modell wählen.

Welche Modelle sich eignen

Für Chatbots im Dialog und Retrieval-Chains über Dokumente liefert gpt-oss-120b schnelle Antworten und hält das Chat-Widget reaktionsschnell. Für Tool-Agenten und mehrstufige Agentflows wählen Sie kimi-k3 oder glm-5.3, die verlässliche Tool-Aufrufe liefern und langen Kontext verarbeiten.

RAG-Flows, die aus langen Dokumenten antworten, profitieren von glm-5.3 oder kimi-k3. Für Flows, die Code erzeugen oder prüfen, nutzen Sie qwen3-coder-480b-a35b-instruct. Jeder Chat-Model-Node ist unabhängig. Ein Agentflow kann also mit einem schnellen Modell routen und mit einem stärkeren antworten, alles über inference.eu.

Fehlerbehebung

Ein Fehler 401 bedeutet, dass die Zugangsdaten den falschen Schlüssel enthalten. Ein 404 entsteht meist, wenn Base Path leer ist, /v1 fehlt oder ein Pfad zu viel enthalten ist. Ist Base Path leer, ruft der Node OpenAI mit Ihrem Schlüssel von inference.eu auf und scheitert. „Model not found“ heißt, dass Model Name von der ID bei inference.eu abweicht.

Antwortet ein Tool-Agent, ohne Tools aufzurufen, wählen Sie ein Modell mit stärkeren Tool-Aufrufen. Erscheint kein Streaming im Chat-Fenster, prüfen Sie, ob Streaming am Node aktiv ist. Selbst gehostetes Flowise kann ausgehende Hosts über eine HTTP-Sperrliste blockieren. Stellen Sie sicher, dass der Host von inference.eu nicht darauf steht.

Daten bleiben in der EU

Mit Base Path auf inference.eu werden Nachrichten, abgerufene Dokumente und Tool-Ergebnisse, die Ihre Flows an das Modell senden, in EU-Rechenzentren verarbeitet und nie zum Training verwendet. Wir schließen einen Auftragsverarbeitungsvertrag nach Art. 28 DSGVO, veröffentlichen unsere Unterauftragsverarbeiter und rechnen in Euro ab.

Flowise speichert Flows, Zugangsdaten und Chatverläufe in seiner eigenen Datenbank. Hosten Sie Flowise in der EU, um volle Kontrolle zu behalten, und setzen Sie DISABLE_FLOWISE_TELEMETRY=true, um die anonyme Nutzungstelemetrie abzuschalten. Embeddings, Vektordatenbanken und Tools in Ihren Flows nutzen eigene Anbieter. Wählen Sie dafür in der EU gehostete Optionen.

Flowise: häufige Fragen

Die Fragen, die uns Einkauf, Entwicklung und Rechtsabteilungen am häufigsten stellen. Etwas fehlt? Fragen Sie uns direkt.

Frage stellen

Verlagern Sie Ihre KI-Workloads auf europäische Infrastruktur

Sagen Sie uns, welche Modelle Sie nutzen und wie viel Verkehr Sie ungefähr haben. Wir antworten innerhalb eines Werktags mit Preisen und nächsten Schritten.

  • Antwort innerhalb eines Werktags
  • Preise für Ihr Volumen
  • AV-Vertrag unterschriftsreif