For the complete documentation index, see llms.txt. This page is also available as Markdown.

LobeChat-KI-Assistent

Deploye LobeChat auf Clore.ai — eine beeindruckende, funktionsreiche KI-Chat-Oberfläche mit Unterstützung für mehrere Anbieter, Wissensdatenbank und Plugins auf günstigen GPU-basierten Cloud-Servern.

Überblick

LobeChat ist ein modernes, Open-Source-KI-Chat-Framework mit über 55.000 GitHub-Sternen, bekannt für seine ausgereifte Benutzeroberfläche und seinen umfangreichen Funktionsumfang. Es unterstützt praktisch jeden wichtigen LLM-Anbieter — OpenAI, Anthropic Claude, Google Gemini, Mistral und lokale Modelle über Ollama — alles über eine einzige, selbst gehostete Oberfläche.

Warum LobeChat auf Clore.ai ausführen?

  • Keine GPU erforderlich — LobeChat selbst ist eine leichte Web-App. Clore.ai-Instanzen nur mit CPU oder mit minimaler GPU sind für die Oberfläche völlig ausreichend.

  • Mit lokalen LLMs kombinieren — Starten Sie Ollama oder vLLM auf demselben Clore.ai-Server und verbinden Sie LobeChat damit für vollständig lokale, private Inferenz.

  • Erschwingliches Hosting — Eine einfache Clore.ai-Instanz kostet nur einen Bruchteil traditioneller VPS-Anbieter, und Sie können sie bei Nichtgebrauch herunterfahren.

  • Vollständige Datenhoheit — Im Datenbankmodus werden alle Unterhaltungen, Dateien und Embeddings in Ihrer eigenen PostgreSQL-Instanz auf dem Server gespeichert.

LobeChat arbeitet in zwei unterschiedlichen Modi:

Modus
Beschreibung
Am besten geeignet für

Eigenständig

Einzelner Docker-Container, Einstellungen im Browser gespeichert

Schnelle Tests, persönliche Nutzung

Datenbank

Vollständiger Stack (PostgreSQL + MinIO + Auth + App)

Teams, persistenter Verlauf, Wissensdatenbank


Anforderungen

Serverspezifikationen

Komponente
Minimum
Empfohlen
Hinweise

GPU

Nicht erforderlich

RTX 3090 (wenn lokale LLMs ausgeführt werden)

Nur für das Ollama/vLLM-Backend erforderlich

VRAM

—

24 GB (RTX 3090)

Für lokale Modell-Inferenz

CPU

2 vCPU

4+ vCPU

LobeChat selbst ist leichtgewichtig

RAM

2 GB

8 GB

4+ GB bei Nutzung des Datenbankmodus

Speicher

10 GB

50+ GB

Mehr, wenn hochgeladene Dateien oder Modelle gespeichert werden

Clore.ai-Preisreferenz

Servertyp
Ca. Kosten
Anwendungsfall

Nur-CPU-Instanz

ca. 0,05–0,10 $/Std.

Nur eigenständiges LobeChat

RTX 3090 (24 GB VRAM)

ca. 0,07–0,21 $/h

LobeChat + lokale Ollama-LLMs

RTX 4090 (24 GB VRAM)

ca. 0,14–0,42 $/h

LobeChat + schnellere lokale Inferenz

A100 80 GB

LobeChat + große Modelle (70B+)

💡 Tipp: Für die Nutzung nur über APIs (Verbindung zu OpenAI, Anthropic usw.) reicht jede kleine Instanz aus. Ein GPU-Server ist nur sinnvoll, wenn Sie auch lokale LLMs ausführen möchten. Siehe GPU-Vergleichsleitfaden für Details.

Voraussetzungen

  • Clore.ai-Konto mit einem bereitgestellten Server

  • SSH-Zugriff auf Ihren Server

  • Docker und Docker Compose (auf Clore.ai-Servern vorinstalliert)

  • NVIDIA-Treiber (vorinstalliert; nur relevant, wenn das lokale LLM-Backend verwendet wird)

  • Mindestens ein API-Key (OpenAI, Anthropic usw.) oder eine lokale Ollama-Instanz


Schnellstart

Option A: Eigenständiger Modus (empfohlen für den Einstieg)

Der eigenständige Modus führt LobeChat als einzelnen Container aus. Einstellungen und Gesprächsverlauf werden im lokalen Speicher des Browsers gespeichert — keine Datenbank erforderlich.

Schritt 1: Mit Ihrem Clore.ai-Server verbinden

Schritt 2: LobeChat herunterladen und starten

Schritt 3: Prüfen, ob es läuft

Schritt 4: Auf die Oberfläche zugreifen

Öffnen Sie Ihren Browser und navigieren Sie zu:

⚠️ Sicherheitshinweis: Clore.ai-Server sind öffentlich zugänglich. Erwägen Sie, ACCESS_CODE zu setzen, um Ihre Instanz mit einem Passwort zu schützen (siehe Konfigurationsabschnitt unten).


Option B: Eigenständiger Modus mit mehreren Anbietern

Übergeben Sie mehrere API-Keys, um verschiedene Anbieter gleichzeitig zu unterstützen:


Option C: Mit lokalem Ollama-Backend

Wenn Sie Ollama auf demselben Clore.ai-Server ausführen (siehe Ollama-Anleitung):

Unter Linux ersetzen Sie host-gateway durch die tatsächliche Docker-Bridge-IP, typischerweise 172.17.0.1:


Option D: Datenbankmodus (Docker Compose)

Der Datenbankmodus ermöglicht einen persistenten Gesprächsverlauf, Unterstützung für mehrere Benutzer, Datei-Uploads in S3-kompatiblen Speicher und eine vollständige Wissensdatenbank.

Schritt 1: Projektverzeichnis erstellen

Schritt 2: Erstellen docker-compose.yml

Schritt 3: Den Stack starten

Schritt 4: MinIO-Bucket erstellen


Konfiguration

Referenz der Umgebungsvariablen

Variable
Beschreibung
Standard

OPENAI_API_KEY

OpenAI-API-Schlüssel

—

OPENAI_PROXY_URL

Benutzerdefinierter OpenAI-kompatibler Endpunkt

https://api.openai.com/v1

ANTHROPIC_API_KEY

Anthropic Claude API-Schlüssel

—

GOOGLE_API_KEY

Google Gemini API-Schlüssel

—

MISTRAL_API_KEY

Mistral AI API-Schlüssel

—

OLLAMA_PROXY_URL

URL zur lokalen Ollama-Instanz

—

ACCESS_CODE

Passwort zum Schutz der Oberfläche

—

DEFAULT_AGENT_CONFIG

JSON-Konfiguration für das Standardverhalten des Assistenten

—

FEATURE_FLAGS

Bestimmte Funktionen aktivieren/deaktivieren

—

Bestimmte Funktionen aktivieren

Websuch-Plugin aktivieren:

Text-zu-Sprache aktivieren:

Benutzerdefinierten System-Prompt für den Standard-Agenten festlegen:

LobeChat aktualisieren

Für Docker Compose:


GPU-Beschleunigung

LobeChat selbst nicht benötigt keine GPU. In Kombination mit einem GPU-beschleunigten Backend auf Clore.ai erhalten Sie jedoch lokale, private LLM-Inferenz:

Kombination mit vLLM (Hochleistungs-Inferenz)

Siehe die vLLM-Anleitung für die vollständige Einrichtung. Schnelle Integration:

Ressourcennutzung

Backend
Verwendeter GPU-VRAM
Ungefähre Durchsatzrate

Ollama (Llama 3.2 3B)

~2 GB

50–80 Token/Sek. auf 3090

Ollama (Llama 3.1 8B)

~6 GB

40–60 Token/Sek. auf 3090

vLLM (Llama 3.1 8B)

~16 GB

80–150 Token/Sek. auf 3090

vLLM (Llama 3.1 70B)

~80 GB

20–40 Token/Sek. auf A100 80GB


Tipps & bewährte Praktiken

Kostenoptimierung

  • Stoppen Sie Ihren Server, wenn er im Leerlauf ist. Clore.ai berechnet stundenweise — verwenden Sie das Dashboard, um Instanzen anzuhalten, die Sie gerade nicht aktiv nutzen.

  • Eigenständiger Modus für die persönliche Nutzung. Sofern Sie keine Unterstützung für mehrere Benutzer oder einen persistenten serverseitigen Verlauf benötigen, vermeidet der eigenständige Modus den Mehraufwand von PostgreSQL und MinIO.

  • Nutzen Sie API-Anbieter für große Modelle. Claude- oder GPT-4-Anfragen über externe APIs weiterzuleiten ist günstiger, als für gelegentliche Abfragen eine H100 zu mieten.

Sicherheit

  • LobeChat niemals ohne einen ACCESS_CODE auf einer öffentlichen IP.

  • Erwägen Sie, bei längerem Betrieb einen Nginx-Reverse-Proxy mit HTTPS zu verwenden.

  • Rotieren Sie API-Keys, wenn Sie eine Offenlegung vermuten.

Leistung

  • Für den Datenbankmodus mit 10+ gleichzeitigen Benutzern sollten auf dem Host mindestens 8 GB RAM vorhanden sein.

  • MinIO arbeitet besser mit SSD-gestütztem Speicher (Clore.ai-NVMe-Instanzen).

Persistenz zwischen Clore.ai-Sitzungen

Da Clore.ai-Server beendet werden können:

Exportieren Sie Gespräche regelmäßig in der UI über Einstellungen → Datenexport.


Fehlerbehebung

Container startet nicht

Keine Verbindung zu Ollama von LobeChat aus möglich

Datenbankverbindungsfehler (Datenbankmodus)

Bilder/Dateien werden nicht hochgeladen (Datenbankmodus)

Speicherfehler wegen unzureichendem Arbeitsspeicher


Weiterführende Lektüre

Zuletzt aktualisiert

War das hilfreich?