Erstellung eines vollständig lokalen Multi-Agenten-Assistenten mit OpenClaw und Ollama

Ein Entwickler auf r/openclaw baut einen vollständig lokalen persönlichen KI-Assistenten (denk an Jarvis) mit OpenClaw als Agent-Framework, Ollama für lokale Inferenz und einem MINISFORUM AI X1 mit Ryzen AI 9 HX470, 96 GB RAM und 2 TB NVMe (GPU über Oculink geplant). Das Ziel: ein proaktives Multi-Agent-System, das Smart Home, Dokumente, Kalender, Gesundheit und Kommunikation integriert – alles lokal, ohne dass sensible Daten die Infrastruktur verlassen.

Stack-Details

• Agent-Framework: OpenClaw
• Inferenz-Engine: Ollama
• Modelle: qwen3.5:35b-a3b (Hauptmodell), gemma3:4b (Zuhause), mistral:7b (Leben/Gmail)
• MCP-Server: Home Assistant, Gmail
• Schnittstelle: Telegram Bot, zukünftige STT-Integration ins Smart Home

Sub-Agent-Architektur

Der Haupt-Routing-Agent delegiert an spezialisierte Sub-Agenten:

• HA-Agent – Smart-Home-Steuerung und Debugging (gestartet)
• Gmail-Agent – E-Mail-Management (gestartet)
• Lebens-Agent – Kalender, Aufgaben, Einkaufslistenverwaltung (tbb)
• Gesundheits-Agent – Gesundheits- und Sportdaten-Überwachung (tbb)
• Recherche-Agent – Web- + Dokument-RAG (in paperless ngx auf NAS) (tbb)
• Entwicklungs-Agent – Programmieraufgaben mit separaten Codier-, Test- und Dokumentationsagenten (tbb)

Herausforderungen & offene Fragen

• Kontextaufblähung: Die Kontextgröße wird selbst bei einfachen Nachrichten sehr groß. Die Konfiguration benötigt wahrscheinlich eine bessere MCP-Server-Eingrenzung und Sub-Agent-Tool-Isolation.
• MCP-pro-Agent-Eingrenzung: Es gibt noch keine native Möglichkeit, MCP-Server auf bestimmte Agenten zu beschränken. Aufgrund eines offenen Bugs werden empfohlene Workarounds gesucht.
• Sub-Agent-Konfiguration: Es wird ein gut strukturiertes Beispiel für agents.list für dieses Multi-Agent-Setup gesucht.
• Lokale Modellauswahl: Zuverlässiges Tool Calling mit Ollama unter 32 GB VRAM – irgendwelche Empfehlungen?
• Inferenzumgebung: Es wird erwogen, auf llama.cpp anstelle von Ollama umzusteigen, falls es mehr Kontrolle bietet.

Der Entwickler ist offen für Feedback zu Ansatz und Konfiguration. Wenn du ähnliche Multi-Agent-Skalierungsprobleme angegangen bist oder Workarounds für MCP-Eingrenzung hast, beteilige dich an der Diskussion auf Reddit.