Entwicklung benutzerdefinierter Bildanalysefähigkeiten in OpenClaw mit lokalen Modellen
Ein Entwickler dokumentierte seinen Prozess zur Erstellung einer benutzerdefinierten Bildanalyse-Fähigkeit für OpenClaw unter ausschließlicher Verwendung kostenloser, lokaler Tools ohne API-Kosten.
Einrichtung und erste Herausforderungen
Der Entwickler betreibt OpenClaw auf Windows 11 über Ubuntu WSL mit Ollama als LLM-Backend. Er stieß auf Einschränkungen bei der Bildverarbeitung der WebUI – obwohl er einen Upload-Ordner erstellte, konnte das System nur Dateiinformationen lesen, aber keine Bildinhalte analysieren. Dies veranlasste ihn, Alternativen zu kostenpflichtigen API-Lösungen (Claude, Gemini, OpenAI) oder Hardware-Käufen zu erkunden.
Entwicklung der Lösung
Nach der Installation von context7mcp bewertete er lokale Sprachmodelle und entschied sich für Qwen2.5 VL. Erste Versuche mit integrierten Fähigkeiten scheiterten an Problemen mit der Modellnamen-Akzeptanz und der Ollama-Integration. Der Durchbruch gelang durch systematisches Testen: Bilder über API-Aufrufe an Ollama senden, Antworten auslesen und sowohl Bash- als auch Python-Skripte zur Prozessabwicklung erstellen.
Implementierungsdetails
- Umgebung: Windows 11 mit Ubuntu WSL
- LLM-Backend: Ollama
- Ausgewähltes Modell: Qwen2.5 VL
- Integrationsmethode: API-Aufrufe an Ollama
- Erstellte Skripte: Bash- und Python-Versionen
Die benutzerdefinierte Fähigkeit registriert sich nativ in OpenClaw und kann mit Befehlen wie „analysiere dieses Bild“ oder „schau dir dieses Foto an“ aufgerufen werden, wobei detaillierte und genaue Antworten zurückgegeben werden. Der Entwickler merkt an, dass zukünftige Verbesserungen mit kleineren Qwen3/3.5VL-Modellen die Leistung weiter steigern könnten.
Trotz Herausforderungen wie mehrfachen Neuinstallationen und Frustrationen mit unvollständigen Open-Source-Tools beschreibt der Entwickler die Erfahrung als Erschaffung eines „selbstkorrigierenden, sich selbst verbessernden Organismus“ und bleibt beeindruckt vom Potenzial von OpenClaw für die Entwicklung benutzerdefinierter Fähigkeiten.
📖 Read the full source: r/openclaw
👀 Siehe auch
RunLobster KI-Agent integriert Geschäftsdaten für operative Einblicke
Ein Entwickler gewährte RunLobster Root-Zugriff auf seine Geschäftssysteme, einschließlich Stripe, CRM, E-Mail und Gesprächstranskripte. Der Agent überwacht autonom den Betrieb, markiert Anomalien und liefert detaillierte Berichte basierend auf integrierter Datenanalyse.
Nicht-Entwickler betreibt 18-Agenten-OpenClaw-Setup auf Mac mini für digitales Marketing
Ein Inhaber einer Digitalmarketing-Agentur ohne Programmiererfahrung betreibt seit sechs Wochen ein 18-Agenten-OpenClaw-System auf einem Mac mini M4, was etwa 100 $/Monat für Claude Max Pro plus 5 $/Monat Stromkosten verursacht. Das Setup umfasst drei Agenten-Haushalte, die nach Charakteren der Serie 'Bridgerton' modelliert sind und Aufgaben in den Bereichen Content-Erstellung, SEO und Entwicklung übernehmen.
Mit OpenClaw eine tägliche YouTube-zu-LinkedIn-Pipeline aufgebaut: Architektur, Fallstricke und gewonnene Erkenntnisse
Ein Entwickler teilt die Architektur eines OpenClaw-Skills, der täglich 30 YouTube-Kanäle scrapt, Transkripte per LLM analysiert und in Google Sheets schreibt. Beschreibt wichtige Fallstricke wie Apify async vs. sync, Codex-Leerlauf-Watchdog und ARG_MAX-Limits.
Verwenden von SkyClaw mit Google Sheets für den Bewerbungs-Workflow
Ein Reddit-Nutzer teilt seinen Arbeitsablauf mit OpenClaws SkyClaw-Agent, um die Jobsuche zu automatisieren. Er richtete ein Google Sheet ein, in das der Agent basierend auf seinem Lebenslauf Stellenangebote einträgt, mit täglichen Updates und Benachrichtigungen.