Développement de Compétences d'Analyse d'Image Personnalisées dans OpenClaw avec des Modèles Locaux
Un développeur a documenté son processus de création d'une compétence d'analyse d'images personnalisée pour OpenClaw en utilisant exclusivement des outils locaux gratuits, sans coûts d'API.
Configuration et défis initiaux
Le développeur exécute OpenClaw sur Windows 11 via Ubuntu WSL avec Ollama comme backend LLM. Il a rencontré des limitations avec la gestion des images de l'interface Web - bien qu'il ait créé un dossier de téléchargements, le système pouvait uniquement lire les informations des fichiers mais pas analyser le contenu des images. Cela l'a conduit à explorer des alternatives au-delà des solutions d'API payantes (Claude, Gemini, OpenAI) ou des achats de matériel.
Développement de la solution
Après avoir installé context7mcp, il a évalué des modèles de langage locaux et a opté pour Qwen2.5 VL. Les premières tentatives avec les compétences intégrées ont rencontré des problèmes d'acceptation du nom du modèle et d'intégration avec Ollama. La percée est venue grâce à des tests systématiques : envoyer des images à Ollama via des appels API, lire les réponses, et créer des scripts bash et Python pour gérer le processus.
Détails de l'implémentation
- Environnement : Windows 11 avec Ubuntu WSL
- Backend LLM : Ollama
- Modèle sélectionné : Qwen2.5 VL
- Méthode d'intégration : Appels API à Ollama
- Scripts créés : Versions bash et Python
La compétence personnalisée s'enregistre nativement dans OpenClaw et peut être invoquée avec des commandes comme "analyse cette image" ou "regarde cette photo", renvoyant des réponses détaillées et précises. Le développeur note que des améliorations futures avec des modèles Qwen3/3.5VL plus petits pourraient encore améliorer les performances.
Malgré les défis incluant plusieurs réinstallations et des frustrations avec des outils open-source incomplets, le développeur décrit l'expérience comme la création d'un "organisme auto-réparateur et auto-améliorant" et reste impressionné par le potentiel d'OpenClaw pour le développement de compétences personnalisées.
📖 Read the full source: r/openclaw
👀 See Also
Les agents IA jouant à un jeu de stratégie démontrent une diplomatie et une stratégie émergentes
Un développeur a créé un jeu de stratégie sur agentsandaimpires.com où des agents IA jouent de manière autonome, avec des comportements observés incluant la capture efficace de territoire par un agent et des propositions de coalition pacifique diplomatique par un autre.
Claude Code permet à un nouveau diplômé de créer un jeu multijoueur en temps réel en solo
Un nouveau diplômé sans expérience formelle en génie logiciel a utilisé Claude Code pour construire imageclash.net, un jeu de société multijoueur en temps réel avec mise à l'échelle automatique de GPU serverless, une UX de manette mobile-first et une gestion du cycle de vie des images basée sur R2.
Création d'un Bureau de Trading IA à 7 Agents avec OpenClaw
Découvrez la configuration d'un bureau de trading IA à 7 agents utilisant OpenClaw, fonctionnant sur un Mac mini avec Claude comme cerveau, avec des tableaux de bord Flask personnalisés et des tâches Cron.
Utilisateur d'OpenClaw construit une pile de 10 opérations d'automatisation avec des pronostics sportifs, de la génération de leads et de l'exécution numérique.
Un développeur a passé deux mois à construire une pile d'opérations IA sur OpenClaw qui comprend un pipeline quotidien de pronostics sportifs avec des données ESPN et une livraison Twilio, un évaluateur nocturne de pronostics, un scrapping de prospects commerciaux depuis Google Maps, des sondeurs Stripe pour les produits numériques, des e-mails de briefing de session et des rapports d'opérations quotidiens.