AgentHandover : application de barre de menus Mac qui crée des compétences d'agent en observant votre écran
Ce que fait AgentHandover
AgentHandover est une application open-source pour la barre de menus Mac qui surveille votre écran via Gemma 4 (fonctionnant localement via Ollama) et transforme vos workflows répétés en fichiers Skill structurés que n'importe quel agent peut suivre. Son créateur l'a conçu pour éviter d'avoir à expliquer les processus depuis le début à chaque fois qu'il voulait qu'un agent gère quelque chose, même pour des tâches quotidiennes.
Fonctionnalités clés et fonctionnement
- Deux modes d'enregistrement : Enregistrement Focus pour des tâches spécifiques et Découverte Passive qui fonctionne en arrière-plan et commence à détecter des modèles après vous avoir vu répéter quelque chose plusieurs fois
- Compétences auto-améliorantes : Les compétences deviennent plus précises à chaque observation, mettant à jour les étapes, les garde-fous et les scores de confiance au fur et à mesure de l'apprentissage
- Traitement sur l'appareil : L'ensemble du système est un pipeline en 11 étapes fonctionnant entièrement sur l'appareil, sans que rien ne quitte votre machine et avec les données chiffrées au repos
- Intégration d'agents : Intégration en un clic via MCP (Model Context Protocol) pour que Claude Code, Cursor, OpenClaw ou tout ce qui parle MCP puisse récupérer vos compétences
- CLI disponible : Inclut une interface en ligne de commande pour les utilisateurs du terminal
Détails techniques
L'application utilise Gemma 4 fonctionnant localement via Ollama pour la compréhension de l'écran. Elle est sous licence Apache 2.0 et disponible sur GitHub. Le créateur sollicite des retours sur l'approche et s'interroge sur d'autres modèles de vision locale ou de système d'exploitation pour la compréhension de l'écran.
Ce type d'outil répond au défi du transfert des workflows humains vers les agents IA sans documentation manuelle. En observant les interactions réelles à l'écran, il capture les nuances et variations qui pourraient être manquées dans des instructions écrites.
📖 Read the full source: r/LocalLLaMA
👀 See Also
NERF, la Plateforme d'Ingénierie de Sécurité IA Open Source, Entre en Bêta Publique
NERF est une plateforme d'ingénierie de sécurité IA open source et un agent de codage autonome qui couvre les techniques de sécurité offensive, défensive et de confidentialité à travers 117 domaines. Il propose 9 modes de fonctionnement auto-détectés, la prise en charge de 26 fournisseurs de LLM et l'automatisation de la conformité pour 39 cadres.
Murmur : Un démon Cron open-source pour automatiser les sessions de code Claude
Murmur est un démon cron qui planifie et automatise les sessions de code Claude en utilisant un fichier HEARTBEAT.md pour la configuration.
Netflix publie VOID : un modèle de suppression d'objets et d'interactions vidéo sur Hugging Face
Netflix a publié VOID, un modèle de vidéo-inpainting qui supprime des objets des vidéos ainsi que toutes les interactions physiques qu'ils induisent, y compris les objets qui tombent et les éléments déplacés. Le modèle nécessite un GPU avec 40 Go+ de VRAM et utilise un conditionnement par quadmask avec deux fichiers de point de contrôle pour différents niveaux de raffinement.
Agent IA de bureau Skales développé avec Claude, doté d'une mascotte de style Clippy
Skales est un agent d'IA de bureau qui fonctionne localement sur Windows et macOS, utilisant Claude via l'API OpenRouter/Anthropic pour le raisonnement et l'exécution d'outils. Il inclut une mascotte flottante de Bureau (Desktop Buddy) avec une référence de skin en trombone et peut exécuter des commandes comme envoyer des emails, gérer des fichiers, naviguer sur le web et gérer des agendas.