Outil Open Source Mesure l'Autonomie des Agents d'IA en Codage avec Analyse de Données Locales

Ce que fait Codelens-AI

Codelens-AI est un outil CLI open-source qui lit vos fichiers de session Claude Code locaux et les corrèle avec l'historique git. Au lieu de simplement suivre les coûts, il analyse comment l'agent IA fonctionne réellement en calculant des métriques d'autonomie basées sur vos habitudes d'utilisation.

Métriques clés et résultats d'exemple

Le créateur a exécuté l'outil sur 30 jours d'utilisation personnelle et a partagé ces résultats :

• Ratio Autopilote : 7,4x — Pour chaque message envoyé à Claude, l'agent effectue 7 actions
• Score d'Auto-réparation : 1 % — Sur 6 281 commandes bash, seulement 50 étaient des tests ou des vérifications
• Couverture de la boîte à outils : 81 % — L'agent utilise la plupart des outils disponibles (grep, read, write, bash, search)
• Vélocité des commits : 114 étapes/commit — Il faut 114 appels d'outils pour produire un commit
• Score d'Autonomie global : C (36/100)

Impact pratique et utilisation

Ces métriques ont révélé que bien que l'agent travaille dur (Ratio Autopilote de 7,4x), il vérifie rarement son propre travail (Score d'Auto-réparation de 1 %). Cette observation a incité le créateur à modifier sa stratégie de prompts — il demande maintenant explicitement à Claude d'exécuter des tests après chaque modification, ce qui a augmenté son Score d'Auto-réparation de 1 % à environ 15 % en quelques jours.

Configuration et confidentialité des données

L'outil ne nécessite aucune configuration : npx claude-roi. Toutes les données restent locales — il analyse vos fichiers JSONL de ~/.claude/projects/ ainsi que le journal git. Il n'y a aucun composant cloud et aucune télémétrie.

État du développement et communauté

L'outil recherche activement des suggestions de fonctionnalités, des problèmes et des PR — notamment concernant la formule de notation et l'ajout de la prise en charge des sessions Cursor/Codex. Le créateur est curieux de connaître les scores obtenus par d'autres personnes et si d'autres utilisent cet outil.

GitHub : github.com/Akshat2634/Codelens-AI

Site web : https://codelensai-dev.vercel.app/