Open-Source-Tool misst Autonomie von KI-Codierungsagenten mit lokaler Datenanalyse
Was Codelens-AI macht
Codelens-AI ist ein Open-Source-CLI-Tool, das Ihre lokalen Claude-Code-Sitzungsdateien liest und sie mit dem Git-Verlauf korreliert. Anstatt nur Kosten zu verfolgen, analysiert es, wie der KI-Agent tatsächlich arbeitet, indem es Autonomie-Metriken basierend auf Ihren Nutzungsmustern berechnet.
Wichtige Metriken und Beispielergebnisse
Der Ersteller hat das Tool über 30 Tage persönlicher Nutzung laufen lassen und diese Ergebnisse geteilt:
- Autopilot-Verhältnis: 7,4x — Für jede an Claude gesendete Nachricht führt der Agent 7 Aktionen aus
- Self-Heal-Score: 1 % — Von 6.281 Bash-Befehlen waren nur 50 Tests oder Lints
- Toolbelt-Abdeckung: 81 % — Der Agent nutzt die meisten verfügbaren Tools (grep, read, write, bash, search)
- Commit-Geschwindigkeit: 114 Schritte/Commit — Es sind 114 Tool-Aufrufe nötig, um einen Commit zu erzeugen
- Gesamt-Autonomie-Score: C (36/100)
Praktische Auswirkungen und Nutzung
Diese Metriken zeigten, dass der Agent zwar hart arbeitet (7,4x Autopilot-Verhältnis), er aber selten seine eigene Arbeit überprüft (1 % Self-Heal-Score). Diese Erkenntnis veranlasste den Ersteller, seine Prompting-Strategie zu ändern — er weist Claude nun explizit an, nach jeder Bearbeitung Tests auszuführen, was seinen Self-Heal-Score innerhalb weniger Tage von 1 % auf etwa 15 % erhöhte.
Einrichtung und Datenschutz
Das Tool erfordert keine Einrichtung: npx claude-roi. Alle Daten bleiben lokal — es analysiert Ihre ~/.claude/projects/ JSONL-Dateien plus Git-Log. Es gibt keine Cloud-Komponente und keine Telemetrie.
Entwicklungsstatus und Community
Das Tool sucht aktiv nach Funktionsvorschlägen, Problemen und PRs — insbesondere bezüglich der Bewertungsformel und der Unterstützung für Cursor/Codex-Sitzungen. Der Ersteller ist neugierig, welche Scores andere Leute erhalten und ob andere dieses Tool nutzen.
GitHub: github.com/Akshat2634/Codelens-AI
Website: https://codelensai-dev.vercel.app/
📖 Read the full source: r/ClaudeAI
👀 Siehe auch
Open-Source-Framework für persistente KI-Agenten-Speicherung mit lokaler Speicherung und graphenbasierter Abfrage
Ein Entwickler baut ein Open-Source-Framework für persistente KI-Agenten-Speicherung, das Daten lokal als Markdown-Dateien speichert, Wiki-Links als Graphenkanten nutzt und Git für Versionskontrolle implementiert. Das System verfügt über eine Vier-Signal-Abruftechnik und grafikbewusstes Vergessen basierend auf der ACT-R-Kognitionswissenschaft.
Zwei MCP-Tools für Claude Code: Ideenvalidierung und Trading-Agent-Speicher
Ein Entwickler hat zwei MCP-Tools für Claude Code erstellt: idea-reality-mcp prüft GitHub und Hacker News vor dem Programmieren, um Duplikate zu vermeiden, während tradememory-protocol Speicher für KI-Handelsagenten bereitstellt, um Trades mit Kontext zu speichern und die Strategieleistung zu verfolgen. Beide sind Open Source und auf PyPI verfügbar.
Claude Sessions: Leichte Desktop-App zum Durchsuchen des Claude-Code-Verlaufs
Claude Sessions ist eine neue Desktop-Anwendung, die Entwicklern ermöglicht, ihren Claude Code-Sitzungsverlauf lokal zu durchsuchen. Sie liest aus ~/.claude/projects, organisiert Sitzungen nach Projekten, verarbeitet große Sitzungen mit bis zu 500.000+ Tokens ohne Verzögerung und umfasst Suchfunktionalität sowie Tastaturnavigation.
Altimate Code: Open-Source Agentisches Data-Engineering-Framework
Altimate Code ist ein Open-Source-Harness, der deterministische Data-Engineering-Tools für KI-Agenten bereitstellt und Probleme wie halluzinierte SQL-Abfragen und fehlenden Schema-Kontext adressiert. Er umfasst Spalten-Lineage, SQL-Anti-Pattern-Erkennung und dbt-Integration, mit Benchmarks, die eine Leistung von 74,4 % auf ADE-bench zeigen.