Pair Programmer Plugin fügt Live-Bildschirm, Sprache und Audio-Kontext zu Claude Code hinzu
Ein Entwickler hat Pair Programmer veröffentlicht, ein Plugin, das Claude Codes fehlenden Echtzeit-Kontext durch Live-Desktop-Wahrnehmung behebt. Das Tool erfasst drei Datenströme: Bildschirminhalt (mit visueller Indizierung, die kurze Szenenbeschreibungen generiert), Mikrofoneingabe (Transkription plus leichte Absichtsklassifizierung für Fragen, Erklärungen oder Befehle) und System-Audio (Indizierung von Meetings, Tutorials oder anderem Audio auf dem Rechner).
Architektur und Implementierung
Das System verwendet eine Multi-Agenten-Pipeline statt eines Einzelmodell-Ansatzes. Es lässt spezialisierte Agenten parallel laufen:
- Bildschirmleser für visuellen Kontext
- Sprachprozessor für Mikrofontranskription und Absichtsklassifizierung
- Audio-Klassifizierer für System-Audio
- Orchestrator, der alle Eingaben korreliert und eine einzelne Antwort synthetisiert
Das Plugin basiert auf VideoDB-Infrastruktur. Während die Indizierung derzeit Cloud-Modelle nutzt, ist das Design modellunabhängig – die Index-Schicht kann jedes VLM oder LLM einbinden. Der Entwickler erwähnt Interesse daran, lokale Modelle für visuelle Beschreibungs- und Transkriptionsschichten zu integrieren.
Aktueller Status und Installation
Das Plugin ist derzeit nur für macOS verfügbar. Die Installation erfordert drei Befehle. Das GitHub-Repository ist verfügbar unter https://github.com/video-db/claude-code/tree/main.
Der Entwickler sucht Feedback zu Architekturansätzen, insbesondere ob Entwickler die Multi-Agenten-Pipeline mit spezialisierten Modellen und Orchestrierung bevorzugen oder auf eine Einzelmodell-End-to-End-Lösung für Desktop-Wahrnehmungssysteme hinarbeiten möchten.
📖 Read the full source: r/ClaudeAI
👀 Siehe auch
Vergleich von 8 KI-Codierungsmodellen bei der Implementierung realer TypeScript-Funktionen
Ein Entwickler testete 8 KI-Codierungsmodelle bei der Implementierung eines /rename-Befehls in einem Open-Source-TypeScript-Telegram-Bot-Projekt und bewertete sie nach Kosten, Ausführungszeit, Korrektheit und technischer Qualität. GPT-5.4 erzielte die höchste Punktzahl bei der Implementierungskorrektheit, während GLM 5 das beste Preis-Leistungs-Verhältnis bot.
Produktmanager teilt 70+ Claude-Fähigkeiten zur Automatisierung von PM-Workflows
Ein Produktmanager mit 20 Jahren Erfahrung hat über 70 Claude-Fähigkeiten erstellt, die gängige PM-Aufgaben automatisieren, einschließlich PRD-Generierung, Nutzerinterviewanalyse, Wettbewerbsprofilierung und Roadmap-Erstellung. Die Fähigkeiten sind als herunterladbare .md-Dateien für Claude Code verfügbar.
MCP-Loci: Lokaler persistenter Speicherserver für Claude und MCP-kompatible KI
MCP-Loci ist ein persistentes Speichersystem, das Claudes sitzungsbasierte Speicherbeschränkung mit fünf Werkzeugen löst: remember, recall, forget, synthesize und health. Es nutzt eine hybride Kombination aus BM25-Schlüsselwortabgleich und semantischen Embeddings für präzises Abrufen ohne API-Schlüssel.
AIsbf 0.9.8 fügt Caching, Routing-Verbesserungen und erweiterte KI-Dienstunterstützung hinzu.
AIsbf 0.9.8 ist ein API-Proxy/Router, der eine OpenAI-kompatible Schnittstelle zu mehreren KI-Diensten bereitstellt. Diese Version fügt Redis-, SQLite-, MySQL- und dateibasiertes Caching hinzu, verbessertes semantisches Routing und volle OAuth2-Unterstützung für Claude.ai-, Amazon Kiro-cli-, OpenAI Codex- und Kilo.ai-Abonnenten.