LetMeWatch: Python-Plugin fügt Claude Videoanalyse via FFmpeg-Szenenerkennung hinzu
Ein Entwickler hat ein Python-Plugin namens LetMeWatch erstellt, das Claude ermöglicht, Videoinhalte zu analysieren, obwohl es keine native Videounterstützung hat. Das Tool adressiert den spezifischen Anwendungsfall, Bildschirmaufnahmen von Fehlern an Claude zur Diagnose zu senden.
So funktioniert es
Das Plugin nutzt die FFmpeg-Szenenerkennung, um nur Frames zu extrahieren, in denen sich die visuellen Inhalte tatsächlich ändern. Es versieht jeden extrahierten Frame mit einem Zeitstempel und gibt sie Claude in Batches weiter. Dieser Ansatz vermeidet die Nutzung von KI-Videomodellen oder komplexer Infrastruktur – er setzt auf Frame-Extraktion in Kombination mit Claudes bestehenden multimodalen Vision-Fähigkeiten.
Technische Umsetzung
- In Python geschrieben (etwa 200 Codezeilen)
- Nutzt FFmpeg zur Szenenerkennung
- Extrahiert Frames nur bei visuellen Veränderungen
- Fügt jedem Frame Zeitstempel hinzu
- Sendet Frames in Batches an Claude
- Funktioniert auf allen Plattformen
- Open Source (verfügbar auf GitHub)
Praktische Anwendung
Der Entwickler testete das Tool, indem er einen Fehler in einer Todo-App aufzeichnete und den Befehl /video-last ausführte. Claude identifizierte erfolgreich die exakte Zeile mit dem Tippfehler durch das Anschauen der Aufnahme. Dies zeigt, wie das Tool zum Debuggen genutzt werden kann, indem Claude Bildschirmaufnahmen von Problemen analysiert.
Das Projekt ist verfügbar unter github.com/BinyaminEden/letmewatch und stellt eine praktische Lösung für Claudes derzeitige Videobeschränkungen dar, indem es bestehende Tools und Claudes Vision-Fähigkeiten nutzt.
📖 Read the full source: r/ClaudeAI
👀 Siehe auch
Agent-Browser-Protokoll: Open-Source-Chrome-Fork für KI-Agenten erreicht 90 % auf dem Mind2Web-Benchmark
Agent Browser Protocol (ABP) ist eine Open-Source-Chrome-Abspaltung, die JavaScript und die Zeit nach jeder Aktion einfriert, um das Surfen im Web in multimodalen Chat für KI-Agenten zu verwandeln. Es erreichte 90,53 % im Online Mind2Web Benchmark und kann mit einem einzigen Befehl zu Claude Code hinzugefügt werden.
StartClaw: Ein kopfoser Browser-Automatisierungstool, das auf ZeroClaw basiert und Claude-Integration bietet
StartClaw ist ein Browser-Automatisierungstool, das auf ZeroClaws Rust-Basis mit Composio v3 für Integrationen aufbaut und darauf ausgelegt ist, ohne lokale Hardware headless in der Cloud zu laufen. Es nutzt ausschließlich Claude für Zuverlässigkeit und verfügt über eine integrierte Kontextkomprimierung, die den Tokenverbrauch um etwa das 5-fache reduziert.
MoltMarket: Ein Marktplatz für die Anmietung von KI-Agenten zur Ausführung digitaler Aufgaben
MoltMarket ist eine kostenlose Plattform, auf der Nutzer Aufgaben für KI-Agenten veröffentlichen können, die diese autonom erledigen. Der Marktplatz hat derzeit über 100 Nutzer und verifizierte Agenten, die Aufgaben wie Web-Scraping, Code-Generierung und Content-Erstellung übernehmen können.
Behebung von OpenClaw-Browser-CAPTCHAs mit Camoufox und CLI-Wrapper
Der eingebaute Chromium-Browser von OpenClaw löst Bot-Erkennung durch das Chrome DevTools Protocol, JavaScript-Injektionsartefakte und Inkonsistenzen bei Hardware-Fingerprinting aus. Die Lösung verwendet Camoufox (einen Firefox-Ableger), der auf C++-Ebene modifiziert und in eine CLI eingebettet wurde, die Zugänglichkeitsbaum-Snapshots zurückgibt, um den Token-Verbrauch zu reduzieren.