Scrapling integriert als Scraping-Backbone von OpenClaw
Scrapling, eine Open-Source-Scraping-Bibliothek, wurde in OpenClaw als Kern-Scraping-Backbone integriert. Dies behebt häufige Probleme mit KI-Agenten, die mit realen Webdaten, defekten Scrapern, Cloudflare-Wänden und Selektoren kämpfen, die bei Website-Updates versagen.
Wichtige Funktionen und Fähigkeiten
Im Gegensatz zu den meisten Scraping-Tools, die auf fest codierte Selektoren angewiesen sind, die bei Website-Redesigns brechen, lernt Scrapling die Struktur einer Seite und passt sich automatisch an Änderungen an, ohne dass Codeänderungen erforderlich sind.
- 774x schneller als BeautifulSoup mit Lxml
- Funktioniert über HTTP und vollständige Browserautomatisierung
- Unterstützt CSS-, XPath-, Text- und Regex-Selektoren
- Asynchrone Sitzungen für paralleles Scraping
- Enthält eine CLI, sodass auch Nicht-Entwickler es ohne Code schreiben nutzen können
Erste Schritte
Die Installation ist unkompliziert:
pip install "scrapling[ai]"Die Bibliothek ist vollständig Open Source unter einer BSD-3-Lizenz und gewinnt auf GitHub an Beliebtheit.
📖 Read the full source: r/openclaw
👀 Siehe auch
Claude to PDF Chrome-Erweiterung exportiert lange Gespräche mit erhaltener Formatierung
Ein Entwickler hat eine kostenlose Chrome-Erweiterung namens Claude to PDF veröffentlicht, die den gesamten Konversationsverlauf aus Claude AI-Chats erfasst und Codeblöcke, LaTeX-Mathematik und Tabellenformatierung beim Export in PDF beibehält.
llm-idle-timeout feuert nach 2 Minuten auf N100/WSL2 trotz timeoutSeconds-Einstellung
Ein Nutzer berichtet, dass der Idle-Watchdog in OpenClaw nach 2 Minuten auf N100/WSL2-Hardware auslöst und dabei die Einstellung timeoutSeconds=300 ignoriert, aufgrund des langsamen Gateway-Starts (45+ Sekunden) und fehlendem konfigurierbaren noOutputTimeoutMs.
Multi-Agenten-Debatte-Ansatz verbessert die Denkqualität von LLMs
Ein Entwickler experimentierte mit einem Multi-Agenten-Debattenansatz unter Verwendung von CyrcloAI, bei dem verschiedene KI-Agenten Rollen wie Analyst, Kritiker und Synthetisierer übernehmen, um die Antworten der anderen zu kritisieren, bevor eine endgültige Antwort erstellt wird, was zu strukturierteren und durchdachteren Ergebnissen führt.
Open-Source-Vigil-Tool löst das Agent-Identitätsproblem im OpenClaw-Ökosystem
Ein OpenClaw-Benutzer, der einen Webdienst aufbaut, entdeckte Agentenverkehr, der nicht von menschlichen Nutzern zu unterscheiden war, was zur Entwicklung von Vigil führte – einer Open-Source-Identitätsschicht basierend auf W3C DID, die kryptografische Anmeldeinformationen und Verhaltensverlauf für Agenten bereitstellt.