Scrapling integriert als Scraping-Backbone von OpenClaw
Scrapling, eine Open-Source-Scraping-Bibliothek, wurde in OpenClaw als Kern-Scraping-Backbone integriert. Dies behebt häufige Probleme mit KI-Agenten, die mit realen Webdaten, defekten Scrapern, Cloudflare-Wänden und Selektoren kämpfen, die bei Website-Updates versagen.
Wichtige Funktionen und Fähigkeiten
Im Gegensatz zu den meisten Scraping-Tools, die auf fest codierte Selektoren angewiesen sind, die bei Website-Redesigns brechen, lernt Scrapling die Struktur einer Seite und passt sich automatisch an Änderungen an, ohne dass Codeänderungen erforderlich sind.
- 774x schneller als BeautifulSoup mit Lxml
- Funktioniert über HTTP und vollständige Browserautomatisierung
- Unterstützt CSS-, XPath-, Text- und Regex-Selektoren
- Asynchrone Sitzungen für paralleles Scraping
- Enthält eine CLI, sodass auch Nicht-Entwickler es ohne Code schreiben nutzen können
Erste Schritte
Die Installation ist unkompliziert:
pip install "scrapling[ai]"Die Bibliothek ist vollständig Open Source unter einer BSD-3-Lizenz und gewinnt auf GitHub an Beliebtheit.
📖 Read the full source: r/openclaw
👀 Siehe auch
Lumia: One-Click Local AI-Begleitsystem mit dauerhaftem Speicher
Lumia ist ein modulares System, das lokal mit Ollama und lokalen Modellen läuft, um persistente KI-Begleiter mit episodischem Gedächtnis, emotionalem Gedächtnis, Überzeugungen, Wünschen, Identität, Beziehungsmodellierung und Reflexionszyklen zu erstellen.
Start Engine MCP Server bietet eine 39-Tool-Pipeline für die Geschäftsvalidierung.
Launch Engine ist ein MCP-Server, der Claude eine strukturierte Pipeline mit 39 miteinander verbundenen SOP-Tools bietet, die in 5 Ebenen organisiert sind, um Geschäftsideen von der Konzeption bis zur validierten Umsatzgenerierung zu führen. Das System umfasst spezialisierte Subagenten, Voraussetzungsprüfungen sowie Tools für Batch-Auswertungen und schnelles Testen.
Blindspot MCP: Ein externes Gehirn für KI-Codierungsagenten
Blindspot MCP ist ein Tool, das vollständige Codebasen mit Tree-sitter und SQLite indiziert, um KI-Coding-Agenten dabei zu helfen, Symbole, Abhängigkeiten und Beziehungen über Dateien hinweg zu verstehen und so Änderungen zu verhindern, die Code außerhalb ihres unmittelbaren Kontexts beschädigen.
devopsiphai: Open-Source-Claude-Code prüft die Betriebsgesundheit in 6 Phasen
devopsiphai ist eine Open-Source-Claude-Code-Fähigkeit, die die Betriebsbereitschaft von Produktionsprojekten mithilfe eines 6-Phasen-Prozesses und des ARC-Frameworks überprüft und dabei Buchstabennoten sowie eine strukturierte TODO.md mit aufwandgeschätzten Aufgaben ausgibt.