스크래플링이 OpenClaw의 스크래핑 백본으로 통합되었습니다.
오픈소스 스크래핑 라이브러리인 Scrapling이 OpenClaw의 핵심 스크래핑 백본으로 통합되었습니다. 이는 AI 에이전트가 실제 웹 데이터 처리에 어려움을 겪거나, 스크래퍼가 고장나거나, Cloudflare 방화벽에 막히거나, 사이트 업데이트 시 선택자가 실패하는 일반적인 문제들을 해결합니다.
주요 기능 및 능력
대부분의 스크래핑 도구가 웹사이트 재설계 시 깨지는 하드코딩된 선택자에 의존하는 것과 달리, Scrapling은 페이지 구조를 학습하고 변화가 있을 때 코드 재작성 없이 자동으로 조정합니다.
- BeautifulSoup with Lxml보다 774배 빠름
- HTTP 및 전체 브라우저 자동화에서 작동
- CSS, XPath, 텍스트, 정규식 선택자 지원
- 병렬 스크래핑을 위한 비동기 세션
- 비개발자도 코드 작성 없이 사용할 수 있는 CLI 포함
시작하기
설치는 간단합니다:
pip install "scrapling[ai]"이 라이브러리는 BSD-3 라이선스 하에 완전히 오픈소스이며 GitHub에서 인기를 얻고 있습니다.
📖 전체 소스 읽기: r/openclaw
👀 See Also
오픈소스 솔로 RPG 엔진은 구문 분석, 내레이션, 지시를 위해 세 개의 클로드 인스턴스를 사용합니다.
EdgeTales는 주사위 메커니즘으로 결과를 결정하고 Claude AI가 분위기 있는 문장을 생성하는 오픈소스 텍스트 기반 솔로 RPG 엔진입니다. 이 시스템은 파이프라인에서 세 개의 Claude 인스턴스를 사용합니다: 입력을 JSON으로 파싱하는 Brain(Haiku), 문장을 작성하는 Narrator(Sonnet), 비동기 장면 분석을 수행하는 Director(Haiku).
멘드럴이 오퍼스 업그레이드를 통해 LLM 비용을 절감한 방법: 트라이어저 패턴, SQL 접근, 서브 에이전트 아키텍처
Mendral은 CI 실패 분석을 위해 Sonnet에서 Opus 4.6으로 전환했지만, 비용은 Haiku 트라이저를 사용하여 실패의 80%를 걸러내고, 에이전트가 로그를 푸시하는 대신 ClickHouse에 SQL로 접근하게 하며, 실제 분석을 수행할 저렴한 하위 에이전트를 생성함으로써 절감했습니다.
mindpm: Claude와 함께하는 지속적인 프로젝트 메모리를 위한 무료 MCP 서버
mindpm은 Claude에게 대화 간에 작업, 결정, 메모 및 세션 요약을 추적할 수 있는 로컬 SQLite 데이터베이스를 제공하는 무료 오픈소스 MCP 서버입니다. 설정은 30초만에 명령어로 완료됩니다: claude mcp add mindpm -e MINDPM_DB_PATH=~/.mindpm/memory.db -- npx -y mindpm
Agenexus: 자율 AI 협업을 위한 에이전트 네이티브 플랫폼
Agenexus는 AI 에이전트가 SKILL.md 파일을 통해 스스로 등록하고, Claude API로 검증된 역량 도전 과제를 완료하며, 인간의 개입 없이 의미론적으로 매칭되어 협업할 수 있는 플랫폼입니다. Next.js, Supabase, Voyage AI 임베딩, Claude API로 구축되었습니다.