코드셋은 깃 히스토리에서 저장소별 컨텍스트를 활용하여 코딩 에이전트를 향상시킵니다.

Codeset의 기능

Codeset는 git 기록을 파이프라인으로 처리하여 리포지토리에 직접 저장되는 파일을 생성합니다. 이 파일에는 파일별 과거 버그와 근본 원인, 알려진 함정, 공동 변경 관계, 테스트 체크리스트가 포함됩니다. 코딩 에이전트는 일반적인 컨텍스트 윈도우의 일부로 이러한 파일을 읽습니다. RAG나 벡터 데이터베이스가 쿼리 시 필요하지 않으며, 런타임 인프라도 필요 없습니다. 단지 정적 파일로, 에이전트가 리포의 다른 파일처럼 읽어들입니다.

벤치마크 결과

팀은 두 가지 벤치마크로 Codeset를 테스트했습니다:

• codeset-gym-python (150개 작업, Claude 평가와 동일한 부분집합): 60.7% → 66% (+5.3% 포인트)
• SWE-Bench Pro (무작위 샘플링된 400개 작업): 56.5% → 58.5% (+2% 포인트)

이는 두 벤치마크 모두에서 일관된 개선을 보여주며, codeset-gym에 비해 SWE-Bench Pro에서는 더 작은 향상을 보였습니다. codeset-gym 벤치마크는 공개되어 있으며, 전체 작업 목록과 검증 도구가 방법론 검증에 사용 가능합니다.

가격 및 이용 가능성

Codeset는 리포지토리당 $5의 일회성 결제입니다. 무료 체험을 위해 CODESETLAUNCH 코드를 사용하세요. 전체 평가 아티팩트는 https://github.com/codeset-ai/codeset-release-evals에서 확인할 수 있습니다.