コードセットは、Git履歴からリポジトリ固有のコンテキストを活用して、コーディングエージェントを強化します。

Codesetの機能

Codesetは、git履歴に対してパイプラインを実行し、リポジトリ内に直接配置されるファイルを生成します。これらのファイルには、ファイルごとの過去のバグと根本原因、既知の落とし穴、共同変更の関係性、テストチェックリストが含まれます。コーディングエージェントは、通常のコンテキストウィンドウの一部としてこれらのファイルを読み取ります。RAGやクエリ時のベクトルデータベース、ランタイムインフラストラクチャは不要で、リポジトリ内の他のファイルと同様にエージェントが取得する静的ファイルのみです。

ベンチマーク結果

チームは2つのベンチマークでCodesetをテストしました：

• codeset-gym-python（150タスク、Claude評価と同じサブセット）：60.7% → 66%（+5.3パーセンテージポイント）
• SWE-Bench Pro（400のランダムサンプリングタスク）：56.5% → 58.5%（+2パーセンテージポイント）

これにより、両方のベンチマークで一貫した改善が示され、codeset-gymに比べてSWE-Bench Proでは改善幅が小さくなりました。codeset-gymベンチマークは公開されており、方法論の検証に利用できる完全なタスクリストと検証ツールが利用可能です。

価格と利用可能性

Codesetはリポジトリごとに5ドルの1回限りの支払いです。無料トライアルにはコードCODESETLAUNCHをご利用ください。完全な評価成果物はhttps://github.com/codeset-ai/codeset-release-evalsで利用可能です。