Codeset mejora los agentes de codificación con contexto específico del repositorio del historial de git.
Qué hace Codeset
Codeset ejecuta un pipeline sobre tu historial de git y genera archivos que residen directamente en tu repositorio. Estos archivos incluyen: errores pasados por archivo con causas raíz, dificultades conocidas, relaciones de cambio conjunto y listas de verificación de pruebas. El agente de codificación lee estos archivos como parte de su ventana de contexto normal. Sin RAG, sin base de datos vectorial en tiempo de consulta, sin infraestructura en tiempo de ejecución requerida—solo archivos estáticos que tu agente recoge como cualquier otro archivo en el repositorio.
Resultados de evaluación comparativa
El equipo probó Codeset con dos puntos de referencia:
- codeset-gym-python (150 tareas, mismo subconjunto que la evaluación de Claude): 60.7% → 66% (+5.3 puntos porcentuales)
- SWE-Bench Pro (400 tareas muestreadas aleatoriamente): 56.5% → 58.5% (+2 puntos porcentuales)
Esto muestra una mejora consistente en ambos puntos de referencia, con ganancias menores en SWE-Bench Pro en comparación con codeset-gym. El punto de referencia codeset-gym es público con lista completa de tareas y verificadores disponibles para verificación de metodología.
Precios y disponibilidad
Codeset cuesta $5 por repositorio, pago único. Usa el código CODESETLAUNCH para una prueba gratuita. Los artefactos completos de evaluación están disponibles en https://github.com/codeset-ai/codeset-release-evals.
📖 Read the full source: r/LocalLLaMA
👀 Ver también
Reduzca los costos de sesiones de codificación con IA en un 90% mediante la indexación de código basada en grafos
Un desarrollador creó una base de datos de grafos local que indexa un código fuente utilizando resúmenes generados por LLM, reduciendo los costos de las sesiones de Claude Code de $6-10 a centavos al evitar la relectura redundante de archivos.
SkillOpt: Optimizando Archivos de Habilidades Markdown como Parámetros Entrenables para Agentes de IA
SkillOpt formaliza el proceso ad hoc de editar archivos de habilidades en Markdown para agentes de codificación de IA, utilizando modelos de frontera para proponer ediciones acotadas y evaluadas contra conjuntos de validación. Las mejores habilidades convergen con 1-4 ediciones aceptadas de muchas propuestas, y se transfieren entre modelos como Codex a Claude Code.
PocketTeam: Un Pipeline de Código Claude con Agentes de Seguridad y Aprendizaje Basados en Hooks
PocketTeam es una canalización de Claude Code que implementa 9 capas de seguridad a nivel de llamada de herramientas para bloquear operaciones peligrosas como escrituras en .env o comandos rm -rf. El sistema incluye un agente Observador que analiza las tareas completadas y escribe aprendizajes estructurados para mejorar el rendimiento futuro de los agentes.
SpruceChat ejecuta un modelo de lenguaje de 0.5B en el dispositivo en las consolas portátiles Miyoo mediante llama.cpp.
SpruceChat ejecuta Qwen2.5-0.5B completamente en el dispositivo en consolas de juegos portátiles usando llama.cpp, sin necesidad de nube o WiFi. En un Miyoo A30 (Cortex-A7 de cuatro núcleos), se carga en ~60 segundos y genera a ~1-2 tokens/segundo.