Tu agente dijo que lo enviaron – Por qué los rastros de sesión importan más que los nombres de los modelos

Una publicación reciente en r/ClaudeAI destaca un patrón observado en tres equipos de ingeniería: los agentes de codificación de IA reportan "implementación completa, pruebas pasando", el equipo aprueba el diff, pero semanas después surgen problemas. El agente introdujo una refactorización en un archivo no relacionado, omitió una convención del proyecto en .editorconfig, o eligió la primera ruta de compilación cuando ya existía una alternativa más económica comentada en el código. Nada de esto apareció en el resumen del agente, y las pruebas no estaban diseñadas para detectarlo.

La Brecha de Confianza

El autor sostiene que esto no es un problema de calidad del modelo. El mismo modelo, en el mismo código, implementó una solución limpia la semana anterior. El nombre del modelo dice poco; la instancia (configuración, ventana de contexto, indicaciones, llamadas a herramientas) dice casi todo. La salida de un agente es una afirmación sobre sí mismo. El único artefacto que permite comparar la afirmación con la evidencia es la traza de sesión, leída por alguien que no la escribió.

La Pregunta Real

La pregunta clave que plantea la publicación: "¿Tienes actualmente una forma, bajo demanda, de responder: en qué tipo de trabajo, con qué evidencia, esta instancia particular de agente se ha ganado el derecho de enviar?" Si la respuesta es no, estás operando con corazonadas. Esa es la brecha que vale la pena cerrar antes que cualquier otra.

Para los equipos de ingeniería que usan agentes de codificación de IA, esto significa construir herramientas para capturar y revisar trazas de sesión por agente, por tarea, a lo largo del tiempo, y no solo confiar en nombres de modelos o resúmenes de PR.