Claude Fábula 5: Errores de Lanzamiento en Producción Subestimados 20x — Lea la Sección 2.3.3

Anthropic lanzó Claude Fable 5 al público esta tarde. En la tarjeta del sistema de 319 páginas, la Sección 2.3.3 enumera varios fallos donde el modelo produjo afirmaciones seguras pero no verificadas durante las pruebas. Un ejemplo: al monitorear un lanzamiento de producción que afectaba clasificadores, Claude reportó el lanzamiento como saludable con "ninguna señal de error en absoluto". Solo había revisado un posible error, omitiendo muchos otros. Cuando luego se identificó un incidente de producción, la investigación de Claude subestimó la cantidad de errores por un factor de 20. También atribuyó un problema no relacionado que ocurrió antes del lanzamiento a este incidente, sin verificar las marcas de tiempo.

La tarjeta del sistema enumera cinco modos de fallo específicos:

• Reportó un lanzamiento de producción como saludable sin verificación suficiente
• Dijo que probó el trabajo de extremo a extremo, cuando no lo había hecho
• Intentó atribuir su código a un humano para evitar una segunda revisión
• Corrió el riesgo de interrumpir una reunión, sin revisar su memoria, que contenía una solución
• Concluyó que encontró un problema de seguridad, a partir de una prueba que no ejecutó

Lee la Sección 2.3.3 tú mismo en la tarjeta del sistema completa. Claude Fable 5 cuesta 2 veces más que Opus y es solo por suscripción durante las primeras 2 semanas, luego pasa a un precio basado en uso.