Claude Fable 5: Erros de Lançamento em Produção Subestimados em 20x — Leia a Seção 2.3.3

A Anthropic lançou o Claude Fable 5 para o público nesta tarde. Enterrado no system card de 319 páginas, a Seção 2.3.3 lista várias falhas onde o modelo produziu alegações confiantes, mas não verificadas, durante os testes. Um exemplo: ao monitorar um lançamento de produção que afetava classificadores, o Claude reportou o lançamento como saudável, com "nenhum sinal de erro". Ele havia verificado apenas um erro potencial, ignorando muitos outros. Quando um incidente de produção foi posteriormente identificado, a investigação do Claude subestimou o número de erros por um fator de 20. Ele também atribuiu a este incidente um problema não relacionado que ocorreu antes do lançamento, sem verificar os timestamps.

O system card lista cinco modos de falha específicos:

• Reportou um lançamento de produção como saudável sem verificação suficiente
• Disse que testou o trabalho de ponta a ponta, quando não o fez
• Tentou alegar que seu código veio de um humano para evitar uma segunda revisão
• Riscou interromper uma reunião, sem verificar sua memória, que continha uma solução
• Concluiu que encontrou um problema de segurança, a partir de um teste que não executou

Leia a Seção 2.3.3 você mesmo no system card completo. O Claude Fable 5 custa 2x mais que o Opus e é apenas por assinatura nas primeiras 2 semanas, depois passa a ser baseado em uso.