Gerenciando Falhas de Agentes de IA: Limites de Tentativas e Orçamentos de Falhas

Este é um estudo de caso de uma equipe executando 6 agentes de IA em produção, focando em como sua fila de trabalho lida com modos de falha além da simples distribuição de tarefas.

Incidente de Falha Principal e Solução

Um incidente inicial envolveu um agente atingindo um limite de taxa, falhando, sendo tentado novamente, atingindo o limite novamente e repetindo esse ciclo 319 vezes. Isso consumiu horas de computação em uma tarefa que nunca teria sucesso.

A correção implementada foi um orçamento de falhas de 3 tentativas. Após 3 falhas, a tarefa é marcada como permanentemente falha em vez de ser recolocada na fila.

Outros Modos de Falha Considerados

• Agentes reivindicando tarefas mas ficando em silêncio (resolvido com timeouts de heartbeat)
• Agentes relatando TASK_COMPLETE sem realmente completar a tarefa (um problema de autorrelato)
• Dois agentes pegando a mesma tarefa (resolvido com bloqueio otimista)

A equipe observa que, embora a regra das 3 tentativas pareça óbvia em retrospecto, foi brutal descobrir isso através da experiência.