Estudo de Caso: Uso de Prompts de LLM em Vez de Estruturação Programática para Construções de Software Multiagente

Visão Geral do Sistema e Resultados

Um sistema multiagente composto por um orquestrador Claude Opus e agentes trabalhadores Codex completou 10 builds de software totalmente autônomas sem intervenção humana de código. O sistema produziu 10 jogos de navegador em TypeScript totalizando mais de 50.000 linhas de código e centenas de testes aprovados.

O orquestrador—um LLM de fronteira recebendo um prompt e acesso CLI—decompôs objetivos, despachou trabalhadores paralelos, analisou resultados, triou erros e coordenou a integração. Nenhum scaffold programático, máquina de estado ou infraestrutura de roteamento de tarefas foi usada; a lógica de orquestração é um prompt, não um programa.

Principais Descobertas do Estudo de Caso

• A imposição de escopo através de prompts falha completamente sob pressão do compilador (0/20), enquanto a imposição mecânica via reversão de arquivos pós-fato é trivialmente eficaz (20/20)
• Contratos de tipo não são necessários para integração em qualquer escala testada (6–36 módulos) quando o agente de integração tem acesso de edição irrestrito
• O orquestrador manteve continuidade perfeita de tarefas durante 11 eventos de compactação de contexto
• A análise de custos revela um prêmio por estado: com taxas de acerto de cache de ~95%, a maior parte do processamento do orquestrador é reler o contexto de conversa anterior
• Uma ablação de prompt simples falsifica a forte afirmação de que modelos descobrem independentemente padrões de coordenação, mas revela que execução solo supera builds coordenadas abaixo de ~30K LOC

Arquitetura do Sistema e Dados

O sistema usa uma arquitetura em árvore: um humano fornece objetivos a um orquestrador Claude Opus, que decompõe o trabalho em tarefas paralelas despachadas para trabalhadores Codex. Os trabalhadores operam totalmente de forma autônoma e se comunicam exclusivamente através do sistema de arquivos.

O conjunto de dados completo inclui:

• 10 sessões do orquestrador Claude (52 MB)
• 88 sessões de trabalhadores Codex (89 MB)
• 62 logs stdout de trabalhadores (186,7 MB, 6,1M linhas)
• 55 arquivos de objetivos com texto completo do prompt
• 1 log de eventos TUI (21 MB, 173K linhas)

Corpus total: 295M tokens em 88 sessões de trabalhadores Codex e 10 sessões do orquestrador Claude.

Evolução do Sistema

O sistema evoluiu através de cinco fases ao longo de aproximadamente seis meses. O operador começou com copiar-colar manual entre janelas de chat duplas de LLM, progrediu para ferramentas CLI de terminal para acesso ao sistema de arquivos, depois construiu um scaffold programático com memória e roteamento. O scaffold funcionou mas era frágil—cada caso de borda exigia novo código. Uma única sessão Claude com acesso CLI superou-o.

O sistema resultante, orch-minimal, retém 62.792 linhas de código de suporte, mas a lógica central de orquestração é um prompt, não um programa.