Modelos de LLM de código aberto superam o Claude Opus 4.6 na geração de estratégias de negociação com custo mais baixo

Um usuário do Reddit no r/LocalLLaMA conduziu um teste comparativo de 10 diferentes modelos de linguagem de grande escala para avaliar seu desempenho na geração de estratégias de trading. Os resultados desafiam suposições sobre relações custo-desempenho em LLMs comerciais.

Metodologia e modelos testados

O usuário executou 10 LLMs com o mesmo prompt: "crie a melhor estratégia de trading". Os modelos testados incluíram:

• Claude Opus 4.6
• Gemini 3, 3.1 Pro e GPT-5.2
• Gemini Flash 3, GPT-5-mini, Kimi K2.5 e Minimax 2.5

O teste foi executado três vezes para verificar a consistência dos resultados.

Principais descobertas

De acordo com a fonte:

• Minimax 2.5 e Gemini 3.1 lideraram o ranking
• Os modelos da Anthropic (incluindo Opus 4.6) tiveram desempenho "medíocre" e não entraram no top 4
• Claude Opus 4.6 custou 10 vezes mais do que os modelos concorrentes
• Modelos de código aberto foram muito mais lentos do que os modelos da Anthropic e Google

O usuário observou ceticismo inicial sobre os resultados, afirmando: "Honestamente, não acreditei nos resultados na primeira vez que fiz isso". Após verificação, concluiu: "Os resultados são legítimos".

Implicações práticas

Para desenvolvedores que usam agentes de codificação com IA, isso sugere que, para certas tarefas especializadas como geração de estratégias de trading, modelos de código aberto podem oferecer melhor desempenho a um custo significativamente menor. A principal desvantagem observada é a velocidade - modelos de código aberto foram descritos como "muito mais lentos" do que alternativas comerciais da Anthropic e Google.

A conclusão do usuário foi direta: "além disso, não há uma grande razão para usar Opus ou Sonnet para esta tarefa".