Handelsstrategie-Benchmark: Günstigere KI-Modelle übertreffen Claude Opus 4.6

Ein Reddit-Nutzer führte einen Benchmark-Vergleich von 10 verschiedenen großen Sprachmodellen hinsichtlich ihrer Fähigkeit zur Entwicklung von Handelsstrategien durch. Die Ergebnisse zeigten, dass günstigere Modelle durchweg teurere Optionen übertrafen, wobei Claude Opus 4.6 trotz 10-fach höherer Kosten als einige Konkurrenten nicht unter die Top Vier kam.

Getestete Modelle

• Claude Opus 4.6
• Gemini 3
• Gemini 3.1 Pro
• GPT-5.2
• Gemini Flash 3
• GPT-5-mini
• Kimi K2.5
• Minimax 2.5

Wichtige Erkenntnisse

Der Benchmark forderte alle Modelle mit demselben Prompt auf, "die beste Handelsstrategie zu erstellen". Modelle wie Minimax 2.5 und Gemini 3.1 führten die Rangliste an, während Anthropics Modelle im Vergleich schlecht abschnitten. Kimi K2.5 dominierte Claude in diesem Wettbewerb, während es 10-mal weniger kostete.

Das Experiment wurde dreimal durchgeführt, um konsistente Ergebnisse zu gewährleisten. Der Autor merkte an, dass gute Programmierfähigkeiten nicht unbedingt auf andere Aufgaben wie Strategieentwicklung übertragbar sind.

Diese Art von spezialisiertem Benchmarking ist nützlich für Entwickler, die KI-Modelle für spezifische Aufgaben jenseits allgemeiner Programmierunterstützung auswählen müssen. Die Ergebnisse legen nahe, dass die Modellauswahl aufgabenbezogen sein sollte, anstatt sich allein auf allgemeinen Ruf oder Preis zu stützen.