Mise à jour du classement SWE-rebench : les résultats de février 2026 révèlent une compétition serrée
Résultats SWE-rebench février 2026
Le classement SWE-rebench a été mis à jour avec les exécutions de février 2026 sur 57 nouvelles tâches de PR GitHub. La configuration suit la méthodologie standard de SWE-bench : les modèles lisent de vraies issues de PR, modifient le code, exécutent des tests et doivent faire passer toute la suite de tests. Les tâches sont limitées aux PR créées le mois précédent.
Résultats clés
- Claude Opus 4.6 reste en tête avec un taux de résolution de 65,3 %, continuant à fixer le rythme avec un fort pass@5 (~70 %)
- Le haut du classement est extrêmement serré : gpt-5.2-medium (64,4 %), GLM-5 (62,8 %) et gpt-5.4-medium (62,8 %) sont tous à quelques points du leader
- Gemini 3.1 Pro Preview (62,3 %) et DeepSeek-V3.2 (60,9 %) complètent un top-6 très compact
- Les modèles open-weight/hybrides continuent de s'améliorer : Qwen3.5-397B (59,9 %), Step-3.5-Flash (59,6 %) et Qwen3-Coder-Next (54,4 %) réduisent l'écart, grâce à une meilleure utilisation du contexte long et à la montée en échelle
- MiniMax M2.5 (54,6 %) continue de se distinguer comme une option rentable avec des performances compétitives
Dans l'ensemble, février montre une frontière très compétitive avec plusieurs modèles à quelques points de la tête.
📖 Read the full source: r/LocalLLaMA
👀 See Also
Stratégie des poids ouverts de Mistral : valorisation à 14 milliards de dollars sur la souveraineté, pas sur les benchmarks
Mistral a bâti un empire de l'IA de 14 milliards de dollars en proposant des modèles open-weight aux gouvernements et aux entreprises cherchant une indépendance vis-à-vis des technologies américaines et chinoises. Le chiffre d'affaires a atteint 200 millions de dollars en 2025, avec un objectif de 80 millions de dollars par mois d'ici décembre 2026.
Services du protocole Bluesky : Jetstream v2 avec relecture réseau
Bluesky lance Protocol Services avec Jetstream v2, ajoutant Network Replay pour l'accès aux données historiques, ainsi que de nouveaux SDK et un SDK TypeScript basé sur lex.
Bench du cache KV Qwen 3.6-35B-A3B : f16 vs q8_0 vs Turbo3 vs Turbo4 sur M5 Max jusqu'à 1M de contexte
Les benchmarks du fork TurboQuant Metal de TheTom sur M5 Max montrent que f16 et q8_0 manquent de mémoire au-delà de 256K, tandis que turbo3 atteint 1M à 6,5 tok/s en décodage. La séparation préremplissage/décodage favorise turbo3 pour le préremplissage et turbo4 pour le décodage sur les longs contextes.
Claude Code v2.1.150 ajoute une injection de prompt système à distance via le réseau
Claude Code v2.1.150 récupère les prompts système des serveurs Anthropic au démarrage et toutes les 60 secondes via un feature flag GrowthBook, permettant une injection à distance. Contournement avec CLAUDE_CODE_DISABLE_NONESSENTIAL_TRAFFIC=1.