Évaluer les Derniers Modèles d'IA : L'Émergence des Modèles Extrêmes
Le benchmarking récent de 40 nouveaux modèles d'IA met en lumière des changements significatifs dans le paysage Prix vs. Performance. L'attention étant portée sur Kimi k2.5 et Claude Opus 4.6, l'analyse révèle une division en deux extrêmes : 'God Mode' et 'Flash Mode', rendant les modèles d'entrée de gamme inefficaces.
Détails clés
- Situation de Kimi k2.5 : Les tentatives de benchmarking de Kimi k2.5 ont échoué en raison d'erreurs persistantes 'Pas de contenu', probablement dues à une surcharge. Cependant, Kimi-k2-Thinking a performé de manière adéquate pour les tâches de raisonnement complexe à ~15 TPS.
- Domination de la vitesse : Pour les applications sensibles à la latence, Liquid LFM 2.5 s'est imposé comme le modèle le plus rapide avec ~359 tokens/sec, suivi de Ministral 3B à ~293 tokens/sec.
- Efficacité des coûts : Ministral 3B se distingue comme la solution la plus rentable, à 0,10 $/1M de tokens d'entrée. Il est ~17 fois moins cher et ~40 % plus rapide que GPT-5.2 Codex, en faisant un choix de valeur solide face aux options plus coûteuses.
La recommandation est d'éviter les modèles d'entrée de gamme coûtant entre 0,50 $ et 1,00 $, car ils n'offrent pas de performances compétitives. Selon vos besoins, choisissez des modèles plus chers comme Opus/GPT-5 pour l'intelligence ou optez pour une vitesse rentable avec Liquid/Mistral.
📖 Lire la source complète : r/LocalLLaMA
👀 See Also
GPT-5.5 désormais disponible sur GitHub Copilot avec un multiplicateur premium de 7,5x
Le GPT-5.5 d'OpenAI déployé sur GitHub Copilot, offrant une amélioration du codage agentique en plusieurs étapes avec un multiplicateur promotionnel de 7,5× pour les utilisateurs Pro+, Business et Entreprise.
Mainteneur du noyau Linux signale un changement soudain dans la qualité des rapports de bogues générés par l'IA
Greg Kroah-Hartman affirme que les rapports de bogues générés par l'IA pour le noyau Linux sont passés de 'déchets d'IA' à des rapports légitimes il y a environ un mois, les équipes de sécurité des projets open source observant le même changement. L'équipe du noyau gère cette augmentation avec des outils comme Sashiko pour l'automatisation des revues.
NVIDIA annonce NemoClaw avec des fonctionnalités de sécurité OpenShell
NVIDIA a annoncé NemoClaw lors du GTC, s'appuyant sur OpenClaw pour ajouter une sécurité de niveau entreprise grâce à OpenShell, qui impose des garde-fous de confidentialité et de sécurité basés sur des politiques pour les agents d'IA.
RTX 4090 vs H100 pour le Fine-Tuning de Llama-3-8B : Une Comparaison Coût-Performance
Un développeur a testé le fine-tuning de Llama-3-8B sur une RTX 4090 et sur des instances H100 louées. La configuration avec la 4090 a coûté 2 000 $ d'avance et a pris 24 heures, tandis que la location de H100 a coûté environ 80 $ et s'est terminée en 4 heures.