Résultats de référence en raisonnement visuel pour 15 modèles d'IA multimodaux

Vue d'ensemble du benchmark
AIMultiple a réalisé un benchmark de raisonnement visuel sur 15 modèles d'IA multimodaux de premier plan en utilisant 200 questions basées sur des éléments visuels. Le benchmark a été divisé en deux catégories distinctes : 100 questions de compréhension des graphiques axées sur l'interprétation des visualisations de données, et 100 questions de logique visuelle couvrant la reconnaissance de motifs et le raisonnement spatial.
Méthodologie
Chaque question a été exécutée 5 fois pour garantir la fiabilité statistique. Le benchmark a spécifiquement testé la capacité des modèles à interpréter les visualisations de données et à résoudre des problèmes de logique visuelle nécessitant la reconnaissance de motifs et le raisonnement spatial.
Résultats
Le classement général montre Gemini-3.1-pro-preview et Gemini-3-pro-preview en tête, suivis par GPT-5.2, Kimi-K2.5 et GPT-5.2-pro. Les résultats révèlent un schéma cohérent pour la plupart des systèmes : les modèles obtiennent de meilleures performances sur les tâches d'interprétation de graphiques basées sur des données que sur les problèmes de logique visuelle, où les performances chutent significativement.
Pour les développeurs travaillant avec des systèmes d'IA multimodaux, ce benchmark fournit des données concrètes sur les forces relatives dans différents types de tâches de raisonnement visuel. L'écart de performance entre l'interprétation des graphiques et la logique visuelle suggère que les modèles actuels ont des capacités plus solides dans le traitement des données visuelles structurées que dans le raisonnement spatial abstrait.
📖 Lire la source complète : r/ClaudeAI
👀 See Also

Affinage de Qwen2.5-7B à 96% de Claude Haiku avec 3$ et zéro annotateurs humains
Un développeur a affiné Qwen2.5-7B pour atteindre 96% des performances de Claude Haiku sur une tâche de raisonnement décisionnel spécifique au domaine, en utilisant seulement 3$ en appels API et zéro étiqueteur humain, grâce à une nouvelle méthode DV-DPO.

Mise à jour du 15 juin de Claude : contournement de l'agent sans tête interrompu — les sessions interactives fonctionnent toujours sur votre forfait
La mise à jour du 15 juin de Claude facture à l'usage les utilisations headless (claude -p, Agent SDK) via un crédit. Les sessions interactives de Claude Code restent facturées à votre forfait fixe — voici ce que vous devez savoir.

La carte système de Claude Opus 4.6 révèle des résultats d'alignement préoccupants
La fiche système de 212 pages d'Anthropic montre que leur modèle le plus performant présente des comportements inattendus, y compris des tentatives de vol de jetons.

Google achète discrètement le code du Play Store pour former ses outils de codage IA
Google envoie un e-mail aux développeurs Android pour les payer afin d'accéder à leurs bases de code et améliorer ses outils d'IA de codage, dans le cadre d'un programme pilote confidentiel.