Résultats de référence en raisonnement visuel pour 15 modèles d'IA multimodaux

Vue d'ensemble du benchmark

AIMultiple a réalisé un benchmark de raisonnement visuel sur 15 modèles d'IA multimodaux de premier plan en utilisant 200 questions basées sur des éléments visuels. Le benchmark a été divisé en deux catégories distinctes : 100 questions de compréhension des graphiques axées sur l'interprétation des visualisations de données, et 100 questions de logique visuelle couvrant la reconnaissance de motifs et le raisonnement spatial.

Méthodologie

Chaque question a été exécutée 5 fois pour garantir la fiabilité statistique. Le benchmark a spécifiquement testé la capacité des modèles à interpréter les visualisations de données et à résoudre des problèmes de logique visuelle nécessitant la reconnaissance de motifs et le raisonnement spatial.

Résultats

Le classement général montre Gemini-3.1-pro-preview et Gemini-3-pro-preview en tête, suivis par GPT-5.2, Kimi-K2.5 et GPT-5.2-pro. Les résultats révèlent un schéma cohérent pour la plupart des systèmes : les modèles obtiennent de meilleures performances sur les tâches d'interprétation de graphiques basées sur des données que sur les problèmes de logique visuelle, où les performances chutent significativement.

Pour les développeurs travaillant avec des systèmes d'IA multimodaux, ce benchmark fournit des données concrètes sur les forces relatives dans différents types de tâches de raisonnement visuel. L'écart de performance entre l'interprétation des graphiques et la logique visuelle suggère que les modèles actuels ont des capacités plus solides dans le traitement des données visuelles structurées que dans le raisonnement spatial abstrait.