15のマルチモーダルAIモデルの視覚的推論ベンチマーク結果

ベンチマーク概要

AIMultipleは、200の視覚ベースの質問を使用して、主要な15のマルチモーダルAIモデルの視覚的推論ベンチマークを実施しました。このベンチマークは、データ可視化の解釈に焦点を当てた100のチャート理解問題と、パターン認識と空間推論をカバーする100の視覚的論理問題という2つの異なるトラックに分けられました。

方法論

統計的信頼性を確保するため、各質問は5回実行されました。このベンチマークでは特に、データ可視化の解釈能力と、パターン認識と空間推理を必要とする視覚的論理問題の解決能力がテストされました。

結果

総合リーダーボードでは、Gemini-3.1-pro-previewとGemini-3-pro-previewがリードし、続いてGPT-5.2、Kimi-K2.5、GPT-5.2-proが続いています。結果は、ほとんどのシステムに一貫したパターンを示しています：モデルは、データ駆動型のチャート解釈タスクでは良好な性能を発揮する一方、視覚的論理問題では性能が大幅に低下しています。

マルチモーダルAIシステムを扱う開発者にとって、このベンチマークは、異なるタイプの視覚的推論タスクにおける相対的な強みに関する具体的なデータを提供します。チャート解釈と視覚的論理の間の性能ギャップは、現在のモデルが、抽象的な空間推論よりも構造化された視覚データの処理においてより強力な能力を持っていることを示唆しています。