Resultados de Referencia de Razonamiento Visual para 15 Modelos de IA Multimodales
Resumen del Benchmark
AIMultiple realizó un benchmark de razonamiento visual con 15 modelos líderes de IA multimodal utilizando 200 preguntas basadas en imágenes. El benchmark se dividió en dos categorías distintas: 100 preguntas de comprensión de gráficos centradas en la interpretación de visualizaciones de datos, y 100 preguntas de lógica visual que abarcan reconocimiento de patrones y razonamiento espacial.
Metodología
Cada pregunta se ejecutó 5 veces para garantizar fiabilidad estadística. El benchmark evaluó específicamente la capacidad de los modelos para interpretar visualizaciones de datos y resolver problemas de lógica visual que requieren reconocimiento de patrones y razonamiento espacial.
Resultados
La clasificación general muestra a Gemini-3.1-pro-preview y Gemini-3-pro-preview liderando, seguidos por GPT-5.2, Kimi-K2.5 y GPT-5.2-pro. Los resultados revelan un patrón consistente en la mayoría de los sistemas: los modelos tienen mejor desempeño en tareas de interpretación de gráficos basadas en datos que en problemas de lógica visual, donde el rendimiento disminuye significativamente.
Para desarrolladores que trabajan con sistemas de IA multimodal, este benchmark proporciona datos concretos sobre las fortalezas relativas en diferentes tipos de tareas de razonamiento visual. La brecha de rendimiento entre la interpretación de gráficos y la lógica visual sugiere que los modelos actuales tienen capacidades más sólidas para procesar datos visuales estructurados que para el razonamiento espacial abstracto.
📖 Read the full source: r/ClaudeAI
👀 Ver también
Modelos Frontier de OpenAI y Codex ahora disponibles en AWS
Los modelos fronterizos de OpenAI y Codex ya están disponibles de forma general en AWS, permitiendo a las empresas usar OpenAI a través de sus entornos y flujos de adquisición existentes en AWS.
GRPO Agente: Primera IA en vencer a todos los humanos en una competencia de programación
El nuevo algoritmo de RL Agentic GRPO permite que una IA supere a todos los humanos en un concurso de programación al proporcionar recompensas inmediatas y corrección retardada.
La Estrategia de IA de Apple y la Comoditización de la Inteligencia
El artículo argumenta que el enfoque conservador de Apple en IA podría ser ventajoso a medida que la inteligencia se convierte en una mercancía, con modelos como Gemma4 logrando un 85,2% en MMLU Pro mientras se ejecutan en teléfonos, y Sora de OpenAI costando 15 millones de dólares diarios frente a 2,1 millones de ingresos.
Analizando el Consumo de Tokens en la Ventana de Contexto de 1 Millón de Claude: Los Datos Muestran Crecimiento Ilimitado y Acumulación de Fallos de Caché
El análisis de la ventana de contexto de 1 millón de tokens de Claude revela dos factores que se combinan y causan un consumo rápido de tokens: el crecimiento ilimitado del contexto sin compactación automática y las costosas fallas de caché en tamaños de contexto más grandes. El autor proporciona un script de Python para analizar el uso personal de tokens a partir de archivos de sesión JSONL.