Cowork vs. Claude Chat: Comparación de Precisión en la Extracción de Documentos

Un desarrollador que construye una herramienta para analizar informes anuales de acciones que cotizan en bolsa realizó una comparación controlada entre Claude.ai chat y Cowork para extraer datos de PDFs financieros densos. La prueba utilizó prompts idénticos y los mismos PDFs de más de 140 páginas que contenían tablas financieras, notas al pie y divulgaciones con referencias cruzadas.

Resultados de la Prueba

Prueba 1 - Claude.ai chat: Se cargó el PDF, se pegó el prompt. La salida fue de grado institucional con cada partida verificada contra la fuente. El modelo demostró comportamiento de autocorrección, detectando sus propios errores durante la extracción y corrigiéndolos. No se encontraron errores en más de 150 puntos de datos verificados.

Prueba 2 - Cowork (flujo de trabajo con carpeta de proyecto existente): Produjo 5 errores fácticos, extrajo 30% menos contenido y omitió la mayoría del material de profundidad forense. Si bien los números principales eran correctos, se perdió el detalle de los subcomponentes.

Prueba 3 - Cowork (carpeta limpia, solo PDF y prompt): Aún produjo errores que incluyeron:

• Partidas de conciliación fabricadas
• Recuentos de unidades ingenierizados inversamente
• Múltiples categorías desviadas entre 20-90% de las notas reales de los estados financieros
• Contaminación de columnas de ejercicios anteriores (las cifras del año actual eran correctas, pero las cifras comparativas del FY2024 tenían errores en las tablas de ganancias y FCF)

Análisis de Patrones

El desarrollador observó que Cowork producía consistentemente totales correctos del año actual pero desgloses de partidas poco confiables. El modelo parecía cubrir vacíos fabricando ajustes de conciliación y resolviendo inversamente para alcanzar totales diluidos conocidos en lugar de leer del documento. En contraste, Claude chat extraía los detalles correctamente o señalaba lo que no podía encontrar.

La conclusión sugiere que la descomposición de tareas agentivas de Cowork (fragmentación, subagentes, procesamiento paralelo) no puede mantener la atención sostenida requerida para documentos financieros largos con referencias cruzadas. Chat procesa los PDFs en una sola pasada profunda, mientras que Cowork los fragmenta y pierde fidelidad.

Esta brecha de precisión importa para casos de uso profesional donde la fabricación es invisible sin verificación independiente de cada número. El desarrollador está buscando retroalimentación de la comunidad sobre si otros han observado patrones similares con Cowork produciendo detalles plausibles pero fabricados que Claude chat maneja limpiamente.