El Enfoque de Debate Multiagente Mejora la Calidad del Razonamiento en LLM.

Un desarrollador en r/LocalLLaMA compartió resultados de experimentar con enfoques de debate multiagente para mejorar el razonamiento de los LLM. En lugar del flujo de trabajo estándar de un solo modelo de pregunta a respuesta, este método utiliza múltiples agentes de IA que responden a la misma pregunta y se critican entre sí antes de generar una respuesta final.

Cómo funciona el enfoque

El experimento se realizó utilizando CyrcloAI, una herramienta que estructura el proceso con diferentes agentes asumiendo roles específicos:

• Analista: Proporciona la respuesta inicial al estímulo
• Crítico: Revisa y critica las respuestas de otros agentes
• Sintetizador: Combina los puntos más fuertes en una respuesta final

Cada agente responde al estímulo y reacciona a las respuestas de los demás antes de que el sistema produzca un resultado final. Se destacó especialmente el agente crítico por señalar saltos lógicos o suposiciones débiles en las respuestas iniciales, incorporándose esas correcciones en la respuesta final.

Resultados y observaciones

El desarrollador informó que las respuestas se sentían "notablemente más estructuradas y deliberadas" en comparación con los enfoques de un solo modelo. El método se describió como similar a los estímulos de autorreflexión o bucles de razonamiento iterativo, pero distribuidos entre agentes separados en lugar de pasadas repetidas por un solo modelo.

Compensaciones y consideraciones prácticas

El enfoque conlleva una mayor latencia y uso de tokens, planteando preguntas sobre su practicidad para flujos de trabajo cotidianos. Sin embargo, la mejora en la calidad del razonamiento fue lo suficientemente significativa como para que el desarrollador esté explorando cómo esto podría replicarse localmente con variantes de Llama.

El desarrollador sugirió que esto podría implementarse potencialmente con estímulos de roles y un simple bucle de crítica antes de un paso final de síntesis, y está buscando aportes de la comunidad sobre experimentos similares con modelos locales.