OpenEvol: Pipeline de Automejora Sin Conexión para LLMs Utilizando Historial de Conversaciones

Qué hace OpenEvol

OpenEvol es una canalización de auto-mejora offline para modelos de lenguaje grandes que convierte automáticamente el historial de conversaciones de IA en datos de entrenamiento. La herramienta extrae intercambios de alto valor de las conversaciones, evalúa su calidad y genera conjuntos de datos de ajuste fino sin etiquetado manual ni ruedas de datos propietarias.

Cómo funciona

La canalización pasa por cuatro etapas automatizadas:

• Extraer intercambios de alto valor de las conversaciones
• Evaluar la calidad usando reglas con un modelo de lenguaje profesor opcional
• Sintetizar conjuntos de datos de SFT, preferencia y preentrenamiento
• Ajustar fino con un solo comando

Esto crea un ciclo cerrado donde el modelo aprende de su propia experiencia.

Detalles técnicos

No se requiere GPU para comenzar: la canalización completa funciona en CPU con un backend de profesor simulado o compatible con OpenAI. Puedes agregar una GPU cuando estés listo para entrenar.

Se admiten cinco backends de profesor:

• Simulado
• Basado en reglas
• API compatible con OpenAI (cualquier proxy local funciona)
• HuggingFace Transformers
• vLLM

Opciones de uso

Tres formas de usar OpenEvol:

• CLI para ejecuciones por lotes offline
• Servidor de API REST para automatización
• Complemento de escritorio OpenClaw que te permite activar ejecuciones de la canalización directamente desde el chat

Control de calidad

Cada lote se puntúa automáticamente. Si la tasa de aprobación cae por debajo del 80%, el entrenamiento se bloquea y se marca para revisión humana, dando a los usuarios control sobre qué datos se usan para el entrenamiento.

Este tipo de herramienta es útil para desarrolladores que quieren mejorar sus agentes de programación de IA usando historiales de conversaciones reales sin enviar datos a servicios externos.