Signet: Capa de Memoria de Código Abierto para Agentes de IA de Programación Alcanza 80% de F1 en LoCoMo

Signet es un sistema de memoria de código abierto diseñado para agentes de IA de programación como Claude Code, OpenCode, OpenClaw y Codex. Aborda la gestión de memoria separando la extracción de recuerdos del flujo conversacional del agente.

Rendimiento y Enfoque

El sistema recientemente logró un 80% de F1 en el benchmark LoCoMo, que evalúa la memoria conversacional a largo plazo. Para comparar, el RAG estándar obtiene alrededor del 41% en este benchmark, GPT-4 con contexto completo obtiene un 32%, y el límite humano es del 87.9%.

A diferencia de los enfoques que dan a los agentes una herramienta de "recordar", Signet invierte la arquitectura:

• Los recuerdos se extraen después de cada sesión mediante una canalización de LLM separada—sin llamadas a herramientas durante la conversación
• El contexto relevante se inyecta antes de cada prompt—el agente no busca lo que necesita, simplemente lo tiene

El enfoque es análogo a la memoria humana, donde la información surge automáticamente en lugar de requerir consultas explícitas.

Implementación Técnica

Todo se ejecuta localmente usando SQLite en tu máquina sin dependencias en la nube, funcionando sin conexión. La misma memoria del agente persiste entre diferentes herramientas de programación. La configuración requiere un comando de instalación y se ejecuta en unos minutos. El proyecto tiene licencia Apache 2.0.

Desarrollo Futuro

El equipo está trabajando en un modelo de memoria predictiva por usuario que aprende tus patrones y anticipa el contexto que necesitarás antes de que lo pidas. Este modelo se entrenará localmente con los pesos permaneciendo en tu máquina.