SymDex : l'indexeur de code MCP open source réduit l'utilisation de jetons des agents IA

Ce que fait SymDex

SymDex résout un problème spécifique des agents d'IA de codage actuels : lorsqu'on leur demande de trouver une fonction, ils lisent généralement le fichier entier contenant cette fonction, consommant les tokens de la fenêtre contextuelle avant de faire un vrai travail. Le développeur a créé SymDex parce que chaque agent d'IA qu'il utilisait lisait des fichiers entiers juste pour trouver une fonction.

Le calcul des tokens

Selon le matériel source, un fichier de 300 lignes contient environ 10 500 caractères. Avec les tokenizers BPE (utilisés par les principaux LLM) traitant environ 3-4 caractères par token, cela représente environ 3 000 tokens pour le code, plus les espaces d'indentation et le cadrage de la réponse, totalisant approximativement 3 400 tokens pour rechercher une fonction. Une vraie session de débogage pourrait toucher 8-10 fichiers, consommant la majeure partie de la fenêtre contextuelle avant qu'aucune correction ne soit faite.

Comment ça fonctionne

SymDex pré-indexe votre base de code une fois. Après l'indexation, votre agent sait exactement où se trouve chaque fonction et classe sans lire les fichiers complets. Le même fichier de 300 lignes qui coûte ~3 400 tokens à lire renvoie des résultats en ~100 tokens avec SymDex.

Les fonctionnalités supplémentaires incluent :

• Recherche sémantique locale (trouver des fonctions par ce qu'elles font, pas seulement par nom)
• Suivi du graphe d'appels pour que votre agent sache ce qui casse avant de toucher quoi que ce soit

Pour commencer

Installation et utilisation de base :

pip install symdex
symdex index ./your-project --name myproject
symdex search "validate email"

Compatibilité et licence

SymDex fonctionne avec Claude, Codex, Gemini CLI, Cursor, Windsurf et tout agent compatible MCP. Il dispose également d'une CLI autonome. L'outil est gratuit, sous licence MIT et s'exécute entièrement sur votre machine. Il prend en charge 12 langages de programmation.