Création d'un système de glossaire hindi personnalisé avec Claude : De 76 % à 92 % de précision en 10 mois

Un développeur solo à Bangalore a créé un système de glossaire personnalisé pour Claude afin d'améliorer la précision de la génération de contenu spécialisé en hindi. En 10 mois, le taux d'erreur pour le vocabulaire de domaine est passé de 24 % à 8 % (la précision est passée de 76 % à 92 %). Le projet dessert désormais 310 clients avec un MRR de 10 800 $ pour le support client et les articles de blog en hindi.

Le problème : un hindi générique pour les termes professionnels

Le hindi par défaut de Claude utilise des traductions génériques pour les termes professionnels. Par exemple, il produit « bhugtan » (paiement) au lieu de « UPI bhugtan » (paiement UPI). Ce manque de vocabulaire spécialisé a entraîné un taux d'erreur de 24 % dans le contenu technique.

L'évolution du système de glossaire

Le développeur a itéré sur trois approches en 10 mois :

• Mois 1-3 : Glossaire manuel (200 termes). Collé en contexte avec chaque requête. La précision est passée de 76 % à 84 %.
• Mois 4-6 : Glossaire structuré avec catégories (400 termes). Termes organisés en fiscalité, paiement, conformité et types d'entreprise. La précision est passée de 84 % à 88 %.
• Mois 7-10 : Glossaire basé sur des exemples (600 termes). Chaque terme comprend 2 à 3 phrases d'exemple montrant son utilisation correcte en contexte. La précision a atteint 92 %.

Points clés pour les applications IA non anglophones

Le développeur souligne qu'un glossaire n'est pas qu'une liste, c'est un outil pédagogique. Simplement augmenter le volume de termes n'a aidé que marginalement. La catégorisation a apporté une valeur ajoutée, mais les phrases d'exemple avec contexte ont fourni la plus grande amélioration de précision. Les 8 % d'erreur restants se concentrent dans les variations régionales et les termes réglementaires récemment introduits.

Pour les développeurs créant des applications IA non anglophones, cette étude de cas démontre que les glossaires devraient inclure des phrases d'exemple pour mieux enseigner le contexte au modèle que les définitions seules.