Pilote : Un outil d'automatisation de navigateur entièrement construit avec du code Claude

Pilot est un outil d'automatisation de navigateur entièrement construit par Claude Code, dirigé et testé par un non-développeur. Il permet à Claude de contrôler Chrome en lisant l'arbre d'accessibilité—la même structure utilisée par les lecteurs d'écran—et en attribuant des numéros aux éléments cliquables pour une navigation précise.

Comment ça marche

L'outil convertit les éléments de page en données texte compactes au lieu de captures d'écran. Chaque élément cliquable reçoit un numéro, permettant à Claude de donner des commandes comme cliquer 5 plutôt que de deviner les positions à l'écran. Cette approche gère les fenêtres contextuelles et fonctionne sur plusieurs onglets.

Installation et utilisation

• Installez l'extension Chrome et démarrez le serveur
• Tapez /pilot dans Claude Code
• Demandez à Claude d'effectuer des tâches comme "allez sur YouTube et recherchez des tutoriels de cuisine"

Plusieurs actions peuvent être regroupées en un seul appel, et l'outil traite les données de page sous forme de texte compact plutôt que de captures d'écran.

Perspectives de développement

Le créateur a appris plusieurs leçons clés en construisant avec l'IA :

• Décrire clairement ce que vous voulez est la partie la plus difficile
• Les tests restent la responsabilité de l'humain—Claude écrit le code mais vous devez vérifier qu'il fonctionne
• Le développement a nécessité de nombreuses itérations, pas un processus unique

L'outil est gratuit, sous licence MIT, et fonctionne sur macOS, Linux et Windows. Le dépôt GitHub est disponible pour ceux qui s'intéressent à l'implémentation ou souhaitent contribuer.