Utilisation de Claude Code pour automatiser les expériences de recherche en IA pendant 12 heures
Recherche en IA automatisée avec Claude Code
Un développeur a documenté l'utilisation de Claude Code pour automatiser des expériences de recherche en IA pendant 12 heures d'affilée. Le projet s'est concentré sur CLaaS, un cadre d'apprentissage continu en temps réel qui déplace le contexte dans les poids en utilisant l'auto-distillation.
Configuration expérimentale
L'objectif était d'ajuster les exécutions d'entraînement par auto-distillation pour maximiser la conformité d'un modèle à différents vérificateurs de préférences, tels que des réponses concises et l'absence d'émojis. Les expériences ont été exécutées localement sur un RTX 5090 pendant la nuit.
Architecture du système
Le dépôt a été conçu pour être hautement configurable :
- Chaque paramètre ajustable exposé via CLI en utilisant la gestion de configuration Hydra
- Tableaux de bord HTML pour chaque étape d'entraînement et exécution d'évaluation
- Métriques, entrées et sorties rendues observables via des tableaux de bord
- Claude Code pouvait interroger les tableaux de bord via des requêtes curl pour vérifier la progression
Gestion des expériences
Le flux de travail était contrôlé par un fichier EXPERIMENTS.md local avec des règles spécifiques :
- Chaque expérience pouvait modifier au plus une variable ou apporter un changement de code
- Entre les expériences, le modèle devait soit accepter soit annuler le changement précédent en fonction des résultats
- Tout nouveau changement de code devait être exposé via la configuration pour un ajustement ultérieur
- Le modèle enregistrait toute la progression, les hypothèses et les résultats dans le fichier comme un journal continu
- Utilisation d'une "boucle Ralph Wiggum" avec l'objectif de maximiser la conformité aux préférences
Résultats
Sur 12 heures, le système a exécuté 9 expériences :
- Détecté et corrigé un bogue d'effondrement du modèle lors de la première exécution
- Ajusté les étapes de gradient par lot à 4
- Ajusté le taux d'apprentissage à 3e-5
- La conformité est passée de 0,000 à 1,000
- L'utilisation de jetons était étonnamment faible car la plupart du temps était consacré à l'attente des exécutions d'entraînement entre les expériences
La même tâche a également été exécutée avec Codex pendant 2 heures en utilisant une invite simple, et elle a convergé indépendamment vers les mêmes hyperparamètres.
Dépôt du projet : https://github.com/kfallah/CLaaS
📖 Lire la source complète : r/ClaudeAI
👀 See Also
Claude Opus 4.6 Réussit à Écrire du Code Malbolge Grâce à un Retour Itératif
Un développeur a utilisé Claude Opus 4.6 pour écrire "Hello World" en Malbolge, un langage de programmation ésotérique, en mettant en œuvre une boucle de rétroaction où les erreurs du compilateur étaient renvoyées à l'IA jusqu'à ce que le code passe la validation.
Newsletter IA autonome construite avec des agents OpenClaw
Une équipe a créé une newsletter hebdomadaire sur les agents d'IA qui fonctionne entièrement sur des agents OpenClaw, répartis sur 5 agents et 3 machines. La newsletter est conçue pour être consommée par d'autres agents d'IA via une API REST et des webhooks.
Gestion des défaillances des agents IA : Limites de réessai et budgets d'échec
Une équipe de production exploitant 6 agents IA a mis en place un budget de 3 échecs après qu'un agent ait réessayé une tâche limitée par quota 319 fois, gaspillant des heures de calcul. Ils ont également traité les dépassements de délai de pulsation, les faux rapports d'achèvement de tâche et les conflits de verrouillage optimiste.
Intégrer un agent IA en tant que membre de l'équipe : un cas d'entreprise réel
Une entreprise partage son expérience d'intégration de son premier agent IA en tant que véritable membre d'équipe gérant le design, le code, le marketing et les opérations, notant que les aspects difficiles n'étaient pas la configuration technique.