DeepMind DiscoRL Règle de Mise à Jour par Apprentissage Méta Portée de JAX à PyTorch
Un développeur a porté la règle de mise à jour de méta-apprentissage DiscoRL de DeepMind de JAX à PyTorch. Ce travail est basé sur l'article de Nature 2025 concernant DiscoRL, qui signifie 'Distributed Compositional Reinforcement Learning' (Apprentissage par Renforcement Compositionnel Distribué) — une approche de méta-apprentissage pour entraîner des agents capables de s'adapter rapidement à de nouvelles tâches.
Détails de l'implémentation
Le portage inclut une implémentation complète disponible sur GitHub à l'adresse https://github.com/asystemoffields/disco-torch. Le dépôt contient :
- Un notebook Colab pour l'expérimentation
- Une API pour utiliser l'implémentation
- Des poids pré-entraînés hébergés sur Hugging Face
Le développeur a utilisé Claude Code pour aider au processus de portage de JAX à PyTorch. Ce type de travail de traduction est courant dans la communauté du ML lorsque les chercheurs souhaitent rendre des implémentations disponibles dans différents frameworks ou lorsqu'ils préfèrent travailler avec un framework plutôt qu'un autre.
Les approches de méta-apprentissage comme DiscoRL sont conçues pour permettre aux agents d'apprendre rapidement de nouvelles tâches en tirant parti d'expériences antérieures. La 'règle de mise à jour' fait référence à la formulation mathématique de la manière dont la politique ou la fonction de valeur de l'agent est ajustée pendant l'apprentissage. Porter de telles implémentations permet aux utilisateurs de PyTorch d'expérimenter avec ces techniques sans avoir à travailler dans JAX.
📖 Lire la source complète : r/LocalLLaMA
👀 See Also
Compteur Claude : L'application Android suit les limites d'utilisation de Claude avec des notifications en temps réel.
Un développeur a créé Claude Counter, une application Android gratuite qui interroge l'API de Claude pour afficher en direct les limites d'utilisation de session et hebdomadaires. L'application affiche des barres de progression, fournit des notifications détaillées avec le pourcentage restant et alerte lorsque les limites sont réinitialisées.
Cadre de Défense en Couches pour l'Application des Règles de Code Claude
Un professionnel des opérations informatiques a construit un cadre de défense à 8 couches pour faire respecter les règles de Claude Code après avoir découvert que les invites CLAUDE.md et les crochets de blocage pouvaient être contournés. L'approche adapte le modèle du fromage suisse de l'investigation d'accidents pour empêcher les contournements.
Adam : une bibliothèque d’agents IA multiplateforme intégrable en C
Adam est une bibliothèque C fournissant une boucle d'agent complète avec appel d'outils, mémoire, voix et support des LLM cloud et locaux, conçue pour être intégrée dans n'importe quelle application.
Analyse des outils de codage IA : Dissection de 3 177 appels API
Une analyse technique de 3 177 appels API révèle comment quatre outils de codage IA gèrent les fenêtres de contexte, mettant en lumière des inefficacités et des variations.