DeepMind DiscoRL Règle de Mise à Jour par Apprentissage Méta Portée de JAX à PyTorch
Un développeur a porté la règle de mise à jour de méta-apprentissage DiscoRL de DeepMind de JAX à PyTorch. Ce travail est basé sur l'article de Nature 2025 concernant DiscoRL, qui signifie 'Distributed Compositional Reinforcement Learning' (Apprentissage par Renforcement Compositionnel Distribué) — une approche de méta-apprentissage pour entraîner des agents capables de s'adapter rapidement à de nouvelles tâches.
Détails de l'implémentation
Le portage inclut une implémentation complète disponible sur GitHub à l'adresse https://github.com/asystemoffields/disco-torch. Le dépôt contient :
- Un notebook Colab pour l'expérimentation
- Une API pour utiliser l'implémentation
- Des poids pré-entraînés hébergés sur Hugging Face
Le développeur a utilisé Claude Code pour aider au processus de portage de JAX à PyTorch. Ce type de travail de traduction est courant dans la communauté du ML lorsque les chercheurs souhaitent rendre des implémentations disponibles dans différents frameworks ou lorsqu'ils préfèrent travailler avec un framework plutôt qu'un autre.
Les approches de méta-apprentissage comme DiscoRL sont conçues pour permettre aux agents d'apprendre rapidement de nouvelles tâches en tirant parti d'expériences antérieures. La 'règle de mise à jour' fait référence à la formulation mathématique de la manière dont la politique ou la fonction de valeur de l'agent est ajustée pendant l'apprentissage. Porter de telles implémentations permet aux utilisateurs de PyTorch d'expérimenter avec ces techniques sans avoir à travailler dans JAX.
📖 Lire la source complète : r/LocalLLaMA
👀 See Also
free-claude-code ajoute la prise en charge de GLM-5 via NVIDIA NIM, et s'étend à OpenRouter et Discord
free-claude-code prend désormais en charge GLM-5 via le niveau gratuit de NVIDIA NIM (40 requêtes/min) et ajoute l'intégration OpenRouter, la prise en charge des bots Discord et la compatibilité avec le fournisseur local LMStudio. L'outil convertit les requêtes API Anthropic de Claude Code pour fonctionner avec des backends de modèles alternatifs.
Claudlytics : Tableau de bord auto-hébergé pour suivre l'utilisation des jetons de code Claude et les coûts
Claudlytics est un serveur web Node.js qui lit les fichiers de session .jsonl locaux de Claude Code pour fournir un suivi en temps réel de l'utilisation des jetons et des coûts. Il s'exécute localement sur 127.0.0.1 et peut être accessible via un tunnel SSH pour les serveurs distants.
Codemod grep : recherche structurelle de code dans les dépôts GitHub publics
Codemod grep vous permet de rechercher du code public par syntaxe et structure en utilisant des motifs ast-grep, pas seulement du texte ou des regex. Trouvez du code par sa forme dans les dépôts.
Développeur crée un générateur de modèles SaaS .NET avec Claude Code, partage des insights sur le workflow
Un développeur a rendu open-source NETrock, un modèle de démarrage SaaS .NET 10 avec authentification, ORM et tâches en arrière-plan, puis a construit un générateur côté client pour celui-ci en utilisant Claude Code. Le générateur permet aux utilisateurs de choisir des fonctionnalités et de télécharger un projet .zip fonctionnel qui reste dans leur navigateur.