DeepMind DiscoRL Meta-Learning-Update-Regel von JAX zu PyTorch portiert
Ein Entwickler hat DeepMinds DiscoRL-Metalern-Update-Regel von JAX zu PyTorch portiert. Die Arbeit basiert auf dem Nature-Artikel von 2025 über DiscoRL, was für 'Distributed Compositional Reinforcement Learning' steht – einen Metalern-Ansatz zum Trainieren von Agenten, die sich schnell an neue Aufgaben anpassen können.
Implementierungsdetails
Der Port umfasst eine vollständige Implementierung, die auf GitHub unter https://github.com/asystemoffields/disco-torch verfügbar ist. Das Repository enthält:
- Ein Colab-Notebook für Experimente
- Eine API zur Nutzung der Implementierung
- Vorab trainierte Gewichte, die auf Hugging Face gehostet werden
Der Entwickler nutzte Claude Code, um beim Portierungsprozess von JAX zu PyTorch zu unterstützen. Diese Art von Übersetzungsarbeit ist in der ML-Community üblich, wenn Forscher Implementierungen in verschiedenen Frameworks verfügbar machen möchten oder wenn sie lieber mit einem bestimmten Framework arbeiten.
Metalern-Ansätze wie DiscoRL sind darauf ausgelegt, Agenten zu befähigen, durch Nutzung früherer Erfahrungen schnell neue Aufgaben zu erlernen. Die 'Update-Regel' bezieht sich auf die mathematische Formulierung, wie die Politik oder Wertfunktion des Agenten während des Lernens angepasst wird. Das Portieren solcher Implementierungen ermöglicht PyTorch-Nutzern, mit diesen Techniken zu experimentieren, ohne in JAX arbeiten zu müssen.
📖 Read the full source: r/LocalLLaMA
👀 Siehe auch
Wrangle: Ein nativer macOS-Editor zur Verwaltung von Claude-Code-Sitzungen
Wrangle ist ein nativer macOS-Markdown-Editor, der speziell für die Verwaltung mehrerer Claude Code-Sitzungen entwickelt wurde und eingebettete Terminals sowie intelligente Benachrichtigungen bietet. Der Entwickler hat ihn erstellt, nachdem VS Code mit seinem täglichen Workflow, bei dem viele Claude Code-Sitzungen laufen, nicht mehr mithalten konnte.
Masterplan: Ein minimales Terminal-Aufgabensystem für Claude Code-Benutzer
Ein Entwickler hat master-plan erstellt, ein Claude Code-Plugin mit vier Slash-Befehlen, das Aufgaben direkt im Terminal mithilfe einer Markdown-Datei und Git verwaltet. Das System erfasst Ideen mitten in der Arbeitssitzung ohne Kontextwechsel und erkennt Test-Runner automatisch.
Wichtige OpenClaw-Plugins für Entwickler, die KI-Codierungsagenten verwenden
Ein Entwickler testete OpenClaw-Plugins und identifizierte wesentliche Tools, darunter env-guard für Sicherheit, commit-guard zur Verhinderung schlechter Commits, composio für die Verbindung mit über 860 Tools, cortex-memory für lange Sitzungen, cost-tracker für Ausgabentransparenz und openclaw-better-gateway zur Behebung instabiler Verbindungen.
Orc: Multi-Agent Coding Orchestration Tool erweitert um Planungs- und Benachrichtigungsfunktionen
Orc ist ein Open-Source-Tool, das KI-Codierungsagenten über Projekte hinweg mit einer lokalen TUI-Oberfläche orchestriert. Das neueste Release fügt Planung als erstklassige Phase hinzu, Benachrichtigungssysteme für menschliches Eingreifen und natürliche Sprach-Lebenszyklus-Hooks.