Flux de travail structuré dépasse le mode plan et les superpouvoirs sur le benchmark AI DES
Un post Reddit partage les résultats du nouveau benchmark de simulation à événements discrets (DES) assistée par IA. La soumission utilisant le workflow Ouroboros (ooo) dans Claude Code a été classée numéro 1, battant à la fois le mode plan intégré de Claude et les piles fat-skill 'superpowers'.
Détails du benchmark
Le benchmark teste la compréhension complète d'un système réel — un système de transport minier avec des camions, des points de chargement, des points de déchargement, des itinéraires et des files d'attente. Les soumissions sont évaluées sur :
- Compréhension de la structure du système
- Abstraction en un modèle de simulation à événements discrets
- Conception des événements, des changements d'état et des KPI
- Production de code de simulation exécutable
- Interprétation des résultats (goulots d'étranglement, débit, temps d'attente)
- Génération d'artefacts lisibles (diagrammes de topologie, animations)
Performance d'Ouroboros
La soumission Ouroboros incluait un code DES fonctionnel, un diagramme de topologie du système minier et une animation de camions transportant du minerai. Notamment, lorsque le serveur MCP a échoué en cours d'exécution, Ouroboros est revenu à un chemin basé sur les compétences et a terminé la tâche — démontrant la récupération et le réacheminement dans des déploiements réels.
Comparaison
- Mode plan (planification légère) — référence décente
- Superpowers / piles fat-skill — pires que le mode plan sur cette tâche
- Ouroboros (structuré : clarifier → planifier → exécuter → évaluer → récupérer → itérer) — meilleur
Le résultat suggère que structurer le workflow autour de la définition du problème, de la planification, de l'exécution, de l'évaluation et de la récupération est plus efficace que d'accumuler plus d'instructions et de compétences plus grandes.
Ouroboros : https://github.com/Q00/ouroboros
Benchmark : https://simulation-bench.fly.dev/
📖 Lire la source complète : r/ClaudeAI
👀 See Also
VibeThinker-3B : Un modèle de 3B de paramètres égalant DeepSeek 671B aux benchmarks mathématiques AIME
Les chercheurs de Sina Weibo ont publié VibeThinker-3B, un modèle de 3B de paramètres obtenant 94,3 sur AIME 2026—équivalent à DeepSeek V3.2 (671B). L'article présente l'hypothèse de compression-couverture paramétrique, arguant que le raisonnement vérifiable peut être compressé dans de petits modèles.
Croissance de l'écosystème OpenClaw et cartographie des acteurs clés
Un membre de la communauté a cartographié l'expansion rapide de l'écosystème OpenClaw, notant plus de 230 000 étoiles sur GitHub, plus de 116 000 membres sur Discord, et l'émergence de sociétés dans l'hébergement géré, le routage LLM et les couches de sécurité dans les 60 jours suivant le lancement.
L'article d'échecs de Claude Shannon en 1950 a prédit le problème central du GenAI : deviner vs. savoir
L'article de Shannon sur les échecs en 1950 a posé le défi central de l'IA : prendre des décisions « assez bonnes » en situation d'incertitude, exactement le problème auquel l'IA générative est confrontée aujourd'hui lorsqu'elle produit des réponses polies mais erronées.
Révélation de l'Assemblage et de la Structure du Prompt Système de Claude Code
Une fuite de source map dans le package npm de Claude Code a exposé le flux d'assemblage des prompts système, montrant des sections de préfixe statiques suivies de contenu dynamique spécifique à la session, avec trois variantes d'identité et des directives d'exécution détaillées.