Configuration du contrôle vocal local pour les agents IA sur Apple Silicon
Cette configuration détaille comment mettre en œuvre un contrôle vocal local pour les agents IA en utilisant Parakeet STT et Kokoro TTS sur Apple Silicon, spécifiquement testé sur un Mac Mini M4. L'objectif était d'obtenir une couche d'interaction vocale entièrement locale et rapide, éliminant les dépendances aux services cloud.
Détails Clés
- Matériel : Mac Mini M4 exécutant OpenClaw + Claude comme agent IA.
- Configuration Logicielle : Parakeet pour la reconnaissance vocale (STT) qui transcrit la voix en environ 240 ms, et Kokoro pour la synthèse vocale (TTS) qui fournit des réponses quasi instantanées.
- Avantages : Passer de la saisie au clavier aux commandes vocales améliore considérablement la flexibilité du flux de travail, permettant une opération indépendante du bureau, comme depuis le balcon ou en promenant un chien.
- Défis : Occasionnellement, le STT a du mal avec la reconnaissance des accents, menant humoristiquement l'agent IA à corriger la prononciation de l'utilisateur.
- Améliorations : Une extension de navigateur incorporant un avatar 3D nommé Mimora permet une interaction visuelle, montrant diverses expressions comme l'écoute, la réflexion et des états heureux pendant les réponses de l'agent.
Cette configuration est idéale pour ceux qui recherchent une interaction vocale rapide et indépendante du cloud avec des agents IA, en particulier en utilisant du matériel Apple Silicon.
📖 Lire la source complète : r/LocalLLaMA
👀 See Also
OpenSwarm : Orchestrateur CLI Multi-Agents Claude pour Linear et GitHub
OpenSwarm orchestre plusieurs instances de Claude Code CLI en tant qu'agents autonomes qui récupèrent les problèmes Linear et exécutent des pipelines Worker/Reviewer/Test/Documenter. Il utilise LanceDB avec des embeddings multilingues-e5 pour la mémoire et inclut un contrôle par bot Discord, une amélioration automatique des PR et un tableau de bord web.
Scalpel v2.0 : Analyseur de Codebase et Orchestrateur d'Agents IA
Scalpel v2.0 est un outil open-source qui analyse les bases de code sur 12 dimensions et assemble des équipes d'agents IA personnalisées. Il inclut un scanner en bash pur qui fonctionne sans jetons IA et est compatible avec Claude Code, Codex, Gemini, Cursor, Windsurf, Aider et OpenCode.
CopilotKit : Composants React Open-Source pour Interfaces d'Agents
CopilotKit (30k étoiles, MIT) fournit des composants React pour la couche d'interface agent : chat, streaming, appels d'outils, human-in-the-loop et interface générative, avec prise en charge du protocole AG-UI pour LangGraph, ADK, CrewAI et bien d'autres.
OpenGauge : outil open source pour suivre localement les coûts des agents LLM
OpenGauge est un outil open-source qui surveille les appels d'API des agents LLM comme OpenClaw, en enregistrant l'utilisation des tokens, les coûts et la latence dans une base de données SQLite locale. Il inclut un mode proxy pour l'enregistrement automatique, des statistiques détaillées sur les coûts et une fonctionnalité de disjoncteur pour empêcher les boucles incontrôlées.