Créer un assistant vocal IA local avec SwiftUI et CSM-1B sur Apple Silicon
Un développeur a partagé son projet secondaire mobiGlas, une application SwiftUI qui transforme un assistant IA OpenClaw en compagnon vocal mains libres. L'application fonctionne entièrement sur Apple Silicon avec reconnaissance vocale locale, LLM local et clonage vocal local utilisant CSM-1B — aucune dépendance au cloud.
Détails Clés
- Déclencheur : Dites "Hey Skippy" dans les AirPods pour lancer une conversation.
- Voix : Utilise le modèle de clonage vocal CSM-1B fonctionnant localement sur un M2 Ultra. Génère environ 15 secondes d'audio en 7 secondes environ.
- Stack :
- OpenClaw — Framework d'assistant IA fonctionnant sur Mac
- mobiGlas — Application SwiftUI avec reconnaissance vocale et synthèse vocale en temps réel
- CSM-1B — Modèle de clonage vocal local
- AirPods — Entrée/sortie audio mains libres
- Statut : v0.1 (décrite comme "bancale mais fonctionnelle"). La sensation de se promener en discutant avec l'IA est rapportée comme "vraiment incroyable."
- Exemple vocal : Le développeur a cloné la voix de R.C. Bray (narrateur de Expeditionary Force) pour l'assistant "Skippy."
Prochaines Étapes
Le développeur prévoit de fluidifier l'expérience pour une utilisation quotidienne comme les briefings d'actualités, les rappels et la verbalisation d'idées.
Si vous expérimentez avec l'IA vocale locale sur Apple Silicon, le développeur souhaite échanger des idées.
📖 Lire la source originale : r/openclaw
👀 See Also
Plugin open-source Claude Code simule le Bureau du Directeur des Données et de l'IA avec 22 agents spécialisés.
Un plugin open-source Claude Code appelé AI CDAIO Office utilise 22 agents d'IA spécialisés pour simuler un bureau complet du Chief Data & AI Office, générant des fichiers réels PPTX, DOCX et XLSX pour des documents stratégiques, des cadres de gouvernance et des supports pour le conseil d'administration.
Plugin Peek pour Claude Code : Navigation Automatique dans la Mémoire de Session
Peek est un plugin Claude Code qui capture et injecte automatiquement les corrections et préférences des utilisateurs pour orienter l'assistant IA. Il utilise une recherche par fusion avec des embeddings, BM25, une décroissance temporelle et des filtres de métadonnées pour fournir un contexte pertinent sans sollicitation manuelle.
Bifrost AI Gateway : Un outil open-source comble les lacunes de l'infrastructure IA
Bifrost est une passerelle LLM open-source basée sur Go qui offre un basculement automatique entre les fournisseurs, des plafonds budgétaires qui rejettent les requêtes, une journalisation d'audit et des crochets pour l'évaluation. Les tests de performance montrent qu'elle est environ 50 fois plus rapide que LiteLLM à haut débit.
Conseil : Un Cadre de Dialogue Structuré pour Claude
Conseil — Un Creuset est un cadre de dialogue structuré conçu pour fonctionner dans une seule fenêtre de contexte Claude. Il utilise un cadrage de personnage pour créer quatre modes d'engagement distincts : interrogation rigoureuse, action générative, expérience vécue et intuition non formée.