ClawVibe : Un assistant vocal mains libres iOS pour agents IA avec STT/TTS intégré

ClawVibe est un assistant vocal iOS natif qui vous permet de parler à votre agent IA complètement sans les mains — conçu pour une utilisation au volant. Le développeur l'a créé après avoir rencontré le problème d'un trajet de 45 minutes où les solutions avec téléphone en main n'étaient pas sûres et les interfaces web nécessitaient de taper. Après deux mois de travail, l'application est maintenant en version bêta TestFlight et sera gratuite sur l'App Store.

Décisions techniques clés

Le choix architectural central : déplacer tout le traitement audio sur l'appareil. La version initiale envoyait l'audio vocal à un serveur pour transcription, mais rencontrait des pics de latence et des pertes de paquets sur les réseaux mobiles. La solution a été de gérer la reconnaissance vocale et la synthèse vocale sur le téléphone, en n'envoyant que la transcription textuelle sur le réseau. Cela élimine les problèmes de connectivité ; cela fonctionne même dans les zones à peine couvertes.

Le traitement sur l'appareil a posé un défi côté backend : la plupart des modèles ML utilisent le framework Metal d'Apple (accélération GPU), qu'Apple ne permet pas d'exécuter en arrière-plan. L'application utilise donc CoreML standard sans accélération GPU pour maintenir la détection et le traitement vocaux lorsque l'écran est éteint — un compromis nécessaire pour une utilisation mains libres.

Le bruit de fond (indications GPS, conversations, radio) était un autre point problématique. La solution est la biométrie vocale : l'application apprend votre profil vocal et n'envoie que la parole reconnue à l'IA. Les annonces GPS et autres bruits sont ignorés.

Fonctionnalités

• Reconnaissance vocale sur l'appareil : Transcrite localement ; aucun audio envoyé à Apple ou Google. Seul le texte va à votre backend IA.
• Synthèse vocale sur l'appareil : Plusieurs options vocales, sortie via le téléphone ou les haut-parleurs CarPlay.
• Détection vocale en continu : Pas de pression de bouton ni de mot d'activation ; elle sait quand vous parlez.
• Intégration CarPlay : Entièrement mains libres dans la voiture — la raison initiale de sa création.
• Reconnaissance vocale principale : Seule votre voix enregistrée déclenche l'IA ; les sons de fond sont filtrés.
• Contexte GPS : Les données de localisation sont envoyées avec chaque message pour des réponses tenant compte de la position.

Backend et disponibilité

Vous avez besoin de votre propre backend IA pour connecter ClawVibe. Il prend en charge plusieurs configurations, avec davantage d'intégrations en cours. Si vous utilisez déjà une instance OpenClaw, c'est bon. Sinon, vous pouvez essayer l'application avec un modèle local sur l'appareil.

L'application est actuellement en version bêta TestFlight. Une version gratuite sur l'App Store offrira l'expérience vocale complète de base. Un niveau Premium (à venir) ajoutera plus de voix, plusieurs profils vocaux, une interface CarPlay étendue, la prise en charge de l'Apple Watch, et plus encore.

À qui s'adresse-t-elle ?

Aux développeurs qui hébergent eux-mêmes des agents IA et souhaitent une interface vocale privée et mains libres pour la conduite ou d'autres contextes où les mains sont occupées.