Creación de una aplicación local de voz a texto para macOS con Claude Code: Caso de estudio de Vext

Un desarrollador compartió su experiencia construyendo Vext, una aplicación nativa de voz a texto para macOS que funciona completamente en el dispositivo usando Whisper en el Apple Neural Engine. Sin nube, sin cuentas, sin suscripción. La aplicación utiliza un núcleo en Rust con interfaz de usuario en Swift/SwiftUI y Core ML para la inferencia, con Claude Code como socio principal de codificación.

Características Principales

• Mantén presionado un atajo de teclado en cualquier lugar → habla → suelta → el texto aparece en el cursor
• Transcribe 60 segundos de audio en ~400ms (150x tiempo real)
• Limpieza inteligente: elimina palabras de relleno, reestructura el discurso para mayor legibilidad
• Traducción en tiempo real a más de 99 idiomas
• Transcripción de reuniones con identificación de hablantes y resúmenes automáticos
• Grabación de pantalla durante las grabaciones de voz (adjunta capturas de pantalla automáticamente)

Aciertos de Claude Code

• Whisper en Apple Silicon: Ayudó a iterar sobre estrategias de cuantización, fragmentación de modelos y diseño de memoria para la conversión a Core ML para que se ejecute eficientemente en el Neural Engine.
• Arquitectura del sistema de atajos de teclado: Sugirió usar un CGEventTap con permisos de accesibilidad adecuados y ayudó a depurar condiciones de carrera entre el inicio/parada de la grabación y la inyección en el portapapeles.
• FFI entre Rust y Swift: Generó enlaces FFI y detectó varios problemas de seguridad de memoria en la capa de interfaz C.

Limitaciones de Claude Code

• Tuvo dificultades con detalles específicos de la API de macOS que no están bien documentados en línea; los casos extremos de CGEventTap requirieron investigar directamente los encabezados de Apple.
• La ventana de contexto se convirtió en un cuello de botella en toda la base de código de Rust y Swift; el desarrollador dividió el proyecto en módulos y trabajó en uno a la vez.

Precios

Gratis para descargar y probar en getvext.app. $49 único para conservarlo (sin suscripción). Código VEXT50 para 50% de descuento.