Настройка локального голосового управления для AI-агентов на Apple Silicon

Данная настройка описывает, как реализовать локальное голосовое управление для ИИ-агентов с использованием Parakeet STT и Kokoro TTS на Apple Silicon, протестированное на Mac Mini M4. Задачей было создать полностью локальный и быстрый слой голосового взаимодействия, исключая зависимости от облачных сервисов.

Ключевые моменты

• Аппаратное обеспечение: Mac Mini M4 с OpenClaw + Claude в качестве ИИ-агента.
• Настройка программного обеспечения: Parakeet для распознавания речи (STT), который транскрибирует голосовой ввод примерно за 240 мс, и Kokoro для синтеза речи (TTS), который обеспечивает почти мгновенные ответы.
• Преимущества: Переход от ввода текста к голосовым командам значительно повышает гибкость рабочего процесса, позволяя работать вне офиса, например, с балкона или во время выгула собаки.
• Недостатки: Порой STT испытывает трудности с распознаванием акцентов, что забавно приводит к тому, что ИИ-агент исправляет произношение пользователя.
• Улучшения: Расширение браузера с 3D-аватаром по имени Мимора позволяет визуально взаимодействовать, показывая различные выражения, такие как слушание, размышление и радость во время ответов агента.

Эта конфигурация идеально подходит для тех, кто ищет быстрое голосовое взаимодействие с ИИ-агентами без использования облачных сервисов, особенно с использованием аппаратного обеспечения Apple Silicon.