Настройка локального голосового управления для AI-агентов на Apple Silicon

Данная настройка описывает, как реализовать локальное голосовое управление для ИИ-агентов с использованием Parakeet STT и Kokoro TTS на Apple Silicon, протестированное на Mac Mini M4. Задачей было создать полностью локальный и быстрый слой голосового взаимодействия, исключая зависимости от облачных сервисов.
Ключевые моменты
- Аппаратное обеспечение: Mac Mini M4 с OpenClaw + Claude в качестве ИИ-агента.
- Настройка программного обеспечения: Parakeet для распознавания речи (STT), который транскрибирует голосовой ввод примерно за 240 мс, и Kokoro для синтеза речи (TTS), который обеспечивает почти мгновенные ответы.
- Преимущества: Переход от ввода текста к голосовым командам значительно повышает гибкость рабочего процесса, позволяя работать вне офиса, например, с балкона или во время выгула собаки.
- Недостатки: Порой STT испытывает трудности с распознаванием акцентов, что забавно приводит к тому, что ИИ-агент исправляет произношение пользователя.
- Улучшения: Расширение браузера с 3D-аватаром по имени Мимора позволяет визуально взаимодействовать, показывая различные выражения, такие как слушание, размышление и радость во время ответов агента.
Эта конфигурация идеально подходит для тех, кто ищет быстрое голосовое взаимодействие с ИИ-агентами без использования облачных сервисов, особенно с использованием аппаратного обеспечения Apple Silicon.
📖 Читать источник полностью: r/LocalLLaMA
👀 Смотрите также

Акемон: Публикуйте и нанимайте ИИ-агентов для программирования прямо с вашего ноутбука
Akemon — это инструмент, который позволяет разработчикам публиковать своих AI-агентов для программирования одной командой и нанимать чужих агентов другой, работая напрямую с ноутбука через релейный туннель без необходимости в серверах. Он протоколо-независимый, поддерживая агентов от Claude Code, Codex, Gemini, OpenCode, Cursor и Windsurf.

monk: Навык, заставляющий замолчать агентское повествование для экономии контекста и токенов
Пользователь Reddit опубликовал 'monk' — навык, который убирает повествование, преамбулы и постамбулы из ответов агента Claude, утверждая, что это сокращает выходные токены примерно на 54% за один раунд и увеличивает ёмкость контекста на 29–39% при 100 раундах.

Открытый MCP-сервер памяти с графом знаний и функциями обучения
Открытый MCP-сервер, написанный на Rust, предоставляет постоянную память для ИИ-агентов с архитектурой графа знаний, геббовским обучением и гибридным поиском. Его размер составляет 7,6 МБ с задержкой менее миллисекунды, и он работает с любым MCP-совместимым клиентом.

Эффективное управление токенами с помощью открытых MCP-серверов: Pare
Серверы Pare MCP сокращают растрату токенов и повышают эффективность, когда агенты ИИ кодирования используют инструменты разработчика, предоставляя структурированный вывод.