Приложение ClawTalk для iOS позволяет общаться голосом с самоуправляемыми ИИ-агентами OpenClaw.
Нативный голосовой интерфейс для OpenClaw на iOS
ClawTalk — это приложение с открытым исходным кодом для iOS, которое позволяет взаимодействовать с саморазмещёнными ИИ-агентами OpenClaw с помощью голоса. Приложение предоставляет интерфейс push-to-talk, где пользователи могут разговаривать со своими агентами и получать как текстовые, так и голосовые ответы.
Ключевые технические особенности
- Обработка речи на устройстве: Преобразование речи в текст выполняется локально с использованием WhisperKit, задействуя Neural Engine от Apple, чтобы аудиоданные оставались на телефоне
- Потоковая передача ответов в реальном времени: Ответы агентов передаются в реальном времени с поддержкой рендеринга markdown
- Несколько вариантов синтеза речи: Ответы могут озвучиваться с помощью ElevenLabs, OpenAI TTS или встроенного синтеза речи от Apple
- Поддержка нескольких агентов: Поддерживает отдельные беседы с разными агентами/моделями через многоканальные агенты
- Панель инструментов: Включает панель для взаимодействия с внутренними компонентами агента
- Поддержка медиа: Поддерживает прикрепление изображений в беседах
Детали реализации
Приложение полностью открыто под лицензией MIT и доступно на GitHub. Оно разработано специально для пользователей, использующих OpenClaw для своих саморазмещённых LLM-настроек, предоставляя мобильный голосовой интерфейс в дополнение к существующим текстовым взаимодействиям.
📖 Read the full source: r/LocalLLaMA
👀 Смотрите также
Менеджер по продукту делится более чем 70 навыками Claude для автоматизации рабочих процессов в управлении продуктами.
Продуктовый менеджер с 20-летним опытом создал более 70 навыков для Claude, которые автоматизируют типичные задачи PM, включая генерацию PRD, анализ пользовательских интервью, составление конкурентных профилей и построение дорожных карт. Навыки доступны в виде загружаемых .md файлов для Claude Code.
Клодлитика: Самостоятельно размещаемая панель для отслеживания использования токенов кода и затрат в Claude
Claudlytics — это веб-сервер на Node.js, который читает локальные .jsonl файлы сессий Claude Code для отслеживания использования токенов и затрат в реальном времени. Он работает локально на 127.0.0.1 и доступен через SSH-туннель для удалённых серверов.
NPCterm: Полный эмулятор терминала PTY для ИИ-агентов через MCP
NPCterm предоставляет AI-агентам полный доступ к терминалу через безголовый, работающий в памяти эмулятор PTY-терминала, доступный через MCP. Он включает 15 инструментов MCP для управления терминалом, обнаружения состояния процессов и поддержки TUI-приложений.
Четыре крючка Клода обеспечивают единообразие голоса и тона в текстах, написанных ИИ.
Разработчик создал систему с использованием четырех хуков Claude Code, чтобы предотвратить отклонение AI-сгенерированного текста от бренда. Система блокирует редактирование текстовых файлов (.tsx, .md) до тех пор, пока агент-рецензент не проверит содержание на соответствие руководству VOICE-AND-TONE.md.