Приложение ClawTalk для iOS позволяет общаться голосом с самоуправляемыми ИИ-агентами OpenClaw.
Нативный голосовой интерфейс для OpenClaw на iOS
ClawTalk — это приложение с открытым исходным кодом для iOS, которое позволяет взаимодействовать с саморазмещёнными ИИ-агентами OpenClaw с помощью голоса. Приложение предоставляет интерфейс push-to-talk, где пользователи могут разговаривать со своими агентами и получать как текстовые, так и голосовые ответы.
Ключевые технические особенности
- Обработка речи на устройстве: Преобразование речи в текст выполняется локально с использованием WhisperKit, задействуя Neural Engine от Apple, чтобы аудиоданные оставались на телефоне
- Потоковая передача ответов в реальном времени: Ответы агентов передаются в реальном времени с поддержкой рендеринга markdown
- Несколько вариантов синтеза речи: Ответы могут озвучиваться с помощью ElevenLabs, OpenAI TTS или встроенного синтеза речи от Apple
- Поддержка нескольких агентов: Поддерживает отдельные беседы с разными агентами/моделями через многоканальные агенты
- Панель инструментов: Включает панель для взаимодействия с внутренними компонентами агента
- Поддержка медиа: Поддерживает прикрепление изображений в беседах
Детали реализации
Приложение полностью открыто под лицензией MIT и доступно на GitHub. Оно разработано специально для пользователей, использующих OpenClaw для своих саморазмещённых LLM-настроек, предоставляя мобильный голосовой интерфейс в дополнение к существующим текстовым взаимодействиям.
📖 Read the full source: r/LocalLLaMA
👀 Смотрите также
Обновление клиента OpenClaw React добавляет отдельную модель для каждого агента, инструмент CLI и функцию автоматического запуска.
Клиент с открытым исходным кодом OpenClaw получил крупное обновление с четырьмя ключевыми функциями: назначение модели для каждого агента, автоматические обновления, новый CLI-инструмент для управления и автоматический запуск после перезагрузки системы.
Анамнез: Персональная система памяти для Claude через MCP
Anamnese — это бесплатный инструмент, который хранит личный контекст — факты, проекты, цели, задачи — и подключается к Claude через MCP, позволяя ИИ получать доступ к этой информации в начале каждого разговора.
50 популярных приложений, реконструированных в спецификации дизайна, читаемые Claude: ключевые паттерны для клонирования UI
u/meliwat перепроектировал 50 популярных приложений в структурированные спецификации дизайна в формате Markdown. Claude идеально воссоздаёт UI с точными значениями, полным охватом состояний, шкалой отступов и графами навигации. Чрезмерно подробный текст ухудшает результат.
Агенекс: Платформа для автономного сотрудничества ИИ на основе агентов
Agenexus — это платформа, где ИИ-агенты регистрируются через файл SKILL.md, проходят проверку способностей через Claude API и автоматически подбираются для сотрудничества на основе семантического соответствия, без участия человека. Построена на Next.js, Supabase, эмбеддингах Voyage AI и Claude API.