Приложение ClawTalk для iOS позволяет общаться голосом с самоуправляемыми ИИ-агентами OpenClaw.
Нативный голосовой интерфейс для OpenClaw на iOS
ClawTalk — это приложение с открытым исходным кодом для iOS, которое позволяет взаимодействовать с саморазмещёнными ИИ-агентами OpenClaw с помощью голоса. Приложение предоставляет интерфейс push-to-talk, где пользователи могут разговаривать со своими агентами и получать как текстовые, так и голосовые ответы.
Ключевые технические особенности
- Обработка речи на устройстве: Преобразование речи в текст выполняется локально с использованием WhisperKit, задействуя Neural Engine от Apple, чтобы аудиоданные оставались на телефоне
- Потоковая передача ответов в реальном времени: Ответы агентов передаются в реальном времени с поддержкой рендеринга markdown
- Несколько вариантов синтеза речи: Ответы могут озвучиваться с помощью ElevenLabs, OpenAI TTS или встроенного синтеза речи от Apple
- Поддержка нескольких агентов: Поддерживает отдельные беседы с разными агентами/моделями через многоканальные агенты
- Панель инструментов: Включает панель для взаимодействия с внутренними компонентами агента
- Поддержка медиа: Поддерживает прикрепление изображений в беседах
Детали реализации
Приложение полностью открыто под лицензией MIT и доступно на GitHub. Оно разработано специально для пользователей, использующих OpenClaw для своих саморазмещённых LLM-настроек, предоставляя мобильный голосовой интерфейс в дополнение к существующим текстовым взаимодействиям.
📖 Read the full source: r/LocalLLaMA
👀 Смотрите также
Разработчик создает MCP-сервер для интеграции Claude с WhatsApp, делится трудностями
Разработчик создал MCP-сервер, чтобы дать Claude доступ к реальным перепискам в WhatsApp, обнаружив, что управление контекстом беседы оказалось сложнее, чем ожидалось, и потребовало базы данных для отслеживания разговоров.
Система памяти с открытым исходным кодом для LLM-агентов демонстрирует высокие результаты в тестах.
Постоянная система памяти для Claude Code и OpenClaw обеспечивает LLM-агентам непрерывность контекста между сессиями, достигая 90,8% на бенчмарке LoCoMo и 89,1% на LongMemEval. Архитектура на основе адаптеров работает с любой фреймворк-системой для агентов.
context-link v1.0.0: Локальный MCP-сервер сокращает использование токенов в Claude Code на 91%
context-link v1.0.0 — это локальный MCP-сервер, который индексирует код с помощью Tree-sitter, предоставляя Claude только необходимые символы, зависимости и структуру, сокращая использование токенов на 91% в отдельных случаях и на 70–80% при выполнении полных задач.
Codeset улучшает работу кодирующих агентов, предоставляя контекст из истории git, специфичный для репозитория.
Codeset генерирует статические файлы из истории git, которые предоставляют контекст, такой как прошлые ошибки, корневые причины и взаимосвязи совместных изменений. Тестирование показало улучшение на 5,3 п.п. на codeset-gym-python и на 2 п.п. на SWE-Bench Pro с использованием OpenAI Codex.