Приложение ClawTalk для iOS позволяет общаться голосом с самоуправляемыми ИИ-агентами OpenClaw.
Нативный голосовой интерфейс для OpenClaw на iOS
ClawTalk — это приложение с открытым исходным кодом для iOS, которое позволяет взаимодействовать с саморазмещёнными ИИ-агентами OpenClaw с помощью голоса. Приложение предоставляет интерфейс push-to-talk, где пользователи могут разговаривать со своими агентами и получать как текстовые, так и голосовые ответы.
Ключевые технические особенности
- Обработка речи на устройстве: Преобразование речи в текст выполняется локально с использованием WhisperKit, задействуя Neural Engine от Apple, чтобы аудиоданные оставались на телефоне
- Потоковая передача ответов в реальном времени: Ответы агентов передаются в реальном времени с поддержкой рендеринга markdown
- Несколько вариантов синтеза речи: Ответы могут озвучиваться с помощью ElevenLabs, OpenAI TTS или встроенного синтеза речи от Apple
- Поддержка нескольких агентов: Поддерживает отдельные беседы с разными агентами/моделями через многоканальные агенты
- Панель инструментов: Включает панель для взаимодействия с внутренними компонентами агента
- Поддержка медиа: Поддерживает прикрепление изображений в беседах
Детали реализации
Приложение полностью открыто под лицензией MIT и доступно на GitHub. Оно разработано специально для пользователей, использующих OpenClaw для своих саморазмещённых LLM-настроек, предоставляя мобильный голосовой интерфейс в дополнение к существующим текстовым взаимодействиям.
📖 Read the full source: r/LocalLLaMA
👀 Смотрите также
Через открытый универсальный слой интеграции подключает инструменты ИИ к общей контекстной шине
Via — это открытая универсальная интеграционная прослойка, которая объединяет Claude, Cursor, Windsurf, ChatGPT, LangChain и другие ИИ-инструменты в общую шину контекста, задач и памяти, позволяя работе следовать за пользователем между инструментами, сессиями и устройствами.
PayClaw запускает песочницу для платежного MCP-сервера с виртуальными картами Visa.
PayClaw запустил песочную среду для своего платежного MCP-сервера, предлагая виртуальные карты Visa, привязанные к конкретным продавцам, со сроком действия 15 минут, требующие многофакторной аутентификации и одобрения человеком для каждой транзакции, а также декларацию намерения перед выпуском карты. Карты для реального использования запланированы к запуску 4 марта.
Обход изоляции песочницы NemoClaw для локального агента Nemotron 9B
Разработчик обошёл изоляцию песочницы NemoClaw, чтобы запустить полностью локального агента с использованием Nemotron 9B и вызовом инструментов на одной видеокарте RTX 5090. Подход включал настройку iptables, пользовательский TCP-ретранслятор и перевод вызовов инструментов в реальном времени.
Пи-кодирующий агент с Qwen 35B Q2: Использование файловой системы как внешней памяти и обеспечение контекстных ограничений
Пользователь Reddit создал стек на основе Pi coding agent с Qwen 35B Q2_K_XL квантом, который применяет ограничения: отклоняет правки длиннее 100 строк, ограничивает блоки размышлений 2000 символов и отслеживает контекст на уровнях 65%/80% — трактуя файловую систему как память модели, а не окно контекста.