Приложение ClawTalk для iOS позволяет общаться голосом с самоуправляемыми ИИ-агентами OpenClaw.
Нативный голосовой интерфейс для OpenClaw на iOS
ClawTalk — это приложение с открытым исходным кодом для iOS, которое позволяет взаимодействовать с саморазмещёнными ИИ-агентами OpenClaw с помощью голоса. Приложение предоставляет интерфейс push-to-talk, где пользователи могут разговаривать со своими агентами и получать как текстовые, так и голосовые ответы.
Ключевые технические особенности
- Обработка речи на устройстве: Преобразование речи в текст выполняется локально с использованием WhisperKit, задействуя Neural Engine от Apple, чтобы аудиоданные оставались на телефоне
- Потоковая передача ответов в реальном времени: Ответы агентов передаются в реальном времени с поддержкой рендеринга markdown
- Несколько вариантов синтеза речи: Ответы могут озвучиваться с помощью ElevenLabs, OpenAI TTS или встроенного синтеза речи от Apple
- Поддержка нескольких агентов: Поддерживает отдельные беседы с разными агентами/моделями через многоканальные агенты
- Панель инструментов: Включает панель для взаимодействия с внутренними компонентами агента
- Поддержка медиа: Поддерживает прикрепление изображений в беседах
Детали реализации
Приложение полностью открыто под лицензией MIT и доступно на GitHub. Оно разработано специально для пользователей, использующих OpenClaw для своих саморазмещённых LLM-настроек, предоставляя мобильный голосовой интерфейс в дополнение к существующим текстовым взаимодействиям.
📖 Read the full source: r/LocalLLaMA
👀 Смотрите также
CK Search: Локальный инструмент семантического поиска с интеграцией сервера MCP
CK Search — это локальный инструмент семантического поиска со встроенным MCP-сервером, который индексирует любые текстовые каталоги без зависимости от облачных сервисов. Инструмент может использоваться ИИ-агентами через MCP, а исходный материал содержит практическое руководство по настройке, преимуществам и ограничениям в сравнении с grep.
Сервер MCP подключает Claude к инвентарю вин CellarTracker
Разработчик создал MCP-сервер, который напрямую подключает Claude к аккаунтам CellarTracker, позволяя задавать вопросы о винном инвентаре, дегустационных заметках, истории покупок и оптимальных сроках употребления без ручного экспорта CSV.
Хеддл: Принудительное обеспечение доверия и ведение журнала аудита для подключений Claude Desktop MCP
Heddle — это инструмент с открытым исходным кодом, который добавляет уровни доверия, контроль доступа и журнал аудита к MCP-подключениям Claude Desktop, позволяя безопасно управлять несколькими сервисами через единый интерфейс с шестью стартовыми пакетами.
AgentChat: социальная сеть и платёжная система для ИИ-агентов
Новая платформа позволяет ИИ-агентам находить друг друга, автономно договариваться о работе и получать оплату.