Создание голосового интерфейса для агентов OpenClaw с использованием ярлыков iPhone
Разработчик на r/openclaw поделился своей настройкой для создания голосового интерфейса, похожего на Siri, для агентов OpenClaw. Система сочетает локальный сервер на Python с ярлыками iPhone, чтобы обеспечить голосовое взаимодействие с агентами OpenClaw.
Архитектура системы
Для настройки требуется включить режим HTTP OpenAI на шлюзе и локальной сети OpenClaw. Основные компоненты:
- Сервер на Python: Изначально это был скрипт, который прослушивал ключевые слова через микрофон, выполнял преобразование речи в текст, отправлял текст в API OpenClaw, получал ответы и выполнял преобразование текста в речь с использованием голоса пользователя. Он был адаптирован в базовый сервер с конечной точкой, которая может получать текст из любого источника, отправлять его в OpenClaw и возвращать ответ.
- Ярлык iPhone: Обрабатывает преобразование речи в текст и текста в речь локально на iPhone. Рабочий процесс ярлыка включает:
- Диктовка текста (записывает голос в текст)
- Получение содержимого URL: url/ask с продиктованным текстом в теле запроса (отправляет текст для маршрутизации агенту OpenClaw для ответа)
- Словарь: Получение значения для reply в содержимом URL (сохранение текста ответа)
- Произнесение: значение словаря (вывод преобразования текста в речь)
Детали реализации
Разработчик запускает это через WireGuard и работает полностью в локальной сети или через VPN при нахождении вне локальной сети. Он подчёркивает важное соображение безопасности: «Будьте осторожны, открывая конечную точку для ответа вашего агента OpenClaw. Это может позволить любому получить доступ к вашему агенту (компьютеру). Используйте токен аутентификации.»
Такой подход перекладывает обработку речи на iPhone, сохраняя взаимодействие с агентом OpenClaw централизованным через конечную точку сервера на Python. Это позволяет осуществлять голосовое взаимодействие с агентами OpenClaw из любого места, сохраняя безопасность через VPN и токены аутентификации.
📖 Прочитать полный источник: r/openclaw
👀 Смотрите также
Бенчмарк против продакшена: когда тесты ИИ-агентов проходят, а реальные рабочие процессы дают сбой
Разработчик переключил производственные ИИ-агенты с Claude Sonnet на более дешёвые модели Grok и MiniMax после того, как они прошли бенчмарк-тесты, но обе модели провалились в продакшене из-за проблем с операционной надёжностью, которые не были охвачены бенчмарками.
OpenClaw и Chorus: Продуктовая линия, созданная двумя людьми и ИИ-агентами за одну неделю
OpenClaw и Chorus объединяются, чтобы создать конвейер разработки продукта, где ИИ-агенты занимаются исследованиями, управлением продуктом и программированием, а люди предлагают идеи и утверждают работу. Система была создана менее чем за неделю двумя людьми, работающими полный день, с использованием OpenClaw в качестве постоянного агента-менеджера продукта.
Пользователь OpenClaw автоматизирует кросс-платформенное форматирование контента с помощью пользовательского навыка.
Разработчик создал навык OpenClaw, который автоматически форматирует черновые тексты для нескольких платформ, устраняя необходимость ручной корректировки разметки под требования каждого сайта.
Запуск OpenClaw с локальной LLM на VPS Contabo: зависание Qwen 3:4B и обходные пути
Пользователь делится опытом запуска OpenClaw с локальной LLM на VPS Contabo с 6 ядрами и 12 ГБ ОЗУ. Qwen 3:4B постоянно зависает после ошибок уплотнения, но крошечные модели Ollama работают. Отсутствие GPU ограничивает размер модели.