Создание голосового интерфейса для агентов OpenClaw с использованием ярлыков iPhone

Разработчик на r/openclaw поделился своей настройкой для создания голосового интерфейса, похожего на Siri, для агентов OpenClaw. Система сочетает локальный сервер на Python с ярлыками iPhone, чтобы обеспечить голосовое взаимодействие с агентами OpenClaw.

Архитектура системы

Для настройки требуется включить режим HTTP OpenAI на шлюзе и локальной сети OpenClaw. Основные компоненты:

• Сервер на Python: Изначально это был скрипт, который прослушивал ключевые слова через микрофон, выполнял преобразование речи в текст, отправлял текст в API OpenClaw, получал ответы и выполнял преобразование текста в речь с использованием голоса пользователя. Он был адаптирован в базовый сервер с конечной точкой, которая может получать текст из любого источника, отправлять его в OpenClaw и возвращать ответ.
• Ярлык iPhone: Обрабатывает преобразование речи в текст и текста в речь локально на iPhone. Рабочий процесс ярлыка включает:
  • Диктовка текста (записывает голос в текст)
  • Получение содержимого URL: url/ask с продиктованным текстом в теле запроса (отправляет текст для маршрутизации агенту OpenClaw для ответа)
  • Словарь: Получение значения для reply в содержимом URL (сохранение текста ответа)
  • Произнесение: значение словаря (вывод преобразования текста в речь)

Детали реализации

Разработчик запускает это через WireGuard и работает полностью в локальной сети или через VPN при нахождении вне локальной сети. Он подчёркивает важное соображение безопасности: «Будьте осторожны, открывая конечную точку для ответа вашего агента OpenClaw. Это может позволить любому получить доступ к вашему агенту (компьютеру). Используйте токен аутентификации.»

Такой подход перекладывает обработку речи на iPhone, сохраняя взаимодействие с агентом OpenClaw централизованным через конечную точку сервера на Python. Это позволяет осуществлять голосовое взаимодействие с агентами OpenClaw из любого места, сохраняя безопасность через VPN и токены аутентификации.