Управляйте реальными iPhone с помощью агентов OpenClaw — практическое руководство по настройке AvaBerry43
Участник сообщества OpenClaw (AvaBerry43) создал систему, которая дает ИИ-агентам прямой контроль над реальными iPhone через API. Проект позволяет агентам взаимодействовать с iOS нативно — без эмуляторов или симуляторов. У разработчика есть запас из 70 настоящих iPhone, и он предоставляет доступ другим разработчикам, желающим экспериментировать.
Тестируемые ключевые функции
- Составление iMessages с одобрением — агент пишет сообщение, пользователь одобряет перед отправкой.
- Запуск iOS Shortcuts — агенты могут запускать любую автоматизацию Shortcuts.
- Использование приложений без API — агенты напрямую взаимодействуют с интерфейсами приложений.
- QA/тестирование мобильных приложений — автоматизированное тестирование на реальных устройствах.
Как это работает
Система предоставляет конечную точку API, которую агенты могут вызывать для управления телефоном. Например, агент может открыть приложение, нажать кнопки или запустить Shortcut. Разработчик сообщает, что это работает "действительно хорошо, если честно. Гораздо лучше, чем ожидалось".
Доступ к телефонам
70 телефонов доступны для использования другими. Заинтересованные разработчики могут запросить доступ по ссылке в оригинальном посте (см. источник ниже).
Почему это важно для OpenClaw
Мобильная автоматизация была пробелом для ИИ-агентов кодинга. Эта установка дает агентам возможность тестировать реальные iOS-приложения, автоматизировать рабочие процессы с iMessage или Shortcuts и взаимодействовать с любым iOS-приложением программно — даже без официальных API.
Потенциальные сценарии использования
- Автоматизированные конвейеры мобильного QA с помощью агентов.
- Генерационное тестирование UI — агенты создают тестовые сценарии, выполняют их на телефоне и сообщают об ошибках.
- Автоматизация iOS-шорткатов с помощью команд на естественном языке.
- Скриптинг процессов одобрения для уведомлений или действий на основе iMessage.
📖 Источник: r/openclaw
👀 Смотрите также
motif MCP предоставляет Claude Code возможность просмотра видео для воспроизведения ошибок интерфейса
motif — это MCP-сервер, который позволяет Claude Code просматривать записи экрана с UI-багами, используя покадровый анализ Gemini 2.5 Flash для возврата визуальных описаний, первопричин и диффов. Для настройки нужен ключ Gemini API и две строки в mcp.json.
Skales: Настольный ИИ-агент, который подключается к Ollama без использования Docker
Skales — это настольный AI-агент, который подключается к Ollama локально, не требуя настройки Docker. Он предлагает такие функции, как управление электронной почтой через Gmail IMAP, автоматизация браузера и голосовой час с использованием Whisper через Groq.
Реальная стоимость инструментов ИИ для кодирования: 42 часа накладных расходов за 60 дней — подробный разбор соло-разработчика
Один фрилансер-одиночка отслеживал каждый доллар и каждую минуту, потраченные на AI-инструменты для кодинга, в течение 60 дней. Подписки ($200 в месяц) оказались наименьшей статьей расходов; 42 часа накладных расходов из-за плохих результатов и переключения между инструментами стали настоящим налогом. Чистый прирост производительности составил 1.7–2x, а не 10x. Сюрприз: CodeRabbit, инструмент ревью за $15 в месяц, принес самую высокую окупаемость.
DoomVLM: Инструмент с открытым исходным кодом для тестирования моделей "визуальный язык" в дуэлях на выживание в Doom
DoomVLM теперь имеет открытый исходный код в виде единого блокнота Jupyter, который позволяет тестировать визуально-языковые модели, играющие в Doom через совместимые с OpenAI API. Инструмент поддерживает режимы deathmatch, где могут соревноваться до 4 моделей, с полными настройками системных промптов, описаний инструментов и параметров сэмплирования.