Claude Code IA Controla iPhone Físico mediante APIs de Accesibilidad
Un agente de IA está controlando un iPhone físico para escribir y publicar contenido en Reddit sin que un humano escriba. La demostración utiliza Claude Code (el agente de IA de Anthropic) ejecutándose dentro de Blitz, una aplicación para Mac que conecta agentes de IA con iPhones físicos.
Implementación Técnica
Blitz proporciona acceso a un iPhone real a través de WebDriverAgent, con la navegación manejada completamente mediante las API de accesibilidad. El desarrollador encontró una limitación técnica específica: los comandos normales de toque no funcionan en dispositivos físicos, devolviendo un error 404 de "comando desconocido".
La solución alternativa descubierta: un deslizamiento de distancia cero (mismas coordenadas de inicio Y fin) se registra como un toque. Cada pulsación de botón en la demostración utiliza este truco.
Proceso Paso a Paso
- Llamó a
describe_screenpara encontrar las coordenadas del icono de Reddit en la pantalla de inicio (scan_ui es solo para simulador, por lo que se usó el árbol de accesibilidad en su lugar) - Deslizó de distancia cero el icono para abrir Reddit
- Tocó el botón de búsqueda, vio r/ClaudeAI en las búsquedas recientes, lo tocó
- Pulsó Crear, tocó el campo del título, escribió el título
- Tocó el campo del cuerpo de la publicación y comenzó a escribir
Cada acción sigue el patrón: describe_screen → analizar coordenadas → swipe(x, y, x, y). El agente opera el teléfono "a ciegas", leyendo el mundo a través de un árbol JSON de accesibilidad.
El desarrollador señala que también publicó en r/vibecoding sobre la misma sesión, donde recibió comentarios sobre su elección inicial de título.
📖 Read the full source: r/ClaudeAI
👀 Ver también
Automatización de Flujos de Trabajo de Reclutamiento con Claude Desktop: Un Estudio de Caso
Un desarrollador automatizó la primera capa de reclutamiento utilizando Claude Desktop, Chrome con extensión de navegador e integración con Google Calendar, manejando la revisión de currículums y la programación de entrevistas cada dos horas en una estación de trabajo Windows.
BinktermPHP: Una Plataforma Completa de BBS/FidoNet Construida Principalmente con Claude
BinktermPHP es un BBS basado en web de código abierto escrito en PHP 8 con PostgreSQL, que incluye un sistema de correo binkp de FidoNet integrado, echomail/netmail, áreas de archivos, juegos de puerta, empuje del servidor en tiempo real y un servidor MCP que expone echomail a asistentes de IA. El desarrollador informa haberlo construido casi en su totalidad usando Claude para la implementación, mientras manejaba la arquitectura y las pruebas.
Desarrollador Crea Aplicación de Finanzas Personales en un Mes Usando Claude Code: Flujos de Trabajo Clave y Desafíos
Un desarrollador con 14 años de experiencia creó y lanzó una aplicación de pronóstico financiero personal a la App Store en aproximadamente un mes usando Claude Code. Identificó tres flujos de trabajo específicos donde Claude Code fue más efectivo y compartió desafíos con la expansión del alcance y la complejidad del modelo de datos.
Construyendo Capas de Datos Verticales para Agentes OpenClaw
La verdadera oportunidad con OpenClaw no es solo usarlo, sino construir capas de datos específicas para la industria que conecten fuentes de datos desordenadas, las normalicen en esquemas utilizables y las expongan como endpoints de herramientas limpias que devuelvan JSON estructurado.