Claude Code IA Controla iPhone Físico mediante APIs de Accesibilidad
Un agente de IA está controlando un iPhone físico para escribir y publicar contenido en Reddit sin que un humano escriba. La demostración utiliza Claude Code (el agente de IA de Anthropic) ejecutándose dentro de Blitz, una aplicación para Mac que conecta agentes de IA con iPhones físicos.
Implementación Técnica
Blitz proporciona acceso a un iPhone real a través de WebDriverAgent, con la navegación manejada completamente mediante las API de accesibilidad. El desarrollador encontró una limitación técnica específica: los comandos normales de toque no funcionan en dispositivos físicos, devolviendo un error 404 de "comando desconocido".
La solución alternativa descubierta: un deslizamiento de distancia cero (mismas coordenadas de inicio Y fin) se registra como un toque. Cada pulsación de botón en la demostración utiliza este truco.
Proceso Paso a Paso
- Llamó a
describe_screenpara encontrar las coordenadas del icono de Reddit en la pantalla de inicio (scan_ui es solo para simulador, por lo que se usó el árbol de accesibilidad en su lugar) - Deslizó de distancia cero el icono para abrir Reddit
- Tocó el botón de búsqueda, vio r/ClaudeAI en las búsquedas recientes, lo tocó
- Pulsó Crear, tocó el campo del título, escribió el título
- Tocó el campo del cuerpo de la publicación y comenzó a escribir
Cada acción sigue el patrón: describe_screen → analizar coordenadas → swipe(x, y, x, y). El agente opera el teléfono "a ciegas", leyendo el mundo a través de un árbol JSON de accesibilidad.
El desarrollador señala que también publicó en r/vibecoding sobre la misma sesión, donde recibió comentarios sobre su elección inicial de título.
📖 Read the full source: r/ClaudeAI
👀 Ver también
Desarrollador Considera Cambiar de DeepSeek a Grok para Agente de IA Financiera
Un desarrollador que está construyendo una aplicación web de IA financiera en FastAPI/Python informa que DeepSeek V3.2 Reasoning tiene un TTFT de 70 segundos y una velocidad de salida de ~25 t/s, lo que hace que la transmisión en streaming se sienta terrible. Están considerando Grok 4.1 Fast Reasoning con un TTFT de ~15 segundos y ~75 t/s.
Fallos de Agentes de IA para Codificación en Producción: Patrones del Mundo Real a partir del Uso Diario
Un desarrollador que usa Claude Code como su principal herramienta de desarrollo durante 2 meses reporta patrones específicos de fallos en uso productivo, incluyendo desplegar datos financieros de clientes en URLs públicas y que 7 de 12 fallos fueron detectados manualmente en lugar de por sistemas automatizados.
Habilidad de Código Claude de Código Abierto para la Coordinación Logística Familiar
Un desarrollador creó Parent Helper, una habilidad de Claude Code que coordina horarios familiares, planificación de comidas y optimización de compras usando un único archivo markdown e integraciones MCP. La herramienta proyecta ahorros de $4.3K/año en compras dividiendo listas entre tiendas según precios.
Arquitectura de Contrato de Guión y Expansión de Investigación para un Pipeline de Producción de Video Multiagente con Claude
Un pipeline multiagente que usa Claude para producir videos educativos de YouTube de 15 a 20 minutos a partir de un tema y una personalidad. Cuenta con una arquitectura de contrato narrativo para la coherencia entre capítulos y un despliegue paralelo de investigación con eliminación competitiva de esquemas.