Claude Code IA Controla iPhone Físico mediante APIs de Accesibilidad
Un agente de IA está controlando un iPhone físico para escribir y publicar contenido en Reddit sin que un humano escriba. La demostración utiliza Claude Code (el agente de IA de Anthropic) ejecutándose dentro de Blitz, una aplicación para Mac que conecta agentes de IA con iPhones físicos.
Implementación Técnica
Blitz proporciona acceso a un iPhone real a través de WebDriverAgent, con la navegación manejada completamente mediante las API de accesibilidad. El desarrollador encontró una limitación técnica específica: los comandos normales de toque no funcionan en dispositivos físicos, devolviendo un error 404 de "comando desconocido".
La solución alternativa descubierta: un deslizamiento de distancia cero (mismas coordenadas de inicio Y fin) se registra como un toque. Cada pulsación de botón en la demostración utiliza este truco.
Proceso Paso a Paso
- Llamó a
describe_screenpara encontrar las coordenadas del icono de Reddit en la pantalla de inicio (scan_ui es solo para simulador, por lo que se usó el árbol de accesibilidad en su lugar) - Deslizó de distancia cero el icono para abrir Reddit
- Tocó el botón de búsqueda, vio r/ClaudeAI en las búsquedas recientes, lo tocó
- Pulsó Crear, tocó el campo del título, escribió el título
- Tocó el campo del cuerpo de la publicación y comenzó a escribir
Cada acción sigue el patrón: describe_screen → analizar coordenadas → swipe(x, y, x, y). El agente opera el teléfono "a ciegas", leyendo el mundo a través de un árbol JSON de accesibilidad.
El desarrollador señala que también publicó en r/vibecoding sobre la misma sesión, donde recibió comentarios sobre su elección inicial de título.
📖 Read the full source: r/ClaudeAI
👀 Ver también
Configuración de Gestión de Proyectos en el Sistema de Archivos para Usuarios No Programadores en Claude Desktop
Un usuario de Reddit comparte su sistema para usar las funciones Chat con Sistema de Archivos y Colaborador de Claude para gestionar múltiples proyectos de larga duración. La configuración utiliza una estructura de directorios estandarizada con WORKFLOW.txt como punto de entrada e incluye instrucciones específicas del proyecto para mantener la continuidad entre sesiones.
Analizando 7 años de entradas de diario con un LLM: fallos en RAG vs Fine-Tuning
Después de llevar un diario desde 2019, un desarrollador alimentó un LLM con más de 200 entradas para descubrir patrones — RAG falló, el ajuste fino falló, y la privacidad era una limitación. El enfoque final reveló lecciones de vida cíclicas cada dos años.
Proyecto James Sexton: Construyendo un Asistente Legal con OpenClaw y Claude
Un desarrollador está creando un asistente legal utilizando OpenClaw y la API de Claude para automatizar el procesamiento de documentos durante un juicio de divorcio. El sistema monitorea el correo electrónico, descarga PDFs, analiza documentos con Claude, encuentra formularios de respuesta, genera respuestas e imprime borradores.
Ejecutando la Computadora del Tesla Model 3 en un Escritorio con Partes Recuperadas
Un investigador logró arrancar la computadora de un Tesla Model 3 sobre un escritorio utilizando piezas de coches accidentados, requiriendo una fuente de alimentación de 12V, una pantalla táctil y cableado personalizado. La configuración reveló una red interna con servidores SSH y web accesibles en direcciones IP específicas.