Claude Code Agent IA Contrôle un iPhone Physique via les API d'Accessibilité

Un agent d'IA contrôle un iPhone physique pour écrire et publier du contenu sur Reddit sans saisie humaine. La démonstration utilise Claude Code (l'agent d'IA d'Anthropic) exécuté dans Blitz, une application Mac qui connecte les agents d'IA aux iPhones physiques.
Implémentation technique
Blitz fournit l'accès à un iPhone réel via WebDriverAgent, avec la navigation entièrement gérée par les API d'accessibilité. Le développeur a rencontré une limitation technique spécifique : les commandes d'appui normales ne fonctionnent pas sur les appareils physiques, renvoyant une erreur 404 "commande inconnue".
La solution découverte : un balayage à distance nulle (mêmes coordonnées de départ ET de fin) est enregistré comme un appui. Chaque pression de bouton dans la démonstration utilise cette astuce.
Processus étape par étape
- Appelé
describe_screenpour trouver les coordonnées de l'icône de Reddit sur l'écran d'accueil (scan_ui est réservé au simulateur, donc l'arborescence d'accessibilité a été utilisée à la place) - Balayage à distance nulle sur l'icône pour ouvrir Reddit
- Appuyé sur le bouton de recherche, vu r/ClaudeAI dans les recherches récentes, appuyé dessus
- Appuyé sur Créer, appuyé sur le champ du titre, tapé le titre
- Appuyé sur le champ du corps du message et a commencé à écrire
Chaque action suit le modèle : describe_screen → analyser les coordonnées → balayer(x, y, x, y). L'agent opère le téléphone "à l'aveugle", lisant le monde à travers une arborescence JSON d'accessibilité.
Le développeur note qu'il a également publié sur r/vibecoding à propos de la même session, où il a reçu des retours sur son choix initial de titre.
📖 Lire la source complète : r/ClaudeAI
👀 See Also

OpenClaw a dépassé le stade du chat — une interface de tableau de bord est le paramètre par défaut manquant
Un utilisateur de Reddit explique comment l'exécution d'OpenClaw via Telegram devient complexe à mesure que les flux de travail se multiplient, et pourquoi un tableau de bord web (comme celui qu'il a lui-même construit) devrait être une interface standard et pluggable pour les outils d'agents.

Développeur débogue un bogue redondant du service worker dans une PWA Next.js avec l'aide de Claude
Un développeur a créé Somnia, une PWA Next.js 14 avec notifications push, en utilisant Claude comme partenaire de codage. Le bug le plus difficile concernait les service workers qui devenaient REDUNDANT sur Android Samsung en raison d'un ID de build obsolète dans sw.js.

Comment l'architecture contextuelle centralisée avec Claude permet d'économiser plus de 10 heures par semaine
Un utilisateur de Reddit rapporte économiser plus de 10 heures par semaine en centralisant ses procédures opérationnelles, comptes-rendus de réunion et CRM dans un espace de travail Notion unifié, et en connectant Claude directement à ce contexte. Trois flux de travail spécifiques éliminent la rédaction manuelle d'emails, la saisie dans des tableurs et la création de contenu.

Développeur Construit un Moteur de Simulation de Baseball avec l'IA Claude en Deux Semaines
Un développeur a utilisé Claude Code pour construire un système complet de simulation de baseball avec 30 équipes de la MLB gérées par IA, des comptes-rendus de matchs, des conférences de presse et des podcasts audio. Le projet a coûté 50 dollars en crédits API et comprend un moteur de simulation, un pipeline de contenu, un bot Discord et un site web.