Claude Code Agent IA Contrôle un iPhone Physique via les API d'Accessibilité

✍️ OpenClawRadar📅 Publié: February 26, 2026🔗 Source
Claude Code Agent IA Contrôle un iPhone Physique via les API d'Accessibilité
Ad

Un agent d'IA contrôle un iPhone physique pour écrire et publier du contenu sur Reddit sans saisie humaine. La démonstration utilise Claude Code (l'agent d'IA d'Anthropic) exécuté dans Blitz, une application Mac qui connecte les agents d'IA aux iPhones physiques.

Implémentation technique

Blitz fournit l'accès à un iPhone réel via WebDriverAgent, avec la navigation entièrement gérée par les API d'accessibilité. Le développeur a rencontré une limitation technique spécifique : les commandes d'appui normales ne fonctionnent pas sur les appareils physiques, renvoyant une erreur 404 "commande inconnue".

La solution découverte : un balayage à distance nulle (mêmes coordonnées de départ ET de fin) est enregistré comme un appui. Chaque pression de bouton dans la démonstration utilise cette astuce.

Ad

Processus étape par étape

  • Appelé describe_screen pour trouver les coordonnées de l'icône de Reddit sur l'écran d'accueil (scan_ui est réservé au simulateur, donc l'arborescence d'accessibilité a été utilisée à la place)
  • Balayage à distance nulle sur l'icône pour ouvrir Reddit
  • Appuyé sur le bouton de recherche, vu r/ClaudeAI dans les recherches récentes, appuyé dessus
  • Appuyé sur Créer, appuyé sur le champ du titre, tapé le titre
  • Appuyé sur le champ du corps du message et a commencé à écrire

Chaque action suit le modèle : describe_screen → analyser les coordonnées → balayer(x, y, x, y). L'agent opère le téléphone "à l'aveugle", lisant le monde à travers une arborescence JSON d'accessibilité.

Le développeur note qu'il a également publié sur r/vibecoding à propos de la même session, où il a reçu des retours sur son choix initial de titre.

📖 Lire la source complète : r/ClaudeAI

Ad

👀 See Also

OpenClaw a dépassé le stade du chat — une interface de tableau de bord est le paramètre par défaut manquant
Use Cases

OpenClaw a dépassé le stade du chat — une interface de tableau de bord est le paramètre par défaut manquant

Un utilisateur de Reddit explique comment l'exécution d'OpenClaw via Telegram devient complexe à mesure que les flux de travail se multiplient, et pourquoi un tableau de bord web (comme celui qu'il a lui-même construit) devrait être une interface standard et pluggable pour les outils d'agents.

OpenClawRadar
Développeur débogue un bogue redondant du service worker dans une PWA Next.js avec l'aide de Claude
Use Cases

Développeur débogue un bogue redondant du service worker dans une PWA Next.js avec l'aide de Claude

Un développeur a créé Somnia, une PWA Next.js 14 avec notifications push, en utilisant Claude comme partenaire de codage. Le bug le plus difficile concernait les service workers qui devenaient REDUNDANT sur Android Samsung en raison d'un ID de build obsolète dans sw.js.

OpenClawRadar
Comment l'architecture contextuelle centralisée avec Claude permet d'économiser plus de 10 heures par semaine
Use Cases

Comment l'architecture contextuelle centralisée avec Claude permet d'économiser plus de 10 heures par semaine

Un utilisateur de Reddit rapporte économiser plus de 10 heures par semaine en centralisant ses procédures opérationnelles, comptes-rendus de réunion et CRM dans un espace de travail Notion unifié, et en connectant Claude directement à ce contexte. Trois flux de travail spécifiques éliminent la rédaction manuelle d'emails, la saisie dans des tableurs et la création de contenu.

OpenClawRadar
Développeur Construit un Moteur de Simulation de Baseball avec l'IA Claude en Deux Semaines
Use Cases

Développeur Construit un Moteur de Simulation de Baseball avec l'IA Claude en Deux Semaines

Un développeur a utilisé Claude Code pour construire un système complet de simulation de baseball avec 30 équipes de la MLB gérées par IA, des comptes-rendus de matchs, des conférences de presse et des podcasts audio. Le projet a coûté 50 dollars en crédits API et comprend un moteur de simulation, un pipeline de contenu, un bot Discord et un site web.

OpenClawRadar