Claude Code Agent IA Contrôle un iPhone Physique via les API d'Accessibilité

✍️ OpenClawRadar📅 Publié: February 26, 2026🔗 Source
Claude Code Agent IA Contrôle un iPhone Physique via les API d'Accessibilité
Ad

Un agent d'IA contrôle un iPhone physique pour écrire et publier du contenu sur Reddit sans saisie humaine. La démonstration utilise Claude Code (l'agent d'IA d'Anthropic) exécuté dans Blitz, une application Mac qui connecte les agents d'IA aux iPhones physiques.

Implémentation technique

Blitz fournit l'accès à un iPhone réel via WebDriverAgent, avec la navigation entièrement gérée par les API d'accessibilité. Le développeur a rencontré une limitation technique spécifique : les commandes d'appui normales ne fonctionnent pas sur les appareils physiques, renvoyant une erreur 404 "commande inconnue".

La solution découverte : un balayage à distance nulle (mêmes coordonnées de départ ET de fin) est enregistré comme un appui. Chaque pression de bouton dans la démonstration utilise cette astuce.

Ad

Processus étape par étape

  • Appelé describe_screen pour trouver les coordonnées de l'icône de Reddit sur l'écran d'accueil (scan_ui est réservé au simulateur, donc l'arborescence d'accessibilité a été utilisée à la place)
  • Balayage à distance nulle sur l'icône pour ouvrir Reddit
  • Appuyé sur le bouton de recherche, vu r/ClaudeAI dans les recherches récentes, appuyé dessus
  • Appuyé sur Créer, appuyé sur le champ du titre, tapé le titre
  • Appuyé sur le champ du corps du message et a commencé à écrire

Chaque action suit le modèle : describe_screen → analyser les coordonnées → balayer(x, y, x, y). L'agent opère le téléphone "à l'aveugle", lisant le monde à travers une arborescence JSON d'accessibilité.

Le développeur note qu'il a également publié sur r/vibecoding à propos de la même session, où il a reçu des retours sur son choix initial de titre.

📖 Lire la source complète : r/ClaudeAI

Ad

👀 See Also

Exécuter OpenClaw avec des informations d'identification cloud complètes au lieu d'une machine dédiée
Use Cases

Exécuter OpenClaw avec des informations d'identification cloud complètes au lieu d'une machine dédiée

Un développeur partage son expérience de fourniture à OpenClaw d'un compte GCP entièrement isolé avec des identifiants complets, lui permettant d'opérer sur plus de 40 projets GitHub, de lancer environ 30 conteneurs Docker, et de gérer le stockage, les bases de données et l'infrastructure de support.

OpenClawRadar
Développement d'une Plateforme SaaS de Production de Plus de 20 000 Lignes avec Claude Code : Leçons Tirées de l'Ingénierie Agentique à Grande Échelle
Use Cases

Développement d'une Plateforme SaaS de Production de Plus de 20 000 Lignes avec Claude Code : Leçons Tirées de l'Ingénierie Agentique à Grande Échelle

Un développeur a open-sourcé LastSaaS, un boilerplate SaaS prêt pour la production entièrement construit via des conversations avec Claude Code, avec un backend en Go, un frontend en React, une authentification multi-tenant, une facturation Stripe et un serveur MCP intégré. Le projet révèle ce qui fonctionne et nécessite de la discipline lors de l'utilisation d'agents IA pour le développement à grande échelle.

OpenClawRadar
Pipeline de Contenu Utilisant les Notes Vocales et la Structure SCQA avec OpenClaw
Use Cases

Pipeline de Contenu Utilisant les Notes Vocales et la Structure SCQA avec OpenClaw

Un développeur partage un flux de travail de création de contenu utilisant la dictée vocale avec SaySo et la structure SCQA (Situation, Complication, Question, Réponse) pour générer un contenu plus ciblé avec OpenClaw, rapportant que le premier article a obtenu plus de 200 ajouts en quelques jours.

OpenClawRadar
Le modèle Qwen 27B démontre de solides performances pour l'analyse de lore en contexte long
Use Cases

Le modèle Qwen 27B démontre de solides performances pour l'analyse de lore en contexte long

Un utilisateur rapporte que Qwen 27B analyse efficacement des documents d'histoire denses de 80 000 tokens, surpassant d'autres modèles locaux comme Gemma 3 27B et Reka Flash pour des tâches détaillées de construction de mondes fantastiques. La quantification Q4-K-XL offre le meilleur équilibre vitesse/qualité pour les contextes longs.

OpenClawRadar