Computer Use ne suffit plus : les agents peuvent désormais contrôler un vrai iPhone

Phone Use est un outil open source qui permet aux agents d’IA de contrôler un iPhone physique depuis un ordinateur via Bluetooth et AirPlay, sans jailbreak ni applications supplémentaires.
Computer Use ne suffit plus : les agents peuvent désormais contrôler un vrai iPhone
Le développeur Alexey Smolenchuk a présenté Phone Use, un outil open source qui permet aux agents d’IA de contrôler un iPhone physique directement depuis un ordinateur.
Le téléphone se connecte à Linux via Bluetooth et AirPlay, tandis que l’agent peut ouvrir des applications, appuyer sur des boutons, saisir du texte et effectuer des actions pour l’utilisateur.
Tout cela fonctionne sans jailbreak, sans câble et sans installer d’applications supplémentaires sur l’iPhone.
La reconnaissance de texte repose sur l’OCR, ce qui évite à l’agent d’analyser constamment des captures d’écran.
Le projet reste expérimental, mais il semble constituer un pas de plus vers des assistants d’IA complets capables de réaliser des tâches non seulement sur ordinateur, mais aussi sur smartphone.
Pourquoi c'est important
AnalysePhone Use élargit l’automatisation des agents du bureau aux appareils mobiles, montrant que les assistants d’IA peuvent interagir avec des applications réelles sans modifier en profondeur le système.
Discuter dans la communauté
Partagez vos questions et vos idées avec les développeurs
Lié dans l'écosystème
Guides pratiques, terminologie clé et compétences d'agents
GitHub publie une vaste collection d’outils d’ingénierie inverse
Awesome-REA regroupe 1253 sources, 431 cas pratiques, 235 travaux scientifiques et 3309 dépôts pour analyser des sites web, des applications et des jeux.
OpenCode lance Browse : un agent IA peut contrôler votre vrai navigateur
OpenCode a introduit Browse, qui permet à un agent IA d’utiliser le navigateur déjà ouvert de l’utilisateur, et a rendu temporairement gratuit le nouveau modèle Inkling 2 Small.
Claude Code Projects : comment une IA coordonne une équipe d'agents autonomes
Analyse approfondie de Claude Code Projects : architecture Coordinator et Threads, branches parallèles, mémoire partagée MEMORY.md et gestion des agents cloud.
Agents IA (Agents autonomes)
Systèmes logiciels basés sur des LLM, capables de percevoir de manière autonome l'état de leur environnement, de décomposer des objectifs complexes, d'appeler des outils externes et de corriger itérativement leurs propres erreurs.