开发者演示用 Opus 5.5 在 iPhone 上跨 App 操作

开发者 Finn Voorhees 演示了一套能直接操作 iPhone 的 AI Agent。演示中，他只输入一句话，让 Agent 查询第二天飞往伦敦最便宜的瑞安航空机票。随后，Agent 自行打开 Ryanair，填写目的地、选择日期、查询票价，最后回到聊天界面汇报结果，整个过程没有电脑参与。

运行在 PiChat，底层基于 PiDurableKit

这套 Agent 运行在 Finn 开发的 iPhone 聊天应用 PiChat 中。底层使用的是他此前开源的 PiDurableKit，通过苹果的 JavaScriptCore 在手机上运行 Pi Agent，负责模型调用、工具执行和任务管理。

视频中使用的模型是 Claude Opus 5.5，不过模型推理仍在云端完成。

切换 App 后继续执行

为了让 Agent 在切换到其他 App 后继续工作，PiChat 使用了苹果的后台任务机制，并通过 SQLite 保存执行进度，便于任务中断后恢复。

不过，最关键的跨 App 控制代码目前还没有公开。

视频中出现 XCTest UI 自动化

视频里开启 iPhone Control 时，系统要求输入锁屏密码，以启用 XCTest UI 自动化。XCTest 是苹果的界面测试框架，可以模拟点击、滑动和输入文字。

开源项目 TouchSynthesis 就利用 XCTest 的私有接口，让 iPhone 自己生成触摸事件，无需电脑实时控制。不过，Finn 尚未确认是否使用了这套方案。