应用介绍
想让 AI 帮你在手机上跑个流程——翻一遍朋友圈、整理一份列表、在备忘录里敲一段中文——结果手机上的 App 它根本碰不到,只能你自己一下下点。
iPhone-use 把 Codex 直接接到你的真实 iPhone 上。一根 USB 线连好,用大白话说一句「打开备忘录,新建草稿,输入这段内容」,Codex 就会自己打开 App、读页面、点击、滑动、输入文字,侧边栏里同步显示一台带 实时画面 的 iPhone,每一次点击和拖动都有光标提示,它做到哪一步一眼就能看见。
它不要求越狱,也不用单独起 Appium 服务,手机端用的是 WebDriverAgent。安装也交给 Codex:把仓库里那段提示词贴给它,它会检查 Xcode、Python、Node.js 和手机连接,再引导你完成签名和首次启动。
读页面也看截图:优先读紧凑的控件树,定位失败或页面被遮挡时,会换成看截图,再按像素换算出点击坐标,不会闷头乱点。
中文与长文本输入:一次给出完整的 Unicode 文字,长文本自动分段输入,中断后还能接着输。输入和提交是分开的,默认只输入不提交,由模型核对后再确认。
连续动作打包:把已知的点击、输入、等待组成一个 batch,一次发出,省掉大量模型往返。
滚动查找与列表采集:有边界地滚动找目标,读取时自动去重,最后告诉你覆盖到了哪里、哪些还没确认。
实时手机屏幕:iPhone 外壳加设备状态,底部有刷新、主屏幕和截图按钮;锁屏和主动暂停分得清,连接断了点一下刷新就能重连。
断线与失败的处理:动作超时可能已经生效,所以先读实际状态再决定,不会盲目重放点击或提交;多个进程共用同一把操作锁,避免互相打架。
数据留在本机:全程走本机 USB 转发,签名材料和设备数据不会离开电脑,屏幕流也不落盘;密码、验证码和 Face ID 这类认证则交还给你自己完成。
iPhone-use 把 Codex 直接接到你的真实 iPhone 上。一根 USB 线连好,用大白话说一句「打开备忘录,新建草稿,输入这段内容」,Codex 就会自己打开 App、读页面、点击、滑动、输入文字,侧边栏里同步显示一台带 实时画面 的 iPhone,每一次点击和拖动都有光标提示,它做到哪一步一眼就能看见。
它不要求越狱,也不用单独起 Appium 服务,手机端用的是 WebDriverAgent。安装也交给 Codex:把仓库里那段提示词贴给它,它会检查 Xcode、Python、Node.js 和手机连接,再引导你完成签名和首次启动。
软件功能
读页面也看截图:优先读紧凑的控件树,定位失败或页面被遮挡时,会换成看截图,再按像素换算出点击坐标,不会闷头乱点。
中文与长文本输入:一次给出完整的 Unicode 文字,长文本自动分段输入,中断后还能接着输。输入和提交是分开的,默认只输入不提交,由模型核对后再确认。
连续动作打包:把已知的点击、输入、等待组成一个 batch,一次发出,省掉大量模型往返。
滚动查找与列表采集:有边界地滚动找目标,读取时自动去重,最后告诉你覆盖到了哪里、哪些还没确认。
实时手机屏幕:iPhone 外壳加设备状态,底部有刷新、主屏幕和截图按钮;锁屏和主动暂停分得清,连接断了点一下刷新就能重连。
断线与失败的处理:动作超时可能已经生效,所以先读实际状态再决定,不会盲目重放点击或提交;多个进程共用同一把操作锁,避免互相打架。
数据留在本机:全程走本机 USB 转发,签名材料和设备数据不会离开电脑,屏幕流也不落盘;密码、验证码和 Face ID 这类认证则交还给你自己完成。

