什么值得做
onehumanbeing/esp32-iphone-agent · onehumanbeing

一块 $7 的板子插进 iPhone,让 AI 替你点屏幕:esp32-iphone-agent 26 天 4400 star

它是什么 一块插在 iPhone 上的 7 美元小板子,既当投屏接收器让 AI 看到屏幕,又当 USB 鼠标键盘替 AI 点屏幕,任何能看图的大模型都能接上来操作手机。

为什么火了 10 月初大家正在找「怎么让 AI 操作 iPhone」,同类方案都要 Mac 和开发者签名,它一句「$7、不用 Mac、不越狱」加一条闹钟演示视频,同时被 AI 圈和硬件圈转发,Hackaday 报道当天涨了 1072 star。

B你可以怎么跟 别再做一个控 iPhone 的,把「便宜板子当 AI 的眼睛和手」这套配方搬到别的封闭设备上(游戏机、电视盒子、车机、iPad 专业 App),照它的打法:一条完整任务视频、中英双发、投 Hackaday 和创客社区。

B 级:打法和配方都清楚、可复用,但 iPhone 这个位置已被两个四五千 star 的项目占住,跟风者只拿到几十到几百 star,换设备能不能同样出圈要赌,而且热度在退。 小圈子里在传
数据(每天更新) · 建库 2026-10-11 · 4,626 星 · 7 天 +471
GitHub · 星数
02k4k10-1310-1910-2611-0211-084.6k
数据 2026-10-13 → 2026-11-08(27 天,27 次观测)。10-28 以前的点来自 deeply / 存档补录,不是每天都有

纽约的开发者 Henry Yuan 把一块指甲盖大的 ESP32 开发板插进原装 iPhone,让 AI 看屏幕、自己点。不用 Mac,不要开发者账号,也不越狱。项目建库 26 天拿到 4436 个 star、596 个 fork。它起来靠的是三样东西:时机对、一句话就能讲清楚、硬件圈和 AI 圈同时愿意转。下面讲它是什么、star 从哪来、谁在跟它抢,以及你如果想做一个同样能拿到 star 的项目,该从哪里下手。

一条闹钟视频

2026 年 10 月 12 日,Henry Yuan(X 上叫 @iamhenryyuan,GitHub 账号 2016 年注册,这是他唯一的公开仓库)在 X 上发了一条帖子,中英文各一版:「A $7 ESP32 lets an AI agent control a stock iPhone. No Mac, no jailbreak…」。配的视频里,一块 Seeed XIAO ESP32-S3 插在 iPhone 的 USB 口上。他给 AI 下了一句指令:「设一个早上 8 点、每周一周二重复的闹钟,然后保存」。AI 自己退出 App,打开时钟,拨滚轮,勾日期,保存,一共 22 步,中间没人碰手机。

英文帖拿到 21 万次浏览、242 个赞,中文版 213 个赞(X,截至 11-06)。第二天,X 大号 @RoundtableSpace 转了这条,配了一句「Apple never built this, so someone hacked it with $7」,9.2 万次浏览。10 月 14 日 Hackaday 发了一篇《AI Controls iPhone Via ESP32》,同一天仓库涨了 1072 个 star,是它到现在为止的单日最高。

它到底是什么

做法拆开看其实不复杂,用的都是 iOS 自带、对所有人开放的功能:

  • 眼睛:板子自己开一个 Wi-Fi 热点,在 iPhone 的「屏幕镜像」列表里显示成 *ESP32 Agent*。手机把画面投过去,板子不解码,把 H.264 视频流直接转给手机上的 App。
  • 手:板子对 iPhone 来说就是一个普通的 USB 鼠标加键盘。打开「辅助触控」以后,鼠标点一下等于手指点一下,拖一下等于滑一下。
  • 脑子:App 把画面截图发给任意一个兼容 OpenAI 接口、能看图的模型,模型决定下一步点哪、滑哪、输什么。

最早的版本还要一台电脑跑 AirPlay 接收端。10 月 15 日他把这一步也塞进了板子里,README 里写着「The computer is gone」,运行时只剩一部手机加一块板。这条更新帖 807 个赞,是他所有帖子里赞最多的。后来又出了命令行和 MCP 服务器(npx -y esp32agent mcp),Claude Code、Cursor 都能直接接上去操作 iPhone;11 月 3 日 App 上了 TestFlight,11 月 6 日接上了 DeepSeek Harness。

短板 README 里自己写了:画面只有 480×1040、最多 5 帧每秒,每一步要好几秒,大部分时间在等模型;指针是相对移动的,要先校准;不支持横屏;锁屏、输密码、Apple Pay 这些画面 iOS 不让镜像,AI 看不到;跑的时候手机 Wi-Fi 被板子占着,只能走蜂窝流量。另外「不用 Mac」说的是运行的时候,第一次刷板子还是要接一台电脑。

为什么是它、为什么是这个月

需求正好在那一周最热。 10 月初,「iPhone-use」在中文 X 圈突然火了:zhongerxin/iPhone-use 10 月 6 日建库,一个月 4909 star;同一周还冒出 actell(10-09)、phone-agent(10-06)。大家都在问怎么让 agent 操作 iPhone,它 10 月 11 日建库,刚好赶上。

它绕开了所有人都卡着的那道门。 同类方案几乎都要 Mac、Xcode、开发者签名或者开启开发者模式(下面表里一个个列着)。它的标题直接写「$7 / No Mac / no developer account / no jailbreak」,外行看一眼就懂,也愿意转。

同样的思路以前有人做过,没起来。 zhaodashuaibi/VersaiOS 今年 3 月就用 ESP32 蓝牙鼠标加电脑上的 AirPlay 接收端控 iPhone,早了七个月,现在 9 个 star;boboabw/phone-agent 和它同一周发,也用 ESP32 加辅助触控,但没做看屏这一步,21 个 star。它多走的那一步,是把 AirPlay 接收端移植进一块 $7 的板子。这样「零依赖」才讲得圆,这件事本身的工程难度也成了别人转发的理由。

两拨人同时在转它。 AI agent 圈在 X 上转,创客圈在 Hackaday、Elektor、Hackster、r/esp32 上转。纯软件的 iPhone-use 上不了 Hackaday,它带着实物照片就能上。板子在亚马逊 7 美元就能买到,看的人都觉得「我也能试」。fork 和 star 的比例大约 13%,作为一个要刷硬件的项目算高,说明不少人真去动手了。不过实际跑起来的人有多少,外面看不到。

star 从哪来

来源发生了什么带量
作者自己的 X 帖10-12 首帖中英双发,配闹钟视频;之后每出一个版本发一条首帖 21 万浏览;10-15 去电脑版 807 赞;11-06 DeepSeek 帖 345 赞、3.3 万浏览
X 大号转发@RoundtableSpace 10-13;中文圈 @hr98w《iPhone-use 方案梳理》、@xiaomovps《ESP32 变成 Agent 终端的四个项目》等科普帖9.2 万浏览;315 赞 / 93 赞
硬件媒体Hackaday 10-14,之后 Elektor、Open Source For You、Circuit Digest、dev.to、YouTube 解读报道当天 +1072 star
作者自己铺的平台Reddit r/esp32 发帖,Hackster、Instructables、PCBWay、Elektor Labs 都发了项目页带了多少没法核实
Hacker News没上过—

增长节奏很典型:10-17 是 2802,之后每天涨 80 到 170,慢慢降下来;11 月初每天只剩三四十。11-03 上 TestFlight、11-06 发 DeepSeek 帖之后,又回到每天 60 到 70(GitHub 每日 star,11-06)。近 7 天 +343,前 7 天 +548,总的方向是在变慢,靠的是每出一个新版本就发一条帖子,一波一波往上拉。

谁在跟它抢

项目做法star(11-06)跟它的区别
zhongerxin/iPhone-useWebDriverAgent / XCTest4909要 Mac、Xcode、签名;能拿到原生控件,点得更准
mobile-next/mobile-mcp通吃 iOS / Android 的 MCP1.03 万iOS 真机要 Mac 加 WDA
web-infra-dev/midscene(字节)偏 E2E 测试1.55 万iOS 要 Mac 加签名
zai-org/Open-AutoGLM(智谱)走 ADB2.65 万主要做 Android
OpenMinis/iCTRL自研 XCUITest581仍要签名
ja1chen/actell手机上的 agent App116要开开发者模式
Sipeed NanoKVM GoUSB-C 视频采集硬件推广帖 14 万浏览60 帧、更快,但要买专门的硬件

跟风的已经来了:ananhq/anan-iphone-use(10-13,ESP32 MCP 固件,150 star)、ghosthand-dev/ghosthand(10-27,USB 加蓝牙,37 star)、JosssphZhou/poki(11-05,纯软件 MCP,宣传语直接拿它对比「不用 $7 板子」,一百多到三百多 star)。还有人蹭热度投毒,在 issue 里贴「一键安装」命令,README 顶上专门加了一条警告。苹果自己的 Siri 和 Apple Intelligence 到现在也没开放「让第三方模型操作任意 App」,这是这一整类项目能存在的前提。哪天苹果开放了,这道门槛就没了。

作者往产品方向走的痕迹也很明显:起了品牌 Handsy 和官网 handsy.tech,README 里买板子、买线用的是亚马逊联盟链接,App 在等 App Store 审核,README 第一行要求二次开发的人署他的名字。

如果是你

一句话:B。这波「AI 操作 iPhone」已经有了两个四五千 star 的项目,后来照着做的都只拿到几十到几百 star;但「一块便宜板子替 AI 当眼睛和手」这个配方,换一台设备还能再用一次。

适合谁:会写 ESP32 或其他单片机固件、懂一点 USB HID 和视频流的开发者,最好已经在 X 或硬件社区有一点存在感,能中英文都发。

不适合谁:想再做一个「AI 控 iPhone」的。原作者、iPhone-use、poki 已经把「硬件」「软件」「免硬件」三个位置都占了,再做一个,标题里写不出新东西。只会写软件、不想碰硬件的也不适合,这类项目在硬件圈出圈,靠的正是那块实物。

怎么做:换一台「封闭、没有自动化接口、但能投屏、能插 USB 键鼠」的设备,把配方原样搬过去。候选:iPad 上的专业 App、Switch 或 PS5 这类游戏机(HDMI 采集加 USB 手柄模拟)、电视盒子、车机、Kindle 这类阅读器(推断,没有逐一验证可行性)。标题照它的格式写:「$X 的板子让 AI 操作 ___,不用 Y、不用 Z」。第二条路是做它没做好的部分,比如把每步几秒压到一秒以内、支持横屏、出一套现成的任务库(自动签到、自动填表),但这条路的 star 大多会流回原项目,自己很难出圈。

怎么获客:照它的打法来。第一条帖子就要有一段完整的任务视频,让人看到 AI 从头到尾自己做完一件具体的事;中英文同一天发;同一周给 Hackaday 投稿,在 Hackster、Instructables、r/esp32 上各发一个项目页;之后每个版本配一条新视频,把一次爆发拉成好几波。README 里放一张和同类的对比表,写清楚「它们要什么,我不要」。

什么时候之前:「AI agent 操作真实设备」这个话题现在还热,但每周都有新项目进来。最好 12 月底之前把第一个能录视频的版本发出去,越往后,读者对「又一个让 AI 控 ___ 的」越不新鲜。

什么情况说明看错了:① 11 月里又有两三个「AI 控某设备」的硬件项目发出来,都没过 500 star,说明大家只对 iPhone 这一个设备感兴趣,换设备这条路不通;② 苹果或谷歌在系统层开放第三方 agent 操作 App,整类硬件方案就失去了理由;③ 反过来,如果有人用同样的配方做游戏机或电视,一周过千 star,说明这条路是通的,要抓紧。

---

数据与出处:GitHub 仓库页与 README(11-06);每日 star / fork 数(10-17 起逐日记录;10-11 到 10-16 只有单日峰值,没有逐日数);作者及转发者的 X 帖(浏览与点赞截至 11-06);Hackaday 2026-10-14 报道;竞品 star 数来自 GitHub(11-06)。Reddit、Hackster 等平台带来的量没有核实;App Store 能否过审、TestFlight 实际装机量未知。

GitHub 仓库 ↗

研究底稿:竞品表、获客证据、完整研究报告
竞品
名字在哪上线规模它和这家不同在哪
zhongerxin/iPhone-use开源2026-10-064909 star走 WebDriverAgent/XCTest,要 Mac、Xcode、签名;它是纯物理外设零依赖
mobile-next/mobile-mcp开源2025-031.03 万 stariOS 真机需 Mac+WDA;它不需要电脑
web-infra-dev/midscene开源2024-071.55 万 star面向 E2E 测试,iOS 要 Mac+签名
zai-org/Open-AutoGLM开源2025-122.65 万 star主要 Android/ADB,不解决 iPhone
OpenMinis/iCTRL开源2026-07581 starXCUITest 方案,需签名
ja1chen/actell开源2026-10-09116 star需开发者模式和 DDI
boboabw/phone-agent开源2026-10-0621 star同样 ESP32 HID+辅助触控,但没有 AirPlay 看屏
zhaodashuaibi/VersaiOS开源2026-039 star同思路但要电脑跑 UxPlay,早七个月没起来
Sipeed NanoKVM Go(iPhone Use)其他2026-10推广帖 282 赞 / 14 万浏览USB-C DisplayPort 采集 60fps,更快但要买专用硬件
Apple Siri / Apple Intelligence大厂功能——不开放第三方模型操作任意 App
用户从哪来
  • 查实 作者 X 帖(中英双语+演示视频):10-12 首帖 242 赞 / 21 万浏览;10-15 新版帖 807 赞 / 6.2 万浏览;11-06 中文 DeepSeek 帖 345 赞
  • 查实 X 大号转发:@RoundtableSpace 10-13 620 赞 / 9.2 万浏览;@hr98w、@xiaomovps、@0xLogicrw 等中文科普帖
  • 查实 硬件/科技媒体:Hackaday 2026-10-14 报道,与单日 +1072 同日;Elektor、Open Source For You、daily.dev、Circuit Digest
  • 查实 Reddit 与创客平台铺量:r/esp32 作者自发帖;作者在 Hackster、Instructables、PCBWay、Elektor Labs 发项目页
  • 推断 HN:我们的 hackernews 库无记录
  • 查实 版本迭代持续喂料:去电脑版 → TestFlight(11-03)→ CLI/MCP → DeepSeek Harness,每步一条 X 帖,星数随之回升

onehumanbeing/esp32-iphone-agent(Handsy AI)为什么能跑出来

渠道:GitHub|建库 2026-10-11|截至 2026-11-06:4436 star / 596 fork(我们的 github 库)|作者 Henry Yuan(@iamhenryyuan,纽约;GitHub 账号 2016 年注册,117 followers)

一句话

一块约 7 美元的 XIAO ESP32-S3 插进 iPhone 的 USB 口:板子当 AirPlay 接收端“看屏”,当 USB 鼠标键盘“点屏”(配 iOS 辅助触控),手机上的 App 或电脑上的 agent(CLI / MCP)调任意 OpenAI 兼容视觉模型来决定下一步。不用 Mac、不用开发者账号、不越狱。

结论:它赶上 2026 年 10 月初中文 X 圈的“iPhone-use”热潮(zhongerxin/iPhone-use 10-06 建库,一周内几千 star),抓住同类方案都绕不开的痛点(要 Mac + Xcode + 签名 / 开发者模式),用“$7 板子、什么都不需要”这个一句话能讲清、带演示视频的卖点,先后被 X 大号 @RoundtableSpace(9.2 万次浏览)和 Hackaday(10-14)转出圈,10-14 当天单日 +1072 star。差异化(纯物理外设、零依赖)确实是它起来的原因,但时机和 X/硬件媒体的放大同样关键。

一、增长数据

  • 单日峰值 2026-10-14 +1072 star(数据卡 max_day_gain);10-17 已有 2802,11-06 为 4436(github 库 repo_day)。
  • 节奏:10-17 → 10-24 每天 +80~170;近 7 天 +343,前 7 天 +548,在放缓;11-04 起又回到每天 +60~70,对应 11-03 TestFlight 上线、11-06 发“支持 DeepSeek Harness / MCP”中文帖(345 赞,3.3 万次浏览)。
  • fork/star 约 13%,对一个硬件项目算高:很多人真的去刷板子、改代码。

二、竞品(做同一件事:让 AI 操作真 iPhone)

产品形态上线规模和它的不同
zhongerxin/iPhone-use开源2026-10-064909 star(github 库)走 WebDriverAgent/XCTest,要 Mac、Xcode、开发签名;能拿原生元素,精度更高
OpenMinis/iCTRL开源2026-07-04581 star自研 XCUITest runner,仍需签名
mobile-next/mobile-mcp开源 MCP2025-031.03 万 star通吃 iOS/Android/模拟器,但 iOS 真机需 Mac+WDA
web-infra-dev/midscene开源(字节)2024-071.55 万 star面向 E2E 测试,iOS 需 Mac+签名
zai-org/Open-AutoGLM开源(智谱)2025-122.65 万 star主要 Android(ADB),不解决 iPhone
ja1chen/actell开源2026-10-09116 stariPhone 上的 agent App,走 CoreDevice 调试通道,需开发者模式
boboabw/phone-agent开源2026-10-0621 star最接近:ESP32 蓝牙 HID + 辅助触控 + iPhone App,但没有“眼睛”(不做 AirPlay 接收)
zhaodashuaibi/VersaiOS开源2026-039 starUxPlay + ESP32 蓝牙鼠标,要电脑 —— 思路几乎一样,早七个月,没起来
Sipeed NanoKVM Go 用于 iPhone Use(@coolish 推)硬件2026-10帖子 282 赞 / 14 万浏览走 USB-C DisplayPort 采集,60fps,无线、可充电;贵、要买专用硬件
yoyicue/glassbox、AidenAI aiden-firmware开源2026个位数~未知HDMI/PicoKVM 采集 + HID,要额外采集硬件
Apple 自家大厂功能——Apple Intelligence / Siri 没有开放“让第三方模型操作任意 App”;@RoundtableSpace 原话“Apple never built this, so someone hacked it with $7”

作者自己在 README 里列了一张对比表(VersaiOS、actell、aiden、glassbox、phone-agent、devicehub,以及 mobile-mcp / Midscene 需要 Mac 和签名),这张表本身就是它的定位。

三、增长手段(用户从哪来)

  1. 作者本人的 X 帖 + 演示视频(已证实):10-12 首帖 “A $7 ESP32 lets an AI agent control a stock iPhone. No Mac, no jailbreak…” 242 赞 / 21 万浏览;10-12 同时发中文版(213 赞,闹钟 22 步全自动演示);10-15 “新版连 Linux 盒子都不要了” 807 赞 / 6.2 万浏览。中英双语同时发,两个圈都吃到。(x 实时搜索,2026-11-06)
  2. X 大号转发(已证实):@RoundtableSpace(Mario Nawfal 系)10-13 620 赞 / 9.2 万浏览;@Dinosn(安全圈)10-22;中文圈 @hr98w《iPhone-use 方案梳理》315 赞、@xiaomovps《ESP32 变成 Agent 终端的四个项目》93 赞、@0xLogicrw、@justloveabit、@ai_suxiaole 等科普帖。
  3. 硬件媒体(已证实):Hackaday 2026-10-14《AI Controls iPhone Via ESP32》——与单日 +1072 同一天;之后 Open Source For You、daily.dev、Circuit Digest(Facebook/Instagram)、Elektor、dev.to 多篇、YouTube 解读视频、SkillsLLM/SourceForge 镜像。
  4. 社区帖与作者自己铺的项目页(已证实):Reddit r/esp32「I built an AI agent that operates a real iPhone with a $7 ESP32-S3」;作者账号在 Hackster、Instructables、PCBWay、Elektor Labs 都发了项目页——典型的硬件圈“多平台铺量”。(Jina 搜索,具体票数未核实)
  5. HN:没有。我们的 hackernews 库搜不到这个库或相关标题。
  6. 持续“新版本”喂料:原版要电脑跑 UxPlay → 10-15 去掉电脑、板子自己当 AirPlay 接收端 → 10-22 提交 App Store → 11-03 TestFlight → CLI/MCP(cli-v0.1.0)给 Claude Code 用 → 11-06 DeepSeek Harness。每一步都配一条 X 帖,星数随之再起一小波。
  7. 变现苗头:官网 handsy.tech 用亚马逊联盟链接卖板子和线,iOS App 在等审核;README 顶部要求二次开发者署名 —— 在为品牌 Handsy 铺路。

四、为什么跑出来

  • 时机:10 月初“iPhone-use”在中文 X 圈突然火(iPhone-use 10-06、actell 10-09、phone-agent 10-06 同一周冒出),还有 GPT-6 Astra computer use、新 iPhone 发布的话题;@xiaomovps 也提到 Meta 10-02 开源 Muse Gadgets 让 ESP32 当 agent 外设又火了一波。大家正在找“怎么让 agent 操作 iPhone”,它在需求最热的那一周发出来。
  • 一句话卖点戳中最大痛点:同类基本都要 Mac + Xcode + 签名 / 开发者模式;它的标题就是“$7 / No Mac / no developer account / no jailbreak”,外行也能转发。
  • 可见、可复现的演示:实物照片(板子插在手机上)+ 闹钟、画画视频;7 美元、能在亚马逊买到,人人觉得“我也能试”,所以 fork 率高。
  • 跨界两拨人:AI agent 圈(X)+ 硬件/创客圈(Hackaday、Hackster、r/esp32)。纯软件的 iPhone-use 没法上 Hackaday,它能。
  • 快速迭代:三周内从“要电脑”到“板子即全部”,工程难度(在 ESP32 上移植 UxPlay 的 AirPlay 接收端、H.264 直通)本身就是被转发的看点(作者回帖“性能基本是压榨到头了”)。

五、差异化

把“眼睛”和“手”都塞进一块 $7 板子,只用 iOS 公开功能(屏幕镜像 + 辅助触控 + USB 外设)。同思路的 VersaiOS(要电脑)、phone-agent(没有眼睛)早就有、却只拿到个位数到二十几个 star;它多做的那一步——ESP32 自己当 AirPlay 接收端,运行时不再需要电脑——正好把“零依赖”讲完整了。所以差异化是它跑出来的原因之一;但同期纯软件的 iPhone-use 也拿到近 5000 star,说明“热潮”本身贡献很大,差异化决定了它是这波里在硬件圈出圈的那一个。 代价:相对指针、要校准、慢(每步截图走视觉模型)、暂不支持中文输入和横屏(@xingjia520 引 README),精度不如 XCTest 方案;NanoKVM Go 已经在喊“全面优于 ESP32 方案”。

六、可见度与跟风

  • 可见度:小圈子里在传,且已出圈到硬件媒体——Hackaday、Elektor、Open Source For You 写过,X 上 @RoundtableSpace 9.2 万浏览;开源项目,没有收入可公开。
  • 跟风已出现:ananhq/anan-iphone-use(10-13,ESP32 MCP 固件,150 star)、ghosthand-dev/ghosthand(10-27,USB+蓝牙控真 iPhone,37 star)、JosssphZhou/poki(11-05,纯软件本地 MCP,141~358 star,宣传语直接拿它对比“不用 $7 板子”)、@openmys(JosephZhou)ESP32 蓝牙鼠标控 iPhone 点外卖(436 赞)、Sipeed NanoKVM Go 的 iPhone Use 玩法。README 里专门警告别跑 issue 里的“一键安装”命令——已有人借热度投毒。

七、可借鉴

  • 选一个大家正在找、但现有方案都卡在同一道门槛上的需求,标题直接写“不需要 X/Y/Z + 价格”。
  • 软硬结合的项目同时打 AI 圈(X)和创客圈(Hackaday/Hackster/Instructables/PCBWay/r/esp32),中英双语同时发。
  • 每次版本迭代都配一条带视频的帖,把一次性爆发拉成多波。
  • 开源固件 + 浏览器一键刷机 + App/CLI 两种入口 + 硬件联盟链接,是开源硬件项目往产品(Handsy)走的路径。

八、不确定

  • Reddit、Hackster 等帖子的票数和带来的 star 没核实;10-11~10-16 逐日 star 我们库里没有(库从 10-17 有数),峰值靠数据卡。
  • App Store 能不能过审未知(用辅助触控+外设控制的 App 有被拒风险);TestFlight 实际装机量未知。
  • star 不等于使用量:真正刷板子跑起来的人有多少不清楚;fork 率高是唯一的间接信号。

出处

文章由 AI 根据公开数据和我们每天采集的数据写成,数字带出处,推断已标明