别人的论文模型,他的 644 颗星:一个韩国博主把 10 月刚开源的动捕模型包成了 Windows 软件

10 月 27 日,韩国 AI 动画博主 toyxyz 发了一条推:「我用 FlowHMR、ExMR 和 GVHMR 做了一个简单的动作捕捉 app!」这几个模型都是这个月刚开源的论文代码,他把它们装进了一个动画师能直接用的桌面程序。11 天后仓库 644 星,比它装的那两个新模型自己的仓库加起来还多。算法一行都不是他写的,星是怎么来的、你能不能照着拿一份,下面一节一节说。

它是什么

RGB MoCap 是一个本地跑的 Windows 程序:丢一段普通视频进去,出来一段能编辑的人体动画。可选的重建模型有 ExMR、FlowHMR、GVHMR,后来又加了 MAMMA(多机位)、PromptHMR 和 PEAR(实时预览)。模型只管第一步,后面的活它也做了:时间线上修手脚接触、脚步锁定(防止脚底打滑)、把动作套到不同身材的角色上(Mixamo 的 FBX、VTuber 用的 VRM、MMD 用的 PMX),再导出 FBX 或 VMD。

装起来是 Windows 那一套:clone 下来跑 install.cmd,它会把模型运行环境、Blender、FFmpeg 都装好;README 里还专门写了一段「用 AI 编程助手帮你装」,附了一份写给 Codex 这类工具读的指南。门槛也写得清楚:要 NVIDIA 显卡,装全约 45GB,有些模型文件要去作者那边注册了才能下。

星是怎么涨的

GitHub 上的每日 star(10-28 起):

fork 90 个,约 14%,对一个桌面工具来说偏高,说明不少人真拉下来改。

它包的那几个模型自己的仓库(11-06):ExMR 66 星,FlowHMR 284 星,MAMMA 879 星(5 月建的),GVHMR 2,259 星(2024 年的老项目)。论文代码没人用,能用的成品有人收藏——这句话是整件事的核心。

为什么是现在、为什么是他

时机。 FlowHMR 10 月初上 arXiv,ExMR 10-28 由欧盟项目 XTREME 正式官宣开源。toyxyz 在官宣前一天就把成品发出来了。XTREME 的官宣稿里写「creators are already building on it」(已经有创作者在拿它做东西),点的就是他的 app——模型方替他背了书。

他本来就有对口的受众。 @toyxyz3 在 X 上 3.45 万关注,全是动画师和玩 AI 视频的人。他之前做过 ComfyUI 节点集(706 星)、Blender 的 OpenPose 骨骼工具,长年发 Xsens、Rokoko、QuickMagic 这些动捕方案的对比测试。发工具之前,他先发了一条 ExMR / GVHMR / FlowHMR 三家对比的测试帖(约 5,300 浏览),先证明自己懂行。

每加一个模型就多一次发帖。 10-29 加了 MAMMA 多机位,再发一条:「我给 RGBMocap 加了 MAMMA 支持,可以多机位输入了」,1.38 万浏览,当天 +94。之后又陆续加实时预览、PromptHMR。能切换多个模型的结构,让他每出一个新模型就有一个更新的理由。

别人替他转。 10-30,X 上的 Stefan 3D AI 写了一条长帖:「视频进去,重定向好的动捕出来,全部本地跑。@toyxyz3 做的免费 Windows app:五个 AI 动捕模型任选,在时间线上清理接触,把动作套到你的人形角色上。」Reddit 的 r/mocap 上有作者自己的发布帖和多机位帖,也有别人 fork 后加了 Blender / Cascadeur 实时链接回来发的帖;韩语 Threads、Facebook、Instagram 上都有搬运视频。10-31 到 11-01 那一波(+81、+93)跟这些转发的时间对得上,具体哪条带的没核实。11-06 又涨 42,原因没查到。

没上 Hacker News,也没进 GitHub Trending,主流科技媒体没报。是一个圈子里传开的。

用户要的是最后那一步

动画师真正头疼的不是「把视频变成骨骼」,是之后:脚在地上打滑、手穿进身体、SMPL 那个灰色人模型怎么套到自己的角色上。论文仓库只吐出 SMPL 参数,命令行、Linux 为主;RGB MoCap 把修正、重定向、导出全接上了,VMD + PMX 直接对上 MMD 和二次元圈。

还有一个原因是免费、本地。同类的商用工具都按次或按月收费,还要上传视频:

它没做好的地方

• 只能研究用。 App 代码是 MIT,但里面的模型大多是研究许可。Stefan 那条帖下面第一条评论就是:「不能商用。所以这是开放权重,不是开源。」另一条说:「对打算用在正式项目里的人,研究许可是个重要细节。」
• 只有 Windows + NVIDIA。 Mac 用户、没有独显的人用不了。
• 太重。 约 45GB,有的模型要再装 VS 2022 编译工具和 CUDA 12.8。star 的人里真装上的估计只是一小部分(推断)。
• 有人在推下面问「能不能跟踪人走上斜坡、跳上箱子」——跟地形、道具的交互还是空白。

如果是你

判断:这一路值得学,但这一个项目本身已经有主了,直接再做一个「Windows 动捕 GUI」拿不到这么多星。 能拿到的是同一套打法,换一个没人包的位置。

• 适合谁: 已经在某个创作者圈子(3D、动画、AI 视频、VTuber、游戏 mod)里有几千个对口关注、会写桌面或插件界面的开发者。
• 不适合谁: 没有渠道、指望靠 GitHub 自然流量的人——这个项目没上 Trending,也没上 HN,星几乎全是作者和转发者的圈子带来的。
• 怎么做:
  1. 盯 arXiv、Hugging Face、模型方的官宣,挑「效果明显变好、但只给了论文代码」的新模型,几天内包成装完就能用的东西。
  2. 跟它错开位置:Blender 插件版(动画师不出 Blender)、Mac / Apple Silicon 版(如果模型跑得动)、只做 VTuber 的轻量版、或者只用可商用许可模型的版本——最后这个正好补它最大的短板。
  3. 做后处理,别只做推理。用户卡在打滑、穿模、重定向和格式上,谁补上这一步谁就是「能用的那个」。
  4. 结构上留好「多模型可切换」,每接一个新模型就是一次更新、一条带 demo 视频的帖子。
  5. 写一份给 AI 编程助手读的安装和开发指南,降低别人 fork 的门槛,fork 的人回来发帖也是流量。
• 怎么获客: 先发一条新模型对比测试,再发工具;每次更新配一段短视频发 X;去 r/mocap、r/blender、相关 Discord 发;发给模型作者,争取像 XTREME 这样在官宣里点你一句。
• 什么时候之前: 窗口按「每一个新模型」算,不是按这个项目算。下一个人体或手部重建模型开源后的一周内,是抢「第一个能用的成品」的时间。
• 什么情况说明看错了: 发布后一周,你的推或帖子带不来三位数的星;或者模型作者自己出了带界面的官方版本;或者 Blender、Rokoko 这类平台把同样的功能直接内置了。