0.6B 的语音克隆模型打赢 8B 的大模型:Audio8 TTS 一周涨了 400 star,也在同一周被查出 codec 来自 Fish
它是什么 一个只有 0.6B(另有 0.1B)参数、能用几秒参考音克隆声音的开源多语言 TTS 模型。
为什么火了 「0.6B 打赢 4.6B–8.5B」一句话的卖点,加上每次发版都配齐模型卡、试听页、在线 Demo,资讯站、中文 ComfyUI 圈和 YouTube 教程照着转;最近一波来自 10 月底的 23 语言版本、MarkTechPost 报道和兄弟仓库 Edge0 的导流。
C你可以怎么跟 别做同款通用 TTS;有语音训练能力的话,抓它不能商用的短处,做一个同档、授权干净的模型,或者专做某种语言,照它的发版法:一张对比表、每次配齐 Demo、4 到 8 周发一版。
- 数据(每天更新) · 建库 2026-07-29 · 2,393 星 · 7 天 +281
GitHub · 星数 数据 2026-10-09 → 2026-11-08(31 天,30 次观测)。10-28 以前的点来自 deeply / 存档补录,不是每天都有
Audio8 TTS 是一个能零样本克隆声音的开源 TTS 模型,只有 0.6B 参数(另有 0.1B 版),4G 显存就能跑,自报的跑分赢过 4.6B 到 8.5B 的大模型。它 7 月底发布,到 11 月 6 日有 2,362 star。最近这一周涨得最快,刚好也是在这一周,有人逐个张量比对,发现它的 codec 来自一个禁止商用的模型。star 是靠一次次发版拿到的,这套发版的做法值得学;另做一个同款开源 TTS,未必划算。
一个想商用的人,比对了 535 个张量
2026 年 10 月 31 日凌晨(UTC),GitHub 用户 rhinodave 在 Audio8 仓库开了第 47 号 issue。他说团队在评估把 Audio8-TTS-Realistic-0.6b 拿去商用,于是把它的 codec.pth 和 Fish Audio S2 Pro 的 codec 放在一起比:
All 535 tensor names in your codec exist in Fish's checkpoint, and 462 of the tensors are bit-for-bit identical.
(你们 codec 里的 535 个张量名在 Fish 的权重里全都有,其中 462 个逐位相同。)
README 写的是代码和权重都用 Apache-2.0,可 Fish S2 Pro 的权重不许商用。维护者 Alichua 很快回复,承认 codec 是从 Fish S2 Pro 的 codec 起步、蒸馏压缩出来的,「Fish 派生的部分我们无法授予商用权」,以后会换成自己训的 codec;「如果你在意商用授权,请不要用这一版」。
就在这几天,star 涨得最快:10 月 30 日 1,957,11 月 3 日 2,287,4 天多了 330 个,11 月 2 日单日 +103。近 7 天 +405,前 7 天只有 +82(GitHub 每日 star 记录,11-06)。
它是什么
一个多语言 TTS 模型,给它几秒钟的参考音,它就能用这个声音念任何文本。架构照的是 Fish Speech 的 DualAR,在大模型的基础上蒸馏压小。它守住的档位很窄:能克隆的模型里,它最小。
| 模型 | 参数 | 能克隆 | star(11 月初) | 和 Audio8 比 |
|---|---|---|---|---|
| Audio8 TTS | 0.6B / 0.1B | 能 | 2.4k | 写着 Apache-2.0,实际不能商用 |
| Fish Speech / S2 Pro | 4.6B | 能 | 33.6k | Audio8 的架构和 codec 都来自它 |
| Qwen3-TTS(阿里) | 0.6B / 1.7B | 能 | 14.2k | 尺寸相同,有大厂背书,能放心商用 |
| CosyVoice3(阿里通义) | 1.5B | 能 | 24.3k | 中文难句更强 |
| VoxCPM2 | 2.3B | 能 | 41.1k | 大得多,能设计音色 |
| Kokoro-82M / KittenTTS | 更小 | 不能 | 9.9k / 16.8k | CPU 能跑,但不能克隆 |
| NeuTTS Air | 0.7B | 能 | 6.3k | 定位几乎一样,「Air」这个名字也一样 |
(GitHub,11 月初)
在 Seed-TTS 英语测试集上,它的词错率是 1.506,Fish S2 Pro 是 1.607,8.5B 的 MOSS-TTS 是 1.85(模型卡自报)。这一句「0.6B 打赢 4.6B–8.5B」,后来几乎每一篇转载都拿来当标题。
star 从哪来
一次次发版,每次都配齐。 7 月 28 日发 0.6B 预览版,8 月 19 日发 0.1B(公告标题是「世界上最小的 Transformer TTS?」),8 月 25 日出 ONNX INT8 和 SGLang 接口,10 月 27 日发 Realistic 版,支持 23 种语言,同时挂上 arXiv 论文,11 月 2 日改名 Realistic-Air。每一次都同时放出 Hugging Face 模型卡、试听页和能在线试的 Space。到 10 月 9 日已经有 1,597 star,大部分是 7、8 月头两次发版时涨的(每天涨多少没法核实)。
资讯站照着标题转。 MarkTechPost 10 月 30 日发了「Edge0 Releases Audio8-TTS-Realistic, a 0.6B Voice Cloning TTS」,第二天日增就从个位数跳到 78。更早还有 HackerNoon(8 月两篇)和 Local AI News。
中文 AIGC 圈和 ComfyUI。 8 月 5 日 B 站和 YouTube 上有一条「【comfyui】Audio8-TTS:sota 级语音克隆!0.6B!4G 显存也能跑!支持粤语!」,CSDN 上有两篇整合包教程。低显存加上粤语,正好对上本地配音、做数字人的这群人。英文 YouTube 上也有好几条本地安装教程(7-30、8-06、9-09)。
兄弟仓库带。 同一个组织下的 Edge0(把 35B MoE 塞进 2.5GB 内存)10 月从 3.7k 涨到 9k star,和 Audio8 这一波加速是同一段时间,组织有 1,182 个关注者。Hugging Face 上这个组织还挂着另一个团队 AutoArk 的 Demo,AutoArk 名下几个仓库加起来有几千 star。很可能是同一批人换了牌子,发布前就有一批关注者(推断,未核实)。
哪些地方没起作用。 Hacker News 上的几次提交都只有 1–2 分;X 上没有大号写过它;它一天都没上过 GitHub trending。真正用它的人在 Hugging Face:Realistic-Air 近 30 天下载 12,847 次,0.6B 预览版累计 3.6 万次(Hugging Face,11-06)。
能不能照着做一个
再做一个「小而强」的通用开源 TTS,很挤。 今年开源 TTS 是最卷的方向之一。阿里在这个尺寸上有 Qwen3-TTS,同一时期还有 breeze-tts、FireRedTTS3、Ming-3.0-tts 在抢关注,breeze-tts 近 7 天 +311,和 Audio8 差不多快。另外,训练和蒸馏要真懂语音模型,还要有算力,一个人周末做不出来。
它最大的短处是授权,这是个空当。 现在想要「能克隆、够小、能商用」的人,能选的只有 Qwen3-TTS 和几个英语为主的模型。用一个许可干净的 codec 做一个同档模型,README 第一行就写「可商用」,是一个清楚的切口。只是 Audio8 已经说了要换自研 codec,窗口有多久不好说。
换语言或人群做,门槛低一些。 拿现成的可商用基座,专门做粤语、日语、东南亚语种,或者做某种垂直声音(有声书、游戏角色),再按上面那套发版。star 上限比通用模型低,一般几百到一两千(估)。
做周边,star 少但最省事。 ComfyUI 节点、C++ 推理、整合包、在线试用站,社区已经有人做了。这些搭着原项目的热度走,拿到的通常是几十到几百 star。
如果是你
判断:Audio8 这套发版方法值得照抄,再做一个同款通用 TTS 不太划算。卖点、发版节奏、配套都能学;但它涨得起来,也靠团队先攒下的关注、兄弟仓库带的流量,加上从 Fish 那里借来的 codec,跟进的人这几样都拿不到。
适合:做过语音模型训练、手上有 GPU、能在某一项上拿出硬对比(更小、可商用、某种语言更好)的人或小团队。
不适合:没训过模型、想靠包一层或改个名拿 star 的人;只有周末时间的独立开发者。
怎么做:
- 只讲一个对比。 「小 N 倍、分更高」或者「同档唯一可商用」,写成一张表放在 README 最上面,资讯站会直接拿去当标题。
- 每次发版都配齐:模型卡、试听页、能在线试的 Space、中英双语 README、ONNX 或低显存版本。门槛越低,教程 UP 主越愿意来做。
- 4 到 8 周发一版,一次一个新卖点(更小、更多语言、更像真人),让 star 一级一级往上走。
- 授权一开始就弄干净。 Audio8 的 #47 就是反面例子:写着 Apache-2.0 却不能商用,想拿它做产品的人会走。
怎么获客:MarkTechPost 这类 AI 资讯站、B 站和 YouTube 上的 ComfyUI、本地部署 UP 主、Hugging Face 首页和 Papers with Code。这一类里 HN 和 X 作用不大,Audio8 在 HN 只有 1–2 分。
什么时候之前:要切「同档可商用」这个口子,要赶在 Audio8 换成自研 codec 之前,或者赶在 Qwen3-TTS 发更小一档之前。照现在的节奏,大概几个月(推断)。
什么情况说明看错了:如果 Audio8 换掉 codec、改成真能商用以后,star 和下载还接着往上走,说明这一档的需求比看上去大,后来的人要比它更小或更好才挤得进去。反过来,如果它换了 codec 效果明显变差,就说明这一档的空当比想的还大。
研究底稿:竞品表、获客证据、完整研究报告
- 竞品
名字 在哪 上线 规模 它和这家不同在哪 Fish Audio S2 Pro / fish-speech 开源 2023-10 33.6k star,4.6B,有商业 API Audio8 的架构和 codec 都来自它,小约 8 倍、榜单分更高;但 Fish 权重禁止商用,Audio8 也因此不能商用 Qwen3-TTS 开源 2026-01 14.2k star,有 0.6B / 1.7B 两档 同尺寸、大厂背书、Apache-2.0 能放心商用;Audio8 赢在自报的跑分和粤语 CosyVoice3 开源 2024-07 24.3k star,1.5B 中文难句更强;Audio8 更小,中英 WER 更低 VoxCPM2 开源 2025-09 41.1k star,2.3B 没有 tokenizer、能设计音色,规模大;Audio8 主打小 Higgs Audio v2 开源 2025-07 8.4k star,4.7B 通用音频大模型;Audio8 小 8 倍 Chatterbox 开源 2025-04 27.6k star,MIT 英语为主,可以商用;Audio8 多语言 Kokoro-82M / KittenTTS 开源 2025-01 / 2025-08 9.9k / 16.8k star 更小、能在 CPU 上跑,但不能零样本克隆 NeuTTS Air 开源 2025-10 6.3k star,0.7B 同样定位端侧克隆;Audio8 语言更多,0.1B 版更小 breeze-tts / Ming-3.0-tts / FireRedTTS3 开源 2026-08~10 1.5k / 0.5k / 1.7k star 同期新模型在抢关注,breeze-tts 近 7 天 +311,和 Audio8 差不多快 ElevenLabs / MiniMax Speech 其他 — 商业云 API 收费、在云端;Audio8 本地免费,但音质和语言覆盖还有差距 - 用户从哪来
- 查实 一波一波发模型(HF 模型卡 + 试听页 + Space + arXiv):7-28 Preview、8-19 0.1B、8-25 ONNX/SGLang、10-27 Realistic、11-02 改名 Air,star 台阶和发布日期对得上(commit 记录 + repo_day)
- 查实 AI 资讯站报道:MarkTechPost 2026-10-30 报道后,10-31 起日增从个位数跳到 78–103;之前还有 HackerNoon 8-04 / 8-26、Local AI News 8-02
- 查实 中文 AIGC / ComfyUI 圈:B 站 / YouTube「【comfyui】Audio8-TTS:sota 级语音克隆!4G 显存也能跑!」(8-05),CSDN 整合包两篇,mushroom.cv「0.6B 打赢 4.6B」
- 查实 YouTube 本地部署教程:Local Install Guide(7-30)、Run Locally(8-06)、0.6B & 0.1B Tested(9-09)、Shorts
- 查实 Reddit:r/speechtech 首发帖 7-29、r/accelerate 8-21 转发 0.1B,互动量未核实
- 推断 兄弟仓库 / 组织光环导流:Edge0 仓库 10 月从 3.7k 涨到 9k,和 Audio8 加速时间重叠;HF 的 Edge0 组织挂着 GPA、Ark-ASR,疑似 AutoArk 换牌子
- 查实 HF 官方 / 托管平台:HF 的 Niels Rogge 挂了 Papers with Code(MiniMax-Multilingual-24 第 4),DeepInfra 上了托管 API
- 推断 HN / X 大号:HN 提交只有 1–2 分;x-radar 里没有 Audio8 的大号推文——不是增长来源
Edge0-AI/Audio8_TTS 为什么能跑出来
渠道:GitHub。研究日期 2026-11-06。数据来源:我们的 github 库(repo_day / repo_profile,2026-10-09 起有日数据)、GitHub API、Hugging Face API、Exa / Brave 搜索、HN Algolia、x-radar。
一句话
Audio8 TTS 是一个 0.6B(另有 0.1B / 170M)参数、带零样本声音克隆的开源多语言 TTS 模型。它能涨起来,靠的是一个结论清楚的卖点:0.6B 的模型,在 Seed-TTS / CV3 榜上跑赢 4.6B–8.5B 的大模型,4G 显存就能跑。再加上一个已经有积累的团队、一套模型发布流程(HF 模型卡加 Demo、arXiv、ONNX、SGLang、ComfyUI 生态)。最近这一周加速,是因为 10 月 27–30 日发了新版本 Realistic(11 月 2 日改名 Realistic-Air,23 种语言),MarkTechPost 写了一篇,兄弟仓库 Edge0(35B MoE 跑在 2.5GB 内存,9k star)也在给它导流。它不是靠持续的产品使用涨起来的,是靠一波一波的模型发布。
1. 数据
- star:2026-10-09 1,597 → 10-30 1,957 → 11-06 2,362。10-31 到 11-03 四天涨了 330,单日峰值 103(11-02)。近 7 天 +405,前 7 天 +82(github 库 repo_day)。
- 10 月 9 日已经有 1,597 star,说明大头是 7 月 29 日首发和 8 月 19 日 0.1B 发布时涨的。逐日 stargazer 接口拿不到(404),这一段未核实到具体哪天。
- Hugging Face 下载(HF API,2026-11-06):Realistic-Air 近 30 天 12,847 次、327 like;Preview-0.6b 累计 36,021;Preview-0.1b 累计 11,561;0.1B ONNX INT8 累计 3,850。HF Space Playground 28 like。真实使用主要发生在 HF,不在 GitHub。
- 同一组织(GitHub 组织 Edge0-AI,2026-07-29 创建,1,182 follower):Edge0(9,088 star,9-08 创建,近 7 天 +378)、Audio8-ASR-Infinite(125)、open-audio-opd(23)。
2. 竞品
开源 TTS 是今年最卷的方向之一,对手很多:
| 竞品 | 形态 | 上线 | 规模 | 和 Audio8 的区别 |
|---|---|---|---|---|
| Fish Speech / Fish Audio S2 Pro | 开源 + 商业 API | 2023-10 | 33.6k star | Audio8 架构(DualAR)照它做,codec 也来自它;S2 Pro 4.6B,权重禁止商用。Audio8 主打「小 8 倍、榜上分更高」 |
| Qwen3-TTS(阿里) | 开源 | 2026-01 | 14.2k star | 同样有 0.6B 档、Apache-2.0,大厂背书;是同尺寸最直接的对手 |
| CosyVoice3(阿里通义) | 开源 | 2024-07 | 24.3k star | 1.5B,难句中文更强(Hard ZH CER 5.83 vs Audio8 11.51) |
| VoxCPM2(OpenBMB) | 开源 | 2025-09 | 41.1k star | 2.3B,没有 tokenizer,能设计音色;规模大很多 |
| Higgs Audio v2(Boson) | 开源 | 2025-07 | 8.4k star | 4.7B 的通用音频基座 |
| Chatterbox(Resemble) | 开源 | 2025-04 | 27.6k star | MIT 协议,英语为主,带情绪控制 |
| IndexTTS | 开源 | 2025-02 | 25k star | 工业级可控 TTS,中文生态强 |
| F5-TTS | 开源 | 2024-10 | 15.5k star | 流匹配路线,学术界常用的基线 |
| Kokoro-82M / KittenTTS | 开源 | 2025-01 / 2025-08 | 9.9k / 16.8k star | 更小、能在 CPU 上跑,但不能零样本克隆 |
| NeuTTS Air(Neuphonic) | 开源 | 2025-10 | 6.3k star | 0.7B 端侧克隆;Audio8 的「Air」命名和定位都很像它 |
| 同期新库:breeze-tts、Ming-3.0-tts、FireRedTTS3、MisoTTS | 开源 | 2026-05~10 | 0.5k–3.2k star | 同一时间在抢关注,breeze-tts 近 7 天 +311,和 Audio8 差不多快 |
| ElevenLabs / MiniMax 等 | 商业 API | — | — | 收费云服务;Audio8 宣传的是「云端级音质,本地免费」 |
结论:竞品非常多,其中不少有大厂背书、star 量级高一个数量级。Audio8 能挤出位置,是因为它守住了「≤0.6B、还能克隆、多语言」这一档,而且分数更好看。
3. 用户从哪来(增长手段)
- 一波一波发模型(已确认):7-28 Preview 0.6B → 8-19 0.1B(标题「世界最小的 Transformer TTS?」)→ 8-25 ONNX INT8 / SGLang → 10-27 Realistic 0.6B(23 种语言,同时发 arXiv 2610.14776)→ 11-02 改名 Realistic-Air。每次发布都配 HF 模型卡、GitHub Pages 试听页和 HF Space,和 star 的台阶一一对上。
- AI 资讯站和教程站自发转载(已确认):MarkTechPost 2026-10-30 发了「Edge0 Releases Audio8-TTS-Realistic」,紧接着 10-31 就开始加速;之前还有 HackerNoon(8-04、8-26)、Local AI News(8-02)、creativeaishow、instavar 跑分、HyperAI 一键 notebook、localclaw / openvoxai 收录页。
- 中文圈和 ComfyUI 生态(已确认):B 站和 YouTube 上的「【comfyui】Audio8-TTS:sota 级语音克隆!0.6B!4G 显存也能跑!支持粤语!」(8-05)、CSDN 整合包两篇、mushroom.cv「0.6B 打赢 4.6B」、deepface.cc 资源站。粤语支持和低显存在中文 AIGC 圈很吃香。
- YouTube 本地部署教程(已确认):「Audio8 TTS 0.6B Local Install Guide」(7-30)、「Run Locally」(8-06)、「0.6B & 0.1B Tested」(9-09),还有 Shorts。
- Reddit(已确认存在,互动量未核实):r/speechtech 首发帖(7-29)、r/accelerate 转发 0.1B 公告(8-21)。r/LocalLLaMA 上没找到大帖。
- HN 不是来源:几条提交都只有 1–2 分(Algolia)。X 上也没大号带:x-radar 语料里没有 Audio8 的推文,只搜到 Presidentlin(Lincoln)8-19 一条转发;兄弟项目 Edge0 被 ModelScope 官号(1.5 万粉)推过。
- 兄弟项目导流 / 同一组织的光环(推断,部分确认):Edge0 仓库 10-09 到 10-30 从 3.7k 涨到 8.7k,时间上和 Audio8 这轮加速重叠,组织 follower 1,182。HF 上 Edge0 组织还挂着 GPA_DEMO(2026-01)、Ark-ASR 等 Space,GitHub 上还 fork 了 AutoArk/open-audio-opd(1.1k star)。AutoArk 名下有 GPA(3k)、EVA-OS(1.9k)、TinyEngram(1.3k),很可能是同一个团队换牌子,所以发布前就有存量关注者(未核实)。
- 托管平台和第三方收录:DeepInfra 上了 Audio8 0.6B 的 API,cloudprice.net 有定价页。HF 官方的 Niels Rogge 主动把论文挂上 Papers with Code,给了排名(MiniMax-Multilingual-24 第 4)。
4. 为什么能跑出来
- 卖点能用一句话说完:「0.6B 打赢 4.6B–8.5B」,Seed-TTS 英语 WER 1.506,低于 Fish S2 Pro 的 1.607 和 MOSS-TTS 8.5B 的 1.85(model card / mushroom.cv)。资讯站可以直接照抄当标题。
- 够得着的硬件门槛:4G 显存、0.1B 有 CPU ONNX 版、Windows PowerShell 脚本、web UI。玩 ComfyUI、做本地数字人或配音的人能马上上手。
- 多语言加粤语:先 11 种、再 23 种,中文社区特别提到粤语。
- 发布做得完整:HF 模型卡、试听页、Playground、arXiv、ONNX INT4/INT8、SGLang Omni(OpenAI 兼容接口)、SFT 训练脚本,加上中英双语 README。社区很快做出了 C++ 推理、ComfyUI 节点、整合包。
- 踩在 Fish S2 Pro 上:架构和 codec 直接站在当时最强的开源 DualAR 模型上,再蒸馏压小(open-audio-opd 就是他们的「在线策略蒸馏」训练栈),所以花小钱做出了接近大模型的效果。
5. 差异化
它和别家的不同,是在「能零样本克隆」的模型里做到最小、分数还最好看:比 Kokoro / Kitten 多了克隆,比 Fish / CosyVoice / VoxCPM 小 3–14 倍,比同尺寸的 Qwen3-TTS-0.6B 跑分更好看(按它自己的表)。这个不同正是它涨起来的原因,因为几乎所有转载标题都在讲「小而强」。 但差异化本身有隐患:Issue #47(10-31)有人比对出 codec.pth 和 Fish S2 Pro 的 535 个张量名完全一致,其中 462 个逐位相同。维护者 Alichua 回复承认 codec 是从 Fish S2 Pro 的 codec 起步、蒸馏压缩的,无法授予商用权,只建议非商用研究使用,并计划换成自研 codec。也就是说 README 上写的 Apache-2.0 和实际能不能商用对不上,商业用户暂时用不了。所以它现在的「差异化」更多是榜单和研究上的,不是一个能商用的替代品。
6. 被多少人看见 / 有没有人抄
- 能见度:小圈子里在传。专业 AI 资讯站(MarkTechPost、HackerNoon)、中文 AIGC 教程圈和 YouTube 本地部署 UP 主都覆盖到了,HF 上月下载过万;但 HN 没火、X 上没有大号写、没上 GitHub trending(数据卡 trending_days_any=0)。开源模型没有收入可言。
- 跟风和蹭名:freetexttospeech.net/audio8-tts(拿开源模型套壳的免费在线 TTS SEO 站)、waveweaver.io 在 Issue 里发「creator workflow guide」引流、DeepInfra 托管 API、Pranavharshans/Audio8-tts 等社区封装,另有 C++ 原生推理移植和 ComfyUI 节点。
7. 能借鉴的
- 开源模型冷启动的套路:「小 N 倍、分更高」一句话对比表 + HF Space 能直接试 + 试听页 + 中英双语 + 低显存 / ONNX / ComfyUI 接入。资讯站和教程 UP 主会自己来写。
- 一个组织下开好几个仓库互相导流(端侧 LLM 的 Edge0 加端侧语音的 Audio8),每 4–8 周发一个新版本,让 star 一级一级往上走。
- 对做产品的人:真正的机会在下游。拿这类小模型套壳做在线 TTS / 配音 / 克隆站已经有人在做(SEO 站),但要先注意授权,Audio8 目前不能商用。
8. 还不确定的
- 7–8 月首发那几波具体每天涨了多少(stargazer 接口拿不到,我们的日数据从 10-09 才开始)。
- Edge0 / Audio8 和 AutoArk 是不是同一个团队、背后是哪家公司(组织地址写美国,提交者 chuarunyuan、Alichua 看起来是华人团队)。
- Reddit 帖的互动量(被 403 挡了)。
- 换掉 codec 以后效果还能不能保持,商用授权问题会不会拖慢后面的增长。