语音上手难度 ⚡ 入门#TTS#零样本#科研友好

F5-TTS · 极简架构零样本 TTS

论文一作开源的流匹配 TTS:3 秒克隆,代码简洁适合魔改

15k stars 2.2k forks 133 62Python MIT 最近提交 2026-07-23本周 +1 ⭐ 官网 / 文档 在 GitHub 查看源码
🟡 更新放缓✅ 商用友好协议

5 分钟上手

8GB 显存即可推理,CPU 可跑(较慢)
pip install f5-tts
f5-tts_infer-cli --model F5TTS_v1_Base \
  --ref-audio ref.wav --ref-text "参考音频的文字内容" \
  --text "你好,这是 F5-TTS 克隆出的声音。" --output out.wav

项目速览

F5-TTS 出自 ICML 论文作者,用流匹配(Flow Matching)+ DiT 架构实现零样本语音克隆,训练代码极短、复现门槛低,社区魔改版本众多(中文优化、加速推理),是学习现代 TTS 原理的最佳开源样本之一。

能做什么

  • 3~10 秒参考音频零样本克隆,中英双语
  • E2-TTS/F5 双模型可选,推理脚本简洁
  • 训练/评估代码规模小,适合二次开发与学术改进

怎么部署

pip 安装带 Gradio 演示;也可在 ComfyUI 节点直接调用。产品化替代看 CosyVoice。

适合谁

想改 TTS 模型本身的研究者与喜欢清爽代码的开发者。

✅ 优点

  • •代码量小结构清爽,改造成本友好
  • •3~10 秒样本零样本克隆,中英双语
  • •配套 Gradio 演示开箱可用

⚠️ 局限与坑

  • •效果对参考音频质量敏感(噪声会传染)
  • •推理速度非实时级,大批量生产要另想办法
  • •官方维护偏研究向,产品化功能少

💼 典型应用场景

  • 1.论文复现与 TTS 架构学习
  • 2.快速魔改的中文/加速分支底座
  • 3.Gradio 演示与 ComfyUI 节点集成

不想部署?试试同类在线工具

返回全部开源项目指标每周自动更新,数据来自 GitHub API · 最近同步 2026-09-09