← 返回课程

TTS论文可视化 · 原理可视化

每篇论文一段动画,共 79 篇 —— 点击放大,逐步看懂整篇论文。

第1章HiFi-GAN · 多周期判别声码器
点击放大 ⤢
第1章BigVGAN · 周期激活通用声码器
点击放大 ⤢
第1章Vocos · 傅里叶域 GAN 声码器
点击放大 ⤢
第2章VALL-E · 编解码语言模型 TTS
点击放大 ⤢
第2章Mega-TTS 2 · 多句提示与韵律分解
点击放大 ⤢
第2章VoiceCraft · 填空式编解码 LM
点击放大 ⤢
第2章VALL-E 2 · 稳定高效的编解码 LM
点击放大 ⤢
第2章VALL-E R · 单调对齐的编解码 LM
点击放大 ⤢
第2章Fish-Speech · 快慢双自回归
点击放大 ⤢
第2章Llasa · 单码本 LLM 的扩展研究
点击放大 ⤢
第2章Spark-TTS · 解耦单流可控 TTS
点击放大 ⤢
第3章NaturalSpeech 2 · 潜在扩散
点击放大 ⤢
第3章Voicebox · 流匹配语音填空
点击放大 ⤢
第3章VoiceFlow · 整流流匹配 TTS
点击放大 ⤢
第3章NaturalSpeech 3 · 因子化扩散
点击放大 ⤢
第3章E2 TTS · 填充符流匹配 TTS
点击放大 ⤢
第3章F5-TTS · 流匹配零样本 TTS
点击放大 ⤢
第3章ZipVoice · 轻量快速流匹配 TTS
点击放大 ⤢
第4章MaskGCT · 两阶段掩码生成 TTS
点击放大 ⤢
第4章DiTAR · patch 级连续自回归
点击放大 ⤢
第4章CLEAR · 连续隐变量低延迟 AR
点击放大 ⤢
第4章MELA-TTS · 连续 mel 自回归+表示对齐
点击放大 ⤢
第4章VoxCPM · 半离散骨架+残差的无分词器 TTS
点击放大 ⤢
第5章Seed-TTS · 与真人难分的 TTS 家族
点击放大 ⤢
第5章CosyVoice · 监督语义 token 的 TTS
点击放大 ⤢
第5章FireRedTTS · 数据到应用的 TTS 基座
点击放大 ⤢
第5章CosyVoice 2 · 流式离线一体的 LLM TTS
点击放大 ⤢
第5章FireRedTTS-1S · 双路流式基础 TTS
点击放大 ⤢
第5章MiniMax-Speech · 无转写零样本克隆
点击放大 ⤢
第5章CosyVoice 3 · 走向真实场景的扩容 TTS
点击放大 ⤢
第5章IndexTTS2 · 时长可控的情感 AR TTS
点击放大 ⤢
第5章IndexTTS 2.5 · 多语种提速
点击放大 ⤢
第5章Voxtral TTS · AR+流匹配
点击放大 ⤢
第5章Qwen-Audio-3.0-TTS · 五阶段生产级
点击放大 ⤢
第6章XTTS · 16 语种开源零样本 TTS
点击放大 ⤢
第6章Takin · 有声书零样本语音家族
点击放大 ⤢
第6章VoiceCraft-X · 编辑合成一体
点击放大 ⤢
第6章Qwen3-TTS · 双轨流式多语种
点击放大 ⤢
第6章Fish Audio S2 · 指令可控
点击放大 ⤢
第6章MOSS-TTS · 极简配方的 AR 基座
点击放大 ⤢
第6章T5Gemma-TTS · 时长可控编解码
点击放大 ⤢
第7章OmniVoice · 600+语种掩码扩散
点击放大 ⤢
第7章UniVoice · 说话唱歌统一流匹配
点击放大 ⤢
第7章VoxCPM2 · 层级连续 latent 基座
点击放大 ⤢
第7章dots.tts · 连续自回归流匹配
点击放大 ⤢
第7章Luna-TTS · 掩码扩散 TTS 家族
点击放大 ⤢
第8章IPA 跨语种 TTS(Zhang 2021) · 音色泄露
点击放大 ⤢
第8章YourTTS · 零样本多语种 TTS
点击放大 ⤢
第8章Vevo · 自监督解耦音色与风格
点击放大 ⤢
第8章离散 token 口音生成(Zhong 2026) · 评测再思考
点击放大 ⤢
第8章CodecMOS-Accent · 口音基准
点击放大 ⤢
第8章X-Voice · 免文字稿 30 语种克隆
点击放大 ⤢
第8章BlueMagpie-TTS · 台湾腔混说
点击放大 ⤢
第8章Confucius4-TTS · 跨语种克隆
点击放大 ⤢
第8章短语级 LCG(Lee 2026) · 零训练口音控制
点击放大 ⤢
第9章InstructTTS · 自然语言风格提示
点击放大 ⤢
第9章PromptTTS 2 · 文字描述生成声音
点击放大 ⤢
第9章EmoVoice · 自由描述控制情感
点击放大 ⤢
第9章Step-Audio-EditX · 大间隔编辑
点击放大 ⤢
第9章OV-InstructTTS · 先推理再合成
点击放大 ⤢
第9章Poly-InstructTTS · 属性思考
点击放大 ⤢
第10章ZipVoice-Dialog · 流匹配对话
点击放大 ⤢
第10章VibeVoice · 90分钟多人播客
点击放大 ⤢
第10章SoulX-Podcast · 方言播客合成
点击放大 ⤢
第10章MOSS-TTSD · 60分钟多人对话合成
点击放大 ⤢
第11章LM-TTS 偏好对齐(Tian 2024) · DPO 实证研究
点击放大 ⤢
第11章DMOSpeech · 蒸馏扩散直接优化指标
点击放大 ⤢
第11章GLASS · GRPO 训练风格 LoRA
点击放大 ⤢
第11章FlowTTS-GRPO · 流匹配强化学习
点击放大 ⤢
第11章Faster IndexTTS-2 · 流式加速
点击放大 ⤢
第11章主观奖励 RL(Park 2026) · 预测器何时对齐人耳
点击放大 ⤢
第11章Listen-Critique-Refine(Yu 2026) · 语音大模型自我批注精修
点击放大 ⤢
第12章LibriTTS · 24kHz多说话人语料
点击放大 ⤢
第12章WenetSpeech4TTS · 中文语料
点击放大 ⤢
第12章Emilia · 野外多语种语音数据
点击放大 ⤢
第12章EmergentTTS-Eval · 评测集
点击放大 ⤢
第12章WenetSpeech-Yue · 粤语语料
点击放大 ⤢
第12章MINT-Bench · 指令 TTS 基准
点击放大 ⤢
第12章VoiceMOS 2026 · 评分预测赛
点击放大 ⤢