MaskGCT：AI语音合成新纪元的探险

在文本到语音（TTS）领域，MaskGCT（Masked Generative Codec Transformer）带来了革命性的创新。它是一个完全非自回归的TTS模型，不再依赖文本和语音的显式对齐信息，也不需要进行音素级的时长预测。简而言之，MaskGCT是一个两阶段模型：第一阶段从文本预测语义令牌，这些令牌来自于一个自监督学习（SSL）语音模型；第二阶段，模型根据这些语义令牌预测声学令牌。


MaskGCT遵循“掩码与预测”的学习范式，训练时预测被掩码的语义或声学令牌，推理时则并行生成指定长度的令牌。最令人兴奋的是，MaskGCT在100,000小时的自然语音数据集上进行训练，实验证明其在质量、相似性和可理解性方面超越了当前的零样本TTS技术。音频示例可以在演示页面体验。
————————————————


                            版权声明：本文为博主原创文章，遵循 CC 4.0 BY-NC-SA 版权协议，转载请附上原文出处链接和本声明。
                        
原文链接：https://blog.csdn.net/weixin_36829761/article/details/143700706