声码器Hifigan微调

[godspirit00]

用自己的数据微调了声学模型之后，搭配预训练的声码器合成的语音听起来不太好听，如何进行声码器Hifigan微调？

[yt605155624]

HIFIGAN 论文里面的微调，值得是用 A 数据集训练的 HIFIGAN 用于合成 A 的声学模型生成的 mel 的时候可能会有金属感，于是用声学模型生成的 mel 匹配 gt 的 wav 进行微调，并不是用自己的数据微调，建议看下论文
你想获得在自己数据上效果好的 HIFIGAN，建议分两步

1. 用自己的数据 finetune 我们预训练好的 HIFIGAN
2. 如果 1 产出的模型还有金属感，用上述论文的微调方式再微调一下

[MrInouye]

按照大佬的步骤跑了300k+的iter，但是合成的音频听起来依然有金属感，甚至个别细节还不如直接用原本的预训练的aishell3的hifigan模型合成的好，求问有可能是为什么？接下来要继续改进的话是该用声学模型产生的mel去finetune对么？ 谢谢大佬！

我也是想自己微调hifigan，看你说效果还不如预训练的，直接把我劝退了。。。

[godspirit00]

接下来要继续改进的话是该用声学模型产生的mel去finetune对么，对，这才是缓解金属感的方法

好的，我试试看，谢谢大佬

[wjddd]

接下来要继续改进的话是该用声学模型产生的mel去finetune对么，对，这才是缓解金属感的方法

好的，我试试看，谢谢大佬

请问您尝试之后效果如何？

[godspirit00]

接下来要继续改进的话是该用声学模型产生的mel去finetune对么，对，这才是缓解金属感的方法

好的，我试试看，谢谢大佬

请问您尝试之后效果如何？

生成的结果依然是听不懂……但是最近比较忙，所以没得空去再尝试了……

[godspirit00]

UPDATE: 在将声学模型和声码器多训练了一些iter之后，效果挺好的，感谢大佬