纯中文底模效果百尺竿头更进一步,同时首次引入了大模型,使用国产IDEA-CCNL/Erlangshen-MegatronBert-1.3B大模型作为Bert特征提取,基本上完全解决了发音的bad case,同时在情感表达方面有大幅提升,可以作为先前V1.0.1纯中文版本更好的替代。
wget -P bert/deberta-v2-large-japanese/ https://huggingface.co/ku-nlp/deberta-v2-large-japanese/resolve/main/pytorch_model.bin 下载底模文件 接着下载预训练模型的底模: #@title 下载底模文件!wget -P Data/ada/models/ https://huggingface.co/OedoSoldier/Bert-VITS2-2.3/resolve/main/DUR_0.pth ...
Bert vits2语音合成项目已经停止维护,因此这最后一版本代码有必要分享一个部署经验。 Bert vits2项目的底模模型主要是bert +vits,训练数据主要是原神角色语音。微调训练的时候主要是微调vits模型,冻结bert模型。不包含任何speaker encoder和emotional encoder。 bert模型负责产生文本编码向量Ht。vits模型负责合成语音 wav =...
wget -P bert/deberta-v2-large-japanese/ https://huggingface.co/ku-nlp/deberta-v2-large-japanese/resolve/main/pytorch_model.bin 下载底模文件 接着下载预训练模型的底模: #@title 下载底模文件 !wget -P Data/ada/models/ https://huggingface.co/OedoSoldier/Bert-VITS2-2.3/resolve/main/DUR_0.pth...
简介:Bert-vits2项目又更新了,更新了一个新的分支:中文特化,所谓中文特化,即针对中文音色的特殊优化版本,纯中文底模效果百尺竿头更进一步,同时首次引入了大模型,使用国产IDEA-CCNL/Erlangshen-MegatronBert-1.3B大模型作为Bert特征提取,基本上完全解决了发音的bad case,同时在情感表达方面有大幅提升,可以作为先前V1.0...
Bert-vits2项目又更新了,更新了一个新的分支:中文特化,所谓中文特化,即针对中文音色的特殊优化版本,纯中文底模效果百尺竿头更进一步,同时首次引入了大模型,使用国产IDEA-CCNL/Erlangshen-MegatronBert-1.3B大模型作为Bert特征提取,基本上完全解决了发音的bad case,同时在情感表达方面有大幅提升,可以作为先前V1.0.1纯...
数据集介绍 Bert-VITS2中日底模_0.0.1.zip是作者后发的底模,bert模型.zip解压后会看到bert后一串乱码,点进去后才是bert文件夹,直接替换源码中的bert文件夹就行了 文件列表 DUR_0.pth D_0.pth G_0.pth Bert-VITS2中日底模_0.0.1.zip bert模型.zip DUR_0.pth (6.36M) 下载关于...
注意这里的底模要放在角色的models目录中,同时注意底模版本是2.2。 上传音频素材和重采样 随后打开目录,在lilith目录右键新建文件夹raw,接着右键点击上传,将素材上传到云端: 同时也将转写文件esd.list右键上传到项目的lilith目录: ./Data/lilith/wavs/processed_0.wav|lilith|ZH|信仰,叫你们要否定心中的欲望。
模型:底模、日语bert、中文bert。(这三个模型链接在Bert-VITS2的release处有写,下载完成后放入指定的文件夹中,具体位置请参考视频,坑1:不要点击下载全部,要一个一个下载,否则可能出现下载完解压后模型无法加载的情况) 1.2、准备数据集参考红血球AE3803提供的数据集穹铁道1.3&原神4.1全角色中日英韩语音包/数据集(...
下载底模文件 接着下载预训练模型的底模: #@title 下载底模文件 !wget -P Data/ada/models/ https://huggingface.co/OedoSoldier/Bert-VITS2-2.3/resolve/main/DUR_0.pth !wget -P Data/ada/models/ https://huggingface.co/OedoSoldier/Bert-VITS2-2.3/resolve/main/D_0.pth !wget -P Data/ada/mo...