爆杀原版?基于Bert-VITS2的原神+崩铁全角色文本转语音实现

合集 · 声优失业计划 (8)

  1. 2:42
    【AI纳西妲】翻唱·MoonHalo
  2. 1:11
    【一次失败的实验】基于emo-vits的情感控制原神+崩三全角色TTS
  3. 3:04
    【Diffusion·AI大模型测试】纳西妲,荧,妮露,派蒙·勾指起誓
  4. 1:33
    【AI神里绫华/DDSP/浅扩散技术验证】星间旅行
  5. 4:07
    【爆杀原版?】基于Bert-VITS2的原神全角色高质量文本转语音实现
  6. 6:47
    Bert-VITS2年终总结&TTS前景展望:大模型才是未来?
  7. 4:21
    【不严谨】一句话复刻?Bert-VITS2极限数据量shot测试:可能真可以
  8. 5:34
    大模型,他来了:基于Fish-Speech的原神/星铁/BA全角色全语言文本转语音系统
Description
Bert实现@Rcell  
数据集@红血球AE3803  
本次我们在四张A100上训练了5天左右,迭代800k步。
感谢国家超级计算广州中心提供的算力支持。 
仓库地址:https://github.com/Stardust-minus/Bert-VITS2
同时这里已经裁切了一份Bert-VITS2的底模,仅可用于训练,无法推理。https://openi.pcl.ac.cn/Stardust_minus/Bert-VITS2/modelmanage/model_readme_tmpl?name=Bert-VITS2%E4%B8%AD%E6%97%A5%E5%BA%95%E6%A8%A1
推理已统一为此地址:https://fish.audio

Comments

语核 2023-09-05

效果简直是震撼式的好,远超之前听过的一些原神语音水平,很多场景完全听不出来是合成音了!!真的好厉害[星星眼][星星眼]能做到拿这个训练一个咱老板的声音模型吗,他说话声音蛮好听的,不知道需要什么材料

♥ 420 ↩ 24

AlexRainCUC 2023-08-27

有个困惑,这种免费开放使用的是你们的劳动成果,那米哈游和声优的版权是否有问题呢

♥ 301 ↩ 28

bili_26430274840 2023-08-25

过来焊接到大语言模型上[吃瓜]

♥ 301 ↩ 12

ElioW-AI贴身秘书开发中 2023-08-26

vits系的一个大问题就是需要很多训练音频,即使是微调也一样。 参考极客湾,只有派蒙的语音量够大,可以提供较好的效果。 RVC的强处就是微调只需要2分钟以内的音频,效果就很好了,不过要搭配azure tts搭建一个管道使用。

♥ 236 ↩ 14

Just_a_Passer_By 2023-08-25

语音转语音可能更自然[doge]还有多音字等怎么解决?

♥ 155 ↩ 8

虫小哥ChongXG 2023-08-29

米哈游什么时候能官方加入这种功能,一些非主线任务和活动就能有语音听了 [大哭]

♥ 120 ↩ 7

唯独对你动了情 2023-08-25

感觉文本转语音还是解决不了停顿问题,倒不是不像,就是不够自然。

♥ 104 ↩ 6

绀野静 2023-08-25

这个系列还在更啊!up主已经养活了多少dy的up主

♥ 92

陈语馨whisper 2023-08-26

能接入阅读吗[tv_难过]我想听神里给我念书

♥ 64 ↩ 30

蓝白bw 2023-08-26

可以问问大概什么时候能加入日语bert和日语cleaner支持吗

♥ 54 ↩ 2

日均摸鱼二十五小时 2023-09-12

牛逼,试了下让影念八重霞的台词(早就想这么干了)。念平淡或者快乐的台词不错,念激昂的台词效果就极速下降了。比如我让迪希雅读蔚的“先打一拳,打的时候再把问题问遍”,不管怎么调节参数,都不会得到很好的效果。我想这可能是一个可以改进的方向。 希望up这个项目可以长久维护下去,也希望各位不要浪费算力资源,细水长流[tv_点赞]

♥ 38 ↩ 3

在抖动的小电视 2023-08-27

强啊,效果很好,而且合成速度也很快[打call][打call] 不过就是这个前端有点绷不住,滑块好像会把数据反馈到上一次修改的组件上,比如先拖语速是正常的、再拖感情滑块发现语速变了,就很难知道自己请求的语音是什么参数,不知道我这是个例还是确实有这个bug。有时间的话改一下呗[tv_doge]

♥ 24 ↩ 5

弃天帝大爷 2023-09-16

兄弟们把我顶上去,让减菩萨给们出一期0基础安装教学 万能的:减 (菩萨)up主,我们都是一群小白,零基础,不会看代码,我代表广大网友,在这跪求:减 (菩萨),给我们出一期0基础安装 ,小白到入门。我愿意带各大网友集体膜拜大佬,在这跪求up主大佬,可怜可怜我们这群,小白人群。 如果能出秋叶那种整合包,一键安装更好。

♥ 21

寒影说 2023-09-07

有两个小问题,一是本地训练完的模型,如何转换长语音,比如数千字的那种,现在字符长了就报错;而是原神体验页面之前说支持750个字,但实际上300个字都不支持(就是文本长度超过300汉字点击生成就无效,应该也是报错了)

♥ 21 ↩ 4

桜のNya 2023-08-25

她还是这么喜欢凌华,我哭死([崩坏3_吃咸鱼]

♥ 19 ↩ 5

Hope麻匪 2023-09-23

[辣眼睛]我这AMD……唉算了

♥ 17 ↩ 3

韩元义 2023-08-25

窝巢 我发现人物会根据输入的台词来判断这句话该倾向用哪种语气 应该不是我的错觉吧?

♥ 16 ↩ 2

烟绯讲刑法 2023-08-25

减佬辛苦了[星星眼] 马上去给佬充电[打call][打call]

♥ 14 ↩ 2

伯少霆 2023-09-12

所以说可以直接做成外挂软件来给支线任务配音嘛[脱单doge]

♥ 13 ↩ 1