大模型,他来了:基于Fish-Speech的原神/星铁/BA全角色全语言文本转语音系统

合集 · 声优失业计划 (8)

  1. 2:42
    【AI纳西妲】翻唱·MoonHalo
  2. 1:11
    【一次失败的实验】基于emo-vits的情感控制原神+崩三全角色TTS
  3. 3:04
    【Diffusion·AI大模型测试】纳西妲,荧,妮露,派蒙·勾指起誓
  4. 1:33
    【AI神里绫华/DDSP/浅扩散技术验证】星间旅行
  5. 4:07
    【爆杀原版?】基于Bert-VITS2的原神全角色高质量文本转语音实现
  6. 6:47
    Bert-VITS2年终总结&TTS前景展望:大模型才是未来?
  7. 4:21
    【不严谨】一句话复刻?Bert-VITS2极限数据量shot测试:可能真可以
  8. 5:34
    大模型,他来了:基于Fish-Speech的原神/星铁/BA全角色全语言文本转语音系统
Description
推理已统一为此地址:https://fish.audio
项目开发&FishAudio leader: @冷月2333  
模型调参&实验&部署: 我
感谢Bilibili@午后抹茶酱_MatceCN   提供的子域名,感谢淮北艾阿网络科技有限公司提供的推理GPU。感谢辣子laziman协助适配了WebUI到Ver1.1.
历时近一年,Fish-Speech项目终于也是生了出来。
从现在这个水平上说,这个水平终于是能代替我配音了。基本上是开源SOTA的水平。
不要停下来口牙!

Comments

雀儿山的崔塔娜 2024-05-10

温馨提示:自己玩玩可以,请不要跳脸官方或者借此牟利,未经声优老师同意使用AI声音牟利是违法的哦[doge][doge][doge]

♥ 197 ↩ 10

派蒙科普 2024-05-10

优秀的文本转语音系统理应被更多人知道。[打call] 虽然我每次都在简介中@Stardust_减 (这是必要的操作),不过还是有很多人不知道这个AI语音系统。因为他们不看简介,也从来不会点进大佬的主页。[doge]

♥ 171 ↩ 4

土豆豆豆豆___ 2024-05-10

fishaudio全新力作!整合包+本地部署+云端部署教程已准备完成!

♥ 59 ↩ 5

白浦先锋 2024-05-16

你好up,我有一个小提问,能否把之前的Gradio放回来供选择,目前我fish-speech体验是语气、语音时长几乎是随机的状态,音色的体感也不是很好,想要生成一个能用的音频真的很难,希望能尽快优化吧,感谢您为二创提供的支持。

♥ 39 ↩ 1

AI全文总结 2024-05-10

课代表总结:👋好久不见,3月7号又来啦!今天我们聊聊基于Fish-Speech的文本转语音系统。模型大升级,走向更稳定、强大!🔍 现在可以在线试用原神、星铁、BA角色的全语音哦!🎉 但注意,1.1先行版的LM模型还在磨合期,可能会有说话断断续续或者静音的小状况。别急,后续会优化哦!🔧 操作很简单,选个角色,丢条引导音频就能合成语音。不满意?重试或换音频,总有惊喜!🔮 和B站比比看,感受下咱模型的进步吧!🌟 最后,二创使用记得标明来源,尊重版权,合法玩耍!🎈 我们下次见,享受技术的魔法吧!🔮 #文本转语音# #原神语音# #技术进步# --本消息由@AI视频总结 召唤成功【很棒的视频,快给up主点赞】

♥ 33 ↩ 1

写书的王紫 2024-05-19

感觉还是原来的更实用呀,能不能恢复一下原来那个bv2.firefly.matce.cn的链接呢?感谢!

♥ 19

路德维希・马西斯 2024-05-14

我感觉这个对我来说稍有点不好用

♥ 17

繁樱落米 2024-05-10

[doge]群主我来了

♥ 16 ↩ 3

韩元义 2024-05-10

感觉各种语气确实进化了 但是声音却变的都没那么像了 不知道为什么 但能想象到未来继续进化会更好的

♥ 15

能吃能睡小洛芸 2024-05-18

感觉还是原来的好用[大哭]

♥ 14

-转轴拨弦三两声- 2024-05-19

up这版的好难用啊,以前的还能放出来吗[大哭]

♥ 11

我就是喜欢病娇desu 2024-05-10

大佬,选择说话角色可以出一个搜索吗,每次找角色都要找好久...

♥ 8 ↩ 3

智能饭pro 2024-05-10

这效果,绝了尤其是三月七[打call]

♥ 8

AI视频小助理 2024-05-11

一、未来文本转语音发展的方向——大模型,以及介绍了一个在线推理的应用。同时,对BI在线推理和本模型做了对比。 00:19 - 大模型架构可能是未来文本转语音技术的主要发展方向 01:06 - 本次在线推理支持原神、星穹、铁道未定和碧蓝档案的全角色全语音合成 02:53 - 火影这种生物很神奇吧,他们的光芒会比星星更耀眼 二、一个母亲对网络游戏和动漫的担忧,认为这些会影响孩子的学习和未来。她呼吁群主出来解释,表达了对孩子的责任感和忧虑。 03:00 - 人们选择沉睡是因为害怕醒来,而这种生物则相反 03:32 - 群主害死了我的儿子,我要报警,你们没有前途 04:54 - 使用本在线推理制作二创时,请遵守当地法律和规定 --以上内容由模型基于视频内容生成,仅供参考

♥ 7 ↩ 1

路德维希・马西斯 2024-05-30

@Stardust_减 请求恢复bv2.firefly.matce.cn的这个在线推理网站

♥ 5

幸运快乐啾 2024-05-12

首先,语气确实更容易配了,但是声线吻合度与之前的相比感觉还差一点。还有就是,这个参数看不太明白诶,有的时候运行几次语音就崩了,只剩电音了,只能重新调参数,有的时候合成的语音会不是指定说话人的声线,是目前未完善的bug嘛,还是我参数不对的问题[蔚蓝档案表情包_疑问]

♥ 5 ↩ 1

unicorn nt 2024-05-12

请问有高级参数的调整指导和说明吗? 我自己是下来,只有短句,或者说一句一句的生成效果不错。 一段文字生成的语音(100-200字),听起来语速会很奇怪,或者说达不到想要的效果。 我猜测是我使用的参数不对,但确实也找不到哪里有指导这些参数该怎么调。

♥ 5

DLPhoenix-一颗黎 2024-05-10

好啊,这样子支线任务的体验感直接拉满 另外,我觉得这类模型针对漫画也应该有用

♥ 5

芙12312 2024-05-16

弄出来的都不是很像了[委屈]

♥ 4 ↩ 1

不明真相正在吃瓜 2024-05-16

感觉双roll的演绎有点不稳定啊,哪怕同一个引导音频出来的同一句生成,roll后都有明显不同。

♥ 4 ↩ 1