【全流程】DiffSinger自制虚拟歌姬教程扩展版

Parts

Description

利用OpenVPI开源团队改进的DiffSinger使用自制、有授权以及开源数据制作AI歌姬！
涵盖背景简介、数据准备、AI训练、演唱调教、AI伦理方面的讨论。
=======================================================
浙江大学DiffSinger项目：https://github.com/MoonInTheRiver/DiffSinger
OpenVPI DiffSinger项目：https://github.com/openvpi/DiffSinger
OpenVPI核心成员传送门：（包括但不限于）@孙飒_TS @YQ之神 @yxlllc 等
OpenVPI DiffSinger原始教程：https://www.yuque.com/openvpi/tutorial
OpenVPI DiffSinger 交流群：907879266
OpenSVIP工程转换器项目：https://openvpi.github.io
OpenVPI DiffSinger社区声码器企划：https://openvpi.github.io/vocoders/
OpenCPOP开源数据集：https://wenet.org.cn/opencpop/download/
M4Singer开源数据集：https://github.com/M4Singer/M4Singer
OpenAI Whisper： https://github.com/openai/whisper
OpenUTAU DiffSingerPack：https://github.com/xunmengshe/OpenUtau/releases
OpenUTAU 交流群：485658015
@Well404 的切分标注工具：https://github.com/Well2333/VoiceS
@冷月2333 音频预处理：https://github.com/fishaudio/audio-preprocess
@冷月2333 声码器增强：https://github.com/fishaudio/fish-diffusion

Comments

橙味比巴卜 2023-03-13

如果有机会把我自己喂进去试试[吃瓜]

♥ 104 ↩ 5

一点小小的AI震撼 2023-03-15

能制作歌词以及和歌词配套的音乐midi，但是主要难点在于拿不到歌手的midi，也不会写，f0就更不懂了[doge]

♥ 52 ↩ 15

叶靖云_ 2023-04-21

感谢lz分享~我主要是需要学习怎么训练的技术部分，至于录音部分，因为我本身就是个混音师，想要小小补充一下关于录音素材准备的部分，我不太同意推荐女生用电容男声用动圈这样的说法。声压通常来说常见电容麦可以承受的声压是104，除非你是打鼓和极端嗓，否则男女正常唱歌一般都不会超过的。你听陈奕迅唱的u87吗？这是他的御用麦克风。真正决定你应该用电容还是动圈的应该是声学环境和唱功。电容可以录进去更多的细节，低频和超高频。但是如果环境不好，唱功不好，就会录进去更多杂音和一些唱功问题【例如卡痰、口水、喉咙摩擦……】，动圈缺乏细节但是声音干净，一般可能中低频会比较多。没有声学装修的家庭录音闭着眼睛选动圈。用电容麦记得区分有没有自带供电，你推荐的blueyeti就是不需要声卡的usb麦克风~以上

♥ 50 ↩ 3