这可能是史上最强的AI自动打轴工具?!【FA-Kara】效果演示

Parts

  1. P1 · 熱異常
  2. P2 · MONSTER GIRLS
Description
项目地址 https://github.com/moriwx/FA-Kara
视频演示使用的音乐是:熱異常 - いよわ(ヰ世界情緒Cover)、MONSTER GIRLS - R3BIRTH

这么久以来还没有正式宣传FA-Kara,遂蹭个热度。本项目可以根据输入的歌声音频与歌词文本,输出.ass及.lrc等格式的KTV时轴文件。
【视频制作的工作流】获取音视频→使用UVR提取音频中的人声;获取歌词文本→用DeepSeek注音;人声与文本→输入FA-Kara(参数 -v 0.4 -tl 0.2)→输出的.lrc文件导入ニコカラメーカー3出力。全程未纠正注音、调整时轴。
如视频所示,FA-Kara输出的时轴并不够完美,但已优于现有Whisper等ASR模型。FA-Kara底层使用MMS_FA,它可以直接将罗马音与音频对齐,在其他模型算法的配合下可以更精确地匹配音拍级时轴、适配多语种场景。如果对输出的时轴不满意,你还可以使用其他卡拉OK制作工具进行微调。现在已有基于本项目开发的其他项目,也欢迎大家提反馈建议、做相关开发。