🎃 万圣节限时加赠:首月积分最高翻倍

立即领取

怎么让 AI 用我的声音唱歌?

克隆一次你的歌声,就能用它重新演唱现成的歌或全新的 AI 歌曲。步骤、设置和真实示例。

作者:RaoMusic
克隆我的歌声
在家录歌、让 AI 用自己的声音唱歌的歌手

简短回答: 想让 AI 用你的声音唱歌,先要克隆你的歌声:给 AI 声音模型 8–15 分钟你自己唱歌的录音,让它学会你的音色。然后把一首歌的人声过一遍这个模型,AI 就会用你的声音重新演唱,旋律和节奏通常会紧跟原唱。可以用现成的歌(也就是 AI 翻唱),也可以用 AI 新生成的歌。

这篇只讲「怎么用自己的声音唱一首歌」这个流程:步骤、关键设置、这项技术目前做不到什么,以及一组可以直接试听的前后对比。声音模型是怎么训练出来的,见我们的 RVC 模型指南;翻唱功能的更多选项,见 AI 翻唱生成器指南。

AI 真的能用我的声音唱歌吗?

能,但有一个重要限制。现在的歌声克隆(大多基于一种叫 RVC 的开源方法)复制的是你声音的音色:它的颜色、质感和特点。它不复制你的唱法。咬字、颤音、转音和换气,都来自你拿来转换的那段人声的原唱。

所以结果听起来像是 AI 用你的声音,唱别人的演绎。很多场景下这正是你要的:翻唱、做小样、学一首歌之前先听听自己唱是什么效果。如果连唱法也想是自己的,那还是得自己唱。

想了解背后的原理,上面那篇 RVC 指南详细讲了模型文件和训练过程。

开始前你需要准备什么

  • 8–15 分钟你自己唱歌的录音。 几首歌、几段都行,会合并在一起用。音域覆盖广(低、中、高音都有)比时长更重要。

  • 只能有一个人的声音。 录音里不要有合唱、和声或其他歌手。

  • 尽量干净。 伴奏会自动去除,但很重的混响、观众噪音或失真还是会混进模型。

  • 是你自己的声音,或你已获得授权的声音。 训练前需要确认。

安静房间里用手机录也可以。干声、离麦克风近的录音,比后期做得很满、混响很重的成品效果更好。

在家用电容麦克风录歌的歌手,笔记本上显示人声波形
一个安静的房间加一支近距离的麦克风,就足够录出好用的训练素材。

第 1 步:克隆你的歌声

在 RaoMusic 的 AI 声音克隆里:

  1. 给音色起名,加一张封面。

  2. 添加你的录音。 可以一次上传多个文件,也可以从歌库里选。训练前每段都能试听。

  3. 选训练质量。 标准(50 轮,150 积分)一般就够;高(100 轮,250 积分)和极致(150 轮,350 积分)更耗时,提升不大。

  4. 确认是你自己的声音,开始训练。 伴奏会被去除、静音会被剪掉,模型自动训练,大约 15–40 分钟。可以关掉页面。

去除伴奏后清晰歌声不足 3 分钟,或训练失败,积分会自动退还。训练完成后,会先用你的新音色唱一小段,让你听听像不像。

第 2 步:选你想唱的歌

有两种选择:

  • 现成的歌。 歌库里大多数歌都可以,包括你上传的,最长 10 分钟。这就是用你声音做的 AI 翻唱。

  • 全新的歌。 用 AI 歌曲生成器生成一首原创歌(可以用你自己写的歌词),下一步再把人声换成你的。不用录整首人声,也能得到一首听起来像你唱的原创歌。

尽量选音域和你录音接近的歌。用低沉温暖的声音训练出来的模型,唱女高音旋律很难自然。

第 3 步:用你的声音重新演唱

打开 AI 翻唱生成器,在「我的音色」里选中你的声音,添加歌曲,点生成。翻唱按音频时长每分钟 10 积分,通常几分钟出结果。

有三个设置值得了解:

设置作用什么时候调
音高三个预设:不变,或用「男声转女声」「女声转男声」把人声升高或降低一个八度原唱声区和你差很多时试一下;它没法完全解决超出你音域的旋律
音色强度输出往你训练好的音色靠多少结果还像原唱就调高;听到金属感杂音就调低
人声清晰度保留多少原唱的气声和辅音想要更干净、更「换过声」的效果就调低;咬字含糊就调高

默认设置就是不错的第一次尝试。一次只改一项,才能听出每个设置的作用。

AI 翻唱生成器示意图:选择音色、源歌曲、音高和音色强度设置
选中你的音色,添加歌曲,需要时再调音高或音色强度(示意图)。

听一个例子:克隆前后对比

我们用虚拟歌手 JUNO 约 15 分钟的歌克隆了她的声音,再让克隆音色唱一首她从没录过的歌。先听她的训练音频,再对比同一段副歌的原唱和克隆版:

JUNO 唱她自己的歌(训练音频)

《Hoax》原唱

《Hoax》用克隆的 JUNO 音色演唱

可以听到,翻唱保留了原唱的咬字和旋律,音色则往 JUNO 靠。你自己的声音也会是这种效果。这个例子里的歌手和歌曲都是我们用 AI 生成的,所以可以在这里分享;真人声音的效果会类似,但不会完全一样。

怎么用你的声音做一首原创歌

想要一首没人唱过的歌,就把两个工具结合起来:

  1. 写或生成歌词。 用你自己写的,或者先用 AI 歌词工具起个稿。

  2. 生成歌曲。 在 AI 歌曲生成器里选一个接近你的人声类型(比如你声音偏低就选男声),描述风格,点生成,挑一版旋律你喜欢的。

  3. 转换人声。 把这首歌放进翻唱生成器,用你的克隆音色转换。

旋律和唱法来自生成的歌手,音色来自你。想要最自然的效果,就要求一个你自己大概也能唱的音域和风格。

让效果更好的技巧

  • 音域要对得上。 大多数「听起来不像我」,都是因为歌比你的自然音域高太多或低太多。试试音高选项,或换个调。

  • 改训练素材,而不是改设置。 如果每次翻唱都发闷,多半是录音里混了伴奏、混响或别人的声音。用更干净的录音重新训练。

  • 原唱人声要干净。 效果很重、多层和声、说唱垫词多的歌,转换效果不如一条干净清楚的主唱。

  • 别指望唱法也变成你的。 你唱歌颤音很多而原唱没有,翻唱出来也不会有。

AI 声音克隆目前还做不到什么

  • 学会你的风格。 它改的是音色,不是咬字、唱腔或技巧。

  • 完美处理超出音域的歌。 训练素材里没有的极高或极低音,往往听起来很吃力。

  • 完美分离人声。 原曲里的和声可能会以你的声音或杂音的形式漏出来。

  • 代替正式发行的真人演唱。 正式发行时,很多歌手还是会自己录主唱,克隆音色更多用于做小样和尝试。

让 AI 用我的声音唱歌合法吗?

克隆你自己的声音风险很低,但仍要遵守各平台关于 AI 和合成人声的规则。未经许可使用别人的声音就不同了:可能涉及授权同意、声音权和平台规则问题,有些地方还专门针对声音克隆立了法,比如美国田纳西州的 ELVIS 法案。只克隆你自己的、或已获授权的声音。

歌曲本身是另一回事,有两层权利:词曲(旋律和歌词)属于词曲作者和出版方;用现成歌曲做的 AI 翻唱还用到了原录音里的伴奏,这属于那版录音的所有者。公开分享或发行这类翻唱,可能两方面都需要授权,平台也可能标记。我们的合法制作 AI 翻唱指南详细讲了各种做法。你自己生成的原创歌能避开大部分这些问题。

常见问题

能。用 8 到 15 分钟你自己唱歌的录音训练一个 AI 声音模型,再把一首歌的人声过一遍这个模型。AI 通常会跟着原来的旋律和节奏,把音色换成接近你的。

RaoMusic 要求上传合计 8 到 15 分钟,保证去除伴奏后至少还有 3 分钟清晰歌声。音域覆盖广比时长更重要。

训练大约 15 到 40 分钟,取决于你选的训练质量和上传的音频长度。之后每次翻唱一般几分钟。

能,这正是声音克隆的用处。从歌库里选一首歌,或生成一首新歌,在 AI 翻唱生成器里把人声换成你的声音。

不会。声音克隆复制的是你的音色,不是唱法。咬字、颤音和转音都来自你转换的那首歌的原唱。

能。先用 AI 歌曲生成器生成一首原创歌,再用你的克隆音色转换人声。训练音频只需要录一次。

不免费。训练一个声音模型按质量花 150 到 350 积分,每次翻唱每分钟 10 积分。训练失败会自动退还积分。

听你自己唱任意一首歌

在 RaoMusic 克隆一次你的歌声,之后就能用它重新演唱现成的歌或全新的歌。训练失败会退还积分。

克隆我的歌声