用AI克隆明星数字人翻唱热门歌曲,爆款作品教程

 

现在小红书上用AI克隆“贾斯汀·比伯”翻唱中文歌曲,流量不错,单个视频点赞量居然高达1.1万,评论区互动量也很强,涨粉很猛。

之前就跟小伙伴分享过在小红书上做音乐赛道,非常容易接广告商单,所以咱完全也可以制作这类作品专门接广子,而且AI翻唱类的账号在B站和快手上也非常受热捧,将作品同步分发到B站和快手,也能赚创作者收益。

图片[1]源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程用AI克隆明星数字人翻唱热门歌曲,爆款作品教程源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程E源码下载-教程经验分享

图片[2]源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程用AI克隆明星数字人翻唱热门歌曲,爆款作品教程源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程E源码下载-教程经验分享

今天就手动制作一条,发现难度并不是很高,咱先来看看成品先。

是不是效果很炸裂,这套玩法,我们完全可以延展制作各种国语AI翻唱的短视频进行变现。本期就手把手给小伙伴演示操作流程,教大家复刻这类爆款作品。

详细制作环节分为5步

  • 收集贾斯汀·比伯帅气的图片
  • 通过AI图片无损放大工具提升清晰度
  • 用kits.ai进行声音克隆及音色转换
  • 用Hedra进行音频驱动对口型
  • 用剪映进行后期处理成片

(1)收集贾斯汀·比伯帅气的图片

大家可以在网上搜索找到贾斯汀·比伯的正脸图片,当然如果你觉得网上的图片均不是你喜欢的,那么你也可以用AI生成一个男模外形的图片后,进行AI换脸。

这一步我是直接选择下图贾斯汀·比伯专辑封面写真图片。

图片[3]源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程用AI克隆明星数字人翻唱热门歌曲,爆款作品教程源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程E源码下载-教程经验分享

(2)通过AI图像无损放大工具提升清晰度

AI图像无损放大工具之前给大家分享过蛮多,美图秀秀、佐糖这些国产工具都可以提高图像清晰度,但是免费次数有限,这里我推荐使用Image Upscaler with Tile Controlnet这款工具,目前完全免费,无损放大8K高清像素。

图片[4]源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程用AI克隆明星数字人翻唱热门歌曲,爆款作品教程源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程E源码下载-教程经验分享

(3)用kits.ai进行AI语音克隆转换

AI翻唱的工具之前也给小伙伴们整理过一期,没有看过的同学,可以点击回看一下,在抖音AI翻唱1300万播放量怎么做的?5款免费爆款语音训练AI

对比其他的AI翻唱工具,kits.ai操作会更适合新手,不仅能支持AI语音克隆,也能进行高制作的语音克隆转换,首先下载好歌曲进行人声分离,接着咱将人声部分上传到kits.ai进行克隆,再上传音频进行音色转换。

网址:https://www.kits.ai/

例如这是我在网上找的一首贾斯汀·比伯的歌曲,和一首《爱很简单》的歌曲。

 

 

 

用剪映工具将这两首歌曲进行人声分离处理后,保留人声部分。

 

 

接着打开kits.ai,点击“Voices”上传人声音频进行语音克隆。
图片[5]源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程用AI克隆明星数字人翻唱热门歌曲,爆款作品教程源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程E源码下载-教程经验分享
语音克隆完成后,点击Convert,上传《爱很简单》的人声音频。
图片[6]源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程用AI克隆明星数字人翻唱热门歌曲,爆款作品教程源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程E源码下载-教程经验分享
语音转换后,我们可以用剪映将人声和背景声合并,来听听音色转换后的效果,非常不错。
 
kits.ai目前AI翻唱功能是需要收费的,当然你也可以选择其他的翻唱工具进行制作。还有一种简单的方案,你可以直接搬运短视频平台上的AI翻唱好的音乐也是可以的,那边就直接可以省略这一步啦!
 
(4)用Hedra进行音频驱动对口型
生成画面效果比较逼真的图片开口说话AI工具,我们可以选择Hedra,比较免费,而且表情动态效果宛如真人。最长支持30秒,所以我们需要将音频裁切多个30秒,进行生成。
网址:https://www.hedra.com/
打开链接后,上传图片和音频,提交生成即可。(备注:Hedra会对名人脸进行检测,这里建议大家可以通过海艺AI上找个相似的人脸,进行换脸,即能保存比伯的外形,又能通过Hedra的人脸检测)。
图片[7]源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程用AI克隆明星数字人翻唱热门歌曲,爆款作品教程源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程E源码下载-教程经验分享
 
(5)用剪映进行后期处理成片
将生成好的多个视频导入进剪映中,点击智能识别字幕,调整字幕的位置,同时添加录音机动态元素,设置封面后,导出即可。
图片[8]源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程用AI克隆明星数字人翻唱热门歌曲,爆款作品教程源码分享|API接口|站长资源|分享各种资源的网站_网站源码_资源网_免费源码_资源下载_站长之家_实用软件_文章教程E源码下载-教程经验分享
OK,好了,今天的内容就到这里,感谢的小伙伴,赶紧去试试吧!我们也会陆续推出AI视频的更多教程和玩法!

 

© 版权声明
THE END
喜欢就支持一下吧
点赞13 分享
评论 抢沙发
头像
欢迎您留下宝贵的见解!
提交
头像

昵称

取消
昵称表情代码图片

    暂无评论内容