用通义万相刚发布的模型做了一个数字人视频,感觉效果还可以。今天还有点兴趣,趁着还可以领取积分,于是想再做一个对口型视频。
Wan2.2-S2V 发布!一张图片+一段音频,生成电影级数字人视频!
我分别在通义万相、即梦和剪映中制作了一段对口型视频。可灵的积分不够,暂且作罢。
AI工具
豆包:https://www.doubao.com/chat
通义万相:https://tongyi.aliyun.com/wanxiang/
即梦:https://jimeng.jianying.com
剪映PC版(SVIP)
制作步骤
为了节约积分,需要合理使用AI工具。
1、生成图片(用豆包)
打开豆包,生成你想要的人物。前2天看到一个视频,是谭晶唱的《九儿》,国家队实力派歌手。很多年前好像李雨儿也唱过,也好听。所以就想做这么一个片段。
要完全用数字人对口型来唱这首歌曲,而且还要达到真人效果,可能需要更好的工具和资金。
作为体验和学习,就用目前的一些工具也还是不错的。
我在豆包中输入:帮我设计一个唱《九儿》这首歌曲的人物,要求是在黄土高原上,穿着花棉袄,正面镜头,一个美丽的姑娘

接下来,可以根据你的需求对豆包提要求:



最后还是决定用第1张图片:

下载无水印图片
【AI学习】强推!豆包高清无水印批量下载插件,高效又实用!

2、准备音频文件
这一步需要准备好音频文件,可以到剪映中搜索剪映里面有的音乐,然后只导出音频文件。
需要注意的是,如果在通义万相中生成数字人,音频文件可以整个导出,因为在通义万相中可以自动裁剪。
但如果在可灵或是即梦中生成对口型数字人,时长需要控制在15s内,而且时长越长,需要的积分越多。
在即梦中,15s需要75个积分。
每天最低赠送的积分是66,那你得裁剪音频。大概12秒,60个积分就够用了。如果每天赠送100个积分,那你就可以一次性生成15s的视频。
3、生成对口型视频片段(通义万相+即梦+剪映)
1)通义万相
今天在通义万相中,第1次生成的效果不太好,生成了2次,第2次明显好些,方法在昨天的文章中提到过。

2)即梦
我把音频时长裁剪为13s,65个积分,刚好够生成一次。


3)剪映
剪映中,如果你是SVIP会员,积分也够,那可以生成长一点的对口型视频,如下图所示,拖动图片到轨道上,然后在画面中选择【AI对口型】,这里我选择的是用音频生成,32s。选择【灵动模式】。接下来就是耐心等待了。

等待生成:

生成完成后,画面被裁剪了。

你可以先导出生成的对口型视频,再进行下一步的视频编辑。这就需要学习一些剪映的编辑知识。
好了,就分享到此,感兴趣的小伙伴,可以动手试试。