字节推出新一代数字人,效果炸裂还可免费用
过去,数字人对口型往往存在一个问题,那就是看起来嘴型对上了,但总感觉这个声音不是他发出来的,因为无论数字人说话是不带任何表情的,以至于大家看对口型视频的时候,会有一种割裂感。现在,字节跳动和浙江大学的科研团队联合开发的基于音频驱动的视频扩散模型LOOPY完美解决了这个问题,Loopy可以让对口型视频中的角色在说话或唱歌时,还自动带上该语境下相应的语气,情绪和表情。它可以精准地"指挥"虚拟形象的每一个细微动作,例如叹息等非语音动作、情绪驱动的眉毛和眼睛运动以及自然的头部运动。目前,Loopy数字人技术已经整合到即梦的视频生成模块中。打开即梦,网址:https://jimeng.jianying.com/ai-tool/home/进入视频生成 这里上传我们实现准备好的人物正面照片或者视频,最好是人物面部较大的图片,这样效果会比较好。在对口型这里,我们可以输入文字,选择系统默认的角色对输入的文字进行朗读,也可以上传事先准备好的语音文件(既可以用自己事先准备的录音,也可以用FishAudio进行克隆(操作方法请参考《新一代免费语音克隆神器,不到一分钟克隆任何人的声音》)生成效果如非会员试读19%,加入社区后可阅读全文
页:
[1]