首页  >  资讯  >  文章
2024-04-28 10:49

阿里神级AI模型EMO上线通义APP:支持一张图生成人物表情神态AI音乐MV,五音不全一键速成“唱跳RAP”

??AI小姐姐唱陶喆的《Melody》

以上AI生成视频,经由一张人像图片与音乐合成,就能生成一则绘声绘色的AI视频MV。

AI在端掉人类网络主播饭碗的道路上高歌猛进!

日前,阿里通义实验室自研的人像视频生成模型EMO上线通义千问APP,人人可玩,免费对外开放。

图片

图片

上传一张图就能掌握“唱跳RAP”的EMO模型怎么玩?

在通义千问APP内,找到「全民舞台」-「全民唱演」,就可以免费体验这款新的大模型产品。

不信你点开看??,让甄嬛唱歌?也是信手拈来:

用户只需简单三步操作:

选择喜欢的模版、上传一张肖像照片、点击生成视频。就可以实现让照片中人物开口唱任意歌曲的神奇效果。

目前因为体验的用户过多,早期生成一则影片需要20分钟左右,建议可以选择凌晨等较少人的时段生成。

图片

图片

EMO模型是阿里通义实验室精心研发的AI模型,其背后的肖像说话技术正是当前AIGC领域的热门话题。

与传统的“数字人说话”技术相比,阿里EMO模型采用了创新的「弱控制」设计,无需对人脸、人头或身体部分进行繁琐的3D建模,即可轻松驱动肖像开口说话。不仅大大降低了AI视频生成的成本,还显著提升了视频的质量。

图片

其主要的创新在于,阿里EMO模型具备强大的学习能力,能够编译人类脸部情绪的能力。

与其他的视频模型相比,阿里EMO可以将歌曲的韵律与人物表情、嘴型完美匹配,甚至还能赋予丰富的人物语气特征和情绪色彩,细腻反映在人物的脸部微表情上,让AI数字人的视频惟妙惟肖,真假难辨!

通义千问APP首批上线了多达80款EMO模板,涵盖了热门歌曲、网络热梗等多种内容。该模型目前仍在公测阶段,暂不支持用户自定义上传音频。

图片

EVA曾经在早前2月的时候,介绍过这款EMO模型,论文介绍可查看下方地址。??

?往期回顾:

自从阿里AI团队发布相关论文以来,EMO模型便受到了广泛关注。据阿里方面介绍,目前通义实验室目前已接到大量企业客户问询这款视频生成模型,未来有望在AI数字人生成、线上教育、影视制作、电商直播等领域发挥更大的价值。

5
查看相关话题: #阿里 #AI视频 #AI音乐

相关文章