首页  >  资讯  >  文章
2024-01-19 17:50

AI视频可控性里程碑:Runway Gen-2上线「多重运动笔刷」大量实战案例:一键可让五个物体以不同形式运动

今年,2024年,真的是妥妥的AI视频争霸赛了。

当地时间1月18日,Runway上线了它的新功能:多重运动笔刷,这个功能可以单独控制最多五个笔刷选定的区域。

这个功能乍看起来仿佛平平无奇,似乎只是针对之前的运动笔刷做了个升级。但是经常玩AI视频的童鞋其实都知道,这解决了一个超级大痛点!

大家都知道,几乎等同于AI绘画里的ControlNet!之前的运动笔刷虽然好,但是大家都知道,真实的场景是不会只有一个运动方向的,这样做出来的视频僵硬且假。但是运动笔刷是基于图片生成视频的,无法针对生成的视频再次进行局部运动调整。这次的更新解决了很大的一部分需求。

有哪些玩法呢?我挖掘了一下,大概有如下几种:

  • 场景空间运镜
  • 人物表情控制
  • 人物动作控制
  • 多个人物控制

我们先来看一下他们的官方宣传视频:

在这个新的操作界面五个笔刷用五种不同的颜色表示,每个笔刷都可以单独调整运动的方向和性质。在定向运动里我发现还有个小功能之前没有的,就是加了个环境噪音,应该就是添加一些随机的运动。

图片

多重运动笔刷应该怎么用?

我找了下面这些实际案例。

场景空间运镜

有人通过分别控制物体的运动方向来实现更加逼真的子弹时间。

图片

图片

通过控制几股不同的水流方向,来实现逼真的溺水效果。

图片

控制背景的区域运动来实现镜头景深空间效果。

人物表情控制

甚至可以通过分别控制面部的运动方向来实现一些表情动画。

这个真的太棒了,在此之前有人借助ComfyUI+AnimateDiff实现PromptTravel(人物头部表情控制微调模型)来控制人物表情动作,但是效果远没有这个好。

人物动作控制

不仅可以控制面部运动,还可以控制肢体运动。

图片

让一只快乐的草原小狗动起来的动画。

多个人物控制

当人物大于等于两个的时候,就可以摁头Kiss啦。

来欣赏这位作者的作品:

当有多个动物的头像需要运动的时候,可以营造出轻松热闹的场景。

相信未来还会有诸多更牛的玩法有待解锁,欢迎大家在评论区指出。

9
查看相关话题: #Runway #AI视频 #AI视频生成 #Gen-2

相关文章