AI视频可控性里程碑:Runway Gen-2上线「多重运动笔刷」大量实战案例:一键可让五个物体以不同形式运动
今年,2024年,真的是妥妥的AI视频争霸赛了。
当地时间1月18日,Runway上线了它的新功能:多重运动笔刷,这个功能可以单独控制最多五个笔刷选定的区域。
这个功能乍看起来仿佛平平无奇,似乎只是针对之前的运动笔刷做了个升级。但是经常玩AI视频的童鞋其实都知道,这解决了一个超级大痛点!
大家都知道,几乎等同于AI绘画里的ControlNet!之前的运动笔刷虽然好,但是大家都知道,真实的场景是不会只有一个运动方向的,这样做出来的视频僵硬且假。但是运动笔刷是基于图片生成视频的,无法针对生成的视频再次进行局部运动调整。这次的更新解决了很大的一部分需求。
有哪些玩法呢?我挖掘了一下,大概有如下几种:
我们先来看一下他们的官方宣传视频:
在这个新的操作界面五个笔刷用五种不同的颜色表示,每个笔刷都可以单独调整运动的方向和性质。在定向运动里我发现还有个小功能之前没有的,就是加了个环境噪音,应该就是添加一些随机的运动。
多重运动笔刷应该怎么用?
我找了下面这些实际案例。
有人通过分别控制物体的运动方向来实现更加逼真的子弹时间。
通过控制几股不同的水流方向,来实现逼真的溺水效果。
控制背景的区域运动来实现镜头景深空间效果。
甚至可以通过分别控制面部的运动方向来实现一些表情动画。
这个真的太棒了,在此之前有人借助ComfyUI+AnimateDiff实现PromptTravel(人物头部表情控制微调模型)来控制人物表情动作,但是效果远没有这个好。
不仅可以控制面部运动,还可以控制肢体运动。
让一只快乐的草原小狗动起来的动画。
当人物大于等于两个的时候,就可以摁头Kiss啦。
来欣赏这位作者的作品:
当有多个动物的头像需要运动的时候,可以营造出轻松热闹的场景。
相信未来还会有诸多更牛的玩法有待解锁,欢迎大家在评论区指出。
近期文章
更多