首页  >  资讯  >  文章
2023-11-29 13:27

爆火!AI视频生成工具Pika 1.0正式版发布:风格迁移、填充扩图、局部修改…AI新功能拉满,Runway压力山大

AI生成视频领域,又要发生大地震了。

被外界誉为“Runway Gen-2最强竞品”的Pika,暌违半年,官方忽然宣布放出大招——Pika 1.0正式发布!仅成立六个月,Pika就结束了测试版,正式发布了第一个产品,能够生成和编辑3D动画、动漫、卡通和电影。

Pika产品的诞生,是又一个从斯坦福退学进而成长为CEO的故事——创始人郭文景(Demi Guo)和联合创始人兼CTO Chenlin Meng,都是斯坦福大学AI Lab的博士生。

图片

机缘十分巧合,Pika Labs公司的创立竟还是竞品Runway提供的契机。

郭文景和同学曾在去年参加Runway的首届AI电影节,发现Runway和Adobe Photoshop的工具并不好用,自己创作的AI视频作品也并未获奖。今年四月,郭文景决定从斯坦福大学退学,开发更好用的AI视频工具,Pika由此诞生。

Pika 1.0正式版官方宣传片??

动画电影级质感!流畅的转场特效,Pika 1.0正式版效果炸裂!

真正引起全网轰动的是官方放出的效果视频:一句提示词——「elon musk in a space suit,3d animation」,马斯克瞬间进入二次元。

炸裂的是,3D动画版的马老板不但神形兼备,而且背景和动作都非常合理连贯,面部一致性也惊人的完美!

对比Gen-2和Pika Labs之前的视频效果,Pika 1.0彷佛就不是一个量级的产品。真正的每个人都能成为自己的视频导演。

图片

观众也许还没从“3D动画马斯克”惊艳的效果中回过神来,下一段视频中官方马上秀出了Pika 1.0生成其他风格的视频效果。

从普通的2D动画,到实拍感十足的电影场景,生成的视频呈现出了完美的光影,精致的细节,多样化的镜头控制。

图片

不知道传统电影人看到这里是什么心情。

图片

而真正引发全网欢呼的,是Pika Labs 1.0能够支持对于视频实时编辑和修改。这些连AI生图领域都才刚刚获得的能力,Pika Labs就能把它们扩展到AI视频中来。可见他们团队的技术和工程能力真是强得的令人发指。

类似于AI绘图工具Midjourney对于图片的「AI扩图」功能,Pika 1.0可以根据已有的素材直接扩展视频,生成不同高宽比的内容。

图片

更为夸张的是,Pika 1.0可以直接在视频中添加想要的素材。

只要用鼠标框一下需要调整的区域,输入提示词「一副酷酷的太阳镜」,马上就能给视频中的狒狒精确地带上墨镜,和原视频完美契合。

图片

而对于视频中人物的着装,也只要简单框一个范围,文字输入想要的效果,就能一键换装。

图片

这简直就是魔法!

支持三种模态的提示输入,让Pika Labs 1.0直接「对齐」了runway家族的几乎所有的功能。

文生视频,所有人物,动物的面部表情都非常完美,加上好莱坞动画级别的细节和光影效果,很难想象这个公司成立仅仅半年。

图片

图片配合提示词生成动画,图片为第一帧,文字控制动画变化效果和镜头。

图片

而根据用户提供的视频素材,配合提示词来制作不同风格的动画,更是手到擒来。

从像素风到到黑白幻灯片效果,演示出的5种风格转化,几乎涵盖了现有电影和动画大部分风格。

图片

总结一下,全新的模型Pika 1.0的新功能包括:

- 文本生成视频/图像生成视频:输入几行文本或上传图像,就可以通过AI创建简短、高质量的视频。

- 视频-视频不同风格转换:将现有视频转换为不同的风格,包括不同的角色和对象,同时保持视频的结构。

- 扩展(expand):扩展视频的画布或宽高比。将视频从TikTok 9:16竖屏尺寸更改为宽屏的16:9格式,AI模型将预测超出原始视频边界的内容。

- 更改:使用 AI 编辑视频内容,比如更换衣服、添加另一个角色、更改环境或添加道具。

- 扩展(Extend):使用 AI 扩展现有视频剪辑的长度。

- 全新Web界面:Pika 将在 https://pika.art 的Discord和Web(移动和桌面)上提供。

从现在Pika Labs 1.0能实现的功能来看,两位创始人说他们因为觉得Runway不好用才来创业,看来是一点都不夸张。

他们几乎是在6个月的时间里做出了Runway家族现有的所有功能,还针对Runway产品中现有的几大短板做了全面的升级。

精准的语义理解,能准确生成神形兼备的马斯克。

几乎完美的人物面部一致性,让动画中人物的脸部特征不会发生畸变。

准确的提示词编辑能力,能让用户自由添加和修改视频中的各种元素。

现在Pika 1.0开启了申请试用,网友看了视频之后发推感叹:排队申请Pika 1.0的人,现在是这样的!

图片

在获取Pika 1.0试用资格之前,和Midjourney一样,用户现在通过Discord获取Pika Labs的视频生成服务。

用户只需在聊天框输入文字,比如「一个机器人在日落沙滩上行走」,就能收到一个由AI生成的视频。

图片

周二,Pika把这一体验带到了网页上,面向更广泛的主流群体,让他们可以在编辑视频、自定义物体。

这里还有一段,Pika创意总监在几天前放出,用Pika的文本生成视频AI创作功能制作的3D动画预告片,效果萌到爆。

以及今年10月底,Pika为了迎接新版发布,提前制作的一段万圣节主题的动画短片Demo,效果也是非常赞!??

关于Pika在Discord上的使用方法,可以参考??下面这些文章:

8
查看相关话题: #Pika #AI视频 #AI视频生成

相关文章