爆火!AI视频生成工具Pika 1.0正式版发布:风格迁移、填充扩图、局部修改…AI新功能拉满,Runway压力山大
AI生成视频领域,又要发生大地震了。
被外界誉为“Runway Gen-2最强竞品”的Pika,暌违半年,官方忽然宣布放出大招——Pika 1.0正式发布!仅成立六个月,Pika就结束了测试版,正式发布了第一个产品,能够生成和编辑3D动画、动漫、卡通和电影。
Pika产品的诞生,是又一个从斯坦福退学进而成长为CEO的故事——创始人郭文景(Demi Guo)和联合创始人兼CTO Chenlin Meng,都是斯坦福大学AI Lab的博士生。
机缘十分巧合,Pika Labs公司的创立竟还是竞品Runway提供的契机。
郭文景和同学曾在去年参加Runway的首届AI电影节,发现Runway和Adobe Photoshop的工具并不好用,自己创作的AI视频作品也并未获奖。今年四月,郭文景决定从斯坦福大学退学,开发更好用的AI视频工具,Pika由此诞生。
Pika 1.0正式版官方宣传片??
动画电影级质感!流畅的转场特效,Pika 1.0正式版效果炸裂!
真正引起全网轰动的是官方放出的效果视频:一句提示词——「elon musk in a space suit,3d animation」,马斯克瞬间进入二次元。
炸裂的是,3D动画版的马老板不但神形兼备,而且背景和动作都非常合理连贯,面部一致性也惊人的完美!
对比Gen-2和Pika Labs之前的视频效果,Pika 1.0彷佛就不是一个量级的产品。真正的每个人都能成为自己的视频导演。
观众也许还没从“3D动画马斯克”惊艳的效果中回过神来,下一段视频中官方马上秀出了Pika 1.0生成其他风格的视频效果。
从普通的2D动画,到实拍感十足的电影场景,生成的视频呈现出了完美的光影,精致的细节,多样化的镜头控制。
不知道传统电影人看到这里是什么心情。
而真正引发全网欢呼的,是Pika Labs 1.0能够支持对于视频实时编辑和修改。这些连AI生图领域都才刚刚获得的能力,Pika Labs就能把它们扩展到AI视频中来。可见他们团队的技术和工程能力真是强得的令人发指。
类似于AI绘图工具Midjourney对于图片的「AI扩图」功能,Pika 1.0可以根据已有的素材直接扩展视频,生成不同高宽比的内容。
更为夸张的是,Pika 1.0可以直接在视频中添加想要的素材。
只要用鼠标框一下需要调整的区域,输入提示词「一副酷酷的太阳镜」,马上就能给视频中的狒狒精确地带上墨镜,和原视频完美契合。
而对于视频中人物的着装,也只要简单框一个范围,文字输入想要的效果,就能一键换装。
这简直就是魔法!
支持三种模态的提示输入,让Pika Labs 1.0直接「对齐」了runway家族的几乎所有的功能。
文生视频,所有人物,动物的面部表情都非常完美,加上好莱坞动画级别的细节和光影效果,很难想象这个公司成立仅仅半年。
图片配合提示词生成动画,图片为第一帧,文字控制动画变化效果和镜头。
而根据用户提供的视频素材,配合提示词来制作不同风格的动画,更是手到擒来。
从像素风到到黑白幻灯片效果,演示出的5种风格转化,几乎涵盖了现有电影和动画大部分风格。
总结一下,全新的模型Pika 1.0的新功能包括:
- 文本生成视频/图像生成视频:输入几行文本或上传图像,就可以通过AI创建简短、高质量的视频。
- 视频-视频不同风格转换:将现有视频转换为不同的风格,包括不同的角色和对象,同时保持视频的结构。
- 扩展(expand):扩展视频的画布或宽高比。将视频从TikTok 9:16竖屏尺寸更改为宽屏的16:9格式,AI模型将预测超出原始视频边界的内容。
- 更改:使用 AI 编辑视频内容,比如更换衣服、添加另一个角色、更改环境或添加道具。
- 扩展(Extend):使用 AI 扩展现有视频剪辑的长度。
- 全新Web界面:Pika 将在 https://pika.art 的Discord和Web(移动和桌面)上提供。
从现在Pika Labs 1.0能实现的功能来看,两位创始人说他们因为觉得Runway不好用才来创业,看来是一点都不夸张。
他们几乎是在6个月的时间里做出了Runway家族现有的所有功能,还针对Runway产品中现有的几大短板做了全面的升级。
精准的语义理解,能准确生成神形兼备的马斯克。
几乎完美的人物面部一致性,让动画中人物的脸部特征不会发生畸变。
准确的提示词编辑能力,能让用户自由添加和修改视频中的各种元素。
现在Pika 1.0开启了申请试用,网友看了视频之后发推感叹:排队申请Pika 1.0的人,现在是这样的!
在获取Pika 1.0试用资格之前,和Midjourney一样,用户现在通过Discord获取Pika Labs的视频生成服务。
用户只需在聊天框输入文字,比如「一个机器人在日落沙滩上行走」,就能收到一个由AI生成的视频。
周二,Pika把这一体验带到了网页上,面向更广泛的主流群体,让他们可以在编辑视频、自定义物体。
这里还有一段,Pika创意总监在几天前放出,用Pika的文本生成视频AI创作功能制作的3D动画预告片,效果萌到爆。
以及今年10月底,Pika为了迎接新版发布,提前制作的一段万圣节主题的动画短片Demo,效果也是非常赞!??
关于Pika在Discord上的使用方法,可以参考??下面这些文章:
近期文章
更多