GenAI新世界

6月AI视频大爆发!Runway更新Gen-3模型:效果持平Sora,过两天就能用

Image
作者|丸丸柚贝

编辑|椰子

6月是炸了AI视频的老窝了吗?先是可灵发布可灵大模型,紧接着又是Luma正式上线了Dream Machine,昨天半夜AI视频届的老牌OG——Runway,更是突然重磅发布了Gen-3 Alpha 模型!龙卷风都没你们这么卷吧!


Runway此次更新距离上次Gen-2模型发布也已经过去了7个月,相比于 Gen-2,Gen-3 Alpha 在逼真度、一致性和运动等方面有了重大改进。👇

官方链接:https://runwayml.com/blog/introducing-gen-3-alpha/

网友们看完官方视频,更是用下面的梗图调侃:王者归来,这一次我要拿回属于我的一切!

Image

Runway Gen-3模型预计未来几天,就会正式开放使用。

Image

话不多说,赶紧来看一下新一代的Gen-3模型到底有多牛!

#Gen-3 Alpha

Image
Image
Image

人物高度一致

#

prompt:一名宇航员在石头建筑物之间行走。

prompt:一个中年悲伤的秃头男人突然变得快乐,因为一顶卷发假发和一副太阳镜突然落在他的头上。

人物始终保持高度一致,表情、动作以及人物情感的表达也都极为真实,头盔上的倒影和墨镜中反射的光影也是跟随人物动作产生变化,非常符合物理规律。

#Gen-3 Alpha

Image
Image
Image

超绝细节把控

#

prompt:一只蚂蚁从巢穴中爬出的特写镜头。镜头拉远,露出山丘后面的街区。
prompt:第一人称视角镜头以 10 倍速度快速飞向房屋的前门。

画面丰富、连贯且速度快,各种细节处理也都很稳定,这效果谁不说一声绝?

主要是因为Gen-3 Alpha 已接受过高度描述性、时间密集的字幕训练,所以能够实现富有想象力的过渡和场景中元素的精确关键帧。

#Gen-3 Alpha

Image
Image
Image

超稳光影变幻

#

prompt:一位女士站在音乐会舞台上唱歌,背景是明亮的灯光。

prompt:日本某城市高速行驶的火车窗户上,映出一位女性的微妙倒影。

#Gen-3 Alpha

Image
Image
Image

多种艺术风格

#

prompt:一个巨大的人形生物,由蓬松的蓝色棉花糖制成,踩踏地面,向天空咆哮,身后是湛蓝的天空。

prompt:一部日本动画电影,一位年轻女子站在船上,回望镜头。

支持多种风格生成,并且极具艺术审美。因为 Gen-3 Alpha 模型的训练是一支由研究科学家、工程师和艺术家组成的跨学科团队的合作成果。所以它能够诠释各种风格和电影术语。
Image
Image
Image

Gen-3Alpha不止如此

Image
Image
Image

除了以上特点之外,Gen-3 Alpha 还具备⬇️

  • 生成速度快,视频时间长:5s的视频生成时间45s,10s的视频生成时间90s,支 持一次生成10秒长度的视频;
  • 可控性高:支持现有的运动画笔、高级摄像机控制、导演模式等控制模式,并且即将推出的更精细控制结构、风格和动作的工具;
  • 行业定制:Runway与领先的娱乐和媒体组织合作,定制Gen-3模型,以实现风格化控制和一致性人物。

从2022年8月开始,Runway 与 Stability AI合作,共同推出了广受欢迎的 Stable Diffusion 模型,23年2月Runway正式发布了 Gen-1,并引入视频风格转绘功能。同年6月,发布了 Gen-2,标志着文本生成视频和图像生成视频的新时代,直至今日,Runway正式推出最新的Gen-3 模型,正式朝着构建通用世界模型迈出了一步。

可见Runway的每次更新都是里程碑式的突破,同时它的野心也在这次更新的Gen-3 Alpha模型中将逐渐显露出来,模型的能力不断强化、多种可调整的控制模式、以及支持行业化定制,都在不断的将自己模型推向更大的市场,甚至颠覆全球的影视行业。

Image