当前位置:首页 > 捷报比分 > 正文

重塑视界,Gen1如何定义AI生成视频的物理法则

摘要: 2010年,电影《盗梦空间》上映,里面有一句台词:“既然我们做梦,为什么不让梦更宏大?”在那个时代,建筑在银幕上翻转折叠,城市被...

2010年,电影《盗梦空间》上映,里面有一句台词:“既然我们做梦,为什么不让梦更宏大?”在那个时代,建筑在银幕上翻转折叠,城市被折叠成不可思议的几何形态,这一切都依赖于昂贵的CGI技术和庞大的渲染农场。

十三年后的2023年初,一个名为Gen1的视频生成模型悄然出现,它没有像后来的Sora那样引发全球性的海啸,甚至在技术迭代极快的AI圈里,很多后来者可能从未听过它的名字,但在生成式AI的演进史中,Gen1占据着一个极其特殊的墓碑——它是第一个试图教AI理解“物理世界”的物质性的模型。

要读懂Gen1,不能只看它生成的视频有多么逼真,而是要看它做了一件当时看来极其疯狂的事:它试图把《盗梦空间》的特效逻辑代码化。

深度伪造与结构大师

在Gen1诞生之前,AI视频生成的世界还处于“风格迁移”的蛮荒时代,你可以把一段骑马的视频变成梵高的油画风格,或者把一段访谈变成日本动漫,但这些生成的视频都有一个致命的缺陷:它们只是换了层皮,画面一旦复杂,物体的边缘就会像融化的冰淇淋一样乱淌。

Gen1的团队(Runway)看到了本质的痛点:现有的AI不懂“深度”,它不懂为什么杯子在桌子前面,而影子在杯子后面;它不懂当镜头向左平移时,近处的树木应该比远处的山脉移动得更快。

Gen1提出了一个革命性的架构,它不再是简单的“看图改图”,而是先从一个视频片段中提取出高精度的深度信息图语义分割图,这意味着,Gen1在接受指令生成画面之前,先强迫自己读懂了这个场景的物理结构:这是前景,这是背景,这是坚硬的边缘,这是柔软的布料。

奇迹发生了,用户输入一张纯色背景的、带有浓重塑料感的3D渲染图(比如一个粘土风格的骷髅),Gen1不仅能把这股“粘土风”转绘到真人视频上,还能完美保留原视频中的光影逻辑和遮挡关系,真人脸上的皱纹不再是融化的颜料,而是像真的有黏土在颧骨下方堆叠;背景里的虚化光斑,不再是糊成一团的色块,而是根据深度信息重新计算出的光学散景。

重塑视界,Gen1如何定义AI生成视频的物理法则

这在当时被业界称为 “结构保留的视频到视频生成” ,通俗点说,Gen1就是那个不仅会画皮,还能画骨的精密仪器。

视频创作的工具还是幻觉制造机?

Gen1的发布,在当时引发了一场隐晦的论战,生成式AI的这种能力,究竟是解放了电影工业,还是彻底污染了现实的最后水源?

Runway这家公司的基因决定了Gen1的走向,他们一直标榜自己是“艺术家的工具”,而非“社交媒体的滤镜”,所以在Gen1的演示视频里,我们看不到那种用来假冒名人讲话的政治惊悚画面,反而看到了极具实验性的视觉艺术:一个在普通走廊里行走的人,通过Gen1的实时演算,瞬间变成了行走在火星殖民地的宇航员,头盔反射着窗外红色的沙尘;或者是把一只慵懒的猫,变成了由金属废料拼凑成的机械猫,当猫转头时,齿轮的咬合运动严丝合缝。

Gen1最大的技术遗产,是证明了视频生成不需要凭空捏造每一帧。 它找到了一条捷径:利用现实世界已有的视频作为“运动骨架”,然后在这个骨架上重新长出血肉,这种思路大大降低了生成长视频的算力成本,也让连续性这一早期AI视频最大的敌人,第一次得到了有效抑制。

重塑视界,Gen1如何定义AI生成视频的物理法则

Gen1也是遗憾的,它生不逢时,受限于当时的算力和扩散模型的采样速度,生成一段4秒的视频往往需要几分钟的等待,它的清晰度在今天的标准看来也显得模糊,它像是一个精致的半成品,一个在黎明前夜行路的先驱。

不久后,Sora以“世界模拟器”的宏大叙事降维打击了整个行业,纯粹的生成不再需要依赖视频素材的结构指导,Gen1那种精巧的、依赖输入源的结构提取思路,迅速被“大力出奇迹”的Transformer架构掩盖了光芒。

在现实与生成之间,下了一个锚

今天我们再回看Gen1,它没有获得那种万众瞩目的商业成功,但它留下了一个极其珍贵的火种:在生成式AI狂飙突进、试图完全脱离现实束缚的今天,Gen1那种“基于物理结构去创造”的克制哲学,反而显得弥足珍贵。

它提醒我们,最震撼人心的特效,往往不是凭空画出的幻影,而是像《盗梦空间》里折叠的巴黎那样,虽然违反了常识,却遵循着严密的透视和光影法则。

Gen1是那个试图在疯狂扭曲的AI梦境里,努力维持物理法则的“初心者”,它虽然已经淡出舞台,但那种“先理解世界,再生成世界”的思维方式,至今仍活在每一代最新的视频模型中。

当我们未来能轻松制作出一部完全由AI生成的电影时,别忘了,第一个为我们铺平现实与虚拟之间那道铁轨的,可能就是这个名叫Gen1的、沉默的奠基者,它让视频生成不再是飘在空中的幻象,而是落在地上,有了重量,也有了影子。

发表评论