
Runway AI公司近日推出了其最先进的AI视频生成模型——Gen-4,标志着电影制作工具迈入了一个全新的竞争阶段。这款新系统引入了跨多个镜头的角色和场景一致性功能,这是迄今为止大多数AI视频生成器所未能实现的能力。
一、Gen-4:AI视频生成的新里程碑
Runway AI,这家位于纽约的初创公司,由谷歌、英伟达和销售易等巨头支持,现正将其最新的“Gen-4”系统推向所有付费订阅者和企业客户。用户现在可以生成720p分辨率的五秒和十秒视频片段,并且未来几天内还将推出更多功能。
Gen-4的发布紧随OpenAI推出新图像生成功能之后,该功能同样实现了角色一致性。OpenAI的这项新特性迅速走红,数百万用户通过ChatGPT请求生成吉卜力工作室风格的图像,这一热潮甚至一度导致OpenAI的服务器崩溃。CEO Sam Altman在推特上幽默地表示:“我们的GPU都快烧熔了。”吉卜力风格的图像还引发了关于版权的激烈讨论,许多人质疑AI公司是否有权模仿独特的艺术风格。
如果角色一致性为OpenAI的图像功能带来了病毒式的增长,那么对于Runway的视频功能来说,这是否也可能成为现实?
二、角色与场景一致性:AI视频生成的关键突破
在多个镜头和角度之间保持相同的视觉元素,即角色和场景一致性,一直是AI视频生成的一大难题。当角色的面部在剪辑之间微妙变化或背景元素无缘无故消失时,观众会立即意识到内容的人工痕迹。
这一挑战源于这些模型的基本工作原理。以前的AI生成器将每一帧视为一个独立的创作任务,它们之间的联系非常松散。想象一下,让一个房间里的艺术家各自绘制电影的一帧,而不让他们看到前后的内容——结果必然是视觉上的不连贯。
Runway的Gen-4似乎通过创建一种对视觉元素的持久记忆来解决了这个问题。一旦角色、物体或环境被确定,系统就可以从不同的角度呈现它们,同时保持其核心属性。这不仅仅是一项技术改进,它是创造有趣视觉片段和讲述实际故事之间的区别。
三、Gen-4的功能展示与实际应用
Gen-4允许用户提供参考图像和描述所需的构图,AI将生成从不同角度保持一致的输出。公司声称该模型可以渲染出具有真实运动的视频,同时保持主体、物体和风格的一致性。
为了展示模型的能力,Runway发布了几部完全由Gen-4制作的短片。其中一部名为《纽约是个动物园》的短片,通过在新约电影场景中放置逼真的动物来展示模型的视觉效果。另一部名为《寻找》的短片则讲述了探险家寻找神秘花朵的故事,整个制作过程不到一周。
Gen-4建立在Runway之前工具的基础上。去年10月,该公司推出了Act-One功能,允许电影制作人从智能手机视频中捕捉面部表情并将其转移到AI生成的角色上。一个月后,Runway在其Gen-3 Alpha Turbo模型中添加了高级3D式相机控制,使用户可以在保持角色形态的同时缩放场景。
四、Runway的战略愿景与市场影响
Runway的战略愿景是构建一个完整的数字制作流水线,而不是仅仅关注创建更逼真的单个图像或片段。这种方法更像实际电影制作人的工作方式,将表演、覆盖和视觉连续性视为相互关联的挑战,而不是孤立的技术障碍。
Runway的财务影响也相当可观。据报道,该公司正在筹集新一轮融资,估值将达到40亿美元。随着新产品的推出和视频生成模型的API,Runway计划在今年实现3亿美元的年化收入。
Runway还与好莱坞建立了合作伙伴关系,与狮门影业达成协议,基于该工作室超过2万个标题的目录创建定制AI视频生成模型。此外,公司还设立了“Hundred Film Fund”,为使用AI制作电影的电影制作人提供高达100万美元的资金。
五、技术与创意的平衡:AI电影制作的未来
然而,这项技术也引发了电影行业专业人士的担忧。一项2024年由动画工会委托的研究发现,75%采用AI的电影制作公司已经减少、合并或消除了工作岗位。该研究预计,到2026年,超过10万个美国娱乐行业的工作岗位将受到生成式AI的影响。
Runway还面临法律审查,因为它使用的训练数据引发了争议。该公司目前正在应对一起由艺术家提起的诉讼,指控其未经许可使用受版权保护的作品来训练AI模型。Runway援引合理使用原则作为辩护,但法院尚未就此类版权法的应用做出最终裁决。
随着营销机构、教育内容创作者和企业传播团队探索如何利用Gen-4等工具简化视频制作,问题的焦点已经从技术能力转向了创意应用。对于电影制作人来说,这项技术既带来了机遇也带来了挑战。独立创作者获得了以前只有大型工作室才能使用的视觉效果能力,而传统的特效和动画专业人员则面临着不确定的未来。
原创文章,作者:王 浩然,如若转载,请注明出处:https://www.dian8dian.com/runway-gen4-ai-jie-jue-jue-se-yi-zhi-xing-tiao-zhan-rang-ai