好莱坞的未来不是向通用生成式AI模型输入提示词
生成式AI在电影制作中的潜力被广泛讨论,但至今未见真正值得付费观看的作品。今年翠贝卡电影节展示的实验性项目表明,如果工作室能像谷歌DeepMind与皮克斯老将合作那样,利用定制模型而非通用模型,AI可能成为艺术家的得力助手。电影《亲爱的楼上邻居》通过定制Veo和Imagen模型,结合传统动画软件,展示了AI辅助创作的可能。相比之下,使用通用AI的电影仍显粗糙。文章指出,未来更可能是AI公司与工作室合作开发专用模型,而非简单输入提示词。
尽管关于生成式AI将彻底改变电影制作的呼声不绝于耳,但迄今为止,尚未有哪部作品能真正让人感觉值得付费观看。大多数AI公司的视频模型仍然只能生成短暂且视觉不一致的片段。好莱坞一些最重要的AI合作项目突然消失,使得制片厂似乎无法依赖硅谷的新技术。目前,大型制片厂主要能用生成式AI制作的只有简短的视频垃圾内容。但这种情况可能会改变,如果制片厂能借鉴今年翠贝卡电影节上展示的一些实验性项目。
虽然生成式AI似乎不太可能独立创作出引人入胜的长片,但翠贝卡电影节上有多部影片展示了人类艺术家如何利用这项技术打造出有吸引力的作品。翠贝卡展映的AI电影并非都像OpenAI和xAI充斥互联网的视频垃圾那样糟糕,但有些项目恰恰说明了为何生成内容往往比人工艺术显得缺乏生命力。例如,Illuminai Studios的动画短片《Roar》更像是一段令人困惑的AI生成剪辑集锦,而非连贯的电影。而Asteria Film Co.的《ChikaBOOM!》也缺少快速奇幻片所需的视觉和音效打磨。
《Roar》和《ChikaBOOM!》的整体粗糙感似乎反映了其AI制作流程中的固有技术限制。但其他影片,如谷歌DeepMind的《亲爱的楼上邻居》和OpenAI的《Mauvais Soleil》,则展示了当AI被更巧妙地部署时,电影制作人如何避免这些挑战。
《亲爱的楼上邻居》由皮克斯资深艺术家Connie Qin He执导,与谷歌DeepMind的研究人员合作,讲述了一位精疲力竭的年轻女子试图入睡的故事。为了赋予这个世界独特的风格,He邀请了皮克斯制作设计师Yingzong Xin,他用丙烯颜料在纸上和Photoshop中绘制概念艺术。这些插画的表现主义美学是影片奇幻故事的核心,但也给DeepMind的研究人员带来了独特挑战。大多数AI视频生成模型难以将这种绘画风格转化为视觉上一致的镜头。但DeepMind的工程师开发了定制版本的Veo和Imagen,专门设计给《亲爱的楼上邻居》的艺术家们精细调整输出。
由于定制模型基于Xin的概念艺术进行训练,它们能够一致地生成了符合He愿景的镜头。这些文本到视频模型擅长再现某些风格细节,比如物体相互作用时声音的可视化。但为了真正构建出能讲述连贯故事的场景,短片创作团队不得不采用更传统的方式。通过使用Autodesk Maya创建粗略动画,制作团队确保了场景按预期展开。将这些粗略动画输入Veo后,艺术家们能创造出视觉上更精致的场景,并利用Veo和Imagen生成的额外风格化资产进一步增强。
在翠贝卡的所有影片中,《亲爱的楼上邻居》更像是一个案例研究,展示了生成式AI如何作为定制工具协助艺术家发展想法。整个制作流程依赖于人工创作的艺术品和人们做出细微创意决策,这些决策是文本到视频生成器无法独立完成的。值得注意的是,如果使用通用版本的谷歌模型,《亲爱的楼上邻居》的视觉冲击力将大打折扣。这些模型针对这部短片表现良好,但这也合乎情理,因为该项目本身就是谷歌技术的广告。
《亲爱的楼上邻居》比OpenAI在此次电影节上带来的影片更令人愉悦。Alice Gu的半自传体剧情片《Smoked》使用Sora重现了帕利塞兹大火,而Youssef Michraf的《Mauvais Soleil》则包含大量由OpenAI创意工具生成的光写实场景。观看这两部影片时,可以看到各自的电影制作人如何绕开生成式AI的一些典型限制。《Smoked》大火场景中的广角镜头略显卡通,但使用类似Volume设置拍摄的特写镜头——一个女人和她的儿子试图驾车逃离大火——效果更好。《Mauvais Soleil》的大部分镜头只有几秒钟,唯一说话的是一旁叙述者,但这部关于人工智能扭曲男人生活的影片使得这些细节看起来像是故意的艺术选择。
OpenAI参加翠贝卡电影节有些出人意料,因为该公司最近决定完全关闭Sora。Sora的突然关闭导致OpenAI的长片《Critterz》未能在今年的戛纳电影节上首映。OpenAI似乎可能正在转向视频之外的应用,但生成式AI领域仍有其他参与者为电影制作人开发工具。
编剧兼导演Ash Koosha仅花费2000美元的计算成本,就独立制作了纪录片《Dreams of Violets》,聚焦过去一年席卷伊朗的全国抗议。他利用Kling AI、Claude、Gemini和Nano Banana,讲述了一群人在警察殴打平民的街道上被困巷中的虚构故事。项目仅用几周完成,尽管故事有力,但视觉上并无突破。
观看所有这些影片后,我鲜明地感觉到,未来制片厂不可能通过向生成式AI模型输入提示词来生产商业上可行的项目。那种内容可能不会消失,但绝非好莱坞巨头愿意冠名之作。更可能的是,像谷歌这样的大型AI公司与制片厂合作,为特定工作流程量身定制专用模型。而这些工作流程只有在具有明确创意愿景的人类艺术家指导下才能有效运作。