能生出整季影集的 AI 来了!GPT-4 不只帮写剧本,几秒就制作好一集《南方四贱客》

能生出整季影集的 AI 来了!GPT-4 不只帮写剧本,几秒就制作好一集《南方四贱客》

1997 年开播至今的动画影集《南方四贱客》3 月刚播出第 26 季,不过说到下面这集,你可能没有印象看过。

卡特曼有天从最近好莱坞抗议AI罢工事件得到启发,突发奇想想做个专案:名叫“Queepi”的网络Deepfake服务,可帮影视作品角色换脸,解决好莱坞没有新作品的危机。他找上Bizney公司,想请Bizney当天使投资人,却被发言人告知“除非你能找到另一个愿意投资你的人”。

卡特曼和小老弟Butters找上投资仲介商Andreessen,讨论后决定找几个演员谈谈肖像权合作。第一位是哈里逊福特,但福特拒绝,因已和某个非常知名的科技巨头签订类似合约。第二位是梅莉‧史翠普。史翠普先表明自己坚定站在罢工者这边,接着以AI会模糊现实和虚假界线、抢走演员饭碗为由拒绝卡特曼。但她也神秘兮兮说和某个科技巨头有约在先。

第三位是汤姆克鲁斯。汤姆克鲁斯说了卡特曼才知道,几位大牌演员共同签约对象就是伊隆‧马斯克!汤姆克鲁斯没有明确拒绝卡特曼,反而愿意当中间人介绍马斯克给卡特曼认识。马斯克正在筹划送一批知名演员上火星,美其名曰保护人类文化遗产,而汤姆克鲁斯在一边帮说好话,马斯克最后决定投资卡特曼这“改革娱乐产业”的专案。

结局是卡特曼开心跑去Bizney准备说服其加入,但得知老奸巨猾的马斯克根本没把他的专案放在心上,继续去忙移民火星计划了。这集标题名为“Queepi窘境”,看起来和《南方四贱客》其他集画面风格都差不多,但惊人的是编剧、导演、剪接和配音,都是AI做的。

金山新创Fable Simulation最近发表“Showrunner”AI技术,能用既有影视作品(IP)基础,产生使用者想要的作品。Fable Simulation成立于2018年,最早是Facebook(现Meta)旗下Oculus的部门,早期主要做VR电影专案,曾凭VR电影〈Henry〉拿下第一座艾美奖,后来又藉虚拟人Lucy主演的VR电影〈Wolves in the Walls〉再拿一座艾美奖。7月稍早虚拟人物Lucy还获皮博迪奖。

不过现在Fable Simulation部分精力全放在探索AI产生内容。

“Lucy的问题在没有过去,因她不是活人”,联合创办人暨执行长Edward Saatchi接受采访时说:“她是虚拟人,但她无法说‘我也有宠物,后来她死了,所以我知道那种感觉’这种话和真人连结。”使AI拥有自己的生活,这几乎成为Fable Simulation的出发点。

Showrunner便是Fable Simulation研究AI的成果发表会。除了开头提到的故事,Fable Simulation还用Showrunner产生几个剧情相关的《南方四贱客》故事。其一是Bizney公司创造种族歧视机器人猪伴侣,造成公关大恶梦。

能生出整季影集的 AI 来了!GPT-4 不只帮写剧本,几秒就制作好一集《南方四贱客》 AI与大数据 图2张

另一个故事是投资仲介Andreessen发现马斯克绑架好莱坞知名演员到火星和他一起生活,并从1990年代就开始复制他们的影视作品。从论文看,Showrunner使用SHOW-1模型,基础为OpenAI大语言模型GPT-4,图片自定义扩散模型和多智慧体类比等训练。如GPT-4主要影响类比智慧体(角色)并产生故事背景。

GPT-4训练资料库原本就有《南方四贱客》大部分影集,所以对每角色个性和语言风格都算了解,故这次无需客制。扩散模型方面,Fable Simulation从以往集数素材收集约1,200个人物和600张背景图片组成综合资料库,为模型学习风格的原材料。经过扩散模型训练,为每个新作品产生新角色和单独背景,为之后拼接先准备。

多智慧体类比是让角色智慧体真正“拥有自己生活”的关键,想像《西方极乐园》场景,角色等于可以相互训练,到用户这里,操作介面就非常简单。

能生出整季影集的 AI 来了!GPT-4 不只帮写剧本,几秒就制作好一集《南方四贱客》 AI与大数据 图3张

使用者只需进入搭载Showrunner AI技术的SHOW-1模型,于《南方四贱客》大地图选想当哪个角色,再选其他角色场景等,并输入一段提示句,稍等片刻就会产生故事。开头故事的提示是:

卡特曼听说美国演员工会正在罢工,孩子担心将来不会有新影视作品。卡特曼宣布商业创意:名叫Queepi的网络Deepfake服务。

干预程度也完全据使用者偏好而定。Fable Simulation称用户可用三种方式产生故事:一,SHOW-1自动创造,二是给一两句提示,三是加入细节,逐个场景编辑对话并重新产生。使用者甚至还能让自己当主角或放其他角色进去。

能生出整季影集的 AI 来了!GPT-4 不只帮写剧本,几秒就制作好一集《南方四贱客》 AI与大数据 图4张

SHOW-1角色扩散模型允许使用者以图像到图像的Stable Diffusion,据自己长相创建角色,充当智慧体加入作品。使用者也可使用自己的声音,因此用扩散模型创建使用者角色不是难事,Saatchi就把自己做成主角。

能生出整季影集的 AI 来了!GPT-4 不只帮写剧本,几秒就制作好一集《南方四贱客》 AI与大数据 图5张

从最后效果看,新产生集数几乎可“以假乱真”。以〈Queepi窘境〉为例,可能不最有趣,但开头、转折和结尾一应俱全,13个角色每人台词都符合背景、个性、语言风格和动机,甚至交代地点的空镜也拍得很好,不知情观众看了都很难想像这是AI作品。

这种跨越非比寻常。

从许多大模型表现看来,擅长的都是完成短期任务,就像可能几天前使用者想靠大模型产生影片,还都要先用ChatGPT产生剧本、Midjourney或Stable Diffusion产生人物形象,再用Runway等影片工具做好画面,最后再剪辑配乐。还没一个模型能产生够完整、有完整结构的长篇故事和影集。

更重要的是,AI智慧体可能从此像《西方极乐园》拥有栖身之地,它们有完整生命,可与其他AI对话、连结、产生故事等等等。Fable Simulation似乎不满足藉他人IP产生《南方四贱客》新故事。稍早Saatchi宣布Fable Simulation将创建充满AI角色的世界──由真人训练,在虚拟世界生活。

能生出整季影集的 AI 来了!GPT-4 不只帮写剧本,几秒就制作好一集《南方四贱客》 AI与大数据 图6张

“我们推出SHOW-1的目标是AGI”,Fable Simulation官方Twitter说:“AI真的活着,不像很多聊天机器人只在人类有需求时才出现。‘AI人’能在模拟世界生活,并随时间慢慢成长。”Fable Simulation还希望用户像“那就是真人在生活”看待这些AI产生的影集。辉达首席AI科学家Jim Fan更兴奋断言“多智慧体模拟,将是新兴智慧的下个前线”。

不过Fable Simulation风险是现在刚好处于好莱坞罢工风波中。7月中旬,继编剧工会罢工两个多月,演员工会接着罢工,抵制AI危机,可能导致60多年来美国影剧业最严重的瘫痪。Fable Simulation做的事,恰好一拳打在编剧演员最愤怒的那点上。

以《南方四贱客》来说,每集都要6天内完成──开会讨论后编剧写出剧本,交由动画师、编辑、技术人员和音效人员团队制作,一周工时高达100~120小时。但SHOW-1出现,不知道会有多少人丢了饭碗,甚至有媒体称SHOW-1是“所有好莱坞工作者恐惧的总和”。

从社群网站评价看,网友对AI产生的《南方四贱客》评价颇为两极化,支持者期待用这类工具改写烂尾的《权力游戏》,惊讶AI的模仿力,甚至预言能提高影视制片商的生产力;反对者认为AI才不懂影视业,只是窃取他人成果,是纯粹的VC诈骗。

潘朵拉的盒子一旦打开,就关不上了。

或许出于舆论压力,Fable Simulation反复强调《南方四贱客》AI作品“仅供研究使用,我们不会开放用户自己创作《南方四贱客》,因这不是我们的IP!”

Fable Simulation称正与创作者合作,会在今年稍晚宣布基于原创IP的AI产生电视节目,包括太空探索模拟“奖金”,讽刺硅谷的“退出硅谷”,以及可玩性高的侦探模拟“查理木星”。

Saatchi似乎不太担心Fable Simulation的未来,受访时更对好莱坞罢工风波表示:

我们觉得推出时机正确。发表研究成果后,我们希望好莱坞工会能协商出强力保护措施确保创作者权益,同时智慧财产权拥有者也要弄清楚如何与商业化AI公司谈判。

这次罢工是制定将来十几年规则的最大杠杆时刻。

(本文由 品玩 授权转载;首图来源:The Simulation)

   特别声明    本页内容仅供参考,版权终归原著者所有,若有侵权,请联系我们删除。