全新技术手段融合视效与动画行业

影视制作

过去几年,视效和动画行业的技术取得了飞跃式发展。随着虚拟制作、实时技术和 LED 虚拟影棚呈现全面发展,尽管全行业仍在从新冠疫情和罢工的影响中恢复过来,但2025年前景光明。除了技术进步之外,对于那些希望在这个行业深入发展的人来说,市面上还存在一些技能需求以及可供使用的教育资源。使用新工具和技术所需的技能组合 —— 在把握当下的同时还能敏锐地关注未来 —— 对于跟上发展进程并保持领先地位至关重要。以下是来自视效和动画交叉领域的行业专业人士的各种观点。

维塔 FX 不使用生成式AI。相反,多年来,他们一直在开发和利用机器学习,并将其嵌入到艺术家的工具中,例如维塔的面部表演(facial performance)和基于图像的精修系统(image-based refinement systems)。维塔 FX 还为《我的世界大电影》(A Minecraft Movie)贡献了视效。
图源:Warner Bros.

理查德·弗朗西斯-摩尔(Richard Frances-Moore),维塔 FX 高级动作总监

在维塔 FX,自从为《指环王1:护戒使者》(The Lord of the Rings: The Fellowship of the Ring)贡献了片中的洞穴巨怪片段以来,我们就一直在创新和使用虚拟制作。虚拟制作作为一种支持真人、动画和表演捕捉的一种可视化技术,已成为我们许多项目工作流的关键部分,尤其是在《阿凡达》(Avatar)系列中。

有一段时间,虚拟制作似乎是个可以“无脑冲”的选择,因为它节省了后期制作的成本,并为导演和演员提供了更好的片场体验。从那时起,从业者和制作方对虚拟制作的优势和劣势有了更多的了解 —— 前期投资需求高、场景复杂、技术问题可能产生计划之外的支出,这使得一些项目变得更加谨慎。

然而,随着我们对虚拟制作获得更深入的行业理解,并且虚拟制作有更多标准出现,成功的应用案例的范围现在正在稳定下来。

摄影机内视效(ICVFX)已成为电影制作工具集中的另一个工具。毫无疑问,它将继续发展和改进。我们将继续推进我们的整体虚拟制作系统,致力于整合我们的前期和后期制作工作流,并将虚幻引擎作为一个选项进行集成,以便我们可以使用这个平台与拍摄团队进行联系和合作。

然而,随着我们对虚拟制作获得更深入的行业理解,并且虚拟制作有更多标准出现,成功的应用案例的范围现在正在稳定下来,ICVFX 已成为电影制作工具包中的另一个工具。毫无疑问,它将继续发展和改进。

——理查德·弗朗西斯-摩尔,维塔 FX 高级动作总监

SSVFX 公司凭借在 FX 剧集《幕府将军》(Shōgun)中的视效获得一项艾美奖提名。SSVFX 公司完成了数百个镜头,将 CGI 版本的17世纪的大阪呈现得栩栩如生。
图源:SSVFX and FX Network

目前,人工智能(AI)和机器学习对行业产生了巨大影响。虽然我们没有使用生成式 AI,但多年来,我们一直在开发和使用机器学习,并将其嵌入到艺术家的工具中。例如,我们的面部表演和基于图像的精修系统。并且,这项技术的需求正在增加。

在片场,AI 能让我们提供实时的摄影机景深,提高了创建数字摄影测量的速度和质量,同时减少了片场占用空间。可用性的提高和共享标准的开发也是整个行业的一大进步。由于制作方希望在不同公司之间灵活分享资产和工作,这也催生了对更好的平台和系统的需求 —— 例如 Open USD、MaterialX 甚至虚幻引擎 —— 来为部分虚拟制作和 previs 工作流提供一种共享格式。我们正尽可能地拥抱这一点,同时保持灵活性,并在我们关注到的可以改善工作的机会上继续进行创新。

《Or-Bits》是一则宣传虚构早餐麦片的30秒电视广告。这条广告由交互式娱乐学院(AIE)学生主导的制作团队在模拟客户的“雇佣”下,根据一份详细的故事梗概来制作。一些 AI 生成的图像被用到了模拟梗概中,并出现在了广告中。所有其他工作100%由学生创作。
图源:AIE

维克托·穆勒(Viktor Müller),Universal Production Partners(UPP)公司首席执行官

视效行业的就业率是否有所增长?目前,我们正逐渐走出行业发展的困难期,不仅仅是视效行业,而是整个行业。去年,有很多人失业,很多公司倒闭。这是一场真正意义上的危机。但是,我们在电影和电视中看到的视效比却以往任何时候都多。从某种意义上说,你会认为这是件好事,但你现在看到的电影和电视剧都充斥着 CGI 元素,参与大项目制作的 CGI 艺术家数量如此之多,以至于现在,再冗长的片尾字幕也无法完整将他们的名字都囊括进去。

AIE 2023届视效班的毕业作品《Spare Parts》荣获2024年西雅图电影节最佳动画短片奖
图源:AIE

我认为,虚拟制作或 AI 编程也许是发展最快的行业了。但说到底,它们会取代其他行业的工作岗位。我认为所有人都意识到了,我们正处在一种“大衰退”的局面。我们曾经历过“电视黄金期”的爆发式发展期。那时,许多院线和流媒体电影层出不穷,而现在,泡沫破灭,项目不足,情况甚至比不上前几年。疫情过后的疯狂发展吸引新人才加入了这个行业之中,这虽然是个好消息,但同时也使得市场过度饱和。另一个弊端是,这种饱和并不一定使视效行业的质量有所提高,反而使得平均容量增加。随着新常态深入发展,各公司需要关注效率,并开发出真正优质的管线,这样才能立于不败之地。

在 UPP,我们始终努力实现平等、更多样化的劳动力,并且,我很自豪地宣布,我们的公司能实现性别平等。

拥有一群多样化的艺术家和技术人员于我来说一直是个明智的商业决策,但在我们这一行中,女性数量尤其不足,特别是在技术岗和领导岗上。我们公司有许多女性管理着不同部门 —— 包括我们影视部门的领头人 —— 虽然我们很希望能逐一介绍她们,但我们也希望有一天,我们不再需要谈论这一点,因为老实说,这本身就应该是一件寻常事。(性别平等)应该是一种常态。但我认为,这个行业正在向正确的方向慢慢进步。

乔纳森·麦克福尔(Jonathan McFall),英国国立电影电视学院(NFTS),CG 和 VFX 培训总监

视效行业自成立之初就一直是个不断发展的行业。现在,开创性和突破性的技术每年都会被用到暑期大片的制作中。然而,许多核心部门和技能依然是一样的。建模师负责建模,视效艺术家负责制作视效,但是随着 USD 加入到各个公司的制作管线中,每个部门的工作也变得愈加复杂,模型、质感、光线、视效等也发生变化。类似虚幻引擎、Houdini 这些软件也在项目中扮演着更加重要的角色,虚拟制作影棚不再只是大片的专属配置。因此,一些关键的技能 —— 比如理解 USD 工作流、ShotGrid、光线、Houdini、虚拟制作、虚幻引擎,当然,还有合成 —— 都能帮你入行。这些都是非常紧缺的技能。

英国国立电影电视学院(NFTS)的视效学生正在使用虚拟制作屏幕。
图源:NFTS

这个行业一度被男性主导,但现在变得越来越多样化。英国国立电影电视学院致力于鼓励来自不同背景的人们充满自信地追求视效事业发展,并为英国的申请人提供更大范围的服务和超一百万英镑(约合940万元人民币)的资助。从美术部门的创意工作和材质相关的工作,到视效或管线中技术性很强的岗位,许多工作都需要各种各样的技能。任何想要从事视效工作的人都会有合适的工作可供选择!

大卫·爱登堡(David Attenborough)爵士正在英国的MARS虚拟影棚进行技术测试。
图源:Mars Volume and Bild Studios

英国国立电影电视学院(NFTS)视觉效果(VFX)硕士课程以提供360°全方位的实操培训而闻名。我们以此让学生学习如何在视效管线上开发创意性的解决方案。我们的视效实验室是世界顶尖的,配备了视效行业使用的同款精细的工作站。每台工作站都安装有符合目前行业标准的软件,包括 Maya、虚幻引擎、Nuke、Nuke Studio、Photoshop、Substance、Houdini、达芬奇、Reality Capture 和 PTGui。

学生们全天24小时都可以进入工作室,他们可以获得单独的或团队指导 —— 这是世界上的一小部分人才有的待遇。他们可以在片场积累经验,了解整套制作管线。这个面积较大的场地坐落着白金汉郡的一个小村落 ,它能为学生提供18个专用的拍摄空间,包括一个7000平方英尺(约650平方米)的主影棚、一个 4K 电视演播室和虚拟制作影棚。

罗温·匹兹(Rowan Pitts),MARS 虚拟影棚和 Bild Studios 联合创始人

MARS 是英国运营最悠久的虚拟制作品牌之一,由来自 Bild Studios 经验丰富的工作流专家建立。自2021年推出以来,MARS 虚拟影棚已成为英国最大的 LED 空间之一(25.5×5米)。这里的设备已经供 Netflix 的《三体》、Disney的《罪魁祸首》和阿斯弗·卡帕迪尔执导的《2073》等作品使用,并且,MARS 团队一直在为HBO的《龙之家族》和Apple TV的《空战群英》贡献虚拟制作。

在开源软件上参与和合作让梦工厂能更加轻松地在电视剧和长片电影制作中——如《荒野机器人》(The Wild Robot)——维持和共享资产。
图源:DreamWorks Animation and Universal Pictures

现在我们已经出现了这样一种趋势 —— 从“影棚尺寸越大越好”这种观念,到意识到战略性地安排合适尺寸的 LED 影棚才更具性价比,且总体上更加适合影视制作。

我们正是利用这种方式在过去几年实现业务的快速发展。我们的项目类型占比大致是:50%是有剧本的剧集,50%是品牌广告内容。我们的永久虚拟制作影棚位于西伦敦,但我们的工作团队可以到处移动,他们可以随时提供虚拟制作服务和即时解决方案。MARS 影棚可以提供全方位的服务,我们经常为拍摄项目打造数字环境。我们可提供的即时服务包括:为在其他拍摄地进行的电影拍摄项目打造定制的 LED 虚拟影棚,并提供团队来运营和操作它们。

虚拟制作无疑在未来的电影制作中占有重要地位。随着人们对虚拟影棚使用方式的认识不断扩展,这能让制片人理解虚拟制作拍摄的真正价值,以及他们从虚拟影棚拍摄中可以获得的回报。虽然虚拟制作初看似乎比传统的棚拍要成本要更高,但如果你考虑到(虚拟制作)节省下来的支出(包括时间和效率,以及一天内可以拍摄的内容量),虚拟制作就可以大放异彩。我们现在看到,许多经验丰富的制片人都在使用 MARS 虚拟影棚进行拍摄,通过提前进行仔细的规划和日程安排,他们可以提供大量的场景输出,这说明虚拟制作的确能提升效率。

比尔·巴罗尔(Bill Ballew),梦工厂动画首席技术官

过去几年,我们看到行业趋势之一是,人们在开源软件上越来越多地参与和协同工作。随着制片厂和第三方工具提供商都开始广泛加入学院软件基金会(ASWF),这些项目的可行性和实用性也许会成倍增加。如今,这些工具已成为几乎每个制片厂的工作基础,他们利用标准数据表示和共享这些十分普遍的功能。

作为上世纪90年代 Linux 操作系统的早期使用者,到2023年为我们的专有渲染器 OpenMoonRay 提供开源,我们已经看到了利用和贡献这些最佳社区解决方案所能产生的巨大价值。这给我们带来两个最重要的优势:1)我们能够将工程重点放在那些让我们的电影脱颖而出的努力上,提供独特的创意风格,并为我们的艺术家赋能,并且 2)通用的行业构建模块和标准使我们能够更轻松地维护和共享电视剧和电影中的资产。

艾德·布鲁斯(Ed Bruce),SSVFX公司高级副总裁

技术与创意始终是密不可分的。每年,新技术都可以帮助我们突破创意的边界,或激发我们创意从而进一步发展。过去几年,技术进步层出不穷,发展迅猛。人工智能和机器学习正处于快速增长的轨道上,为供应商的工作流和管线带来了许多新工具。要想实现净收益,而不是仅仅去适应变化,这可能是一个需要克服的挑战。

MARS 虚拟影棚于2021年推出,是英国最灵活的 LED 影棚之一。MARS 团队可以灵活移动,提供即时虚拟制作服务。
图源:MARS and Bild Studios

最终,我们的目标是以合适的价格按时交付精美的、能够服务于叙事的图像。如果机器学习可以发挥作用,那么适应它就是值得的。然而目前,许多工具在安全方面可能是一个难以驾驭的雷区,而安全对于我们和我们的客户都至关重要。数据集必须存在于安全网络内,并且在该网络之外的任何通信都存在巨大的风险。

在 SSVFX,我们专注于面部增强和减龄技术。在这个领域,我们看到 AI 技术的进步有望带来更简单、更快和更优的结果。然而,我们发现,对于我们继续调整和构建的专有工具和工作流而言,情况却并非如此。我们发现,目前真人所提供的质量、时间和成本依然比机器学习的结果要更好,且前者无需担忧数据集或安全问题,更重要的是,这样做不会侵犯演员涉及AI的合同。使用当前的 AI 工具做出微调,并朝着客户想要的方向提供服务是非常具有挑战性的。使用传统方法则不会遇到这些问题。

每年,市面上都会制造出新的工具和技术来支持视效团队。这些工具中,有些会进行改进,并成为我们工作流的中流砥柱,而其他则会慢慢淡去。对于我们 SSVFX 来说,继续了解这些进步并适应它们是非常重要的。

约瑟夫·贝尔(Joseph Bell),HDRI 咨询,主理人

我认为,在经历过去年的美国演员工会和电视广播艺人联合会(SAG-AFTRA)和美国编剧协会(WGA)大罢工之后,视效工作开始回暖的速度之慢令人惊讶。对罢工的关注掩盖了主流流媒体的委托量相较前一年大幅下降的现象,部分原因是流媒体面临着盈利压力。

举个例子,Disney+ 在2023年内容委托上的支出比2022年减少了约40%。2024年第二季度,在美国开始主体摄影的项目数量比2022年第二季度减少了40%。电影和电视项目委托量的急剧下降对全球视效行业的就业都产生了巨大影响,其中对美国的冲击尤其大。许多经验丰富的视效专业人士失业了好几个月 —— 有些甚至失业了一年多。随着迪士尼的流媒体服务在2024年中期实现盈利,派拉蒙紧随其后,项目制作数量应该最终会回升。作为一个行业,这是一个绝好的时机,能让我们重新评估自己的运营方式,以及我们可以采取哪些措施来使公司和个人职业生涯在未来具备更好的应变能力。

那些国内电影产业发达的国家以及不太依赖美国电影项目来维持生存的国家 —— 例如日本、越南和某种程度上的法国 —— 它们所受到的影响比高端视效支出大部分来自美国制片厂的国家要小。— HDRI 咨询主理人约瑟夫·贝尔

UPP 已成为中欧地区最活跃、最全面的视效和后期制作公司之一。它们为《GT赛车:极速狂飙》(上图)以及《芭比》《秘密会议》《医院五日》《银翼杀手2049》贡献了视效。UPP 首席执行官维克多·穆勒还担任了《银翼杀手2049》的视效总监。
图源:Sony Picture

在2023年和2024年的大部分时间,全球如此多视效专业人士都没有工作的情况下,我们很难凸显整个行业处在发展状态。那些国内电影产业发达的国家以及不太依赖美国电影项目来维持生存的国家 —— 例如日本、越南和某种程度上的法国 —— 它们所受到的影响比高端视效支出大部分来自美国制片厂的国家要小。我们看到,越来越多的职位需要了解虚幻引擎等 RT3D 工具。了解这些工具可以让视效公司和艺术家能够从事 VR/AR/XR、游戏和沉浸式项目。在目前对行业产生影响的各种新技术中,实时 3D 将产生最深远和持久的影响。

安迪·罗明(Andy Romine),AIE高级视效讲师

尽管像绑定、视效和生物视效等技能的需求一直很高,但在灯光和合成方面,初级艺术家仍然有很多机会。最近,具有可视化预览(previs)和虚拟制作管线实时工作经验(如虚幻引擎)的传统视效艺术家,也出现了机会激增的情况。

我们在AIE模拟了一个真实的制片厂环境,这样除了学习视效行业所需的技术技能外,学生还会学到如何以团队形式按真实和模拟的客户简报开展工作,管理资产创建和截止日期,并打造一套可用于申请工作的在线作品集。学生可以使用最先进的工作站,并学习行业标准软件,包括 Maya、Renderman、Houdini、Katana、Nuke 和 Substance Suite。

每周,我们的“午餐盒”项目都会邀请专业人士来谈谈他们在这一行的经验,并为我们的学生提供交流的机会。我们与 AIE 赞助的视效协会的成员保持定期联系,他们会组织“午餐盒”讲座、提供指导和详细的作品集评估。

使用当前的AI工具做出微调,并朝着客户想要的方向提供服务是非常具有挑战性的。使用传统方法则不会遇到这些问题。 ——艾德·布鲁斯,SSVFX高级副总裁

由于西雅图是重要的游戏开发中心 —— 同时也是我们的并行的游戏艺术轨道 —— 视效学生可以接触到 Unreal 5 等实时游戏引擎。我们的学生毕业后进入到一系列视效公司工作,从小型工作室到大制片厂,都有供职。我们还有些毕业生凭借他们的交叉技能进入到游戏行业。我们毕业生最近参与的著名项目包括《曼达洛人》《死侍与金刚狼》《末日巡逻队》和游戏《命运2》。AIE 2023 届视效班的毕业作品《Spare Parts》荣获2024年西雅图电影节最佳动画短片奖。


出处:Oliver Webb | VFX Voice

翻译:Katja | 盖雅翻译小组


您可能对以下内容感兴趣:

“缩放自如”的虚拟制作——采取一种“恰到好处”的方法

views
影视制作
虚拟制作:墨西哥电影制作的未来

〖更新至4-5〗在墨西哥城历史悠久的Churubusco Studio 内的虚拟制作影棚。

影视制作
实时视效技术的兴起与未来发展方向

〖更新至4-9〗实时技术也在影响着日常视效制作的相关工作流和管线。

9ff2cbe9-007c-429c-8b24-08b73ce170e1
影视制作
埃里克·梅塞施密特(ASC)谈调色

DP 与调色师如何通过色彩创造情绪和提示观众。