Netflix利用品红灯光发明全新绿幕拍摄方式

Magenta Green Screen: Spectrally Multiplexed Alpha Matting with Deep Colorization
技术前沿

图源:DigiPro2023

一种能更快且更准确地将真人演员素材放置到不同背景中的方式可以让导演在拍摄过程中直观看到他们镜头的效果。

Netflix的研究员们创造出了一种新型的利用AI完成的绿幕技术,新技术可实时为影视项目生成逼真的视效。

绿幕技术一般用于采集真人演员素材,这些素材之后会在虚拟场景或预录制场景中被插入前景。为此,真人演员会在明亮的绿幕前进行拍摄,方便后面进行数字抠像与移除。

这个过程可通过自动化的方式比较准确地完成,比如电视天气预报能看到的那样,但如果穿了绿色的衣服,或有透明的/细小的物体,比如几缕头发,那么自动抠像就不好使了。当影视项目需要更精确的抠像时,专门的技术人员就要手动微调一些设置,有时需要数小时才能把一个镜头完美抠像。

iStock-694375358_Wetter-770x436
图源:iStock

为了创造出一种又快又准的办法,Netflix发明了一种名为“品红绿幕”(Magenta Green Screen,简称MGS)的抠像方法。演员站在明亮的绿色LED墙背景前进行拍摄,与此同时,演员身上由前方的红色和蓝色灯照亮,这两种灯共同制造出一种品红色的光。

因为数字摄影机的原理是为每个像素采集单独的红绿蓝值,这种技巧的效果是,创造出只记录背景的绿色通道,让前景呈黑色,而红蓝通道则只记录前景,让背景呈黑色。它们共同创造出品红和绿色影像。

电影剪辑师可以实时替换绿色通道,逼真而即时地将演员放到另一个场景的前景中,即便是对于可能比较棘手的区域,例如透明的瓶子或发丝周围的区域,也能无误完成抠像。

(左)新绿幕技术与(右)传统抠像效果对比

“计算机已经提供了如此强大的工具,让一切操作更简单,”Netflix研究员之一的保罗·德贝维奇(Paul Debevec)说,“(这是)我们简化的另一个东西,这么一来,我们才华横溢的艺术家就能专注于艺术创作,真正让作品更好看。”

但这种方法存在一个问题。因为前景仅以蓝色和红色来记录,所以演员看起来是品红色的。为解决这个问题,Netflix使用人工智能给前景恢复完整色彩,以演员在正常灯光下的照片为参考,创造出逼真的绿色通道。此AI工作速度是很快,但并不是实时的,但有的快速技巧足以让导演边拍边监看效果,即计算红蓝通道平均值以创建一个近似的绿色通道。

加州视频制作公司Geiger Post的杜鲁·拉哈特(Drew Lahat)表示,这个行业一直以来都欢迎新方式的产生,但这种方式涉及众多复杂步骤,可能并不利于影视拍摄步调极快的特性。

“这项技术的诸多方面,从实用角度来看,会让我思考它是否值得,”他说,“在完全受控的空间中它的效果可能很好,但它要与虚拟制作摄影棚等新技术竞争,还要在现实拍摄中赢得制片人的青睐。”

出处:Matthew Sparkes | NewScientist

翻译:LorianneW | 盖雅翻译小组

views
技术前沿
Assimilate 产品套装 v9.7 1157 版更新

修复了在退出应用时与BoxIO的接口可能会出问题的情况……更多更新细节,欢迎点击本文

技术前沿
诺贝尔获奖发现如何解锁QD-OLED卓越性能

量子点的大小和形状可以在制造过程中精准控制,因此使得它们“易于”成比例改变规模,并出色地应用于各种电子显示设备中。

Mighty mini Royal Oak
技术前沿
Assimilate Live FX Studio 助力爱彼手表广告虚拟制作

瑞士腕表品牌爱彼(Audemars Piguet)最新Royal Oak皇家橡树系列迷你霜金腕表广告 …