后街男孩演唱会登陆 Sphere:高端电影级转播的首次真正试炼

影视制作

后街男孩 Sphere 演唱会:“高端电影级转播”(Premium Cinematic Broadcasting)的首次真实试验

后街男孩的《Into the Millennium》演唱会在拉斯维加斯 Sphere 驻演是 Sphere 的专利 Big Sky 电影摄影机在现场流行演唱会中的首次大规模运用。这是文化与技术的里程碑,Y.M.Cinema 将其定义为“高端电影级转播” —— 是现场音乐与史上最尖端的电影成像系统的融合。从《绿野仙踪》(The Wizard of Oz)的原型片到 U2 的 Sphere 驻演,从英伟达助力的后期制作管线到大型体育赛事的电影级摄影机配置,这回的驻演是几年来试验成果的集中展示。观众将首次见证流行演唱会以媲美 IMAX 的技术手段被拍摄并显示出来。

高端电影级转播之路

“高端电影级转播”这一表达是 YMCinema 报道中一个反复出现的主题。它描述的是现场演唱会、表演和体育赛事转为使用电影级工具进行拍摄,碾压传统转播视频。这一趋势始于采用 ARRI、RED 和 Sony 摄影机拍摄现场表演的试验,比如超级碗的中场节目,那时候部署了12台 Sony VENICE 电影摄影机来拍摄超级碗的中场表演,另外还有使用了3台 ARRI AMIRA Live 摄影机搭配 Fujinon PL Box 镜头和 Canon PL 25-250 镜头来直播世界空手道锦标赛。

过去两年来,YMCinema 记录了这一实践的加速发展。比如《Sony VENICE 2+BURANO+FR7:电影级转播的致命武器》一文中就分析了 Sony 摄影机系列的设计不仅适用于剧情片的制作,还适用于实况转播。类似的还有《电影机“天团”拍摄管弦乐团现场表演》一文探究了高端摄影机如何将现场表演提升为电影级呈现。所有这些试验都奠定了发展的基础。但 Sphere 引入的 Big Sky 摄影机标志着一个新类型的开始 —— 这里的演唱会不仅能获得电影级呈现,还会使用到全新设计的针对 16K 穹顶效果的图像系统。

希琳·大卫(Shirin David)巡演中的 ARRI ALEXA 35 Live

Big Sky摄影机:从专利到流行演唱会

《Big Sky电影摄影机:解析拉斯维加斯 Sphere 巨型球幕前沿影像背后的专利》一文中,YMCinema 分析了 Big Sky 系统如何从一套专有的传感器设计(3.16亿像素方形画幅传感器搭配12英寸鱼眼镜头)发展起来。跟拼接式的电影摄影机阵列不同,Big Sky 采集到的是一个无缝的环形图像,该图像可以直接映射到 Sphere 的巨型 LED 穹顶上。

Big Sky 制作管线受到 SphereLab 的支持,这是一套内部的GPU加速后期工作流。《150个 NVIDIA RTX A6000 GPU 助力超级增强版 IMAX》一文详细分析了这个渲染农场如何处理 Big Sky 高达每秒32 Gb 的极致数据率,该数值在《以每秒32 Gb 的数据率拍电影》一文中提到过。

Big Sky 的初次公开应用就是电影级的:《ALEXA 65 和 Big Sky 电影摄影机为巨型 MSG Sphere 拍摄首部电影》和《〈绿野仙踪〉(16K)Sphere项目 —— 前沿技术助力重塑观影体验》都显示出了这套摄影机系统重新定义剧情片的潜力。但还属《V-U2:Big Sky 电影摄影机拍摄的沉浸式演唱会》一文中记录的 U2 的驻场表演真正体现出了这套系统在现场演唱会的未来可能。

现在,随着后街男孩的演唱会应用,Big Sky 系统进入主流市场。

Sony VENICE 2 + BURANO + FR7: Lethal Combination for Cinematic Broadcasting
Sony VENICE 2+BURANO+FR7:电影级转播的致命武器》

一曲《Siberia》:演唱会的电影级内核

《Siberia》这首歌的段落是”高端电影级转播”的具象化。观众们描述道,后街男孩的脸出现,冻结在 Sphere 的 16K 穹顶所投影的北极景观里。随着歌曲的进行,这些脸动了起来,进行演唱,还能跟舞台上的真人表演者同步。这样的视觉效果成为可能得益于 Big Sky 的实时动作捕捉和超宽图像,那是在排练期间拍摄的,并在伯班克的 Big Dome 原型装置里进行了可视化预览。跟此前的电影级应用不同的是,这里的摄影机不仅仅提供背景原档,但主动为现场演唱会构建了一个叙事世界,将数字资产与真人表演者融合起来。这样得到的结果相较于标准的现场灯光表演,更接近于 IMAX 纪录片的沉浸感。

图源:Live In The Moment

从“明信片”到流行演唱会

Sphere 观众最初是通过一些电影级的展示体验到这个穹顶的潜力的,比如《Sphere 的〈来自地球的明信片〉观后感:超级增强版 IMAX 体验》所提到的表演。那个项目证明,16K 分辨率的电影级奇观会让观众叹为观止。但那仍是一个掌控之中的、精心编排的电影。相较之下,后街男孩的驻场表演则是混乱、不可预测且现场完成的。挑战在于要把现场的歌声、编舞和实时迸发的能量跟 Big Sky 无比精确的拍摄管线同步起来。正是那样的同步将这一实践从一场工程试验提升到了高端电影级转播的高度。

Sphere’s Postcard from Earth’ Review: An IMAX Experience on Steroids
Sphere 的《来自地球的明信片》(Postcard from Earth)观后感:超级增强版 IMAX 体验
出处:Y.M.CINEMA MAGAZINE

相较于其他电影级转播

YMCinema 在撰写《拉斯维加斯 Sphere 的 Anyma《The End Of Genesys》制作幕后:音乐与技术的颠覆性融合》一文时就明确表示,电子音乐可以与沉浸式视觉效果相融合。但即便如此,那也主要还是一种靠视觉内容来增强效果的表演而已。后街男孩的驻场表演则不一样。这是一场充满怀旧的流行音乐表演,要达到电影级奇观的水平,其制作层面的正经程度不亚于一部好莱坞长片电影。它表明,高端电影级转播不仅局限于先锋表演或精英体育竞技。它也可以为主流所用。

拉斯维加斯 Sphere 的 Anyma《The End Of Genesys》制作幕后:音乐与技术的颠覆性融合

技术深度解析:后街男孩Sphere惊艳演出背后的工具与手法

《Into the Millennium》驻场表演在技术执行方面可谓是大师级作品,它结合了电影级摄影机、定制软件、动捕设备、实时渲染和大型回放服务器,将男团演唱会转变成 YMCinema 所谓的“高端电影级转播”。

Big Sky 摄影机:电影级核心

这个项目的核心是 Big Sky 电影摄影机这套专为 Sphere 打造的系统。联合意法半导体(STMicroelectronics)设计的这个3.16亿像素的方形传感器,可以利用一个直径将近1英尺(约30厘米)的鱼眼镜头,录制 18K 分辨率。

跟传统的需要拼接的多机穹顶不同,Big Sky 得到的是无拼接的一帧,该画面可直接映射到 Sphere 的 LED 内墙上。此设计消除了拼接缝、透视不连贯和视差问题,否则就会破坏16万平方英尺(约1.5万平方米)的 LED 墙视觉效果。这套系统数据加载量十分惊人:每次采集可高达每秒32 Gb的 RAW 数据。数据的存储和装载则由定制的记录系统支持,该系统可以即刻复制素材,以保护素材不受损。每一秒的 Big Sky 素材都是不可替代的,因此数据备份是必须的。

SphereLab:数字工作坊

素材一旦采集,Big Sky 的输出就会传入 SphereLab 这个专有的 GPU 加速管线,它可以将鱼眼图像转为可在穹顶屏幕上显示的内容。这套工作流一开始要先做一个光号的基本调色(one-light color pass),以便快速检查曝光和色调。在此基础上,SphereLab 再处理几何去扭曲、映射和内容塑造,这样每一条水平线、每一张脸和每一个动作从场馆的每张椅子上看起来才是自然的。

为了后街男孩,SphereLab 还成为了打造《Siberia》段落的“游乐场”。预录好的团员们的脸的素材原档经过处理,冰冻到数字冰层里,然后再通过动画活起来。映射精度至关重要:舞台上的真人歌手跟其舞台上方高大的 18K 数字形象之间有任何的偏移都会毁掉这个视觉效果。

在 Big Dome 完成可视化预览

在拉斯维加斯实操之前,制作团队先在伯班克的 Big Dome 进行了测试,此测试地点是用于 Previs 的100英尺(约30米)测地线原型 Sphere。在此,主创可以站在这个缩小版的场馆内看到完整的360°视觉效果。对于《Siberia》这首歌,Big Dome 可以让团队编排时间点,用雪花粒子系统进行实验,并调整面部动画,直至匹配现场表演的能量。

这样的迭代流程模拟了 IMAX 纪录片电影制作者的工作流:搭建、测试、完善,只有到了那时才能把作品推向大屏幕。

实时与预渲染内容

后街男孩的驻场表演融合了预渲染电影级素材原档实时的现场摄影机集成。对于发射倒计时等段落,视觉效果是提前好几周采用 3D 动画设计并渲染为穹顶映射文件的。对于《Siberia》这首歌,Big Sky 采集了表演者的素材档,随后这些素材合成到了预渲染的北极景观中。

但并非一切都已锁定。有些视效是使用 Notch虚幻引擎TouchDesigner 等软件实时渲染的,这些平台的功能已在 U2 的驻场表演中得到验证。实时渲染可以实现动态效果 —— 飘落的雪花、涟漪般的极光、变化的银河系 —— 以灵活应对表演节奏。

视效工具和资产创建

这些环境本身是采用高端视效工具打造的。用于冰雪的粒子系统很可能源自 Houdini,而山丘和星图的 3D 建模是在 Cinema 4DMaya 里开发的。NukeAfter Effects 等合成平台处理了图层与集成,同时,由达芬奇来管理跨整个穹顶的1.7亿个像素的色彩精度。

对于面部动画,有确凿的证据表明使用了动捕设备面部动捕插值。就算官方没有透露相关信息,但从静态“冻结”的脸到有动画效果的歌唱形象之间的顺畅过渡表明,所使用的制作工具融合了高分辨率的摄影素材档和AI辅助变形功能。

回放基础设施

Sphere 的回放系统本身就是一个技术奇迹。这个穹顶需要25个同步的 4K 服务器来给内部 LED 墙的各个分区发送信号,所有服务器都与主时钟保持锁定。虽然每个服务器处理的是穹顶内容的一个切片,但组合起来它们形成了一块无缝的16K×16K的画布。

7thSenseDisguise 这样的媒体服务器之前就已应用到 Sphere 项目中,极有可能后街男孩的演唱会也依赖于同一套支柱系统。这些服务器不仅处理回放,还允许操作者随灯光、舞台自动化和舞台烟火来切入各个段落。

同步与表演控制

高端电影级转播不只关乎高端的图像,还关乎舞台与屏幕之间的完美同步。时码系统将视觉内容与音轨相锁定。DMX 协议协调着灯光和舞台升降设备。自动化系统控制了悬浮式平台,确保表演者被抬高匹配太空飞船发射或北极裂谷的视觉画面。

对于《Siberia》的表演,踩点尤其要准:现场歌手唱到高音的瞬间必须跟他们在屏幕上巨大的数字人脸动起来的瞬间一致。这就需要一丝不苟的提示排练和延迟测试,把系统延迟降到无可挑剔的程度。

音画合璧

Sphere 同时也是一个声学装置。其波束成形音频阵列可以让特定的座位听到特定的混音,创造出个性化的音轨。在《Siberia》的表演中,随着雪花在穹顶中旋转飞舞,风的萧萧声也在观众间回响。音画合璧让这场秀从多媒体表演提升到电影般的体验。

穹顶之外的工具

虽然 Big Sky 是重头戏,但这个项目也用了许多其他摄影机。传统的广播系统在较小的舞台屏幕上提供 IMAG(图像放大)。高端电影机 —— Sony VENICE、ARRI ALEXA Mini LF —— 可能用于拍摄彩排素材档或补充内容。这些摄影机并不向穹顶发送信号,但它们提供了辅助视觉内容和宣发素材。

实际上,后街男孩的驻场表演是一场多机位的盛大演出。Big Sky 提供了 IMAX 镜头。传统电影机则提供了辅助性的镜头覆盖。广播级设备捕捉实况特写。它们相辅相成,形成了一个多层次的成像工具生态,每一种工具都在高端电影级转播中发挥着自己的作用。

人与人的协作

如果没有人的参与,所有技术都徒劳无功。这场表演需要摄影指导(DP)熟悉穹顶成像,需要视效总监适应 18K 工作流,还需要实时图形编程员、媒体服务器操作员、舞台自动化工程师和传统的转播摄制组。这个规模堪比一部好莱坞长片,远不止拉斯维加斯驻演的配置。正因背后有人与人的协作,YMCinema 才将这一创举定义为一个里程碑时刻。流行演唱会此前从未需要这么多的电影级部门齐心协力来制作。

技术深度解析:后街男孩 Sphere 惊艳演出背后的工具与手法
技术深度解析:后街男孩 Sphere 惊艳演出背后的工具与手法

深度解析为何重要

这样的深度解析揭示了隐藏在普通粉丝眼中奇观背后的基础设施。主流驻场表演首次将 Big Sky 摄影机、SphereLab 制作管线、Big Dome 彩排、GPU 渲染农场、视效软件组、实时渲染引擎、同步的媒体服务器和舞台自动化融为一体化的系统。这就是高端电影级转播得以实现的样子:凭借严肃对待、巨大规模和 IMAX 电影制作工具,完成的一场现场活动。

1.文化影响:近35万粉丝参加了演唱会,这是 Big Sky 性能迄今最大规模的展现。

2.技术验证:这个驻场表演表明,18K 采集管线不仅可用于受控条件下的电影项目,还可以持续用于每晚的现场驻演。

3.行业先例:若后街男孩可以驾驭 IMAX 级的画面呈现,还有什么可以阻挡 Beyoncé、Taylor Swift 或 Lady Gaga 这样的大咖在未来的驻场表演中要求同样的效果?

4.经济模型:高端电影级转播可以重新定义票价与分发模式。想象一下,未来可以以完整的 16K 保真度向全球剧院直播 Sphere 表演,就像 IMAX 活动过去覆盖全球。

以 IMAX 为鉴

IMAX 最初也只是一种实验性的纪录片格式,用来为博物馆和电影节采集大画幅图像。经过几十年的发展它才通过大片成为了主流格式。Sphere的Big Sky正处在一条类似的发展轨迹上。凭借《绿野仙踪》和《来自地球的明信片》,它体现出了纯粹的电影潜能。而凭借后街男孩的演唱会,这种格式进入了流行文化。这个驻场表演堪比阿波罗11登月:这是该原型格式问世数年后首次真正完成使命。高端电影级转播过去只是提出过理论,进行过测试和排演。但如今,它真正得以被运用。

《绿野仙踪》(16K)Sphere 项目 —— 前沿技术助力重塑观影体验

收获

后街男孩在 Sphere 的《Into the Millennium》演唱会是第一个现实中的高端电影级转播演示,它是流行表演与高精尖电影技术的融会贯通。利用 Big Sky 这套能以32 Gb/秒采集18K图像的摄影机系统,这个驻场表演将情怀变成了 IMAX 级别的体验。YMCinema 已通过多篇文章记录了这一刻的“来时路”。而这个驻场表演证实了我们的观点 —— 高端电影级转播的时代已来。它看起来正是现场娱乐活动未来的样子。


翻译:LorianneW | 盖雅翻译小组

出处:Y.M.CINEMA MAGAZINE

views
影视制作
DP 罗比·瑞恩谈兰斯莫斯《拯救地球》摄影幕后

〖更新至7-9〗罗比·瑞恩(BSC,ISC)和欧格斯·兰斯莫斯的合作伙伴关系建立第四弹。

影视制作
真人秀节目剪辑原来可以使用这些技巧!

〖更新至4-8〗真人秀剪辑技巧。

影视制作
火爆片场:《盗火线》摄影幕后

〖更新至2-10〗在洛杉矶的穷街陋巷拍成浓墨重彩的罪案现场的。