Apple 沉浸视频(Apple Immersive Video)是什么?

影视制作

图源:© Apple

面向创作者和发行商的 Apple 沉浸视频(Apple Immersive Video,简称 AIV)入门指南。

摘要

Apple 沉浸视频专为模拟人眼20/20视力设计,于2024年随 Apple Vision Pro 头戴式设备一同推出。

结合空间音频,沉浸视频能够创造出身临其境的感官体验,而非简单地观看屏幕。

格式

为特定目的打造的摄影机管线。

截至2026年,唯一一款可用于 AIV 拍摄的商用摄影机是售价3.3万美元(约合人民币22万元)的 Blackmagic URSA Cine Immersive。这是一款采用固定镜头的一体式摄影机,可制作出一个贯穿整个后期制作流程(一直到编码和交付)的单一文件。

Blackmagic URSA Cine Immersive 摄影机

大多数 Apple TV 中的 AIV 都是用 Apple 的原型摄影机拍摄的,而这款摄影机并不公开售卖。部分特写场景是使用架在 Stereotec 分光镜装置上的双摄影机拍摄的。

AIV 中也可以加入模拟 Blackmagic Immersive 摄影机的镜头配置特质的 CG 或 VFX。

音频采集可以使用任意环绕声与各种单声道领夹麦或枪式麦的组合,连接至架有外景录音机(例如 Zoom F6)的摄影机。

示例

眼见为实。

你可以在 visionOS Apple TV app 的专门的“沉浸式”标签页中找到一些最佳示例。

Apple 委托制作并推出了一系列高质量的剧集和独立节目:

规格

一种格式,同时用于拍摄和交付

记住,AIV 是一种同时用于拍摄和交付的格式!

AIV 格式的最低拍摄要求很高:

01 180°视场

02 立体视觉-每只眼看到一张图像

03 每只眼看到7200×7200像素

04 90 fps帧率

05 HDR-高动态范围

交付-AIV 的交付要求都是相同的,除了每只眼睛的分辨率是4320×4320。

工作流

从摄影机到交付。

AIV 工作流经过优化,旨在与 Blackmagic 的达芬奇 Studio 集成。这套工作流希望方便习惯使用传统 2D 视频工作流的专业电影制作者上手,同时简化传统 VR 视频工作流的复杂度。Blackmagic 的支持网站上有一份详细的工作流指南PDF文件。

参考

Apple 的“为 visionOS 打造沉浸式媒体体验”活动(活动录影)是一个很好的关于拍摄和后期制作工作流的信息来源。

AIV交付文件的结构,图源:© Apple

AIV 是一种“复合格式”,它在后台整合了多种元素:所有 AIV 文件都内置了视频、音频及其他元数据。但这里有一个细分:AIV 有两种类型,一种用于采集(拍摄),另一种用于交付(发行)。

采集/拍摄

太字节

拍摄用的 AIV 文件体积庞大(太字节级),这主要是因为它们将视频数据封装在 RAW 格式(如Blackmagic 的 .braw)或中间格式(如 QuickTime ProRes .mov)中。这些文件嵌入了所有原始音频源。此外,它们还可能包含以 .exr 格式存储的多部分视效,或是完整的 .usdz 3D 模型,用于构建沉浸式环境,从而取代屏幕上的黑边。

交付/发行

数十吉字节

交付用的 AIV 文件(或 .aivu)体积庞大(数十吉字节):它们将视频压缩为 MV-HEVC 格式,这是一种高效封装立体影像的方式。同样,其音频和元数据轨道也是从拍摄所用AIV中的原始素材压缩而来的。这些文件可隔空投送至 Apple Vision Pro 进行原生读取。此外,它们还可以上传至 Acute Platform 的CMS,通过流媒体方式进行分发,既可私下分发,也可在 visionOS app 中分发。

FAQ

两个常见区别。

01

Apple 沉浸视频与 VR180 或其他 VR 格式有什么区别?

区别在于元数据:3D VR180 只是一个并排的半等距柱状投影视频,仅此而已。播放器必须假设像素是按照这种方式排列的,并据此进行渲染。

AIV 保留了原始图像的鱼眼镜头像素,并嵌入了镜头校正文件(称为 .ilpd)。图像不失真,且从拍摄到播放全程携带元数据;在播放时,系统会动态重新投影,以优化观众的观看舒适度和清晰度。

02

Apple 沉浸式视频与空间视频有什么区别?

空间视频同样随 Apple Vision Pro 一同推出,是一种通常在 iPhone 上拍摄的直线立体格式。空间视频主要侧重于拍摄便捷性,旨在让任何人都能轻松制作3D家庭视频和珍藏回忆。空间视频通常以1080p分辨率、30 fps 的帧率进行拍摄,视场约为70度,瞳距(IPD)较短,仅为几毫米。

AIV 专为专业制作设计,通常以7200×7200分辨率、90 fps 的帧率进行拍摄,视场约为180度,瞳距(IPD)为60毫米,与人类瞳距相当。


出处:acute immersive

翻译:Katja | 盖雅翻译小组

 

Views: 87

影视制作
使用 Silverstack 进行企业内部视频拍摄

〖更新至4-8〗Silverstack 助力企业内部视频拍摄

Slide Industry
影视制作
联合国教科文组织世界遗产如何转化为 Apple Vision Pro 沉浸式视频

〖更新至1-3〗世界遗产如何转化为 Apple Vision Pro 沉浸式视频

影视制作
“如果不写他我怕我会变成他”-《出租车司机》五十周年回望

〖更新至6-7〗纽约噩梦式作品的灵感来源和深远影响