公测版来了!Assimilate发布Live FX虚拟制作实时合成新软件

技术前沿

现场合成给你看!

在片场实现成片内容实时可视化预览

Assimilate®于今日正式开放全新Live FX®软件beta测试版。

Live FX®是一款革新性软件,可实现片场绿幕与LED墙虚拟制作实时合成。同时,Live FX也是虚拟勘景的得力助手,轻松快捷创建场景合成效果。Live FX拥有最新的抠图、摄影机跟踪、DMX灯光控制等技术加持,与Notch Block相集成,并可实时链接虚幻引擎,这种实时连接不仅简化了可视化预览现场虚拟制作,甚至提升了摄影机内VFX的虚拟制作。新软件可录制一切随图像输入的动态元数据,自动为VFX/后期制作准备所需的全部内容,省时又省钱。有了Live FX,无论是自由职业还是大型制片厂的电影人和艺术家,都可以在他们所熟悉的电影/视频工作流内完成虚拟制作,无需进入编程式的工作环境。

“虚拟制作是影视制作的未来,原因显而易见——虚拟制作在后勤、差旅、设备、运输、场地设置等等诸多方面都更省时且成本更低,”Assimilate首席执行官Jeff Edson说,“Assimilate支持这种行业趋势,我们一直在开拓片场实时合成,这能为用户的制作效率和创意发挥带来巨大飞跃。Live FX可以让素材内容在进入后续制作流程和后期制作之前,即在制作工作流前端,就实现最逼真的可视化预览。我们致力于开发一套勘景时能在手提电脑上快速合成,在片场能快速检查,在更强大的制作系统中也能驱动整个虚拟制作流程的软件工具。”

摄影机跟踪

Live FX支持多种多样的跟踪系统,可满足不同的现场跟踪需求,如室内、室外、大型录影棚或小型片场,可灵活选择是否将摄影机连接至电脑。摄影机运动跟踪方面,Live FX可使用英特尔实感跟踪摄像头、Mo-Sys StarTracker摄像头定位系统、HTC Vive追踪器,甚至还能使用接到电影摄影机的智能手机内置陀螺仪和ARKit技术。即便没有专门的跟踪系统,Live FX仍可利用自身的实时跟踪算法创建摄影机跟踪。所有跟踪数据均可调节并同步到实时摄影机输入信号上,确保整个制作管线中所有数据保持同步。通过内置的虚拟摄影机校准功能,Live FX可以计算出镜头变形并现场实时创建相应的最终合成效果。

绿幕替换轻松搞定

在片场,可以轻松将绿幕抠像换为所选的虚拟背景——简单的2D纹理、360°等距圆柱投影素材、3D Notch Block、其他摄影机或虚幻引擎的实时输入皆可使用。Live FX靠其多样的抠像算法将一切变为可能。用户可以使用层堆栈创建并结合多个抠像图层,还可以将多个垃圾遮罩加入合成中。RGB与alpha通道可通过SDI或NDI分别进行输出并利用其他现场工具,如虚幻引擎,进行采集。

LED背投创造逼真的虚拟环境

Live FX支持对素材回放进行色彩管理,不限素材分辨率与帧率。可投影传统的2D文件、360°等距圆柱投影素材、Notch Block或实时信号,比如直接从虚幻引擎中将3D环境投影至LED墙上。当内容加载好后,可对其进行调色、构图调整以及更多微调操作。

DMX灯光控制

虚拟制作要打造逼真自然的风格,精准的光线是关键。Live FX搭载的DMX灯光控制引擎可以让用户在LED墙投影的素材上标记选定区域。Live FX会分析并算出标记区域内每一帧的平均色彩,并将色彩发送至虚拟制作录影棚的灯光控制,让任何场景的灯光调节变得简单又直接。大胆畅想一番——有了Live FX,不仅能创造出晴朗蓝天,更有大量丰富的动态场景,比如利用闪烁的ARRI SkyPanel制造房屋着火的效果,还有隧道中的车辆追逐戏光效也不再是难题。

Live Links

Live FX还有Live Links功能,任何接入系统的动态元数据皆可用于实时合成中。元数据从专门的跟踪系统中获取,可通过摄影机SDI信号传输,或通过开放式声音控制(OSC)协议从另一个系统中获取。比如可以将摄影机通过SDI传输的动态镜头元数据直接用于模糊纹理的动画制作。或者,还可以将摄影机自身的陀螺仪元数据链接至Live FX内置的虚拟摄影机上,这么一来完全无需额外的跟踪设备即可链接摄影机动态。

时码同步信号通路

对图像延迟的管理是对实时合成影响最大的几方面之一。Live FX可实现多个图像流的合成:实时图像流、虚幻引擎等动态渲染素材以及任何提前录制的素材。若某个输入受时码管理,那么Live FX会自动将多个输入流进行同步,使最快的一路输入延迟,以确保合成中实现100%的帧同步。摄影机跟踪可以手动进行延迟以更精确地与视频信号跟踪数据相统一。SDI输出导致的额外延迟可在Live FX中降至最低,并且输出可被同步锁定。用户还可以使用NDI交换图像数据,甚至还可直接利用GPU进行纹理共享,实现零延迟。

录制、元数据与后期准备

任何传入Live FX的内容都会被录制下来,并可以即时回放审阅。素材可录制为H264、Avid DNx甚至Apple ProRes文件,并包括alpha通道。在多个实时信号的环境中,用户可以决定是录制最终效果还是分别录制单独的原始输入信号。除了图像素材会被录制下来,所有采集并用于实时合成的元数据——包括摄影机跟踪数据——都会被保存到文件中。这些功能共同塑造了一个独一无二且无比高效的工作流:先进行实时合成,然后分别录制原始输入内容与元数据。录制一完成,Live FX就会自动创建离线合成,可即刻回放并审阅。离线合成是对实时合成的备份,并不使用实时信号而是仅使用录制文件,离线合成包含所有其他元素和动画通道,可进行进一步操作。

高分辨率素材从摄影机中备份下来后,Live FX将自动创建离线合成,并用高品质摄影机原始媒体素材替换现场录制片段。线上合成内容可加载到Assimilate Scratch®中创建包含丰富元数据的每日样片或OpenEXR格式的VFX档,其中包括一切录制的帧元数据,为后期节省时间。

“Live FX并非一座孤岛!Live FX是Assimilate Scratch高端数字电影工具广泛生态中的一环,不仅为简化工作流、提高DIT/后期制作者/导演/所有电影人产能而设计,同时还可以实现最高品质的制作,”Assimilate首席战略工作流工程师Mazze Aderhold说,“为了Live FX,Assimilate现在正在拓展与第三方软件的连接,增加了虚幻引擎元数据通讯插件,支持开放式声音控制(OSC)协议,同时还有直接的GPU纹理共享功能,让用户享受极致的片场灵活性。我们已经增加了对于一系列不同摄影机跟踪设备的支持与相应工作流,既可以服务于高端制作,也可以为独立电影人提供高性价比的虚拟制作解决方案——所有这些功能都可以在现成的常规硬件上实现。这些优势让Live FX成为一切虚拟制作项目的首选解决方案。”

来参与Live FX Beta版公开测试吧!

欢迎参与Live FX Beta版公开测试!仅需访问Assimilate官网,点击Live FX“试用”按钮。填写您的邮件地址,即可收到带有下载链接和许可密匙的回复邮件。

访问地址:https://register.assimilateinc.com/registrationob.aspx

为方便beta版用户即刻试用新软件,我们还准备了Live FX实操教学小视频。

Assimilate简介

Assimilate致力于开发与提供先进和实时的影视片场与后期制作工作流工具,为业内专业人士带来前所未有的功能、操作速度、性能表现、软件灵活性与稳定性。近期发布的Live FX是一款尖端前沿实时合成软件,有先进的摄影机跟踪、DMX灯光控制和最新的绿幕抠像技术加持,助力虚拟制作。Live Assist是一款辅助处理视频的多机位VTR工具,支持连接无限量摄影机,同时无分辨率限制,另外还自带操作简便的绿幕合成与本地-片段服务器功能。Live Looks是进行实时调色和创建直观风格的最佳工具,还可与Assimilate Scratch®即时连接用于直播和抠像操作。SCRATCH则是全球DIT与后期制作者们广泛使用的软件工具,具有先进的现场与后期制作工具组,稳定性强,操作快捷,支持任何摄影机格式元数据,包括2D/3D/VR素材。Play Pro是专业人士首选的播放解决方案,这款专业播放器可用于VFX回顾审阅、ProRes RAW质控以及在Windows操作系统上真正实现ProRes转码。

views
技术前沿
Pomfort 发布 Offload Manager 1.5.3 更新

Offload Manager – 1.5.3  更改 · 为macOS 15 Sequ …

技术前沿
Pomfort Virtual LUT Box 2.2 更新

VIRTUAL LUT BOX V2.2 针对虚幻引擎(V5.4) Tue, 01 Oct 2024 …

技术前沿
Live FX 产品套装 v9.8 先行版1167更新

舞台灯光 —— DMX 控制台灯具控制映射功能更新,更多通用细节,欢迎点击本文查看