Apple 沉浸视频的新功能
探索 Apple 沉浸视频工具、资源和相关技术的最新更新。
Apple 沉浸 Live 格式
实时体育赛事和活动需要的不仅仅是报道，而是身临其境的感觉。直播的 Apple 沉浸视频恰恰能实现这一点，它能将每一次激烈拼抢、每一次观众山呼海啸般的呐喊，以及每一个戏剧性瞬间，都以栩栩如生的清晰度和比例呈现在 Apple Vision Pro 之中。实时媒体格式和工具可将原生的 Apple 沉浸视频工作流直接集成到基于 SMPTE ST 2110 构建的专业广播基础设施中，将 ProRes 视频、空间音频以及经过校准的镜头元数据一同传输，然后再编码为 MV-HEVC。欢迎探索实时沉浸内容制作的完整流程。
Immersive Media Support 框架
Immersive Media Support (IMS) 框架提供了读取、写入和创作 Apple 沉浸视频的丰富元数据所需的一切工具。IMS 此前已登陆 visionOS 和 macOS，现在更扩展至 iPadOS 和 iOS，通过统一的跨平台 API，将沉浸内容的处理、控制和播放功能带到 iPhone 和 iPad 上。
在直播和复杂的制作场景中，即使相关摄像机参数并未包含在原始场地描述中，你也能对其进行掌控。新的摄像机覆盖功能让你能够内联定义摄像机，在制作过程中根据需求扩展或替换静态元数据。你可以引用现有摄像机或引入新摄像机，并指定旋转角度、校准模型，以及从 AIME 数据衍生的可选遮罩。覆盖设置会在渲染时针对具体帧应用，让你能够逐帧控制沉浸内容的拍摄和呈现方式。
在 visionOS 27 中，除了原有的 X 轴翻转之外，还新增了 Y 轴翻转功能，可处理以任何方向安装的摄像机所拍摄媒体的呈现。在播放过程中，翻转操作会充分感知立体影像，确保正确处理左右眼画面的立体配对关系，从而使倒转摄像机拍摄的素材能够无缝集成到你的沉浸内容制作中。
用于 Apple 沉浸视频分发的静态注视点
Apple 沉浸视频 (AIV) 以每眼 8K 分辨率、每秒 90 帧的规格拍摄，每秒生成超过 100 亿像素。即使通过现有最快的网络流式传输如此庞大的数据量也是不现实的，但如果将画面缩小到 4K，又会牺牲赋予沉浸内容临场感的像素密度。而现在，创作者可以采用一种静态注视点分布函数，将大部分较小的画面空间分配给最重要的像素，通常是鱼眼镜头画面的中央区域。其结果是生成一个可流式传输的 4K 帧尺寸，并依然保留了原始 90 fps 下绝大部分的感知分辨率。这也是 Apple 沉浸视频能够以易于流式传输的文件大小实现如此高的感知清晰度的原因之一。一个新的示例项目演示了如何将这项技术与 IMS 配合使用，以可流式传输的帧尺寸呈现高清晰度的沉浸视频。
独特尺寸的门户视图
观看 Apple 沉浸视频是一种令人惊叹的体验，但有些时候你需要降低沉浸感，例如在进行多任务处理时，或是作为交互式应用程序的一部分。门户视图能够很好地降低沉浸感，但默认的 16:9 宽高比可能会裁切掉一些重要内容。为解决这一问题，你的播放 App 可以为门户观看模式自定义宽高比。在基于 AVKit 的 App 中，可通过 AVPlayerViewController 的 AVPlayerViewController.viewport.portal.aspectRatio 进行设置；在基于 RealityKit 的 App 中，可通过 VideoPlayerComponent 的 VideoPlayerComponent.portalSize 进行自定义。
Apple 空间音频格式
适用于 Pro Tools 的 Apple 空间音频格式 (ASAF) 制作套件 (AAX) 插件迎来更新，为内容创作者提供了更强大的创作掌控力。你可以将对象相对于参考视频进行定位，并在使用全景声时充分利用重要的改进，包括新的场景压缩器插件、增强的热力图绘制功能，以及优化的空间滤波算法。更丰富的对象朝向控制以及对更多声道床布局的支持 (包括独立的 LFE 和中央声道) 扩展了混音选项。“ASAF 视频播放器”App 的状态现在会随你的 DAW 会话一起保存，因此你可以从上次中断的地方无缝地继续运行工作流。
