新专利显示未来苹果硬件可以从平面视频中创造出合成现实场景

　　本文来自cnBeta

　　苹果公司正在开发一种系统，可以从平面视频内容生成混合现实或虚拟现实环境，让用户在原本只能是二维的片段中穿行和探索。周四由美国专利和商标局公布了名为“用于生成平面视频内容合成现实重建的方法和设备”的苹果专利。该专利开宗明义地将合成现实（synthesized reality）或SR定义为数字生成的物体和环境。SR本质上是一个广泛的类别，苹果表示包括虚拟现实、增强现实和混合现实。

　　用户可以在设备上参与SR体验，无论是iPhone或iPad这样的手持设备，还是传闻中的 “苹果眼镜 ”这样的头戴式设备。他们可以通过一种或多种感官，包括视觉、味觉、嗅觉和触觉，与SR环境进行互动。然而，该专利的大部分内容集中在一个可以从平面视频内容中生成SR角色、物体和环境的系统上。换句话说，它可以将电视节目变成一个用户可以用上述设备探索的VR环境。

　　正如苹果公司所指出的那样，大多数SR内容都是提前精心制作，然而，该专利描述了一种通过 “利用数字资产 ”生成视频内容的按需SR重构方法，以无缝、快速地将平面内容移植到SR体验中。该系统工作原理是识别场景中的 “情节执行者”，合成场景描述，并通过根据场景描述驱动与第一情节执行者相关联的第一数字资产生成场景重建。

　　虽然系统可以根据视频内容生成SR重建，但它也可以从相关文本内容和外部数据中获取信息。那可能是视频片段中演员的照片、演员的身高和尺寸、场景的各种视图以及其他数据。在一些实施例中，数字资产至少部分地基于视频内容和与视频内容相关联的外部数据而即时生成。有趣的是，苹果还指出，类似的SR生成系统可以基于音频和相关内容，包括有声读物、广播剧和其他纯音频内容建交互式场景。

　　苹果每周都会提交大量的专利申请，但是无法保证其中所描述的技术能够进入市场。同样，专利申请也没有给出任何迹象表明苹果何时会发布搭载该技术的新产品。