苹果今天宣布将在最新发布的iPhone 15 Pro系列手机上推出一项新功能——空间视频拍摄，该功能将与其在6月份发布的空间Vision Pro相结合，为用户带来空间视频体验。苹果表示，这些空间视频将“让你在Vision Pro上以一种新的方式重温你的记忆”。

不过在发布会上，苹果并没有深入的探究这项技术的细节，仅仅是简单的介绍了一下该功能的实现方式——通过将iPhone 15 Pro系列手机的主摄像头与超广角摄像头相结合，实现了空间视频的拍摄。而更低端的iPhone 15以及iPhone 15 Plus则不支持该项功能。

从宣传片中拍摄者的动作来看，通过iPhone 15 Pro拍摄空间视频时仅仅在适中的距离采用固定机位即可完成拍摄。值得注意的事情是，佩戴Vision Pro观看空间视频的场景中，尽管渲染了空间视频窗口在不同角度下的不同画面，但苹果并未直白的表明这是Vision Pro头显中的画面，佩戴Vision Pro的人仅仅是坐在沙发上头部并未做出任何转动动作。

目前我们还不能清楚的了解到通过iPhone拍摄的空间视频是①仅仅具有固定视角的3D画面，还是②在一定程度上可以在6DoF的交互环境下让用户以自由视角去观看。此外，苹果在发布会上介绍空间视频的拍摄时，并没有提及LiDAR是否参与了其中，也为这项功能带来了重重疑问。

这里我们将简单的探讨一下①②两种方式拍摄空间视频的差异，以推测苹果在iPhone 15 Pro实现空间视频拍摄的技术路径：

简单来说，①更接近于传统3D电影的制作方式——通过两个合理设置间距的镜头进行拍摄，两个镜头间的画面具有视差，并分别呈现给人的左眼和右眼，最终产生3D的画面。

考虑到iPhone 15 Pro实际镜头的间距较小，在最终生成空间视频时苹果或许还需要在iPhone上进行额外的工作，例如引入LiDAR深度传感器的数据对原画面进行重投影生成符合双眼视差的画面。

这套方案较为成熟，但缺点就在于用户必须在特定的位置和视角才能享受最好的观看体验。

②的效果更接近于另一个概念，即体积视频（Volumetric Video），然而用苹果宣传片中的拍摄方式生成空间视频并提供6DoF环境下不同视角观看的能力，存在着一个很重要的缺陷——一旦场景中存在两个物体相互遮挡，在不限制视角的情况下必然造成穿帮，因为镜头无法记录被遮挡物体的画面，如果视角改变被遮挡的部分从视野中露出，谁也无法凭空补足原先被遮挡的部分。

这也是为什么大多数体积视频制作时需要「鸟笼」的原因：通过更多不同角度的镜头，避免拍摄死角的出现。

▲体积捕捉时由镜头阵列构成的「鸟笼」。

▲Google Project Starline，即使只需要拍摄用户仅能从正面观看的体积视频，也用到了分布于屏幕上、左、右三个方向的镜头阵列。

当然，如果限制好观看角度，苹果应当具备根据前后帧画面补全少量被遮挡区域画面的能力，这或许也是苹果仅仅推出了空间视频功能却没有推出空间照片功能的一个重要因素，视频有前后帧画面作为参考，但照片没有。

不过话又说回来，既然已经限制了观看角度，方案①最终的呈现效果和实现难度，或许要更具优势。

又或者，在①和②之外，苹果业界独一档的研发能力开辟了一条超出大众认知的新方案，同时解决了观看视角和物体遮挡的限制，也不无可能。但最终答案的揭晓，或许还要等待这项功能的正式发布。

原文来自https://www.93913.com/92260.html