专利暗示苹果考虑为 VR 提供更好的 360 度视频拼接方案

映维网 2018年08月17日苹果正在探索为VR头显提高360度视频内容:一种拼合视频多方向图像数据的方法,使其出现的失真小于当前拼接应用和编码器产生的失真。

美国专利及商标局今天发布了苹果于2017年2月15日提交的专利,名为“Processing of Equirectangular Object Data to Compensate for Distortion by Spherical Projections”的发明旨在修正拼合视频时的错误与问题。

文件指出,视频可以从多个视点捕捉主题或场景,例如令多台相机指向同一地点,或根据最近的行业发展,使用能够录制场景所有方向的球形相机。对于手持式视频,或对于能改变相机位置和视点的图片而言,图像可以提供许多可以合并至场景的额外数据。

苹果写道:“许多现代编码应用程序并不是为处理这种全向或多方向图像内容而设计。”这表明应用程序是假设图像数据属于“平面”或从单个视图捕捉,意味着如此应用程序没有考虑处理可能出现的畸变,因此无法识别图像内容中的冗余,反过来又导致效率低下。

简而言之,编码器将视频分成像素块,而对于每个像素块,编码器可能将其与参考图片中关于场景的其他数据进行比较。利用对搜索块和参考数据的预测搜索,编码器可以对像素块执行不同的操作,使其看起来更适合于用户。

例如,为VR头显用户设计的球形视频在制作时可以专门考虑这种格式。与此同时,用户看到的相同内容视图可以在第二台显示器上直播显示,但进行一定的调整以显示为正常的“平面”视点,消除从球形视图变成平面视图时的任何畸变。

这同时可以利用多个平面视图来创建球形图片,相同的系统能够对其进行修正调整,令其可以用于球形视频。

需要注意的是,苹果每周都提交大量的专利申请,但很少能真正成为产品或服务。专利申请无法确保一个概念能出现在未来的消费者设备中。

专利文件中的概念可能存在一定的前景应用。首先,这可以允许用户通过360度相机录制视频,合理地拼合视频,从选定区域创建剪辑,进行转换,使其看似最初就是通过“平面”相机录制。

第二种前景应用是VR,可用于创建球形视频,以及提供头显用户的平面视图。使用360度相机制作的视频可能是未来VR用户的主要内容来源,但能够修正畸变,伪影的能力将能提高内容的观影质量。