索尼正在实验 PS VR 的直播分享与 MR 视图功能

映维网 2018年04月14日)在上个月的GDC2018大会上,索尼Research & Development West的高级团队负责人Richard Forester曾探讨了PSVR的直播与分享功能。

今天的PSVR用户可以访问常规的PS4广播工具。借助“Share(分享)”按钮,你可以捕捉屏幕截图,视频和直播游戏,在“Social Screen(社交屏幕)”显示第一人称视图。但得益于支持画中画视图的工具,以及甚至是允许将玩家合成至场景中的混合现实视图功能,PC VR在这方面早就已领先一步。

在当时的GDC大会上,Forester表示直播实验尚未纳入PSVR的SDK路线图,但主题演讲同时清晰地表明,索尼有兴趣为游戏直播寻找新的和优化的方法。

Forester为实验工具确认了几种不同的模式。

首先是他所说的“轻松访问广播”,类似于用户能自行管理的低产直播。这种方法同时类似于当前支持PSVR用户的SHARE(分享)功能,但允许玩家将虚拟相机放置在他们的游戏世界中,而不是单纯地广播第一人称Social Screen(社交屏幕)视图。Forester表示可以修改第一人称视图以实现更好的共享体验,包括重新渲染正确的全屏输出视图(而不是依赖于为头显渲染的裁剪和翘曲视图版本)。除了通过后期效果改变输出的外观和感觉,系统同时可以应用能够消除头部抖动影响的相机稳定模式。

另一种模式将涉及更多的制作流程:需要设置一个“沙发上的制作人”。第二名用户将担任直播导演,然后坐在VR玩家旁边的沙发上,使用控制器来实时调整相机视图和其他设置,甚至是提供现场评论。

Forester解释说,为了探索其中的概念和如何能够进一步提升直播体验,R&D West团队已经构建了一个Air Hockey(桌上冰球)VR演示作品。

随着他们开始尝试第三人称相机视图,调整第三人称相机对玩家的渲染方式显然能够带来更好的直播体验。例如Forester认为,尽管游戏本身并不需要,但为角色添加一定的运动特性将能进一步优化第三人称视图。Forester指出,诸如眨眼这样的眼睛运动和对象追踪同样可以增加角色的可信度,令其变得更加有趣。

这支团队同时在尝试支持混合现实视图,而这一点在PC VR内容的高产量广播中十分流行。除了借助绿幕将玩家形象合成到游戏之外,Forester表示游戏或许可以输出一个遮罩,令玩家合理地出现在游戏世界内容的背后,而不是说只是出现在内容之上(如上图所示,玩家出现在桌上冰球桌“之上”,而不是说出现在它的背后)。

当然,合成和遮罩需要额外的资源,从而可能影响VR游戏的性能。Forester建议采用第二台PS4 Pro,专门为实时广播和合成生成输出,而这可能包括4K和HDR输出,额外的着色器效果等等。

除了游戏直播外,Forester表示他们的团队希望这种先进的分享功能可以帮助开发者推广他们的游戏,包括支持专业直播者直接进行直播,以及帮助用户捕捉VR游戏中的酷炫时刻。他指出,展会同样能从这种功能中受益,因为索尼和其他厂商将能更好地向其他与会人士展示玩家体验游戏时的情景。同理,这种功能也可以为VR预告片的制作提供帮助。

索尼在GDC 2018大会上展示了一系列用于实验的内部演示作品,但没有透露哪种功能将有望真正登陆PSVR。