7ab808ed-eee6-4800-b1af-47e84ad9fa44

动点科技「一问」:每天为你讲述一家创业公司。

关于虚拟现实,人们首先想到的往往都是那以假乱真的全景视频,几乎所有创业者都将注意力放在了如何提高画质上。然而,电影行业内有句话说得好,“没声音再好的戏也出不来”,这句话同样甚至更加适用于VR行业,声音能让场景更加真实。

“对于某些VR内容,你可能觉得沉浸感不够强,其实很多时候这就是声音造成的,全球做全景视频或者VR比较好的,他们的声音一定都做得非常精美。”孙学京如此告诉动点科技。目前,专注于全景音频的企业其实还不多,而孙学京与合伙人联合创立的时代拓灵便是这少数中的一员。

类似于记录了某点周围360度所有景色的全景照片,全景音就是记录了这个点周围360度所有声音的技术,使用上,VR全景声要根据观众头部旋转和位置的变动,对音频进行时时的调整,突出这个方向上的声音,并消弱其他方向的声音,也就是说,站在不同的地方、甚至侧身换个姿势,用户所听到的声音都是不一样的,用户甚至可以通过声音判断出导弹的方向、速度和距离。以最大程度的创造沉浸式的仿真体验。为此,其在数据采集、数据处理上都与传统音频技术有很大的区别。

猎豹截图20160512072927

具体来说,时代拓灵主要有两大核心产品:拓灵VR 360声场录制机以及拓灵VR全景声引擎。

VR 360声场录制机

其是声场麦克和多轨录制的结合,支持 48/44kHz 采样率及 24bit 精度,支持实时输出监听,现场回放。在多数场合可以取代笨重、昂贵的传统声场录制设备。可以随时随地录制高品质全景声场。

另外,为了让感受音频与全景视频的配合,时代拓灵还基于运动相机开发了自己的多镜头全景摄像机,实时GPU高速完成360°+180°的无缝拼接,为用户提供沉浸式视觉体验。

VR全景声引擎

全景声引擎则是时代拓灵核心的核心,其可以为用户提供高标准的耳机三维全景声解决方案。利用独有的全景声场模拟算法,将环境声(ambiance)和虚拟声源(object audio)精确的还原在三维空间里。声源的位置,方向,距离以及运动轨迹等都能够通过耳机被清晰和准确的感知,并且还支持支持头部旋转和移动下的声场重建。另外,利用特有的声场空间变换算法,其还能确保多声源复杂场景的呈现高效准确。

目前,该引擎可以用于Android, iOS,Windows,Mac OS 以及unity平台。值得一提的是,时代拓灵最近还推出了免费版本的VR全景声引擎“TwirlingVR Audio SDK”。

20150924080947_22142

时代拓灵成立于2015年5月,联合创始人孙学京毕业于美国西北大学、北京大学,曾就职于杜比实验室,拥有多年声学开发研究经验;联合创始人刘恩拥有MBA和计算机硕士学位,曾就职于美国摩根斯坦利投资银行,也是原麦田守望者乐队主创;联合创始人张旭更是拥有多年世界500强企业管理和创业经验。并完成了由友田资本、启迪之星联合投资的Pre- A 轮融资。

“我们和所有同行一样一直在追求沉浸式的100%临场感,目前在大部分应用场景都可以达到95%以上”,孙学京如是说。据动点科技了解,到目前为止,时代拓灵是国内唯一一家能够将全景视频和全景声音打包制作的公司。

其已经与影视公司合作拍摄带有VR全景声的虚拟现实小电影。影视方提供剧本与导演,而时代拓灵则提供拍摄制作的技术与设备。拍摄的题材多为5min之内的系列魔幻或惊悚剧。目前已经杀青的有与国内工作室梦方洲团队合作,向日本著名恐怖小说《午夜凶铃》致敬的VR版本的恐怖片《贞实の恐怖》,以及与千山影视合作的《梦魇》等。

猎豹截图20160512072153

另外,时代拓灵也已和VR设备厂商签署战略协议,支持原生全景声的播放,并和VR头盔厂家、硬件解决方、软件平台播放厂家等展开合作。

最近,回过神来做全景声的企业越来越多,其中最为重磅的非英伟达(Nvidia)莫属。近日,英伟达在其举行的特殊编辑者日上推出了一款号称全球首个基于物理技术的声学仿真技术——VRWorks Audio,其可以将音频交互映射到3D场景中的物体上,实现了完全符合听觉和声学原理的音频,使用者在不断的移动中,能听到回声不断的变化,并且还能感受到回声所带来的空间感、距离感。

随着虚拟现实的火爆,更随着巨头的纷纷入局,相信全景音频也将很快爆发。