在12月咪咕举办的音乐盛典上,一张屏幕从天而降,“虚拟”潘玮柏出现在了舞台上,其形象与真人无异。这背后用到的是干涉原理记录并再现物体真实的三维图像的技术,也就是全息投影。这次演出背后的技术提供方是来自上海科技大学孵化的计算机视觉领域的“准独角兽”——叠境数字。

“5G时代,我认为内容生产方式,用户消费内容的方式都将会发生改变。”叠境数字的业务发展副总裁李欣跟我们说道,而叠境数字拥有领先的光场采集及成像技术,该技术在5G大流量时代拥有广泛的应用场景。叠境数字以智能计算机视觉技术、光场技术、机器学习技术为核心,自主研发了人/物/环境三维重建技术、独特的动态真人三维拍摄技术、实时全息技术等。

李欣介绍,叠境数字几年的探索和市场验证,确立了几个核心产品线:虚拟数字人、5G自由视点和全息投影等。首先虚拟数字人,是指用Volumetric Video(容积视频)的技术来制作完全一比一还原的人,具体来讲,它是由上百台专业相机组成的光场影棚,通过机器学习和深度学习算法进行重构,形成高逼真、高还原、高精度的三维模型,这些三维的内容可以通过AR/MR/VR等形式进行观看和互动应用。

“可以想象一下,现在在你面前的,可能并不是真正的我,而是一个数字化的我,因为这个数字化的我可以栩栩如生的还原我的一举一动、所有神态,你可能根本分辨不出来眼前的我究竟是真是假。”李欣说道,值得一提的是,叠境目前建造出孪生数字人的时间远比想象的要快,这让原本耗费大量人力和时间成本的建模过程变得简易快捷,同时降低了内容制作成本。

另外,虚拟数字人有一个不得不提的分支,那就是就是虚拟偶像。洛天依、初音未来等虚拟歌姬很多人并不陌生,这其中蕴含着巨大的商机。李欣介绍,叠境具备虚拟偶像领域两项不可或缺的核心能力:快速建模能力和流畅的动作捕捉能力。目前经过资源整合,叠境已经拥有了从角色策划包装到内容制作、线上运营和线下活动落地的全案能力,可以从零帮助品牌方打造虚拟偶像。此外,光场三维重建还可以在文物重建、旅游观展等有很大的想象力。叠境与上海博物馆在文物数字化、虚拟展厅等方面有诸多合作,可以让参观者从官网上感受“动态”的文物展示。

叠境第二大类产品是自由视点,它是一套多相机环绕式拍摄系统,可以快速制作并生成子弹时间特效,让导播将堪比大片的视觉特效放在电视节目,这类产品已经在电视综艺、体育赛事等专业级的赛道上有了成熟的应用。李欣举例说,比如看一场篮球比赛,在过去只能看到有限几个导播选择好的固定机位内容,现在可以在现场部署上百个机位,用户在看比赛的时候,在客户端可以通过滑动手机屏幕,选择任意视角,还可以放大缩小、360度旋转观看。“在未来,内容生产方式很有可能出现新的分支,不再是导播决定我们来看什么内容,而是由用户自由决定观看内容。”李欣介绍,叠境合作了2019天猫杯国际网球公开邀请赛,从2020年Q3开始,叠境又陆续合作了腾讯的《超新星运动会3》、《舞者》等,为观众提供自由视点内容。

最后一个核心产品便是刚刚提到的全息投影。今年外滩大会上,马云通过全息投影出现在现场,发表演讲,又带来了一股全息投影“跟风”热潮。叠境也在今年负责了世界VR产业大会的全息演讲和12月刚刚做完的咪咕汇音乐盛典全息板块。除此之外,叠境在教育领域也开始应用全息技术,今年在三亚、上海落地了全息课堂,让偏远地区的孩子也能通过全息,实时的享受到名师资源。

每一次技术和产业上的变革,都会带来经济和社会生活的发展和重构,而技术的发展真的是充满想象空间的。李欣跟我们分享了他想象中的未来世界:“想象未来某一天清晨,真实的你在家中喝着咖啡,通过数字孪生和全息技术,你的虚拟影像已经出现在了异国会议室开会。午休时间,办公室中的你也能穿越到一场虚拟的比赛或演唱会现场,而且不用纠结票面位置,可以通过自由视角随意选择想看的角度,甚至可以站到台上和明星实时互动。没有时间去旅行?我们可以足不出户就在虚拟世界中任意畅游,完成环游世界的心愿。”

据了解,叠境是2016年成立的,到现在四年时间团队八十人左右,在中国上海、美国加州都有办公地点,70%以上都是研发人员,在叠境团队,博士占比达到了35%。叠境的创始团队均为人工智能、计算机视觉领域的顶级专家,来自麻省理工、中科院、上科大等知名高校,拥有该领域几十年的研究积累和上百项专利。

截至目前,叠境已经获得来自金沙江创投、上海联和、赛富基金、IDG资本、阿里巴巴等四轮融资,最近一次是2019年8月乔贝资本领投的A+轮。