赛场360度实时重现,望尘科技想在全景的基础上增加交互元素

36氪  •  扫码分享

赛场360度实时重现,望尘科技想在全景的基础上增加交互元素

VR赛事直播的概念已不新鲜,国外知名公司NextVR、JauntVR已经完成C轮融资,国内大公司诸如暴风、乐视、华人文化(微鲸)也已涉足。不过,这还只是对比赛现场360度全景直播,往往都需要有设备进入场地之内进行拍摄,部署困难,用户也往往只能默认导演设定的观看视角。望尘科技则希望更进一步,给用户提供更自由灵活的视角。

具体来说,望尘科技希望将赛场360度实时建模重现,还原赛场上的一切,呈现给玩家。而玩家可以“身处”赛事本身中,在赛场“来回走动”,不仅能从任意位置以任意视角观看比赛,在C罗射门时站在他旁边,在点球大战时“客串”门将,还能实时查看赛场、运动员等比赛相关数据。

赛场360度实时重现,望尘科技想在全景的基础上增加交互元素

从概念上来看,望尘科技想做的最接近以色列公司Replay technologies。不过,在技术实现路线上则并不相同。本质上,Replay technologies还是接近NextVR、JauntVR,都是在做赛事的重现,实现方式上都是使用基于采样点(viewpoint)上的“全景拍摄”或“超广角拍摄”来实现:在一个或者几个固定的机位放置朝N个方向的几个摄像机 ,将多个摄像头拍摄到的视频流缝合成一个180度或360度的全景视频流 ,客户端vr播放器根据用户头部的朝向渲染用户所面对的视角区域的视频部分。

望尘科技想要在这个基础上增加“交互”,要输出的内容就不仅仅是“视频流”,而应该更接近“三维模型流”。为此,望尘科技研发了内部称为innoReal的技术,每隔5-10度在球场部署一个摄像机环绕整个球场,采用三维重构的技术(multiview stereo)将场上跑动的运动员和场景的三维模型重建。

为了提高成像质量,innoReal在部分关键机位采用了光场相机采集数据。光场相机可以为三维重构做初始的深度标定,能极大提高成像质量和降低运算复杂度,从而实现真正实时的三维重构,且带来更优的体验。

目前团队已经在一个10mX10m的实验室做过技术原理验证。 望尘科技表示,innoReal技术的另一个优势就在于,更高的扩展性。当要实时建模的场地扩大,至需要更换更高清的摄像头即可。

相比于纯赛事重现,这套设备会采用30-60个高速相机(包含一定冗余),成本要更高,一般一个足球场会在200万左右。但后期随着算法的优化,成本将进一步降低。不过,这个费用相比于一个体育场的建造成本,仍微乎其微,加上后期体育场可以通过后续的内容持续收益,所以有赛场资源的俱乐部等赛事版权相关方感兴趣。目前,望尘科技也在积极与中超、欧洲顶级联赛、NBA洽谈合作,这套方案最早有可能在明年的足球、篮球或者拳击类赛事中率先进行商业尝试。

不过,对于老的体育场来说,这套系统因为涉及到大量的后台计算设备,施工还需要布线安装。望尘科技表示,大部分体育场都会预留布线的卡槽,并不会是一个太大的难题。

望尘科技(GALA Sports)成立于2013年,此前一直在做在线体育游戏产品,出品过手机游戏《足球大师》,成立即获得龙渊云腾等机构数百万元天使投资,在2015年获得创新壹舟、亚商资本、抱团创投的数千万元Pre-A轮投资。望尘科技也向36氪透露,最近团队和Google Daydream团队有所接触,他们将会获得Google的支持,成为Daydream平台上第一批发布应用的中国内容开发者之一。

随意打赏

360度全景视频360度全景照片360度全景相机
提交建议
微信扫一扫,分享给好友吧。