VISBIT在线流畅播放12K VR视频,想从软件端解决卡顿与高清的矛盾

36氪 显示图片

VR视频行业除了面临内容缺乏,尤其是优质内容缺乏之外,在体验层面也如同互联网视频行业发展的早期,画面清晰度和播放流畅度都是这一时期亟待提高的性能指标,行业参与者也在从各个方面进行改善,包括拍摄设备、网络传输、终端屏幕等等。而VISBIT则从软件解码的角度,想既确保VR视频的高清,又尽量少地占用数据传输带宽。

VISBIT的联合创始人Elaine Lu向36氪介绍,全景视频单一视角要做到720P的画质,整个视频量级就要接近4K。以北美的网络传输能力为例,家庭平均带宽约为1080P,无法达到对4K内容的传输。所以即便拍摄端做出4K画质的内容,而在终端上,观众还是只能看到压缩后的画面。如果想要优先保证清晰度,那就只能忍受龟速的视频加载。

而人们在体验VR内容时,重点关注的区域大概只有全景画面的五分之一。而视频内容在加载下来的过程中是无差别的将360度内容全部请求下载的,因此对网络传输能力就产生了严重的挑战。VISBIT通过视域优化选择算法可以解决上述问题,根据体验者当前的视角,仅对观察区内视频信息进行高清数据加载,观察区外则配置较低清晰度的画面,总体上减少了VR视频的数据量,有效传输效率最高可以提升80%。

这套技术的难点在于,除了一般意义上VR画面跟随人的动作进行变化可能带来的延迟要符合当前的低于19毫秒的标准外,VISBIT还需要保证体验者在动态调整视角时,清晰度也能够迅速切换,延迟时长要在一个无感的范围内。具体表现为,当我们在转动头部,不停变换观察角度时,不会感受到画面从模糊到清晰的变化,整个过程需要流畅自然,VISBIT目前已经可以实现这样的体验。除了此前,VISBIT曾经披露过的,能够在1080P的网络传输环境下,各类VR终端都可以完整表现4K甚至8K画质,最近他们又研发了在移动VR设备上,通过Zooming(双击放大),可以进一步加载高清VR视频,使得4K画面继续提高画质,能够观看到12K的效果。

事实上,VR内容制作者在视频高清画质的追求上,跑得可能要比当前用户将会获得网络带宽的发展速度要快得多。尽管今年MWC期间号召5G成为了行业一个重要的需求,但是在SXSW(South by Southwest)展会上,已经有不少开发者拥抱了8K视频,甚至10K、12K也有出现。而未来VR/AR技术还需要采集大量的实时互动数据,甚至还会逐渐应用数据量更大的光场技术,那么谁在数据压缩、存储和传输层面积累更强的能力,谁就会在未来技术路线的选择方面获得更多的自由度。

市面上想要实现类似功能的公司非常少,最具竞争力的就是Facebook有团队在通过ViewPoint技术来做。他们的技术路线于VISBIT有本质上的不同。我们可以认为,VISBIT是实时地抓取体验者随机变换的视角,并进行低清高清的转化。而Oculus的方案则是预先将视频制作出30个前面清晰、后面逐渐模糊的画面,每个相邻15度,相当于是提前做了视角的聚焦处理,再根据体验者视角变化进行流媒体切换。

此外,西雅图的Pixvana也是这一市场重要的参与者,他们使用的技术为FOVAS( Field of View Adaptive Streaming ) 。2016年10月份,该公司与Valve合作展示了他们的1080p 带宽传输 10K 内容Demo,但是据媒体报道,当时的分辨率转换延迟还不太理想。该公司曾在2015年底获得Madrona Venture Group、Vulcan Capital 等机构共计600万美元的种子轮投资。

VISBIT并没有释放他们与行业大厂合作的信号,总体而言,他们在商业角度对自身的定位是兼容性更广泛的第三方流媒体服务平台。他们直接面向的客户是VR视频的发行方和APP开发者。客户将SDK集成到其需要视频传输服务的APP后,就可以从VISBIT提供的管理平台进行360度视频的上传、转码、处理、视域优化等等操作,最终在APP播放器的层面输出当前网络条件下能够实时转化清晰度的VR视频内容。这样的云服务、播放器SDK和后台内容管理平台的一套整体解决方案将会进一步降低VR内容制作方的技术门槛。目前VISBIT服务平台处于封测阶段,客户以欧美B端为主,暂时没有披露更多运营数字。

VISBIT创办于2015年3月,目前还处于非常早期的发展阶段。总部设在硅谷,团队仅有10人,其中6名是研发人员,基本是来自谷歌、微软、雅虎等公司,从事视觉开发相关工作的华人工程师,工作经验3-10年不等。

技术合伙人周昌印(CY Zhou),在哥伦比亚大学获得了博士学位,其导师是计算机视觉领域奠基级的学者,也是工程院与科学院双院院士。周昌印本人是Google X GCam小组的创始成员之一,为Google提供视觉方面的关键技术。曾参与研发Google Glass。周博士也曾任职微软亚洲研究院,NVIDIA研究院。是该领域20多项专利的发明人。

COO兼创始人卢毅是获得了康奈尔大学的MBA学位,曾在硅谷公司TangoMe担任高级产品营销经理,之前是畅游北美分公司的商务总监。还曾在微软、喜达屋集团和马斯克集团担任过各种职务,在移动互联网、软件开发等多个行业拥有十多年商务开发、市场营销和产品管理的经验。

VISBIT曾在2016年12月获得Presence Capital、 ZhenFund、Colopl Next、Amino Capital和Eversunny共计320万美元的种子轮融资。他们将会在今年展开下一轮融资计划。