虚拟现实的元年给许多产业带来了新的商机,其中不乏视频、直播等。国内众多的视频平台也都在探索VR直播所能带来的用户效果,然而对于如此广阔的VR直播市场来说,技术的缺失让人感到无奈。传输、延迟、画质等是他们必须面临的一些问题。

在行业初期,蜗牛VR并没有和其他公司一样急功近利的制作出一些非常低质的产品或是搭建直播平台竞争。他们选择从技术领域着手,首先克服目前存在的技术难题,再做另外的打算。

实际上,蜗牛也算是VR行业的老兵了。早在几年前,蜗牛就曾开发出一个VR虚拟购物网站。然而因为市场尚未成熟等原因,该项目最终只能被搁置。不过这也在蜗牛VR CEO李嘉俊心中埋下了一个虚拟现实的种子。

“VR一直是蜗牛的一个梦,而且我们相信未来5-10年VR行业会有一个相当好的发展,所以我们在整体战略上对VR投入的精力还是很大的。”蜗牛VR CEO李嘉俊说道。

VR直播中的坑与经验

在蜗牛VR成立早期,李嘉俊就坚持以研发核心基础能力为中心,不断优化音视频整体体验,从采集到上传,存储到分发最后到播放,在每一环节投入人力进行攻关,致力于提供用户优质的整体体验。

目前蜗牛VR已经给众多传统领域如医疗、演唱会等提供了一系列的整体视频解决方案。与其他公司相比,蜗牛VR有着明显的优势。

首先,蜗牛VR的方案可以在导播端、主播端和用户端都可以切换机位。其次,蜗牛VR采用SDN和光纤,在全国部署了几十个节点,现场的视频数据同步到云端,然后分发到全国的服务器。同时,蜗牛做了一些智能解析,不同地区的用户会解析到不同运营商的服务器上,让用户可以看到高清的视频。

尽管蜗牛VR的整体方案已经初具规模,但是李嘉俊坦言,VR直播涉及非常多方面的东西,从拍摄到采集拼接,然后再到传输编码、编解码、传输分发、播放器,最后播放的设备,还是有经过蛮漫长的过程。实际上在采集拼接端,还是存在许多问题的。

VR医疗直播案例

李嘉俊发现,每个地方可能跟以前拍摄的曝光度、光线的照射程度不一样,会带来不一样的效果。除此之外,在VR拍摄过程中,安全距离也是非常重要的。 因为在2米以内的拍摄,会有安全距离的限制,这是需要一直优化和改进的。直播是整个端到端非常直接的过程,里面还是有非常多的东西需要考虑。

在直播过程中,不管是拍摄、传输、播放,都有非常多的讲究。比如说播放端,需要控制低于20毫秒的延迟,甚至需要60赫兹以上的屏幕刷新率,甚至需要1K陀螺仪的传输,另外不能低于3亿个输出单元。特别在高码率传输的时候,用传统的传输会产生许多问题。

针对网络传输问题,李嘉俊表示,“我们的SDN+CDN网络,可以通过类似大脑感知的方式,让VR直播的视频流走一条最优的网络路径。”

传输分发仍是难点,开放SDK助力内容发展

随着直播领域的热火朝天和VR技术的发展,商业视频成为了VR内容的重要产出部分。相比需要复杂内容设计的VR电影、VR影视剧、VR广告,VR直播是VR视频的一个突破口,暂时解决了VR视频资源缺乏、无法落地的困境。

纵观2016年整个VR行业的发展传统形式直播VR化主要得益于VR的沉浸感提升,给用户带来了身临其境的感受,使得传统的直播内容更受消费者的喜爱。虽然 VR 视频高分辨率带来的传输带宽问题依旧成为直播的难点之一。但是在2016年,蜗牛VR也在VR视频直播领域有了较大突破。

通过采集推流端,蜗牛VR推出高效的推流方案。用自有网络拥塞算法,对推流端网络做防抖动优化,自研推出超级mifi套件,利用多张4G卡联合上传,解决推流信道带宽低以及不稳定的问题。结合直播推流SDK和云端合流技术,保证无线环境下高码率的推流稳定。

另一方面,蜗牛VR在传输分发领域推出了节省带宽的方案。目前最好的解决方案就是用H.265编码格式实现。推流编码、云端转码、最后到 播放器解码,蜗牛云全流程支持H.265方案,且rtmp、Hls、flv全协议支持,能够节省带宽最高达50%。

开放播放器SDK

需要注意的是,在2016年,蜗牛VR推出了免费播放器的SDK,让更多的团队可以直接调用接口,快速建立自己的VR直播平台。

李嘉俊表示,“我们现在做的事就是把大家进入VR行业的门槛降低,同时也是在验证VR这个市场,所以我们更多帮助这些企业成长,进而推动VR行业的成长。特别是现在VR领域好的内容比较少,我们希望能够通过开放VR播放器,让更多的VR内容制作者能便捷的制作出好的VR视频内容。”

以下是采访实录:

什么时候开始接触VR?在此之前有过哪些项目经验?

其实在几年之前,蜗牛就开发过与VR相关的项目。当时我们开发了一个3D虚拟购物的网站,那个时候市场还没太成熟,所以我们就将这个项目搁置了。不过VR一直是蜗牛的一个梦,而且我们相信未来5-10年VR行业会有一个相当好的发展,所以我们在整体战略上对VR投入的精力还是很大的。

蜗牛VR目前有哪些VR直播方案?举例一两个案例。

在不久前,蜗牛云做了一次“VR+医疗”的直播案例,是非常高清的4KVR直播,演示视频中可以看到完整的手术室,这对于他们学医学的人非常有作用。一般一个学医的人,从他看手术,到一直他能自己做手术可能需要三到五年的时间,实际上很多时候,特别是像院长级别、专家级别的人,他们做一个手术,旁边不希望有太多的人在。看着他做手术的人离的比较远,实际上他的观感是非常不好的,在我们做VR手术直播拍摄的时候,我们放在手术灯旁边,拍下来的整体感觉,对于他们做手术的人带来非常大的效果,能够比较好缩短他们学习的成本和时间。

另外在去年6月,蜗牛还做过当时国内最大规模的一场全息投影虚拟演唱会的VR直播,当时也获得了客户和观众的一致好评。这是国内数字文化产业从虚拟世界走向现实生活的一次全新尝试,我们希望将沉浸式体验发挥到极致。

蜗牛VR直播方案的相比于同类竞品有何优势?

第一,我们的方案在导播端、主播端和用户端都可以切换机位。这样用户可能选择自己喜欢的角度去观看VR直播,我们可以把选择的权利直接交给用户。VR直播追求的是沉浸感和临场感,如果让其他人切换机位,可能会破坏用户整体的临场感,现在如果用户可以自己切换机位,对于用户体验会提升不少。

第二,蜗牛云在网络传输方面下足了功夫。其实网络传输可能是大家在VR直播中比较容易忽略的部分。一般来说,VR直播的码率很高,可能会达到4/6/8Mbps,主播端如果推流不好,所有的用户观看都会受影响。我们现在采用SDN和光纤,在全国部署了几十个节点,现场的视频数据同步到云端,然后分发到全国的服务器,用户观看的时候是连接到附近的服务器的。

同时我们做了一些智能解析,不同地区的用户会解析到不同运营商(比如电信联通)的服务器上,这样就不会出现跨网观看效果不好的情况了。而且,我们做高码率视频的分发,在用户观看时我们会做一些插帧,让用户可以看到60帧以上的视频,在这些方面我们是比较有优势的。

在做VR直播的时候有没有遇到什么困难?有哪些需要注意的地方吗?

VR直播涉及非常多方面的东西,从拍摄到采集拼接,然后再到传输编码,再到编解码,再到传输分发,再到播放器,再到最后播放的设备,还是有经过蛮漫长的过程。实际上在采集拼接端,还有很多需要去谈的,包括我们最近在拍摄,我们发现每个地方可能跟以前拍摄的曝光度、光线的照射程度不一样,会带来不一样的效果。还有更多的,现在在VR拍摄过程中,安全距离是蛮讲究的过程。 因为在2米以内的拍摄,会有安全距离的限制,这是我们一直在优化和改进的。

另外一点,拍摄完并不是完了,现在码率非常高,在这么高的码率过程中,“我们怎么样把内容上传?我们又怎么样把内容分发出去到每个用户端。到播放的时候,我们怎么样把它渲染起来?这里面有非常多的东西需要去考虑,其实实际上直播是整个端到端非常直接的过程。

VR制作方面,有没有一些经验可以分享给大家?

实际上在直播过程中,不管是拍摄、传输、播放,都有非常多的讲究。比如说播放端,需要控制低于20毫秒的延迟,甚至需要60赫兹以上的屏幕刷新率,甚至需要1K陀螺仪的传输,另外不能低于3亿个输出单元。特别在高码率传输的时候,用传统的传输会有蛮多的问题。

我们利用SDN+CDN的方式控制整体网络的状况,我们知道是不是现在北京那边堵了,是不是深圳这边有些拥塞了,通过这样我们能够规划出来一条比较通常的路径,甚至能够根据我们的用户,根据我们的需求,去制定一些直播流怎么走。因为有一些实时直播,有一些类似于演唱会,甚至一些会议的时候,它需要实时高效的直播网络。我们能够通过这样一个网络大脑感知,我们又能走一条最优的路径。

蜗牛VR播放器功能十分强大,为什么会想到开放播放器的SDK?

我们做了一年多的研发,发现这其中的坑满多的。我们觉得大家一起趟这个坑没什么必要,我们现在做的事就是把大家进入VR行业的门槛降低,同时也是在验证VR这个市场,所以我们更多帮助这些企业成长,进而推动VR行业的成长。特别是现在VR领域好的内容比较少,我们希望能够通过开放VR播放器,让更多的VR内容制作者能便捷的制作出好的VR视频内容。

对于2016年VR直播行业发展有何感想?

随着直播领域的热火朝天和VR技术的发展,商业视频成为了VR内容的重要产出部分。相比需要复杂内容设计的VR电影、VR影视剧、VR广告,VR直播是VR视频的一个突破口,暂时解决了VR视频资源缺乏、无法落地的困境。纵观2016年整个VR行业的发展传统形式直播VR化主要得益于VR的沉浸感提升,给用户带来了身临其境的感受,使得传统的直播内容更受消费者的喜爱。

虽然 VR 视频高分辨率带来的传输带宽问题依旧成为直播的难点之一,但是随着我们在传输分发这一块技术的深耕,带宽成本的逐步降低,拥有群众基础的体育赛事、音乐综艺节目、演唱会等类型内容的 VR 直播将会有巨大的发展空间。

2017年团队会有哪些计划?

2017年,在几大领头厂商的牵动下,带动用户的教育和普及,用户增长量也会需要一段时间。蜗牛云 对VR直播的未来市场看好,且继续选择to B的发展策略。用自有的优势技术能力,给更多的VR直播平台、VR点/直播活动需求团队,带来更省钱、易操作、可复制性强的技术解决方案。