我们时常会在思考创业的方向是否正确,尤其是在VR/AR如今的状况下,越来越多人在自我审视、踌躇和疑惑,AR/VR这条路究竟是否是一条不归路。

前辈们的经验总是告诉我们,互联网巨头在着重布局和投入的方向一定是没错的。目前,谷歌在VRAR方面积极投入,不论是之前推出的Cardboard,还是DaydreamProject Tango,都获得了非常好的口碑。

近日,谷歌资深软件工程师Wim MeeussenUnite 2017 Shanghai大会上,详细揭秘了TangoAR中的运用。

作为一家传统巨头,Google显然在VR/AR方面充满了信心。在谈及为什么会如此关注VR/AR时,Wim Meeussen坦然表示,我们相信VR/AR会成为下一代计算平台。从大型计算机到个人电脑的互联网时代,再到大家使用手机的移动互联网时代,我们相信下一个时代是虚拟现实和增强现实的时代。

在这个时代里有很多互动,在VR里面可以看成一种新的环境,它把我们放置在一个假环境中,在VR里面我们可以对现实有更好的了解,ARVR都是表达和使用信息的新途径,正是因为这样,Google非常重视ARVR

那么为什么谷歌会选择在移动端设计VR/AR呢?

“Google全世界的移动设备有30多亿台,如果要实现非常大的数据规模,必须要实现移动化。”Wim MeeussenVRZINC记者说。

Project Tango是什么?

如果VR是关于创作想象,那么AR真正重要的是让用户通过手机了解身边的世界。Tango的设备在中国已经开始销售,在京东或者其他渠道可以买到。

你看这样的场景,你知道这个是什么意思,你知道哪些地方你是可以走路的,哪些地方是可以躺下来的,但是在Tango里面希望给你手机能够有同样的体验,看到场景的时候你希望Tango能够了解背后的3D的几何,不光光只是看到了像素,还可以看到3D的几何世界。

Tango的硬件方面,每一个Tango手机有三个独特之处,都有特别的深度感知传感器、运动追踪器和视觉处理器。联想在201612月已经发布了Lenovo Phab2 Pro手机,华硕也开发了。

如果回顾手机的演变历程,在最开始的时候手机就是用来打电话的,后来有了摄像头、GPS,再到后来加入了指纹识别。Tango的摄像头将会是手机的下一个变革,能够让人们更好地了解这个世界。

Tango的软件设备方面,它包含运动追踪、深度感知和领域知识(Area Learning)。运动最后能够告诉我运动轨迹是什么样的,能看你进行旋转、运动进行了哪些,你就知道你的设备在怎么样的运动轨迹进行运动,它是非常精准识别的。

深度感知能够帮用户看到3D世界,我们用Tango特定的摄像头,如果指向这样的物体就能够看到这个物体3D的界面。Area Learning帮助记忆,让他记住他去过那里,记住手机的运动轨迹。

如何运用Tango

为什么你需要这三块儿来做VR呢?比如说我们做渲染,做一辆汽车的时候为什么需要这样的渲染呢?我再给大家展示一下。

我这里所拿的就是联想这部手机,Phab2 Pro,它有GPro的摄像头,我向大家做的展示就是它能帮你理解AR

这看起来挺傻的,这可能是AR最简单的版本,这里是有虚拟的角色,这个并不是非常棒的AR

我们再向前一步,现在我们去加入运动追踪,有虚拟的小猫,我们在运转这个小猫还在这里,它也可以走来走去,我还可以让它去做平移,不仅仅只是做旋转。这也不是非常棒,因为它并不像一只真正的小猫,所以运动追踪不足够让它做到很好的VR体验。

再加上深度感知看看,在这个版本当中我们用了深度感知器,让它去了解地板在这儿,能够把它放在合适的地方。因为我们了解了它背后的几何学,所以我就可以去做点击,让它走到不同的地方。看看能不能让它跳到桌子上去,现在我们有了运动追踪,有深度感知,这里面的AR做出来就是很棒了。

我再给大家看一下这个是怎么做的,把小猫放在桌子后面,我在走动,看看会发生什么事情。人可以通过这个桌子看到这个猫,这不太好,这就破坏了AR的幻觉,还有一个给大家展示的。我们会用深度传感器对环境建立3D的网格,我们会告诉Tango在哪些地方有障碍,有遮挡,我这里有一个网格,小猫在桌子后面。我们看不清楚,如果我们建立真正的应用会把整个猫都遮挡起来,这里面会有阴影,我们要有很好的AR体验,要有不同的要素。

我们了解了它的运动、重量、障碍、遮挡物,使得虚拟的物件就像真实的物件一样受到这样的效果,当然我们要建立很好的AR,可以通过反光、光线能够做到一些效果非常好的AR

很快地过一些Use Cases,我们可以用它来玩虚拟的家具。可以把家具放在你的房间里面,到后面再去下单,在京东里面可以看一下沙发放在真实的房间里会是什么样,我们可以通过京东的APP来进行购买,我们可以考虑到在教育上的应用,同时也可以考虑生产。我们也可以用Tango来进行三维的尺度测量,我们可以通过3D的模型在Tango里面对尺寸进行测量和核对。

我前面讲到过方位的感知、区域的学习,我们现在在这个房间里面,加入我们要感知一下在整个大楼里面的位置,在真实的世界对虚拟的物件要实现可视化,通过记忆,在植物园里面可以看到整个的热带雨林。