您现在的位置:首页 > 产品万花筒 > 从视觉、听觉、交互上提升移动VR一体机

从视觉、听觉、交互上提升移动VR一体机

关键词:VR一体机,高通骁龙820,Hugo Swart

来源:互联网    2016-05-26

GMIC全球移动互联网大会-全球VR峰会上,高通高级产品总监Hugo Swart发表了演讲,称PC级的VR头显在便携性太差,移动性也不好,高通要做的就是从视觉、听觉、交互上推动移动VR一体机的发展,而这一部分最大的市场在中国。


Hugo Swart认为,目前市场上体验比较好的PCVR头盔在移动性、便捷性上都不太好,这样无法深入到大众市场,未来渗透率不会很高,也会有很多的限制。所以高通致力于用移动技术在便携性和体验之间做到一个权衡。

Hugo介绍,高通正在利用骁龙820实现VR的独立设计运行,包括相应的视频殷勤和GPU。另外,在相应的传感器处理技术上也会加速,同时在能耗方面得到更好的控制。

高通中国区VR产品经理郭鹏称,中国会是未来VR的主战场,因为中国有很丰富的硬件、软件以及内容的产业链。中国也是高通在VR方面最为关注的市场之一,高通将发力移动式VR一体机领域,从视觉、听觉,以及用户交互这三个层面进行深耕。

以下为演讲实录:

Hugo Swart:大家上午好,我非常高兴看到大家在中国对于VR这么热情,我们可以看到这个房间里这么多听会人。今天我非常高兴可以给大家展示我们高通对于VR是怎么看的,在这方面我们有什么样的目标。我们怎么样看在中国和世界推动VR的发展。我想在这个会议室当中所有的人都知道,VR是下一代的平台,使得人们可以看视频、看运动会、看一些游戏都可以通过虚拟现实的方式,这也会影响人们的沟通、人们的交流。最重要的就是我们要有沉浸感,有三个非常重要的支柱。第一个就是视觉效果要非常好,要有现实感。另外,你感到你看到了现实的世界,第二就是声效,声效必须跟你看到的东西是同质的,如果你在左边看到一个东西,你就应该感觉到它的声音是从左边传出来的。第三个就是互动性、交互性。交互性应该是一个非常重要的支柱,还有就是我们的头部的跟踪。我们的VR 20年前就在跟踪了,现在进入到现实,我们为什么相信说我们可以开始看到真正的沉浸式的中去,包括技术的结合,还有很多不同的生态系统的结合,作为系统层面来说,我们看到了一个非常高性能的处理器,还有GPE等等。同时有正面的五点的不同的水平的很好的结合,还有就是我们的这么一个非常强大的消费力,还有就是我们的生态系统,包括相应的芯片的大规模的生产力,还有就是中间插件等等,还有相应的应用,还有内容提供。这样有助于我们现实的应用,现在的时刻已经到来了。在移动性上面、现实性、相关性,我们看到智能手机的演变历史,毫无疑问,这个地方有一个很好的平台,进入到大众市场,在今年我们有超过10亿个不同的移动智能手机在被应用着。可以带来非常快速的周期。也就是说有一个新的应用、新的设备,还有新的生态系统的应用,所以是非常可行的,也非常适合虚拟现实的应用。我们用相应设备可以做相应的VR,可以从简单的开始,智能手机放在相应的前面,这个地方可以体验到很好的VR的体验。还有就是HMD,还有就是头戴式设备。可以嵌入相应的传感器,可以提升相应的体验。同时我们可以看到定制化的相应的VR的体验,可以利用我们的技术。什么意思呢?我指的是有同样的芯片、有相应的计算系统,在移动体验端的,现在嵌入到客户端,这是一个趋势,从下一代开始越来越小了。

我们的最终用户可以看到的,就是我们的最终用户可以有体验的。另外一点是关于VR平台的情况,我们看到很多不同的兴趣,特别是在PC方面,我们来实现VR的体验,在PC当中我们有非常强大的CPUGPU,都可以有嵌入,同时要求非常大的科学的支撑,这样的话,会受到很多的限制。进入到现在的市场到底有多少可以进行应用呢?比如这个地方有虚拟现实,比如在一个办公室当中有,用户想要拓展他们的体验,想要什么时候都可以,比如说在起居室、浴室、公共场所都可以,是无处不在的,同时有用户的平台可以进行使用,比如说对PC端来说是不太一样的,特别是在VR当中,如果这个设备是比较高的接入点,移动性、便捷性不太好,这样无法深入到大众市场,就是渗透率不太高了,会有很多的限制。同时这个地方有很多的热情。也就是说,对相应的权衡来说,要做一个权衡,或者是看看这个平台中间的嵌入点是什么。我们先看性能,就是PC当中有什么样的性能的体验呢?但是这个地方有灵活性,我们可以看到不同的规模,比如说移动的规模是很大的,比如说有Pico,这是一个很好的例子,真正的客户内嵌式的VR的平台,可以利用移动技术来实现。

我现在关注一下相应的不同的集合。对嵌入点来说,非常简单的道理,就是有一个非常好的处理器,在能耗、在相应的性能方面要做一个权衡。第一个芯片,我们可以关注这一点,可以提供沉浸式的VR,三个支柱,开始的时候讲到三个支柱非常重要的一点,可以看到这么一个视觉的质量,包括3604K的,还有其他相应的处理器,还有不同的芯片组,还有3D的视觉的体验。同时可以进行定位,可以进行降噪。包括了相应的过滤,可以进行降噪,还有就是便携式的,或者是便于使用的,还有低频的体验可以来实现。

技术层面的问题主要的特征是什么?我们可以实现新的平台的VR的独立的一个设计的运行,可以通过骁龙820来实现。跟处理单元相关的,包括相应的视频的引擎,包括GPU,还有就是我们的加速器第二个是什么?就是我们的相应的传感处理技术。第三个就是能耗,有高的性能,在移动设备中实现,就不需要有很多不同的主机来实现这一点,可以实现高的性能。同时,在技术层面的细节,有一个非常好的特征,在现在的设备当中可以提供什么样的体验呢?这个地方的画质非常好、画面非常不错,但是折射率,特别是关于相应的处理的能力来说,这个地方确实是非常好的焦点渲染,就是人的眼睛无法来处理全景的情况,不可能通过简单的体素来实现,无法处理高的象素。我们是想可以渲染,只有几个片断,就是几个不同的片断是高的像素,最后是得到聚焦的,之后像素下降,怎么发生的呢?我们会发现这个像素,这样会有眼睛最终的技术,这样可以进行焦点渲染,之后可以有非常沉浸的高质量的视觉体验,同时还有GPU的性能非常高的提升,这个可以得到很多能效的节约。

另外,是音频的情况。对用户来说,如何让他们有真正的沉浸式的体验呢?这个是非常重要的,我们要进行匹配,也就是说你接收到的、你看到的,或者你头当中接收到是什么样的要跟音频进行匹配。如何感知呢?比如用户看到左边有一个巴士过来,之后他会转头,音频也要进行感受,不同的方式。他还可以感受到巴士开始行驶了,用户可以感受到巴士正在行驶,这个地方可以采用VR的焦点定位来实现,也就是说头部的追踪,我们会发现这是3D的,如何实现头部的追踪呢?你会发现你的移动的方式是什么?比如说左右,或者说侧边或者是上下,我说的是3D的自由度的,或者是三点式的很好的移动。更加重要的体验是需要我们六点式的,除了三点之外,或者是刚才提到的三个轴,你会看到这个头是如何上下、左右进行移动的,这样有骁龙20的技术,这样可以实现六度自由度的运动。

接下来要强调的是延时的情况,从头追踪,刚才已经提到了,就是3D或者是6D要进行非常快的处理,这样来实现六点的追踪。回到GPS当中,很快地能反映在显示器当中,这个地方有很多新的技术,就是要低于20ms,从头移动,一直到这个地方,我们显示器改变的时候,或者是说在显示屏上显示出来的时候,要低于20ms。同时不仅仅实现这一点,同时也让用户更加容易进行体验。比如像常人一样,或者开发者可以利用这些相应的技术。有VRSDK来进行实现,可以进行实践。

总结,有这些相应的VRVR已经发生了,我们有很好的生态系统、技术。相应的芯片可以提供一个非常成功的沉浸式的体验,包括高通的骁龙820来实现,同时还有智能手机的VR,同时还有专属VR设备可以进行利用。可以通过我们的芯片来实现所有的特征,还有就是应用程序,在我们网站当中有很多的描述。在我结束之前,我想要介绍一下,我们的郭鹏中国产品规划的经理,他肯定会非常高兴跟观众进行沟通。

郭鹏:大家上午好,我是高通中国区VR产品经理,我叫郭鹏。大家知道中国会是未来VR的主战场,这里有很丰富的硬件、软件以及内容的产业链。中国也会是高通在VR方面最为关注的市场之一,我们将持续在移动式VR一体机领域为用户带来从视觉、听觉,以及用户交互这三个层面最为卓越的沉浸式体验。如果接下来在座的各位对高通的平台有任何的问题或者感兴趣的话,欢迎下来跟Hugo swar或者我进行沟通。谢谢大家。

Hugo Swart:我就说到这儿,我希望大家了解到我们高通的情况,如何辅助、帮助这些实现,就是可以保证VR有非常广泛的接受和采纳。当然了,延续我们的话题,下面欢迎周宏伟很快地聊一下天,来谈一谈刚才我们谈到的内容,也可以深入地谈一下我们Qualcomm的内容。欢迎。

 

我来说两句