Eyes on Qualcomm: What will the future of XR bring?
Brian Vogelsang, Senior Director of Product Management for Qualcomm Technologies’ XR business group, discusses trends driving the XR industry forward.
在未来几年,我相信我们会看到VR和AR技术在企业界和消费者界的广泛应用。智能传感技术,如眼球追踪,将在这一趋势中发挥重要作用。为什么呢?因为眼球追踪可以提高设备性能,并大大减少带宽和处理需求。而且,它还可以创造丰富的用户体验。应用开发者、解决方案提供商和用户开始期望眼球追踪成为标准,这一期望也反映在OpenXR宣布了第一个眼球追踪扩展功能上,该功能将简化跨平台应用和跨供应商开发,减少上市时间。
在本文中,我总结了基于当前创新和与我们的XR合作伙伴的合作,塑造未来XR发展的前五个因素。
让我们从HTC开始,他是Tobii的合作伙伴,推出了市场上第一款内置眼动追踪的商用VR头显。在他的文章《关注HTC:XR的企业应用正在扩展——XR是否也将成为新的家庭办公界面?》中,Drew Bamford探讨了未来的工作趋势以及企业如何迅速评估XR技术来保持员工之间的联系和培训。很明显,疫情加速了对有效远程协作解决方案的需求,尤其是那些可以提供逼真体验的解决方案。
在Vive Sync和Tobii眼动追踪技术嵌入其VIVE Pro Eye头显后,HTC正在为深度逼真的虚拟协作铺平道路。在该头显上运行的应用程序可以包括自然的沟通特性,如自然眼神接触,因为原生眼动追踪提供了准确模拟人眼实时运动所需的数据。
眼神接触是人类互动的核心,这就是为什么眼动追踪将成为所有VR头显的标准,以及为什么使用眼动追踪开发的特性将成为专业和消费应用的基础。毕竟,无论你是与同事会面还是与虚拟对手竞争,能够相互注视而不像个僵尸一样盯着中距离是一种深刻的满足感。
2020年,Pico宣布推出了Pico Neo2 Eye,这是世界上第一款具有原生眼动追踪功能的商用独立VR头显。在Karen Zu的《聚焦Pico:培训和医疗将推动企业XR的采用》一文中,她指出头戴设备配备了眼动追踪等传感技术,为企业和医疗助力创造了新的机遇,包括通过分心和恐惧症治疗的方式来缓解疼痛。
某些种类的医疗服务不需要当面进行,一些地区的解禁措施导致了远程医疗服务的增长。但正是2020年社交距离的需要加速了远程医疗服务的普及。患者对在线护理的兴趣也很可能会在疫情过后持续,因为它方便快捷,并提供快速的护理服务,这对残疾人以及生活在偏远地区和拥挤城市的人尤其重要,而眼动追踪可以完美地进行增强指导和协助。
XR是远程医疗的促进者,因为它可以在需要时(无论何地何时)提供护理,并能够向医疗服务提供持续的反馈。配备眼动追踪功能的XR设备可以基于眼部健康提供客观的观察,从而创造了与神经退行性疾病和创伤检测和监测、眼科学和治疗相关的服务机会。
Tobii最近的XR合作伙伴是惠普(HP)。在2020年9月,他们宣布推出HP Reverb G2 Omnicept Edition。该头戴式显示器集成了Tobii眼动追踪技术,为企业使用者提供了个性化、引人入胜和自适应的虚拟现实体验。在他的帖子《关注HP:更好的头戴显示器、工作和生活的社交互动,以及BYOD》中,彼得·彼得森强调了个性化的重要性。他预测XR头戴设备将变得更加可定制,并且我们将看到根据佩戴方式、脸型大小和个人需求,设备制造商将为特定市场提供优质服务。
个性化为应用开发者创造了机会,他们可以构建针对XR设备的新服务和独特内容。彼得·彼得森进一步谈到了更多的XR技术,以及软件公司和独立开发者将如何共同努力确保平台无关的解决方案和统一生态系统,这与Tobii在OpenXR中标准化眼动追踪的核心部分的工作是一致的。
高通是我们长期合作的一个XR合作伙伴,是世界上最知名的半导体技术公司之一。他们已经将Tobii眼动追踪技术集成到多代参考设计中,包括最近的(2020年)高通骁龙XR2 5G参考设计。
在他的帖子《关注高通:XR的未来将会带来什么?》中,Brian Vogelsang谈到了他们称之为无边界XR的概念的重要性——其中,设备上的处理可以被卸载到例如边缘甚至云服务器上通过低延迟的5G链路或通过Wi-Fi连接到PC。这种无缝连接与分屏架构对VR和AR的采用至关重要,因为它支持高质量图形和离机处理。
Tobii Spotlight for Foveated Transport利用注视、光学和视觉焦点,实现了在图形渲染管线中带宽要求的大幅减少。预期的增益水平将确保在整个头显显示中交付高质量的图形(不仅仅是中心),提高用户舒适度,并确保在移动网络上提供优质用户体验,有助于移动VR的采用。
展望未来1-3年,我预见XR设备性能将大幅提升,始终开启眼球追踪功能将成为核心设计元素。启用Tobii Spotlight Technology™等解决方案将增强设备,因为它们支持在无限连通的头戴式显示设备上高效利用图形能力和带宽利用率,并支持眼神接触和凝视增强的用户界面和交互模式。Tobii为各种市场的XR硬件提供眼球追踪平台,无论是标准的VR菲涅耳透镜、紧凑型(薄饼)透镜还是AR设计,都可以根据不同需求进行适应。
本地化眼球追踪提供了一套分析工具,应用程序可以利用它来解决以前无法解决的问题。因此,我预计医疗保健、培训、协作和研究应用将迎来强劲增长。为了满足这一预期,Tobii最近推出了Tobii Ocumen,这是一种高级眼球追踪解决方案,将二十年的经验和专业知识结合在一起,优化了专业VR应用的开发。由于Tobii Ocumen提供高水平的观察结果,它可以节省开发时间,缩短应用的上市时间,使开发人员能够以经济的方式实现他们的创新。
我在本帖中提到的目前发展水平、独立软件供应商的创新以及头戴式设备制造商的投资只是XR技术日益普及的一些迹象,而5G和边缘云等 enabling technologies 如今已成为XR生态系统的一部分。