为何VR眼球追踪要先to B,惠普和Tobii告诉你

2021-4-7 20:44| 发布者: admin| 查看: 278| 评论: 170

摘要: Esther|编辑去年,惠普发布与Valve合作开发的单目2K Inside-Out PC VR头显:Reverb G2,与以往的WMR头显相比,G2的最大变化是采用四摄追踪方案和新的手柄设计,并引入Valve耳机和透镜技术。同年,G2升级款头显HP Re ...


Esther|编辑

去年,惠普发布与Valve合作开发的单目2K Inside-Out PC VR头显:Reverb G2,与以往的WMR头显相比,G2的最大变化是采用四摄追踪方案和新的手柄设计,并引入Valve耳机和透镜技术。同年,G2升级款头显HP Reverb Omnicept Editionn曝光,据悉该头显在G2基础上加入眼球追踪、面部追踪和心率传感功能,可实现注视点渲染、生物识别、支持表情追踪的虚拟头像效果,功能更加强大。

为何VR眼球追踪要先to B,惠普和Tobii告诉你

那么,惠普为什么选择推出更高端的眼球追踪版WMR头显?这背后有哪些策略?它的应用场景又有哪些?近期,外媒UploadVR采访到惠普XR软件和解决方案负责人Peter Peterson,以及Omnicept眼球追踪技术的供应商Tobii的XR负责人Johan Hellqvist,了解到关于VR+眼球追踪的应用场景、趋势等更多信息。一,采访惠普XR软件负责人据了解,Omnicept头显的目标用户和开发者和企业,结合惠普的机器学习SDK,其配备的生物传感器可用于评估使用者的认知负荷,适用于优化培训内容,提升受培训者的兴趣和注意力。
为何VR眼球追踪要先to B,惠普和Tobii告诉你
认知负荷与性能关系图UploadVR:企业级用户和开发者们对于VR头显有哪些反馈?Peterson:用户希望VR头显兼容性强,也就是说在头显中运行新应用足够简单、快速。因此,Omnicept只需要开发者使用插件就能运行应用。这款头显以开发者为服务对象,简化API接入过程。
为何VR眼球追踪要先to B,惠普和Tobii告诉你
UploadVR:为什么推出PC VR而不是一体机?Peterson:PC VR可实现更加保真的画面体验,对于培训等商业场景来讲,画面的逼真度很重要。比如在培训精密仪器维护或使用时,场景和画面越逼真、越沉浸,培训效果越好。除了画面外,为了保证沉浸的音质,还与Valve合作开发了Reverb G2的立体声音频系统。UploadVR:Omnicept的目标用户是刚接触VR的企业吗?还是为了升级设备的老客户?Peterson:很多正在开发VR软件产品或已经有VR业务的企业对Omnicept感兴趣,认为它的新功能有望提升VR软件的体验感。目前,已经有一些VR软件开发公司正在开发一些适合Omnicept新功能的应用,认为眼球追踪、面部追踪等功能有望打开更多企业级VR应用场景。
为何VR眼球追踪要先to B,惠普和Tobii告诉你
UploadVR:Omnicept配备的生物传感器在线上虚拟会议中有哪些应用?Peterson:使用眼球追踪和面部追踪技术,参会者的VR虚拟形象更加生动自然,无需模拟嘴唇运动,面部表情可根据用户动作实时变化。对于未来的VR社交场景,需要先确保参与社交的用户拥有显示的设备和体验,就像是智能手机难以和以前的大哥大视频通话那样,VR社交的普及需要一款功能完整同时大众化的VR头显。UploadVR:目前Omnicept的传感器采用惠普开发的SDK,未来它们会支持OpenXR SDK吗?Peterson:我和惠普的VR架构师参与了大多数OpenXR会议,我们认为作为VR的标准规范,它会在技术发展带动下更慢一些发展。目前,越来越多的runtime开始支持OpenXR,游戏引擎也开始支持OpenXR,接下来还需要实现标准化的OpenXR界面,或是特殊的OpenXR扩展程序。我们认为,眼球追踪将在越来越多的VR场景中应用,因此希望眼球追踪功能支持OpenXR,而且相信也会有更多VR头显采用眼球追踪技术。不过除此之外,目前惠普还不确定其他功能是否适合在现阶段支持OpenXR。UploadVR:距离无线PC VR时代还有多远?Peterson:目前,VR需要解决的一大性能挑战是运动到图像延迟,即使是惠普的有线PC VR方案,也依然存在延迟。因此考虑到延迟问题,无线PC VR目前来看比较难。为了解决无线传输延迟问题,VR头显需要做出一些牺牲,比如:远距离无线传输可能会影响性能和效果,因此通过靠近PC信号传输装置来提升性能。或者,如果使用者和信号传输装置存在遮挡,那么PC VR延迟可能会增加。此前HTC Vive推出的无线适配器就存在一些局限,比如信号传输不能出现遮挡,无线适配器在可追踪范围内效果最佳。就像是WiFi网络,Vive无线适配器的频段在60Hz,如果使用者移动到墙壁另一边,信号可能大大削弱。总之,需要平衡各方面才能达到最优体验。UploadVR:惠普是否在探索手势识别技术?Peterson:目前还不能透露惠普在这方面的策略。不过就我个人而言,我认为手势追踪是一种重要的输入方式,不过目前还不能作为唯一的VR交互方式。UploadVR:你认为VR的价格和性能那个更重要?Peterson:二者需要兼备。随着VR技术发展,未来惠普的VR产品将分成一二三档不同的级别。入门款以走量为主,目的是推动VR市场和应用,让更多对VR感兴趣的人用上VR产品。为了降低VR门槛,不仅要降低VR头显的成本,也需要降低所需的PC/显卡配置。除了入门级VR外,也看好高端VR市场,人们对于最新技术的需求将推动高端VR市场。二,采访Tobii XR负责人除了惠普外,UploadVR还采访到Tobii的XR负责人,探讨了眼球追踪在VR头显中的应用。据悉,Tobii是一家瑞典公司,曾为HTC Vive Pro Eye、Pico Neo 2 Eye提供眼球追踪技术,惠普Omnicept也将配备Tobii的眼球追踪模块。
为何VR眼球追踪要先to B,惠普和Tobii告诉你
UploadVR:加入眼球追踪功能意味着增加成本,那么这项功能到底对VR有哪些提升?Hellqvist:眼球追踪可用于注视点渲染,也就是说优化VR图像渲染的清晰度、降低头显功耗。实际上,随着VR头显的视场角、分辨率等参数不断提升,对于PC配置的要求也越来越高。与此同时,注视点渲染有望优化计算效率,从而降低对PC显卡、算力的要求。另外,眼球追踪也能用于优化视觉效果,比如:动态调节瞳距,或是配合可变焦VR显示屏实现动态变焦,从而缓解视觉疲劳、提升画面清晰度。当然,眼球追踪和注视点渲染也可以用于降低内容传输对带宽的要求,从而优化有线或无线PC VR、云VR的延迟。总之,从整个系统层面讲,眼球追踪功能反而有望降低成本。目前,这项技术几乎是所有企业级VR头显的基础配置。UploadVR:眼球追踪如何辅助VR交互设计?Hellqvist:眼球追踪可以和姿态识别结合,用于理解使用者的实际意图。比如,在模拟投掷等运动交互时,眼球追踪可引导画面和注视点同步,体验感更好。UploadVR:Tobii的眼球追踪技术适用于95%-98%的人眼,那么支持剩下的2%-5%有哪些困难?Hellqvist:这2%-5%指的是一些患有眼部疾病的人,或是戴厚眼镜的人。眼镜框可能会遮挡眼球追踪的光源和成像捕捉,因此未来AR眼镜可能支持屈光镜片适配,而VR可能会通过Pancake光学缩短人眼和眼球追踪模组的距离,即使戴眼镜也能追踪。UploadVR:你觉得,为什么支持注视点渲染的无线VR头显还未出现?Hellqvist:这个问题与视频信号压缩有关。VR信号传输需要寻找更有效的方式,早期的PC VR利用电脑的显卡来处理图像,而随着XR1、XR2移动平台的出现,VR一体机可以支持更高效的图像压缩。与此同时,眼球追踪+VR是一个相对新的概念,随着VR技术发展,未来可能会有更多VR头显具备运行高效图像压缩的能力,并结合眼球追踪来进一步优化图像。
参考:

https://uploadvr.com/hp-tobii-reverb-omnicept-interviews
( END)
    推荐阅读   

为何VR眼球追踪要先to B,惠普和Tobii告诉你

为何VR眼球追踪要先to B,惠普和Tobii告诉你

为何VR眼球追踪要先to B,惠普和Tobii告诉你

为何VR眼球追踪要先to B,惠普和Tobii告诉你



 每天五分钟,轻松了解前沿科技。   
         —— 青亭网 


鲜花

握手

雷人

路过

鸡蛋
发表评论

最新评论

引用 poccx945 2021-4-23 00:33
有空一起交流一下
引用 flqmd754 2021-4-23 00:30
是爷们的娘们的都帮顶!大力支持
引用 fwqbh146 2021-4-23 00:24
说的真有道理啊!
引用 poccx945 2021-4-23 00:23
回帖是种美德.
引用 iimxe545 2021-4-23 00:23
纯粹路过,没任何兴趣,仅仅是看在老用户份上回复一下
引用 iukyq278 2021-4-23 00:23
大人,此事必有蹊跷!
引用 tjpwd379 2021-4-23 00:18
纯粹路过,没任何兴趣,仅仅是看在老用户份上回复一下
引用 iimxe545 2021-4-23 00:18
沙发???
引用 poccx945 2021-4-23 00:14
回个帖子,下班咯~
引用 xpykr132 2021-4-23 00:12
看帖要回,回帖才健康,在踩踩,楼主辛苦了!
引用 rpweq565 2021-4-23 00:10
顶起顶起顶起
引用 tjpwd379 2021-4-23 00:08
very good
引用 ylour258 2021-4-23 00:08
LZ是天才,坚定完毕
引用 dmjxv265 2021-4-23 00:05
我是个凑数的。。。
引用 iimxe545 2021-4-23 00:03
元芳你怎么看?
引用 dmjxv265 2021-4-23 00:00
非常好,顶一下
引用 xpykr132 2021-4-22 00:42
为保住菊花,这个一定得回复!
引用 sdwvt150 2021-4-22 00:42
不错 支持一个了
引用 iimxe545 2021-4-22 00:31
very good
引用 klbrj141 2021-4-22 00:28
为毛老子总也抢不到沙发?!!

查看全部评论(170)

VR热点新闻
最新VR游戏
  • 微信公众平台

  • 扫描访问手机版

业界独家VR游戏客户端

版权保护投诉指引|手机版|赞助本站|8866VR游戏客户端|关于我们|8866VR游戏破解汉化玩家交流学习网 |网站地图

GMT+8, 2021-4-23 13:10

Powered by 8866VR游戏下载网

Copyright © 2001-2020, Tencent Cloud.