就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术

2021-8-6 02:21| 发布者: admin| 查看: 301| 评论: 203

摘要: 这是一个愚蠢的想法,充其量是一种新奇事物。- shenzhenware-很多企业的科学研究(比如 AI/AR 等前沿研究)因为商业化的压力而黄了,但 Facebook 仍在疯狂地在实验性的研究项目上做投入。近日,Facebook Reality Lab ...


这是一个愚蠢的想法,充其量是一种新奇事物。

- shenzhenware -

很多企业的科学研究(比如 AI/AR 等前沿研究)因为商业化的压力而黄了,但 Facebook 仍在疯狂地在实验性的研究项目上做投入。

近日,Facebook Reality Labs (FRL)的科学家 Nathan Matsuda 通过博客展示了一项实验性的 VR 研究——反向透传 VR(reverse passthrough VR)。
佩戴 VR 设备的人,他的眼睛能够「透传」到设备外面的显示屏上,让你能看到他的眼睛——就像下图的样子,八角形的镜框里装的不是透明玻璃片,而是 3D 显示屏。

就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术

此前 Facebook 曾推出过 Passthrough+ 和实验性的 Passthrough API 技术,虽然都叫「透传」,但这些是让佩戴 VR 设备的人能够看到外面的情况。
而反向透传则与此正好相反,是让外面的人看到里面的情况,这样,就促进了眼神的交流。因为通常 VR 头戴设备是密封的,里面的人看不到外面,外面的人也看不到里面。
Matsuda 在两年前就启动了项目研究,当时的做法是,佩戴定制的 Rift S 设备,正面装有 3D 显示器。在屏幕上,他的面部浮动 3D 图像由游戏引擎粗略渲染,使用来自设备内的一对眼动追踪摄像头的信号重新创建了他的眼睛注视。

就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术

Matsuda 第一次把这项研究展示给他的老板——FRL 首席科学家 Michael Abrash 时候,Abrash 的第一反应是:这是一个愚蠢的想法,充其量是一种新奇事物。但他还是支持了 Matsuda 这样做,因为这很独特。
两年后,3D 显示技术和研究原型有了显着的发展,具有专门构建的光学、电子、软件等一系列的技术支持,可以捕捉和描绘更逼真的 3D 面部。
Matsuda 公布的原型设备将在下周的 SIGGRAPH 大会上展示。目前如我们所见,这个设备上插满了摄像头和电缆,距离独立设备还很远,并且,眼睛和面部的渲染还不够逼真。
尽管它离产品路线图还很远,然而,它确实让我们看到了未来——通过反向透传实现的虚拟世界和现实世界的融合。

就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术

左图:禁用了外部显示器的 VR 设备,代表当前的技术水平。外界看不到佩戴者的眼神。中图:带有外向 2D 显示器的 VR 设备。外界可以看到佩戴者的眼神,但视角不准确,比较难判断眼神的方向。右图:最新的带有外向 3D 显示器的 VR 设备,运用了反向透传技术,外界可以看到佩戴者的眼神,并能够判断眼神的方向。
Matsuda 在博文中透露,在这项研究中,FRL 使用了微透镜阵列光场显示器,因为它很薄,构造简单,并且基于现有的消费类 LCD 技术。这些显示器使用一个微小的透镜网格,将来自不同 LCD 像素的光向不同方向发射出去,这样观察者在从不同方向观看显示器时会看到不同的图像。

就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术

但 FRL 的这套系统并非都是革命性的。
HTC 在 vive Pro 头显设备上安装了面部追踪插件,将运动映射到 VR 设备内的虚拟形象上,尽管没有向外的显示器,但映射原理是相似的。
HoloLens 等 AR 和 XR 设备采用了透明或半透明的镜片,通过提升透光度来实现虚拟世界与现实世界的「透传」,其效果,远远比 Facebook 的反向透传 3D 成像要清晰和真实得多,并且也没有视角的问题。
Facebook 的这项研究其实是想论证,即便是 VR 头戴设备的外壳是密封的,即便 VR 头戴设备的镜片是不透明的或被完全遮挡的,但有了反向透传技术,就不会影响到佩戴者与外界的眼神交流。■
微信号:shenzhenware / 深圳湾主笔:周全 / 深圳湾编辑:陈述 / 深圳湾

VR/AR/MR

就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术

把 VR 眼镜带进客厅,Pico 不仅升级了硬件,还带来了好多健身游戏 | 首发评测

就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术
宜家联合苹果推出新的 AR 应用,整个房屋装修都可以交给它

就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术
有了腕部追踪技术,就可以用 AR 特效虚拟试戴智能手表了

就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术
全球首款开源 AR 眼镜,旨在唤醒开发者想象力,发现杀手级应用

就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术
视频拍摄新玩法,Snap 正在设计一款集拍摄、3D 特效叠加、实时浏览的 AR 眼镜

就算我头戴 VR,我也要让你看到我的眼神 | 前沿技术
Niantic Labs 终于还是做了智能眼镜,游戏或许是目前最佳的体验 AR 眼镜的方式


Rokid 发布全新一代 MR 眼镜,定义未来 MR 硬件标准


Microsoft Mesh、Pokemon Go、Hololens,微软的混合现实愿景详解

快到「湾」里来

深圳湾正在招聘:

真知灼见的科技记者

四通八达的运营编辑

才华横溢的市场策划

技能爆表的活动运营

热情四射的社区达人

简历传送门:

shining@shenzhenware.com

● ● ●

深圳湾(公众号 ID:shenzhenware)创办于 2014 年,是最早也是最活跃的硬件创新媒体和社区。深圳湾还有一个英文名:shenzhenware,起源于 software + hardware。深圳湾不仅是地标,更是大湾区创新的动力,用精致有料的科技报道,推动产业创新!

微信私人客服:小炫(ID:warexx)。欢迎读者和社会各界与我们联系,创始人「深圳湾的炫姐姐」欢迎你随时来湾里做客。

精致有料的科技报道

鲜花

握手

雷人

路过

鸡蛋
发表评论

最新评论

引用 oipqa067 2021-9-5 00:15
看起来不错
引用 uvlki859 2021-9-5 00:13
OMG!介是啥东东!!!
引用 grrdv651 2021-9-5 00:08
垃圾内容,路过为证。
引用 pvqhe751 2021-9-5 00:07
前排支持下了哦~
引用 ioxqw847 2021-9-5 00:00
一直在看
引用 yayly444 2021-9-4 00:35
沙发???
引用 ksuod759 2021-9-4 00:34
专业抢沙发的!哈哈
引用 flqmd754 2021-9-4 00:24
支持,楼下的跟上哈~
引用 oipqa067 2021-9-4 00:23
沙发???
引用 virwk252 2021-9-4 00:21
好啊,谢楼主!!!
引用 pkpfx549 2021-9-3 01:11
纯粹路过,没任何兴趣,仅仅是看在老用户份上回复一下
引用 pzrdf009 2021-9-3 01:07
顶顶更健康
引用 pbbzw458 2021-9-3 00:59
回帖是种美德.
引用 rswum948 2021-9-3 00:18
我只是路过,不发表意见
引用 poccx945 2021-9-3 00:18
非常好,顶一下
引用 virwk252 2021-9-3 00:18
好困啊
引用 jlmdf943 2021-9-3 00:01
介是神马?!!
引用 ylour258 2021-9-2 00:20
有空一起交流一下
引用 ianzo861 2021-9-2 00:11
路过 帮顶 嘿嘿
引用 ycymf676 2021-9-2 00:10
锄禾日当午,发帖真辛苦。谁知坛中餐,帖帖皆辛苦!

查看全部评论(203)

VR热点新闻
  • 官方微信公众号

  • 官方淘宝店

8866VR本站对比其他VR游戏网站的实力对比图【点击图片下载PC客户端】

版权保护投诉指引|手机版|小黑屋|赞助本站|8866VR游戏客户端|关于我们|卡密兑换VIP|8866VR游戏破解汉化玩家交流学习网 |网站地图

GMT+8, 2021-9-18 09:39

Powered by 8866VR游戏下载网

Copyright © 2001-2020, Tencent Cloud.