​Facebook展示最新VR与AR研究成果:映射技术和全身虚拟化身

  • 时间:
  • 浏览:0

今天的虚拟现实允许许多人歌词 许多人歌词 探索数字化的世界并在其中与许多人歌词 许多人歌词 互动,而当前的增强现实则支持许多人歌词 许多人歌词 通过智能手机创建和共享全新的体验。Facebook Reality Labs(FRL)的研究人员正在推动VR和AR领域的发展,而这项工作最终将能帮助许多人歌词 许多人歌词 把虚拟对象无缝叠换成现实世界之上,并增强许多人歌词 许多人歌词 的日常生活体验。这家公司表示:“许多人歌词 许多人歌词 相信,未来将能以轻便的全天佩戴型AR眼镜形式实现。”

在今天的OC6大会中,Facebook介绍了FRL的新一波创新,如映射技术和全身虚拟化身。某种生活系列的进步将能令由AR驱动的未来更加接近于成为现实。

1.在VR中实现真正的社交临场感

首先,FRL正致力于在VR中实现比当今2D技术更深的联结感。许多人歌词 许多人歌词 指出:“许多人歌词 许多人歌词 的目标是令虚拟交互与面对面交互一样自然。许多人歌词 许多人歌词 将其称之为‘社交临场感’。这是某种生活基于3D的感觉,即使彼此之间相距遥远,但双方依然感觉许多人歌词 许多人歌词 共存于同另有十个 空间,然都才能够无缝,轻松地交流所许多人的想法和感情是什么 。”为了在VR中实现某种生活目标,许多人歌词 许多人歌词 须要都才能忠实地再现面部表情,手势和声音的逼真虚拟化身。

2.全身式Codec Avatars

Facebook于今年年初分享了关于Codec Avatars的研究。某种生活栩栩如生的虚拟化身都才能实时进行动画制作,从而为VR带来了轻松,实时的无脚本交互。两人才能仿佛身所处同另有十个 物理房间中,而且自然地通过逼真虚拟化身进行交流可是我 第一步。

在某种生活视频中,头显中的传感器都才能测量技术项目经理丹妮尔·贝尔科(Danielle Belko)和研究科学总监亚瑟·谢赫(Yaser Sheikh)的面部表情。而且,相关测量值会实时转换为音频和视觉信号,而且完美地映射出对方的形象,动作和声音。

而且,实现真正的社交临场感不仅仅须要面容表情。肢体语言对于许多人歌词 许多人歌词 的沟通同样重要。什么都有有,今天FRL团队证实介绍了全身式Codec Avatars。尽管短期内你无法在消费类产品中看过这项技术,但许多人歌词 许多人歌词 都才能想象那我另有十个 未来:你我将才能通过数个自拍来创建被委托人的超现实虚拟化身,而且头显才能实时制作动画。显然,未来将迎来全新的全身沉浸式VR浪潮。

3.VR中的共享空间

诸如客厅或办公室环境的空间对许多人歌词 许多人歌词 的生活至关重要。Facebook希望将其带到虚拟现实,从而允许用户在被委托人所关心的地方度过岁月。什么都有有,这家公司正在大力创建尽机会逼真的现实世界3D模型。

FRL在今年六月展示了最新的现实环境3D模型,并向研究社区发布了18个空间的数据集。某种生活模拟环境捕获了房间的细微细节,如镜面反射和地毯纹理,而这是令它们与真结构体几乎无法区分的必要条件。Facebook指出:“通过将高精度的角度捕获系统,最新的即时定位和地图构建(SLAM)技术,先进的摄影头,以及密集的重建系统相结合,许多人歌词 许多人歌词 才能在VR中达到前所未有的保真度。”

在今年的OC6大会中,FRL演示了相关的3D建模技术。其中,两人都才能使用Oculus Avatars并肩跳出在3D重建空间中,而且并肩看欣赏视频或开玩游戏。许多人歌词 许多人歌词 指出:“这是许多人歌词 许多人歌词 第一次在个性化3D环境中共享体验,而这是激动人心的未来一瞥。”

在某种生活视频中,Facebook AR/VR副总裁安德鲁·博斯沃斯及其父亲正在后者的公寓3D模型中并肩观看勇士队的比赛。

Facebook展示的重建是用3D定位算法和特殊的角度感应摄像头所创建,并肩属于研究阶段的概念证明。尽管这项技术尚不完善,但团队正在探索怎么支持用户在将来重新创建被委托人的被委托人空间。

4.将技术整合在并肩,将你我聚集在并肩

在里边的空间共享视频中,逼真的空间中跳出了卡通画的Oculus Avatar。而且,当将超逼真的全身式Codec Avatar置于超逼真的环境中,甚至是未来的个性化环境中时,事情就会变得令人兴奋起来。这才能实现真正意义上的传送,任何人都都才能与被委托人珍视的人共聚在并肩。想象一下,给你加入地球另一端的家庭聚会。VR并肩具有实现远程工作的潜力,它都才能为你提供合作工具:PC显示器质量的虚拟屏幕,全息图和白板。你并肩都才能自由进行配置,而这在现实世界中所不机会实现的事情。这机会对许多人歌词 许多人歌词 的生活产生巨大的积极影响:消除通勤须要,而且改变许多人歌词 许多人歌词 的合作和创造方法。

这项研究并肩可对AR眼镜产生影响。在未来,AR眼镜将为你带来无数的机会性,包括在旅途中随时随地进行传送。那我一来,这将允许你与任何位置的任何人保持联系并建立深入的关系。实际上,利用被委托人的虚拟化身,给你传送至世界任何另有十个 角落。当然,这将须要更大规模地虚拟化不同的空间,而FRL的研究团队机会结束英语 英语 着手应对某种生活挑战。

5.LiveMaps

FRL研究团队正在结束英语 英语 构建将为明天的AR体验奠定基础的核心基础架构。

怎么实现呢?请联想前面所说的3D空间,并想想未来它将才能在整个地球中实现。利用机器视觉和SLAM技术,LiveMaps都才能创建共享的虚拟映射。为了实现某种生活规模的技术,FRL团队设想LiveMaps将依靠未来智能设备捕获的众包信息。为了填充第一代映射,研究人员正在探索对Facebook的园区进行映射绘制,以及采用含有地理标签的公共图像来生成点云(这是当今导航地图中常用的技术)。

AR眼镜未来将能利用某种生活3D映射,我不要 实时重建周围环境。这由于你的眼镜将能大幅降低计算功耗,亦即移动芯片组足以支持其运行。有了某种生活3D空间,你的虚拟化身就都才能传送到世界任何地方。

除传送之外,LiveMaps未来将能支持你搜索和共享有关物理世界的实时信息。届时,强大的人工助手将才能立即为你带来与位置相关的个性化信息。它并肩将为你提供另有十个 叠加图,允许你将虚拟内容锚定在现实世界中。

这支团队指出:“许多人歌词 许多人歌词 依然所处研究阶段,但的许多人歌词 许多人歌词 我不要 公开这项研究,而且分享许多人歌词 许多人歌词 在AR眼镜开发过程中取得的进展。许多人歌词 许多人歌词 同还会 考虑怎么在保护隐私的情況下继续推进这项研究,并邀请全球专家提供关于最佳时间,以及许多人歌词 许多人歌词 怎么保留被委托人对信息的控制的反馈。这项技术机会会从根本上改变人类未来的联结方法,而许多人歌词 许多人歌词 很高兴看过它给许多人歌词 许多人歌词 指明的发展方向。”

6.从VR头显到AR眼镜

Facebook最后指出:“许多人歌词 许多人歌词 老会 将VR和AR看作是另有十个 不同的计算平台,但它们实际上可是我 硬币的两面。虚拟现实将许多人歌词 许多人歌词 沉浸在另有十个 数字世界中,允许许多人歌词 许多人歌词 忽略地理的界限,并肩科学造出另有十个 个新世界。增强现实则将虚拟对象换成至许多人歌词 许多人歌词 对真实世界的感知之中,从而提升许多人歌词 许多人歌词 的日常体验。当结合起来时,它们正在重新科学造出许多人歌词 许多人歌词 与世界交互,与彼此联结的方法。”

注:文章内的所有配图皆为网络转载图片,侵权即删!