通信人家园

 找回密码
 注册

只需一步,快速开始

短信验证,便捷登录

搜索

军衔等级:

  中将

注册:2016-11-17304
跳转到指定楼层
1#
发表于 2022-2-23 10:33:45 |只看该作者 |倒序浏览

当你戴着 Oculus Quest 2 头显,进入 Meta 的 VR 社交平台 Horizon Worlds 时,你需要创建一个虚拟形象代表自己。


可是它看起来怎么也不像你,它没有下半身,像霍格沃茨的幽灵一般漫游空中,最近飘荡进了超级碗的广告里。


29592772A7C0986889CC8F054644D472895DFA29_size2705_w592_h248.gif

Horizon Worlds.


隔壁的微软也是这样,在其元宇宙入口 Mesh for Teams 之中,你的虚拟形象同样失去双腿。


7F212444553778B3CC06C13D7303A1B006C67CC7_size43_w720_h405.jpeg

Mesh for Teams.


然后你将一个问题脱口而出:为什么没有腿?


B9CAAB016C40CCC736BDC6D4153DE63E6849AE9E_size12_w945_h150.png

把腿加上,有那么难?


Andrew Bosworth 是 Meta 的 Reality Labs 副总裁,在领导公司的 XR 部门时,他养成了通过 Instagram 进行即兴问答的习惯。


在 2 月 10 日的问答中,他承认加腿是件难事。


5BEFE6D62E5A95E36CF9563D6AAB146ED60CEA49_size71_w1052_h882.jpeg

Andrew Bosworth.


如果想在 VR 中以逼真的方式呈现双腿,它首先需要知道腿在现实里的一举一动,然后推断腿在 VR 中应该做什么。


症结就在这里,虽然 Quest 2 能够进行头部和手部跟踪,并估计手臂和胸部的位置,但它不知道你的腿在哪里。


38E1C26C6E2DB28FE430291F38ACB9026C8623E0_size22_w720_h306.jpeg


Quest 2 配备 4 颗广角灰度摄像头,顶部的两颗朝向上面和侧面,底部的两颗略微向下。如果我们向前看,这些摄像头通常可以看到手臂,如果我们坐着或向下看,摄像头能够看到身体的更多部分。


但它们的追踪范围始终有限。有时,腹部等「障碍物」可能会挡住摄像头的视线;有时,当我们倾斜或转动头部,那些向下的摄像头也无法看到腿。


Meta 还想将头显的外形尺寸做得更小,摄像头可能更难看到腿了。


在腿部放上额外的传感器呢?理论上可行,但目前几乎没有针对腿部的商用传感器和控制器。


HTC 销售几种主要面向企业用户的 Vive VR 头显,还配备了绑在四肢或物体(如网球拍)上的追踪器。不过,追踪器只能与连接到电脑的头显兼容,并需要一个基站。


A5570E461DB1977D371BFB5969B4FF8031169CA3_size713_w640_h297.gif

HTC VIVE.


说到基站,「无腿」的核心原因也就呼之欲出,即 Quest 2 的定位方式。VR 头显的定位技术可分为两类,一种是 outside-in,一种是 inside-out。


Outside-in 需要事先放置定位点设备,定位点设备会发射出激光、红外线、可见光等,覆盖定位点设备之间的空间,并建立三维位置信息,通过三角定位的方法确定佩戴者的位置和移动方向。


5213DE59E29B9C074BB61579953D72D70EF7B6EE_size26_w640_h360.jpeg

图片来自:VRPinea


Quest 2 则属于 inside-out,它无需架设额外的定位装置,在 VR 头显上安装摄像头,让设备自己检测外部环境的变化,再用 SLAM 算法计算出摄像头的空间位置和移动方向。


1EEC2CB77A31F4B1999D5CF7EA4EB496036E8E3A_size43_w650_h500.jpeg

图片来自:VRPinea


简单来说,inside-out 定位无需基站,拓展了使用空间,更适合日常娱乐和移动场景;outside-out 可提供更精准、范围更大的追踪效果,全身动捕一般依靠 outside-in 的追踪设置实现。


既然目前做不到全身追踪,Meta 就将腰部以下「砍掉」了。


7CF94236190FEAC90220C74215A4835CE8CFB9B1_size66_w1080_h608.jpeg


定位方式也关联了使用习惯,以及公司的战略方向——科技发展当然越方便越好,消费者不一定关心公司用了什么技术。起价 299 美元的 Quest 2 虽然精准度和延迟相对落后,但对普通用户来说足够友好。


在 VR 中经营社交,是许多 VR 制造商的目标。


CB7CBAA547B8EEB6920E22794BBB60808AC99EEF_size40_w780_h438.jpeg

图片来自:CNN


Meta 当然希望进一步将 VR 推向大众消费市场。更逼真的身体表现,固然可能引起更多人对 VR 的兴趣,也可能使用户体验更加繁琐、成本更高,至少短期内是如此。


所谓「两害取其轻」,更低的使用门槛对普及 VR 意义重大。


值得一提的是,Unity 增强和虚拟现实副总裁 Timoni West 提出了一种解决方法——先采集大量关于走路方式的数据,再在 AI 的帮助下,根据头显检测到的头部运动预测腿部运动。


AI可能无法精准预测到具体用户的每一个动作,这会导致 AI 再现的动作不自然;「采集大量走路方式数据」这个前提也并不容易,当在未来某个时候,每个人家里都有一台全向跑步机捕捉腿部运动时,制作人体运动的数字模型可能就不再困难了。


F06AA8610CF9249EE7CE892598BE277E8E17EBD2_size39_w800_h533.jpeg

图片来自:0-tech


简言之,如果不在身体或周围设置一系列传感器,就要求消费级一体式 VR 设备实现完美的腿部追踪,基本是不可能的,就像 HTC 美国公司总经理 O'Brien 所说:


大家追求的是一直全身心的沉浸式体验,能够用一个一体式头显再现身体的每一个动作。但是,我们目前还做不到。


561CECB4EBD99E69DD9FF7F6DC0F159ED3E9B584_size13_w945_h150.png

你要跳舞吗?


2019 年 9 月,Meta 宣布在 Oculus Quest 上使用深度神经网络进行准确的手部跟踪。


戴着 Quest 2,我们可以挥动手部在菜单界面进行一些简单操作,也可以握着手柄在游戏里大杀四方。


在 Horizon Worlds,漂浮的「无腿怪」们可以闲逛、结识朋友、向僵尸开枪或创建自己的世界。


560B222844ABAAF8EBC447F15BCBAB6347B481C3_size4116_w595_h328.gif

图片来自:Meta


精确的手部追踪为什么重要?因为它将解锁一系列新体验——用手势在 VR 中暂停电影,在社交游戏中更自然地表达自己,与现实中一样挥手打招呼、猜拳、握手、抓取、击掌……


相比之下,如果你不需要跳舞等游戏用途的话,腿部跟踪似乎没有那么必要。就算不用腿部跟踪,软件也可以模拟行走、下蹲等动作,让你看起来「全须全尾」。


为了让步行在 VR 中更逼真,有研究人员推出脚部 VR 力回馈方案。举例来说,行走时的体感包括视觉场景变化、脚底踩在地面上的反馈,以及四肢移动的体感。因此,在理论上,通过刺激和模拟这些体感和视觉效果,也能模拟逼真的行走体验。


1342C9B6A4DB3434321EB09E4E6A6A7BB4DA742B_size27_w800_h434.jpeg


如果仅仅是看不惯,装个「假腿」足够了。Andrew Bosworth 就是这么想的:


我们可以为虚拟形象伪造腿,让人们看到彼此的完整形象,没有人会知道其中的区别。


当然,Andrew Bosworth 也承认,假腿没法代替真腿的体验。假腿只是能在闲逛、聊天等简单的 VR 社交体验里,让你漂浮的虚拟形象看起来更加自然。


但没有一双灵活的腿,总觉得少了什么。在更沉浸和真实的 VR 体验里,我们总是需要腿的,这方面的代表便是 VR 社交平台 VRChat。


011CA096D8E83772B460B706D9349196DF6DCAA8_size62_w837_h468.jpeg

VRChat.


VRChat 的一大特点是虚拟角色不受限制,二次元们熟知的 MMD 模型可以直接转换成 VRChat 的角色,卡比兽、海绵宝宝、初音未来扎堆出现。不仅如此,越来越多的 VR 舞者通过绑在身上的运动追踪器,在这里进行实时斗舞比赛。


为了在 VR 中完成全身舞蹈动作,韩国 VRChat 舞者 Makoto 用的追踪器特别齐全:带有无线附加组件的 HTC Vive 耳机、手腕上的 Index 控制器以及腰部和脚部的 Vive Tracker。


EFC34BFA7FDC6348F95EEDB62C9710AA29E50401_size2089_w320_h426.gif

Makoto.


VR 爱好者们愿意为全身追踪付出许多金钱和精力,意味着拥有「真腿」的门槛依然很高。


但更长远地看,社区就是围绕这些活动形成的,就连国际舞蹈协会(IDA)也在 VRChat 举办了一系列锦标赛式的舞蹈比赛,VR 真正远程连接了可能永远都不会见面的人们。


我们仍然期待,随着技术变得更好、更便宜,VR 能够提供更多意料之外的体验。


F4B44C07BD320E0E4A78F5A34C4DC834391DA160_size50_w1080_h459.jpeg

在 VR 里击剑. 图片来自:roadtovr


或许从「为什么没有腿」这个问题就可以看出,相比扎克伯格的元宇宙构想,现在的 VR 技术还有些距离,Horizon Worlds 也并不是一个完全充实的元宇宙。


话又说回来,或许不是所有人都喜欢有腿,不是每个人都想要做一个映射他们日常生活的虚拟形象。


至少,在未来人人皆可触及的 VR 世界,要让「漂浮的无腿怪」成为一个选择,而不是一种遗憾。


举报本楼

本帖有 1 个回帖,您需要登录后才能浏览 登录 | 注册
您需要登录后才可以回帖 登录 | 注册 |

版规|手机版|C114 ( 沪ICP备12002291号-1 )|联系我们 |网站地图  

GMT+8, 2025-7-18 09:37 , Processed in 0.222115 second(s), 21 queries , Gzip On.

Copyright © 1999-2025 C114 All Rights Reserved

Discuz Licensed

回顶部