为什么在 Meta、微软的元宇宙我们连一双腿都没有？

时间：2022-02-23|浏览：7301

欧易(OKX)

用戶喜愛的交易所

币安(Binance)

已有账号登陆后会弹出下载

当你戴着 Oculus Quest 2 头显，进入 Meta 的 VR 社交平台 Horizon Worlds 你需要创建一个代表自己的虚拟图像。
但它看起来不像你，它没有下半身，像霍格沃茨的幽灵一样漫游在空中，最近漂浮在超级碗的广告中。
隔壁的微软也是如此，在元宇宙入口 Mesh for Teams 中间，你的虚拟形象也失去了腿。
然后你脱口而出一个问题:为什么没有腿？
加腿这么难？
Andrew Bosworth 是 Meta 的 Reality Labs 副总裁，在领导公司 XR 部门时，他养成了通过 Instagram 即兴问答的习惯。在 2 月 10 日的问答中，他承认加腿很难。
如果想在 VR 以逼真的方式呈现双腿首先要知道腿在现实中的一举一动，然后推断腿在 VR 应该做什么？
虽然 Quest 2 可以跟踪头部和手部，估计手臂和胸部的位置，但它不知道你的腿在哪里。
Quest 2 配备了 4 广角灰度摄像头，顶部的两个朝上和侧面，底部的两个略向下。如果我们向前看，这些相机通常可以看到手臂，如果我们坐着或向下看，相机可以看到身体的更多部分。
但它们的跟踪范围总是有限的。有时，腹部等「障碍物」它可能会阻挡相机的视线；有时，当我们倾斜或转动头部时，向下的相机看不到腿。
Meta 还想让头部显示的形状尺寸更小，相机可能更难看到腿。
在腿上放一个额外的传感器怎么样？理论上是可行的，但目前腿上几乎没有商用传感器和控制器。
HTC 主要为企业用户销售几种 Vive VR 头部显示器还配备了绑在四肢或物体（如网球拍）上的跟踪器。然而，跟踪器只能与连接到计算机的头部显示器兼容，并需要一个基站。
HTC VIVE.
说到基站，「无腿」核心原因即呼之欲出，即 Quest 2 定位方法。VR 头显定位技术可分为两类，一类是 outside-in，一种是 inside-out。
Outside-in 需要提前放置定位点设备。定位点设备将发射激光、红外线、可见光等，覆盖定位点设备之间的空间，建立三维位置信息，确定佩戴者的位置和移动方向。为什么在 Meta、微软的元宇宙我们连一双腿都没有？
Quest 2 属于 inside-out，在 VR 头显上安装摄像头，让设备自己检测外部环境的变化，再用 SLAM 算法计算摄像头的空间位置和移动方向。
简单来说，inside-out 定位不需要基站，扩大了使用空间，更适合日常娱乐和移动场景；outside-in 可以提供更准确、更大范围的跟踪效果，全身动捕一般依赖 outside-in实现跟踪设置。
既然目前做不到全身追踪，Meta 腰部以下「砍掉」了。
定位也与使用习惯和公司的战略方向有关——科技发展越方便越好，消费者不一定关心公司使用的技术。起价是299美元Quest 2 虽然精度和延迟相对落后，但对普通用户足够友好。
在 VR 中国经营社交网络，是很多 VR 制造商的目标。
Meta当然，希望进一步VR 推向大众消费市场。更逼真的身体表现可能会导致更多的人对 VR 的兴趣也可能使用户体验更加繁琐和昂贵，至少在短期内。
所谓「两害取其轻」，使用门槛较低， VR 意义重大。
值得一提的是，Unity 增强和虚拟现实副总裁 Timoni West 在 AI 在头显检测到的头部运动的帮助下，预测腿部运动。
AI具体用户的每一个动作都可能无法准确预测，导致 AI 再现动作不自然；「收集大量步行数据」这个前提并不容易。在未来的某个时候，每个家庭都有一台全向跑步机来捕捉腿部运动，制作人体运动的数字模型可能不再困难。
简而言之，如果不在身体或周围设置一系列传感器，则需要消费级一体化 VR 基本上不可能实现完美的腿部跟踪，就像 HTC 美国公司总经理 O＇Brien 所说：
每个人都在追求沉浸式的体验，可以用一个集成的头来再现身体的每一个动作。但我们还是做不到。
你想跳舞吗？
9 月，2019年，Meta 宣布在 Oculus Quest 使用深度神经网络准确跟踪手部。
戴着 Quest 2.我们可以在菜单界面上挥动手进行一些简单的操作，或者拿着手柄在游戏中杀死四面八方。
在 Horizon Worlds，漂浮的「无腿怪」人们可以闲逛，结交朋友，向僵尸开枪，或者创造自己的世界。
为什么准确的手跟踪很重要？因为它将解锁一系列新的体验——手势在 VR 暂停电影，在社交游戏中更自然地表达自己，挥手打招呼、猜拳、握手、抓取、击掌……
相比之下，如果你不需要舞蹈和其他游戏用途，腿部跟踪似乎是不必要的。即使没有腿部跟踪，软件也可以模拟行走、蹲着等动作，让你看起来「全须全尾」。
让步行在 VR 更逼真，有研究人员推出脚 VR 力反馈方案。例如，行走时的身体感觉包括视觉场景的变化、脚底踩在地上的反馈和四肢运动的身体感觉。因此，理论上，通过刺激和模拟这些身体感觉和视觉效果，也可以模拟现实的行走体验。
假如只是不习惯，假装「假腿」足够了。Andrew Bosworth 就是这么想的:
我们可以伪造虚拟形象的腿，让人们看到彼此的完整形象，没有人会知道区别。
当然，Andrew Bosworth 还承认假腿不能代替真腿的体验。假腿只能在闲逛、聊天等简单的 VR 在社交体验中，让你漂浮的虚拟形象看起来更自然。
但是没有一双灵活的腿，总觉得少了什么。在更沉浸和真实的 VR 在经验中，我们总是需要腿。这方面的代表是 VR 社交平台 VRChat。
VRChat.
VRChat 的一个主要特点是虚拟角色不受限制，二次元被称为 MMD 模型可直接转换为 VRChat 的角色，卡比兽，海绵宝宝，未来的初音。不仅如此，越来越多的 VR 舞者在这里通过绑在身上的运动追踪器进行实时斗舞比赛。
为了在 VR 全身舞蹈动作完成，韩国 VRChat 舞者 Makoto 使用的追踪器特别齐全：，带有无线附加组件HTC Vive 头显，手腕上的 Index 控制器和腰脚 Vive Tracker。