科技魔方

Meta:Quest 2内向外追踪无法实现全身动捕,未来更难实现

AR/VR

2022年02月17日

  正如Meta最新的超级碗广告所示,Avatar已经可以实现令人印象深刻的表情,但你显然可以注意到他们明显缺失了下半截。对于这一点,Meta认为目前的Quest 2尚无法单纯依靠内向外追踪实现全身动捕。

  尽管内向外追踪的性能已经足以在头显、控制器和双手追踪方面取代外向内追踪,但由于视场覆盖问题,全身动捕一直以来都是依靠外向内的追踪设置来实现。

  负责Reality Labs事业群的准Meta首席技术官安德鲁·博斯沃思(Andrew Bosworth)日前在最新一期的Instagram问答中就所述问题进行了解释。

  在回答关于未来头显的全身追踪潜力时,博斯沃思给出了否定的答案,他认为用内而外追踪不可实现全身动捕。

  Quest 2目前能够通过内向外追踪实现头部和双手的动捕,而这又使得估计手臂和胸部的位置相对容易。但头显难以判断你的腿、脚或臀部位置,所以今天的Avatar一直都是缺失下半截。

  尽管有人建议可以通过计算机视觉和算法技巧来估算双脚的位置,但博斯沃思指出,考虑到Quest 2的摄像头位置(视场覆盖),实现起来非常困难,而且随着头显形状参数的不断小型化,问题将变得越发困难。

  这位首席技术官回答说:

  “追踪全身非常棘手。因为头显搭载的摄像头看不到你的双腿。当我们想进一步小型化(头显)时,情况就会更加糟糕,因为(摄像头)有时甚至看不到从脸颊到上半身的情况。现在我们可以很好地应对上半身的问题,因为我们可以看到你的手臂,肘部,手掌,我们可以很好地根据肌肉骨骼结构进行估计,但脚的问题非常棘手。

  所以,对于大家心目中的特定(全身追踪)用例而言,可能有必要使用外向内追踪,而不是内向外追踪。这是我们正在研究的问题之一。

  社区出现了关于(Quest的全身追踪)的泄露信息……我认为这个功能可能有点为时过早……目前尚没有任何实质性的进展,但这是我们一直在关注和探索的事情。”

  博斯沃思提到的“泄露信息”很可能是指早前Quest 2文档中关于全身追踪的暗示。

  他随后再次提到了Meta的无腿Avatar,并表示公司未来可能会采用第三人称视角可见的“假腿”形式,并将其作为权宜之计。

  “准确地追踪双腿非常困难,而且仅仅从物理学的角度来看,用现有的头显(使用内向外的追踪方式)不可行。你可以使用外向内进行全身追踪,但这涉及额外的组件,额外的成本,额外的设置。或者你可以不显示双腿,但当其他人看到你的时候,他们会看到你有双腿,我们可以假装你有双腿,没有人会知道区别。这是一个更好的方向。

  显然,我们已经看过大量(关于我们无腿Avatar)的玩笑话。它们其实非常有趣,而且可以理解。因此,我们正在研究如何实现(某种形式的双腿)……如果你看到自己的双腿偏离了位置,这会是一种非常糟糕的体验,你会感觉非常畸形。但如果你正在看着别人的双腿,即便只是我们虚造了它们的位置,它们看起来感觉还行,你会说:‘是的,那就是他们的双腿。’”

  博斯沃思明白,这种假腿方法无法支持诸将双腿用作游戏输入的用例,但至少在简单的VR社交环境,存在双腿的Avatar没有缺失下半截的Avatar尴尬。

  值得一提的是,博斯沃思同时回答了Meta是否会考虑商店的订阅模式。他指出,公司“尚未拥有足够维持订阅模式的内容数量”。这位高管进一步表示,跨平台内容是所述商业模式必需的组要,但目前Quest Store的情况显然并非如此。不过,Meta可能会在未来为Quest Store推出礼品卡机制。

+1

来源:映维网

推荐文章