科技魔方

基于CV方案,《Driver4VR》只需智能手机即可实现VR全身追踪

AR/VR

2023年05月10日

  用手机摄像头追踪全身姿态已经不是新鲜事,一些app利用这种技术来为用户提供线上健身指导和培训。与此同时,将手机的光学追踪能力与VR结合也具有潜力,由于使用步骤复杂等原因,类似的方案常被人谈论,但并未被广泛应用。直到近期,开发者Frankly Dog专门为VR推出了全身追踪app《Driver4VR》,该作目前已登陆苹果和谷歌商店。

maxresdefault

  据青亭网了解,《Driver4VR》有免费和收费版本,免费版本仅追踪腰部,而付费版本可追踪全身关节,包括手脚、四肢和躯干。其特点是允许你通过手机控制VRChat应用中的Avatar,无需购买专门的定位模块。其原理是,通过本地Wi-Fi传输数据(需要VR头显的IP地址),然后通过VRChat的虚拟化身OSC功能来驱动Avatar。OSC协议首次在2021年公布,该协议支持面部追踪、全身追踪,除了兼容全身动捕系统外,还兼容Quest Pro的眼球追踪工具。

  细节方面,由于《Driver4VR》基于实时计算机视觉算法,因此对于移动设备的芯片配置也有较高的要求。系统方面,需要更新至iOS 12.0或安卓5.1及以上。VR硬件方面,该作兼容VR一体机和PC VR。

  总体来讲,该作设置过程不算复杂,使用起来也比较灵活,手机不管正向还是反向摆放,都能正常运行。不过据体验者称,该应用的定位质量与专业定位系统还有差距,有明显的延迟,用户需要面向手机,侧身的追踪效果不理想。

  对于Quest 2等VR头显来讲,基于手机的全身追踪无疑是一种低成本、易上手的选择,同样也很期待未来Meta能推出类似的应用,来更好的解决Avatar下半身追踪问题。参考:UPloadVR

+1

来源:青亭网

延展资讯