在2017年时,苹果曾推出基于Core ML的计算机视觉框架Vision,就像它名字里暗示的那样,计算机视觉也是Vision Pro头显的重要功能之一。在WWDC 2023期间,苹果宣布,Vision框架将新增Animal Body Pose API,特点是追踪猫、狗等动物的多个骨骼节点,以实现全身姿态追踪。据悉,该API仅支持iOS 17、iPadOS 17、tvOS 17和macOS Sonoma系统。
据青亭网了解,此前Vision框架已经支持人体姿态检测,可追踪19个身体关节,开发者利用该功能曾开发出多款健康、健身相关应用。而潜心的Animal Body Pose API则你的宠物,可追踪25个身体标记,并定义了6个关节组,包括头部(耳朵、眼睛和鼻子)、前腿、后腿、颈部、尾部(三个尾关节)、全身。值得注意的是,该功能目前仅能同时追踪两只动物。
应用场景方面,动物姿态追踪可以更好的分析宠物的行为,以及和传感器的相对位置。如果应用于Vision Pro头显,也许可以允许用户与宠物在AR模式互动,或在VR模式中提醒用户宠物进入边界。
参考:Apple