近期,USPTO公布了一项与3D容积视频压缩和解压缩相关的苹果专利,专利中描述的方案可用来传输和运行点云、沉浸式视频等内容,应用场景包括AR/VR头显、车载智能传感系统等等。细节方面,这项方案可允许LiDAR系统、3D相机、3D扫描仪实时扫描3D空间,并实时传输基于3D数据/点云的容积内容。
苹果指出,随着数据采集、显示技术越来越先进,捕捉3D空间的能力也在增强。通常点云、沉浸式视频可能会包含数千,或数百万个3D点,文件内容相当大,而存储和传输体积视频的过程既昂贵又耗时,对带宽和存储要求也高。因此,目前实时传输容积视频数据比较困难,可能会限制3D点云、容积视频的潜在应用。
在这项名为“可视窗口自适应的容积内容串流/渲染”的专利(US11418769)中,苹果详细描述了一种压缩和编码3D容积内容和数据的编码器系统,该系统的特点是可根据观看区域分割3D容积内容,从而实现接近实时的3D数据传输。也就是说,类似于不同时渲染/传输完整的容积数据,而是根据观看者眼前的可视区域去分区渲染/显示,从而节省运算和耗电。此外,该编码器还可生成表示3D容积数据的压缩版本,目的是减少储存和传输成本。
参考:PatentlyApple