研究目的
提出一种基于多视图及其深度图实现虚拟现实(VR)中六自由度(6DoF)自由导航与360度视频(3DoF+)的视图合成方法,包括生成对应于进出场景的视图。
研究成果
该方法通过使用多个参考视图来解决遮挡问题,增加了至少一个参考摄像机捕捉到遮挡区域的概率。通过增加输入参考的数量(尤其是在大运动情况下),PSNR值得以提升。该算法已被选为MPEG-I标准化活动中具有视差运动的360度虚拟现实新参考软件的核心。
研究不足
增加输入视图数量会提高内存占用和计算时间(对于1920×1080像素的输入视图,计算时间可能长达10秒)。