论文部分内容阅读
随着计算机科学技术的不断发展,虚拟现实（Virtual Reality,VR）技术以及增强现实（Augmented Reality,AR）技术的三维虚拟场景（3D Virtual Environments）已经广泛用于电商行业的AR试穿、虚拟看房、在线家装、网络游戏等各行各业。相比于传统的2D媒体,基于3D模型的三维场景可以让用户在完成更丰富交互操作的同时,获得更好地沉浸式的体验。高质量的三维场景往往也意味着巨大数据量的三维模型和纹理图片。因此,如何快速传输高质量的三维场景是一个巨大挑战。本文所提出的方案主要贡献包括:（1）对基于视觉分辨率和视点显著性的模型失真评估算法进行创新。改进基于模型到视点距离和相对视线中心偏转角度这两个维度的失真评估算法,增加基于距离和尺度的视觉分辨率作为评价标准,让模型失真评估算法更加精确。同时加入了视点显著性信息,使得评估方法更加符合人类的视觉特征。改进后的算法,减少了对用户视觉质量贡献较低的模型传输,提升了对传输带宽的利用率,将更多的带宽分配给那些能够提升视觉画面质量的模型,同时,更加看重当前视角下显著性高的模型,从而进一步提升画面视觉质量。（2）提出了基于网格模型和纹理图片的联合优化方案。研究当前用于纹理图片的压缩编码标准,并分析仅依据网格模型的简化率,将纹理图片均匀地降采样到与网格模型匹配的纹理简化方案的不足。在上述方案的基础上,设计了网格模型和纹理图片的联合优化方案,在纹理图片简化时充分考虑纹理图片中不同块的细节特征,并对不同细节特征的块采用不同的降采样系数,在渐进式传输系统中实现最优的匹配结果。（3）从渲染管线出发对用户相关场景中三维模型的兴趣区域管理方法进行改进,增加了兴趣区域管理机制中视距参数来源,认为其半径应与渲染管线中相机内参中的远剪裁平面相关,提出了自适应的兴趣区域。使得系统的兴趣区域划分更加满足真实的用户体验场景。兴趣区域内的模型通过模型失真评估算法进行视觉重要程度排序,通过纹理图片和网格模型的联合优化算法确定纹理图片的采样率,依据兴趣区域的大小完成场景内容更新,完成了三维网格模型渐进式传输方案的设计。最后对所提出的渐进式传输方案进行了系统设计和仿真实验,并与传统方案进行对比。结果表明在带宽资源有限的网络条件下,相同时间内本文提出的方案可为用户提供视觉质量更高的三维场景。