论文部分内容阅读
随着各种数码产品的不断涌现,产品终端存在不同屏幕显示比例,这就会导致同一幅图片或同一段视频在不同设备上出现内容扭曲、丢失或不能满屏显示等现象,严重影响视觉体验。基于内容的图像缩放方法可以在缩放的同时把图像或视频内容的扭曲变形或内容丢失限制在人眼不容易注意到的区域,从而使缩放后的视觉效果明显优于传统的图像缩放方法。但该方法依然存在对面积较大图像或视频主体缩放时重要内容丢失、对图像或视频主体边缘保护不够充分、视频缩放后出现播放抖动等问题。针对上述存在的问题,本文提出了一种基于自适应分块的图像和视频缩放技术,论文主要工作包括:在图像缩放方面,把自适应分块的思想融入到线裁剪并优化累积能量图,能在一定程度上保护图像的主体区域,又兼顾背景区域的裁剪效果。分块时根据显著图的平均列累加能量向量按照逐列标记的方式把图像分成保护区域和非保护区域,再根据每个区域的面积来分配裁剪线的数目;在裁剪过程中,本文针对传统线裁剪算法进行裁剪线生成时能量最低裁剪线不一定是效果最优裁剪线、裁剪线生成起点位置不合适的问题进行了改进,优化了累积能量图,降低了小面积显著主体被裁剪掉的可能性。在视频缩放方面,考虑到视频缩放方法的实时性,本文把自适应分块思想和统一缩放方法相结合。利用自适应分块划分出视频帧的保护区域和非保护区域,然后利用统一缩放算法快速对视频帧进行缩放;同时进行基于缩放比例的逐帧优化,根据Struck跟踪算法确定缩放前后每一帧的视频主体位置的变化,并根据缩放前后视频帧之间的主体位移量的比值进行基于视频主体位置的逐帧优化,可以有效地抑制视频的抖动问题。在MSRA数据库上对图像缩放算法进行验证,将缩放结果与目前流行的线裁剪及其改进算法进行对比,并在互联网上进行在线主观评价缩放结果,评测结果表明本文方法具有更好的主观缩放效果,对各类图像的缩放具有普适性;在Visal和SegtrackV2视频数据库上对视频缩放算法进行验证,将缩放结果与传统线裁剪算法进行对比,并进行主观测评,测评结果表明该方法可以提高缩放视频的时间相关性,并对视频主体起到了一定的保护作用。