【摘 要】
:
目前国际上主流的视频编码标准均采用基于宏块的预测编码与变换编码相结合的混合编码框架。编码标准的核心思想是充分利用视频帧内和帧间的时空相关性,尽可能减少数据冗余。压缩后的码流在传输过程中,对电磁干扰及报文丢失的免疫能力特别薄弱。帧内一个编码单元的错漏会带来差错在当前帧和后续帧中持续蔓延,大大影响终端用户的视频观看体验。视频差错掩盖算法在解码端根据帧内和帧间有用的时空域信息,恢复在传输中受损的宏块和帧
论文部分内容阅读
目前国际上主流的视频编码标准均采用基于宏块的预测编码与变换编码相结合的混合编码框架。编码标准的核心思想是充分利用视频帧内和帧间的时空相关性,尽可能减少数据冗余。压缩后的码流在传输过程中,对电磁干扰及报文丢失的免疫能力特别薄弱。帧内一个编码单元的错漏会带来差错在当前帧和后续帧中持续蔓延,大大影响终端用户的视频观看体验。视频差错掩盖算法在解码端根据帧内和帧间有用的时空域信息,恢复在传输中受损的宏块和帧。从而避免差错的肆意扩散,尽可能地降低传输差错对视频质量的负面影响。这对于改善视频用户的观赏体验具有十分重要的意义。与单幅图像相比,视频中连续相邻帧的存在,为我们进行当前帧的差错掩盖提供了更多参考信息。生成对抗网络的提出使得传统图像修复与深度学习有了结合的契机。论文利用与重建帧相邻前两帧运动信息的外推,结合光流计算和生成网络,在针对宏块丢失情形下的视频差错掩盖算法方面做了如下工作:(1)提出了一个基于光流外推的运动补偿算法。算法在运动平滑性假设之下,认为在视频序列连续3帧中,后两帧之间像素的运动矢量可以由前两帧之间的光流外推得到。算法的输入是视频连续3帧,采用局部全局光流计算模型,结合金字塔式计算方法对前两帧之间的光流进行计算并外推。又通过三次插值算法对第三帧的丢失区域进行像素插值。在和传统方法的比较中,论文提出的算法取得了更好的主客观效果。(2)提出了带运动补偿的神经网络视频差错掩盖算法。算法在一般的基于神经网络的静态图像修复算法中,针对视频序列的特点,加入了运动补偿模块。提高了神经网络算法对运动区域的掩盖效果。算法大致分为两个阶段,第一阶段使用基于光流外推的运动补偿进行初步填补。第二阶段采用改进的对抗生成网络进一步掩盖。和目前其它的神经网络视频差错掩盖算法相比,论文提出的算法有一定优势。在视频编码标准测试序列上,所提基于光流外推的运动补偿算法取得了比传统的帧间拷贝、WBMA算法更佳的主客观效果。在公开视频数据集UCF-101上训练与测试的结果表明,所提带运动补偿的神经网络掩盖算法对运动区域的掩盖效果,比WBMA和近期其它基于神经网络的掩盖算法效果更优秀。
其他文献
“五四”是中国社会一场深刻的思想启蒙运动。五四时期,在“人的觉醒”和“个性解放”的同时,知识分子普遍陷于精神苦闷之中。封建专制制度对于人性的束缚和戕害,帝国主义、
随着我国金融体系变革,影子银行规模快速扩张,其监管套利、期限错配、资金空转等特征会导致巨大的金融风险,影子银行的周期性行为已经对我国金融安全产生了负面的影响。加强影子银行监管受到国际社会的广泛认可也是我国金融发展需要关注的重点。本文以影子银行业务规模位居同类银行之首的兴业银行为例,研究商业银行影子银行业务规模周期性及风险偏好。为我国影子银行业务监管提供建议。本文概述了我国影子银行业务的发展、成因、
近些年来,人脸表情识别作为情感计算的分支吸引了国内外研究者的目光。目前,传统表情识别工作主要关注于特征提取,然而部分手工提取的特征由于鲁棒性低、表征能力弱等缺点无
现阶段是信息化的时代,也是科技化的时代。随着云计算、大数据、人工智能等诸多领域的快速发展,神经网络语言模型也在跟随时代前进的脚步,在语音识别、光学识别技术、自然语
提及家庭暴力的话题,社会大众的印象一般是以两性婚姻暴力为代表的成年人间的家庭暴力,而对未成年人遭遇家庭暴力的关注却相去甚远,甚至认为是一种教育行为。相比于两性婚姻
开明派是一个同人聚合较为松散的文学文化文人集合。开明派同人因具有相同的文化志趣和社会理想于20世纪20年代初聚集在一起,主要成员有经亨颐、匡互生、夏丏尊、朱自清、丰
自人工智能概念出现至今,人类从未停下对机器博弈探索的脚步。机器博弈依据其对于博弈局面信息了解的程度,可分为完备信息博弈和非完备信息博弈。如围棋,国际象棋这类博弈竞
单目图像场景深度结构研究一直是当前计算机视觉任务中重要的组成部分,该任务关注于如何从单目图像中获取与之相对应的场景深度结构。在Marr奠定的计算机视觉理论中,一直将其
可变长压缩算法根据Huffman编码原理对数据进行最大化压缩,方便数据进行存储和通信,它的应用领域包括图像和视频处理、音频处理、网络和数据备份等等。尽管可变长压缩算法很
随着物联网的日益成熟,物理世界中实体数量的爆炸增长,物联网搜索技术通过传感器采集并整合物理世界中的实体信息,及时为用户提供所需实体的状态信息。而由于实体的异构性与