UGC视频增强超分辨与分类

发布时间：2024-06-10 21:15

　　随着多媒体技术和通信技术的发展,大量的视频数据快速涌现。越来越多的人选择拍摄视频并上传到网络上分享生活。我们称这样的视频为UGC视频,而这些视频的质量往往偏低。视频增强超分辨技术在工业界和学术界都有重要的应用价值。但是,在目前的视频增强超分辨数据集中,低质量视频往往由高分辨率视频下采样得到,这种低质量视频不包含真实场景中的失真,例如白噪声,压缩失真和传输失真,因此,根据这些数据集训练出来的模型往往在真实的UGC视频中表现较差。为了解决这个问题,我们构建一个真实且数据量巨大的视频增强超分辨数据集,称为VESR-Wild。该数据集从工业界的视频应用中构建而来,并且包含真实失真,并且该数据集包含10,000段视频,总共1百万帧视频帧。据我们所知,这是目前最大的视频增强超分辨数据集。我们在该数据集上比较了流行的视频增强超分辨算法,并进一步讨论了未来视频增强超分辨的研究方向。我们希望该数据集可以让研究者对目前视频增强超分辨算法有更深入的认识,并促进该领域在真实UGC视频场景下的探究。另外,在本论文中,我们提出一个新的视频增强超分辨网络结构,称为VESR-Net。我们设计了一个分离非局部模块来捕捉...

【文章页数】：66 页

【学位级别】：硕士

【部分图文】：

图１．１在视频平台中视频的处理流程??

指标的算法和提高主观指标的算法，这些视频增强超分辨算法对不同的视频??分类模型有多大影响仍然不清楚，因此，探究目前ＵＧＣ视频的增强超分辨，以??及增强超分辨算法对ＵＧＣ视频分类的影响对视频平台的实际应用仍有重要的意??义。??／■?Ｎ?（?Ｎ?／＊?＼?（?Ｎ??用户拍摄设备一用....

图１．２在视频平台中视频下载的增强超分辨场景??

指标的算法和提高主观指标的算法，这些视频增强超分辨算法对不同的视频??分类模型有多大影响仍然不清楚，因此，探究目前ＵＧＣ视频的增强超分辨，以??及增强超分辨算法对ＵＧＣ视频分类的影响对视频平台的实际应用仍有重要的意??义。??／■?Ｎ?（?Ｎ?／＊?＼?（?Ｎ??用户拍摄设备一用....

图２．１在Ｖｉｍｅｏ－９０Ｋ训练的ＲＢＰＮ和ＥＤＶＲ在真实场景的主观效果对比??为了解决目前这些数据集的限制，我们分析了?ＵＧＣ视频中的失真，并构建??

?第２章ＶＥＳＲ－Ｗｉｌｄ数据集???频种类较少，这会影响算法的泛化性能。??ＬＲ?！?Ｂｉｃｕｂｉｃ?ＲＢＰＮ?ＥＤＶＲ?１?ＨＲ??＾?看，；－??—————丨１＿??■■■■■??ｔ?—，｜—Ｍ８—Ｈｉｌ??图２．１在Ｖｉｍｅｏ－９０Ｋ训练的ＲＢＰＮ和ＥＤＶＲ在真实场景的主....

图２．２?ＵＧＣ视频中与

?第２章ＶＥＳＲ－Ｗｉｌｄ数据集???ＵＧＣ视频中的主要失真如下：??ＷＭＷＫｔＭＷＭ??（ｅ）?（０?（８）?（ｈ）??■■■Ｈｉ??图２．２?ＵＧＣ视频中与图１．２处理过程对应的各类失真??Ｕ）视频下采样??在视频服务平台中，ＵＧＣ视频需要在有限带宽下从服务器端传送到用户端，....

本文编号：3991910