注意力模型指导下的视频质量评价方法

合集下载

相关主题

1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。

【摘要】在视频质量评价方法中，常常需要对人眼视觉系统做出合理的假设，其中注意力模型就是一个很重要的因素。提出了一种在注意力模型指导下的视频质量评价方法，在图像帧的质量评价中加入了显著性区域信息，使之更能符合人眼视觉特性，并兼顾了视频中的运动信息，在一定程度上提高了客观质量评价方法的性能。【关键词】视频质量评价；注意力模型；显著性区域；运动信息【中图分类号】ＴＮ９１９．８【文献标志码】Ａ
篓
Ｄ吲Ｔ
பைடு நூலகம்
湖
【本文献信息】王淦，宋利，张文军．注意力模型指导下的视频质量评价方法［Ｊ］．电视技术，２０１４，３８（７）
注意力模型指导下的视频质量评价方法
王淦，宋利，张文军
（上海交通大学上海市数字媒体处理与传输重点实验室，上海２００２４０）
近年来，随着数字视频技术的发展和成熟，客观视频
质量评价方法在视频压缩、通信、分析、重建等视频处理应
用中扮演着越来越重要的角色。在设计客观质量评价方法中，人眼视觉系统（Ｈｕｍａｎ
１运动感知及注意力模型简述
１．１运动感知
ｖｉｓｕｌａｆｅａｔｕｒｅｓｎｄａａｔｔｅｎｔｉｏｎｍｏｄｅｌｐｌａｙｓａｎｉｍｐｏｒｔａｎｔｒｏｌｅ．Ｉｎｔｈｉｓｐａｐｅｒ，ａｖｉｄｅｏｑｕｌｉａｔｙａｓｓｅｓｓｍｅｎｔｍｅｔｈｏｄｗｉｔｈａｔｔｅｎｔｉｏｎｍｏｄｅｌｇｕｉｄｅｄｉｓｐｒｏｐｏｓｅｄ，ｉｎ — ｃｏｒｐｏｒａｔｉｎｇｌｏｃｌａｉｍａｇｅｌａｆｍｅｕａｑｌｉｔｙａｓｓｅｓｓｍｅｎｔｗｉｔｈｓｌｉａｅｎｃｙｉｎｆｏｒｍａｔｉｏｎ，ｌｓａｏｃｏｎｓｉｄｅｒｉｎｇｍｏｔｉｏｎｉｎｆｏｒｍａｔｉｏｎｉｎｔｈｅｖｉｄｅｏ．Ｉｔｉｓｔｅｓｔｉｆｉｅｄｔｈａｔｔｈｅｐｒｏ —
（ＳｈａｎｇｈａｉＫｅｙＬａｂ．ｏｆＤｉｇｉｔａｌＭｅｄｉａＰｒｏｃｅｓｓｉｎｇａｎｄＴｒａｎｓｍｉｓｓｉｏｎ，ＳｈａｎｇａｉｈＪｉａｏＴｏｎｇＵｎｉｖｅｒｓｉｔｙ，Ｓａｎｈｇｈａｉ２００２４０，Ｃｈｉｎａ）
ｏｓｐｅｄｍｅｔｈｏｄｅｎｈａｎｃｅｓｔｈｅｐｅｒｆｏｒｍｎｃａｅｏｆｏｂｊｅｃｔｉｖｅｑｕｌｉａｔｙｓｓａｅｓｓｍｅｎｔ．
【Ｋｅｙｗｏｒｄｓ】ｖｉｄｅｏｕａｑｌｉｔｙｓｓａｅｓｓｍｅｎｔ；ａｔｔｅｎｔｉｏｎｍｏｄｅｌ；ｓａｌｉｅｎｃｙ；ｍｏｔｉｏｎｉｎｆｏｍａｒｔｉｏｎ
ＶｉｄｅｏＱｕａｌｉｔｙＡｓｓｅｓｓｍｅｎｔＭｅｔｈｏｄ、ｖｉｔｈＡｔｔｅｎｔｉｏｎＭｏｄｅｌＧｕｉｄｅｄ
ＷＡＮＧＧａｎ，ＳＯＮＧＬｉ，ＺＨＡＮＧＷｅｎｊｕｎ
【Ａｂｓｔｒａｃｔ】Ａｍｏｎｇｖｉｄｅｏｑｕａｌｉｔｙａｓｓｅｓｓｍｅｎｔｍｅｔｈｏｄｓ，ａｓｓｕｍｐｔｉｏｎｓａｂｏｕｔｈｕｍａｎｖｉｓｕａｌｓｙｓｔｅｍａｒｅｍａｄｅｆｒｅｕｅｑｎｔｌｙ，ｉｎｏｒｄｅｒｔｏａｃｃｏｒｄｗｉｔｈｈｕｍａｎｐｓｙｃｈｏ
视频序列中的运动信息可以用一个三维运动矢量场
ＶｉｓｕａｌＳｙｓｔｅｍ，ＨＶＳ）的特性是一个重要的考量。ＨＶＳ在来表示，即空域表示每帧像素点位置的坐标（，Ｙ），时域
其有限的神经元硬件条件限制下，能够最优化地利用这些表示每帧在视频序列位置的时间实例ｔ，从而形成一个运资源传输最有内容的图像信息。在进行更高级的处理之动矢量ｖ（ｘ，Ｙ，ｔ）＝［Ｕｘ（ｘ，ｙ，ｔ），Ｖｙ（，，ｔ）］ ’ 。若以。代前，ＨＶＳ表现出这样一种特性，即它会尝试提取所能感知表绝对运动矢量（ＡｂｓｏｌｕｔｅＭｏｔｉｏｎ），代表全局运动矢量