【CN110378190A】基于主题识别的视频内容检测系统及检测方法【专利】

(19)中华人民共和国国家知识产权局

(12)发明专利申请

(10)申请公布号 (43)申请公布日 (21)申请号 201910327654.8

(22)申请日 2019.04.23

(71)申请人 南京邮电大学

地址 210003 江苏省南京市鼓楼区新模范

马路66号

(72)发明人 李华康　孙晓雨　李群　余瀚　

孔令军　孙国梓　

(74)专利代理机构 南京苏科专利代理有限责任

公司 32102

代理人 姚姣阳

(51)Int.Cl.

G06K 9/00(2006.01)

G06K 9/32(2006.01)

G06K 9/62(2006.01)

(54)发明名称基于主题识别的视频内容检测系统及检测方法(57)摘要本发明揭示了一种基于主题识别的视频内容检测系统及检测方法，系统包括原始视频读取模块，用于读取原始的视频流；视频切片模块，用于将所读取的视频流按镜头进行划分和聚类、得到一组视频片组；片内主题识别模块，用于识别视频片组内全部视频片的不同主题、并输出主题序列；异常片检测模块，用于检测视频片组中是否存在主题异常的视频片。方法包括原始视频读取步骤、视频切片步骤、片内主题识别步骤以及异常片检测步骤本发明利用主题识别技术将视频按主题进行划分，进而判断出其中所有主题的相似度和关联性，

找出视频中的异常片。权利要求书2页 说明书5页 附图5页CN 110378190 A 2019.10.25

C N 110378190

A

权　利　要　求　书1/2页CN 110378190 A

1.一种基于主题识别的视频内容检测系统，其特征在于，包括：

原始视频读取模块，用于读取原始的视频流；

视频切片模块，用于将所读取的视频流按镜头进行划分和聚类、得到一组视频片组；

片内主题识别模块，用于识别视频片组内全部视频片的不同主题、并输出主题序列；

异常片检测模块，用于检测视频片组中是否存在主题异常的视频片。

2.根据权利要求1所述的基于主题识别的视频内容检测系统，其特征在于，所述视频切片模块具体包括：

镜头划分模块，用于按视频中的镜头切换对视频流进行分解，所述镜头切换包括镜头突变切换以及镜头渐变切换；

镜头聚类模块，用于利用视觉特性将内容相似的镜头聚集在一起、生成视频片；

封面提取模块，用于从视频发布平台提取读取视频的封面、并将其视作一个独立的单帧视频片。

3.根据权利要求1所述的基于主题识别的视频内容检测系统，其特征在于，所述片内主题识别模块具体包括：

特征提取模块，用于识别和提取视频片中与主题相关的文本特征；

模型建立模块，用于建立视频片主题分类模型；

所述特征提取模块具体包括，

音频转文本模块，用于将视频片中的音频数据转换为文本，

文本特征提取模块，用于利用命名实体识别，提取视频片的文本特征；

所述模型建立模块具体包括，

相似度计算模块，用于计算视频片主题的相似度，

相似度判断模块，用于判断视频片主题为新主题还是历史主题。

4.根据权利要求1所述的基于主题识别的视频内容检测系统，其特征在于，所述异常片检测模块具体包括：

关联规则计算模块，用于利用关联规则算法计算主题序列中两主题之间的关联规则；

关联性判断模块，用于根据主题间的关联规则判断其关联性。

5.一种基于主题识别的视频内容检测方法，其特征在于，包括如下步骤：

S1、原始视频读取步骤，读取原始的视频流；

S2、视频切片步骤，将所读取的视频流按镜头进行划分和聚类、得到一组视频片组；

S3、片内主题识别步骤，识别视频片组内全部视频片的不同主题、并输出主题序列；

S4、异常片检测步骤，检测视频片组中是否存在主题异常的视频片。

6.根据权利要求5所述的基于主题识别的视频内容检测方法，其特征在于，S2所述视频切片步骤具体包括：

S21、镜头划分步骤，按视频中的镜头切换对视频流进行分解，所述镜头切换包括镜头突变切换以及镜头渐变切换；

S22、镜头聚类步骤，利用视觉特性将内容相似的镜头聚集在一起、生成视频片；

S23、封面提取步骤，从视频发布平台提取读取视频的封面、并将其视作一个独立的单帧视频片。

7.根据权利要求5所述的基于主题识别的视频内容检测系统，其特征在于，S3所述片内

2