【CN110059666A】一种注意力检测方法及装置【专利】

(19)中华人民共和国国家知识产权局

(12)发明专利申请

(10)申请公布号 (43)申请公布日 (21)申请号 201910353333.5

(22)申请日 2019.04.29

(71)申请人 北京市商汤科技开发有限公司

地址 100084 北京市海淀区中关村东路1号

院3号楼7层710-712房间

(72)发明人 王飞　黄诗尧　钱晨　

(74)专利代理机构 广州三环专利商标代理有限

公司 44202

代理人 郝传鑫　熊永强

(51)Int.Cl.

G06K 9/00(2006.01)

G06Q 30/02(2012.01)

(54)发明名称

一种注意力检测方法及装置

(57)摘要

本申请公开了一种注意力检测方法及装置。

该方法包括：获取用户注视时的人脸图像和/或

人脸在所述人脸图像中的相对位置信息；获取所

述人脸图像的整脸和/或局部特征信息；以及根

据以下信息中的一个或多个：所述人脸图像的整

脸特征信息、所述人脸图像的局部特征信息、人

脸在所述人脸图像中的相对位置信息，获取注视

区域的概率。还公开了相应的装置。采用本申请

的方案，采用端到端的方式，输入注视时的人脸

图像和/或人脸在人脸图像中的相对位置信息，

可以得到注视区域的概率，

从而可以实现准确、

可靠的注意力检测。权利要求书1页 说明书13页 附图10页CN 110059666 A 2019.07.26

C N 110059666

A

权　利　要　求　书1/1页CN 110059666 A

1.一种注意力检测方法，其特征在于，所述方法包括：

获取用户注视时的人脸图像和/或人脸在所述人脸图像中的相对位置信息；

获取所述人脸图像的整脸和/或局部特征信息；

根据以下信息中的一个或多个：所述人脸图像的整脸特征信息、所述人脸图像的局部特征信息、人脸在所述人脸图像中的相对位置信息，获取注视区域的概率。

2.根据权利要求1所述的方法，其特征在于，根据所述人脸图像的整脸特征信息，获取注视区域的概率，包括：

根据整脸特征向量，获取所述注视区域的概率。

3.根据权利要求2所述的方法，其特征在于，所述获取所述人脸图像的整脸和/或局部特征信息，包括：

检测眼睛在所述人脸图像中的位置；

根据眼睛在所述人脸图像中的位置，确定眼睛在所述整脸特征图中的位置。

4.根据权利要求3所述的方法，其特征在于，所述根据眼睛在所述人脸图像中的位置，确定所述眼睛在所述整脸特征图中的位置，包括：

将眼睛在所述整脸特征图中的位置与眼睛在所述人脸图像中的位置对齐，得到眼睛在所述整脸特征图中的位置。

5.根据权利要求3或4所述的方法，其特征在于，根据所述人脸图像的局部特征信息，获取注视区域的概率，包括：

根据所述眼睛局部特征向量，获取注视区域的概率。

6.根据权利要求3所述的方法，其特征在于，所述方法还包括：

将所述整脸特征向量和所述眼睛局部特征向量进行融合，得到融合后的特征向量。

7.根据权利要求6所述的方法，其特征在于，根据以下信息中的一个或多个：所述人脸图像的整脸特征信息、所述人脸图像的局部特征信息、人脸在所述人脸图像中的相对位置信息，获取注视区域的概率，包括：

根据所述融合后的特征向量和/或所述人脸在人脸图像中的相对位置信息，获取所述注视区域的概率。

8.一种注意力检测装置，其特征在于，所述装置包括：

第一获取单元，用于获取用户注视时的人脸图像和/或人脸在所述人脸图像中的相对位置信息；

第二获取单元，用于获取所述人脸图像的整脸和/或局部特征信息；

第三获取单元，用于根据以下信息中的一个或多个：所述人脸图像的整脸特征信息、所述人脸图像的局部特征信息、人脸在所述人脸图像中的相对位置信息，获取注视区域的概率。

9.一种注意力检测装置，其特征在于，所述装置包括：输入装置、输出装置、存储器和处理器；其中，所述存储器中存储一组程序代码，且所述处理器用于调用所述存储器中存储的程序代码，执行如权利要求1～7中任一项所述的方法。。

10.一种非易失性计算机可读存储介质，其上存储有计算机程序指令，其特征在于，所述计算机程序指令被处理器执行时实现权利要求1～7中任意一项所述的方法。

2