人体行为识别概述-PPT课件
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
光流估计法 目标检测 基于主动轮廓线模 型的方法 基于小波的方法 基于人工神经网络 的方法
Page 6
参考文献：视频中的人体运动分析及其应用研究.nh 运动目标跟踪算法研究综述.pdf
目标检测——时间差分法
n 在连续的图像序列中两幅或三幅相邻帧之间采用基于像素的时间差分， 并对差分结果进行阈值化处理以提取图像中的前景运动区域。 n 缺点：
目标的运动特征，可以用于运动表述，是行为理解等高层部分的基础。 常见的运动表述方法有：运动轨迹、时空图表述和光流。
参考文献：运动人体行为分析 视频中的人体运动分析及其应用研究
Page
3
行为识别的流程
Evaluation only. ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 Copyright 2019-2019 Aspose Pty Ltd.
Evaluation only. n 前景、背景区域的确定与阈值的选取有很大的关系
当灰度图像序列对比度较低时，由于相邻两帧的差 (前景与背景之差 ) 5.2 ted with Aspose.Slides for .NET 3.5 Client Profile 的范围很小，阈值难以选取，影响前景目标的分割结果。 Copyright 2019-2019 Aspose Pty Ltd. n 区域灰度值变化较为平坦时，容易在人体二值图像内产生空洞现象， 给后续的目标分类、跟踪和识别造成不便。 n 优点： n 对于动态环境有较强的自适应性
ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 n 优点： Copyright 2019-2019 Aspose Pty Ltd.
参考文献：Action Recognition in Videos:from Motion Capture Labs to the Web
Page
2
行为识别的流程
Evaluation only. ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 Copyright 2019-2019 Aspose PtHale Waihona Puke Baidu Ltd.
Evaluation only. Hand gesture recognition ted n with Aspose.Slides for .NET 3.5 Client Profile 5.2 虚拟现实 Copyright 2019-2019 Aspose Pty Ltd.
n Human-Computer Interaction (HCI) systems kidsRoom、Smart room 、Facial action用于分析精神病病人的情感行为。 n robotics n medical area 辅助诊断病人的运动问题。另一个是对老年人提供远程协助。
行为识别前景
n high-level video indexing and retrieval n “smart” video surveillance systems 自动检测异常行为，辅助检索一个特定的事件。 n The analysis of sport videos 帮助教练进行战略分析。识别不同的游泳风格。
对于不依赖先验知识的目标跟踪来讲，运动检测是实现跟踪的第一步
运动检测即为从序列图像中将变化区域从背景图像中提取出来。
时间差分法
Evaluation only. 背景减除法 ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 块匹配法 Copyright 2019-2019 Aspose Pty Ltd.
Page 7
目标检测——光流法
n 基于光流法的运动检测，是利用运动物体随时间变化在图像中表现的 光流特性，通过计算位移向量光流场来提取运动目标。
n 光流是空间运动物体在观测成像面上对应像素运动的瞬时速度，是空 间物体可见点的三维速度矢量在成像平面上的投影，它携带了丰富的 运动和结构信息。 Evaluation only.
n LPAC实验室(Laboratory for Perception，Action and Cognition)
Evaluation only. n KNIGHT系统 ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 n ISCAPs(Integrated Surveillance of Crowded Areas for Public Security) Copyright 2019-2019 Aspose Pty Ltd. n REASON(Robust Methods for Monitoring and Understanding People in
行为识别现状
n VSAM(Visual Surveillance and Monitoring) 2019 n IVPL实验室(The Image and Video Processing Laboratory)
n AIRVL实验室(Artificial Intelligence，Robotics，and Vision Laboratory)
Public spaces)
n CANTATA(Content Aware Networked systems Towards Advanced and
TailoredAssistance)
n 中国科学院自动化所的生物识别与安全技术研究中心CBSR n 微软亚洲研究院
Page 1
参考文献：监控视频中的人体异常行为检测研究
Page
4
。
目录
目标检测
Evaluation 目标分类 only. ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 目标跟踪 Copyright 2019-2019 Aspose Pty Ltd.
特征提取 行为理解
Page
5
运动目标检测
Page 6
参考文献：视频中的人体运动分析及其应用研究.nh 运动目标跟踪算法研究综述.pdf
目标检测——时间差分法
n 在连续的图像序列中两幅或三幅相邻帧之间采用基于像素的时间差分， 并对差分结果进行阈值化处理以提取图像中的前景运动区域。 n 缺点：
目标的运动特征，可以用于运动表述，是行为理解等高层部分的基础。 常见的运动表述方法有：运动轨迹、时空图表述和光流。
参考文献：运动人体行为分析 视频中的人体运动分析及其应用研究
Page
3
行为识别的流程
Evaluation only. ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 Copyright 2019-2019 Aspose Pty Ltd.
Evaluation only. n 前景、背景区域的确定与阈值的选取有很大的关系
当灰度图像序列对比度较低时，由于相邻两帧的差 (前景与背景之差 ) 5.2 ted with Aspose.Slides for .NET 3.5 Client Profile 的范围很小，阈值难以选取，影响前景目标的分割结果。 Copyright 2019-2019 Aspose Pty Ltd. n 区域灰度值变化较为平坦时，容易在人体二值图像内产生空洞现象， 给后续的目标分类、跟踪和识别造成不便。 n 优点： n 对于动态环境有较强的自适应性
ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 n 优点： Copyright 2019-2019 Aspose Pty Ltd.
参考文献：Action Recognition in Videos:from Motion Capture Labs to the Web
Page
2
行为识别的流程
Evaluation only. ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 Copyright 2019-2019 Aspose PtHale Waihona Puke Baidu Ltd.
Evaluation only. Hand gesture recognition ted n with Aspose.Slides for .NET 3.5 Client Profile 5.2 虚拟现实 Copyright 2019-2019 Aspose Pty Ltd.
n Human-Computer Interaction (HCI) systems kidsRoom、Smart room 、Facial action用于分析精神病病人的情感行为。 n robotics n medical area 辅助诊断病人的运动问题。另一个是对老年人提供远程协助。
行为识别前景
n high-level video indexing and retrieval n “smart” video surveillance systems 自动检测异常行为，辅助检索一个特定的事件。 n The analysis of sport videos 帮助教练进行战略分析。识别不同的游泳风格。
对于不依赖先验知识的目标跟踪来讲，运动检测是实现跟踪的第一步
运动检测即为从序列图像中将变化区域从背景图像中提取出来。
时间差分法
Evaluation only. 背景减除法 ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 块匹配法 Copyright 2019-2019 Aspose Pty Ltd.
Page 7
目标检测——光流法
n 基于光流法的运动检测，是利用运动物体随时间变化在图像中表现的 光流特性，通过计算位移向量光流场来提取运动目标。
n 光流是空间运动物体在观测成像面上对应像素运动的瞬时速度，是空 间物体可见点的三维速度矢量在成像平面上的投影，它携带了丰富的 运动和结构信息。 Evaluation only.
n LPAC实验室(Laboratory for Perception，Action and Cognition)
Evaluation only. n KNIGHT系统 ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 n ISCAPs(Integrated Surveillance of Crowded Areas for Public Security) Copyright 2019-2019 Aspose Pty Ltd. n REASON(Robust Methods for Monitoring and Understanding People in
行为识别现状
n VSAM(Visual Surveillance and Monitoring) 2019 n IVPL实验室(The Image and Video Processing Laboratory)
n AIRVL实验室(Artificial Intelligence，Robotics，and Vision Laboratory)
Public spaces)
n CANTATA(Content Aware Networked systems Towards Advanced and
TailoredAssistance)
n 中国科学院自动化所的生物识别与安全技术研究中心CBSR n 微软亚洲研究院
Page 1
参考文献：监控视频中的人体异常行为检测研究
Page
4
。
目录
目标检测
Evaluation 目标分类 only. ted with Aspose.Slides for .NET 3.5 Client Profile 5.2 目标跟踪 Copyright 2019-2019 Aspose Pty Ltd.
特征提取 行为理解
Page
5
运动目标检测