人体行为识别概述.pptx
《人体行为识别概述.pptx》由会员分享,可在线阅读,更多相关《人体行为识别概述.pptx(33页珍藏版)》请在咨信网上搜索。
1、Page 1行为识别现状行为识别现状nVSAM(Visual Surveillance and Monitoring)1997nIVPL实验室实验室(The Image and Video Processing Laboratory)nAIRVL实验室实验室(Artificial Intelligence,Robotics,and Vision Laboratory)nLPAC实验室实验室(Laboratory for Perception,Action and Cognition)nKNIGHT系统系统nISCAPs(Integrated Surveillance of Crowded Ar
2、eas for Public Security)nREASON(Robust Methods for Monitoring and Understanding People in Public spaces)nCANTATA(Content Aware Networked systems Towards Advanced and TailoredAssistance)n中国科学院自动化所的生物识别与安全技术研究中心中国科学院自动化所的生物识别与安全技术研究中心CBSRn微软亚洲研究院微软亚洲研究院参考文献:监控视频中的人体异常行为检测研究Page 2行为识别前景行为识别前景nhigh-leve
3、l video indexing and retrievaln“smart”video surveillance systems 自动检测异常行为,辅助检索一个特定的事件。自动检测异常行为,辅助检索一个特定的事件。nThe analysis of sport videos 帮助教练进行战略分析。识别不同的游泳风格。帮助教练进行战略分析。识别不同的游泳风格。nHand gesture recognition 虚拟现实虚拟现实nHuman-Computer Interaction(HCI)systems kidsRoom、Smart room、Facial action用于分析精神病病人的情感行为
4、。用于分析精神病病人的情感行为。nroboticsnmedical area 辅助诊断病人的运动问题。另一个是对老年人提供远程协助。辅助诊断病人的运动问题。另一个是对老年人提供远程协助。参考文献:Action Recognition in Videos:from Motion Capture Labs to the WebPage 3行为识别的流程行为识别的流程参考文献:运动人体行为分析 视频中的人体运动分析及其应用研究 n目标的运动特征,可以用于运动表述,是行为理解等高层部分的基础。目标的运动特征,可以用于运动表述,是行为理解等高层部分的基础。n常见的运动表述方法有:常见的运动表述方法有:运
5、动轨迹、时空图表述运动轨迹、时空图表述和光流。和光流。Page 4行为识别的流程行为识别的流程。Page 5目录目录目标检测目标检测目标分类目标分类特征提取特征提取行为理解行为理解目标跟踪目标跟踪Page 6运动目标检测运动目标检测参考文献:视频中的人体运动分析及其应用研究.nh 运动目标跟踪算法研究综述.pdfn对于不依赖先验知识的目标跟踪来讲,运动检测是实现跟踪的第一步对于不依赖先验知识的目标跟踪来讲,运动检测是实现跟踪的第一步n运动检测即为从序列图像中将变化区域从背景图像中提取出来。运动检测即为从序列图像中将变化区域从背景图像中提取出来。Page 7目标检测目标检测时间差分法时间差分法n
6、在连续的图像序列中在连续的图像序列中两幅或三幅相邻帧两幅或三幅相邻帧之间采用之间采用基于像素基于像素的时间差分,的时间差分,并对差分结果进行并对差分结果进行阈值化处理阈值化处理以以提取提取图像中的图像中的前景前景运动区域。运动区域。n缺点:缺点:n前景、背景区域的确定与前景、背景区域的确定与阈值的选取阈值的选取有很大的关系有很大的关系 当灰度图像序列对比度较低时,由于相邻两帧的差当灰度图像序列对比度较低时,由于相邻两帧的差(前景与背景之差前景与背景之差)的范围很小,的范围很小,阈值难以选取阈值难以选取,影响前景目标的分割结果。,影响前景目标的分割结果。n区域区域灰度值灰度值变化较为变化较为平坦
7、时平坦时,容易在人体二值图像内产生,容易在人体二值图像内产生空洞现象空洞现象,给后续的目标分类、跟踪和识别造成不便。给后续的目标分类、跟踪和识别造成不便。n优点:优点:n对于对于动态环境动态环境有有较强较强的自的自适应性适应性Page 8目标检测目标检测光流法光流法n基于光流法的运动检测,是利用运动物体随时间变化在图像中表现的基于光流法的运动检测,是利用运动物体随时间变化在图像中表现的光流特性,通过计算位移向量光流场来提取运动目标。光流特性,通过计算位移向量光流场来提取运动目标。n光流是空间运动物体在观测成像面上对应像素运动的瞬时速度,是空光流是空间运动物体在观测成像面上对应像素运动的瞬时速度
8、,是空间物体可见点的三维速度矢量在成像平面上的投影,它携带了丰富的间物体可见点的三维速度矢量在成像平面上的投影,它携带了丰富的运动和结构信息。运动和结构信息。n优点优点:n即使在摄像机运动的情况下也能检测出独立的运动目标。即使在摄像机运动的情况下也能检测出独立的运动目标。n缺点缺点:n由于噪声、多光源、阴影和遮挡等原因,计算出的光流场分布并不十由于噪声、多光源、阴影和遮挡等原因,计算出的光流场分布并不十分可靠和准确。分可靠和准确。n多数光流法计算复杂、耗时,在实际的系统中没有特殊的硬件支持时,多数光流法计算复杂、耗时,在实际的系统中没有特殊的硬件支持时,很难实现实时检测。很难实现实时检测。Pa
9、ge 9目标检测目标检测背景减除法背景减除法n最常用且有效的是背景减除法。最常用且有效的是背景减除法。n背景减除法最简单的实现方法是预先选取不含前景运动目标的背景图背景减除法最简单的实现方法是预先选取不含前景运动目标的背景图像,然后将当前图像帧与背景图像相减得到前景目标。像,然后将当前图像帧与背景图像相减得到前景目标。n背景减除法通常在背景减除法通常在摄像机固定的情况下使用摄像机固定的情况下使用,关键关键是建立随场景变化是建立随场景变化不断更新的背景模型不断更新的背景模型。n有有两类两类常用的背景更新方法常用的背景更新方法:n1、建立背景模型并采用自适应方法对模型参数进行调整,从而获得、建立背
10、景模型并采用自适应方法对模型参数进行调整,从而获得新背景图像新背景图像;n2、从过去的一组观测图像中按一定的假设选择像素值构成当前背景、从过去的一组观测图像中按一定的假设选择像素值构成当前背景图像。图像。Page 10目标分类目标分类参考文献:视频中的人体运动分析及其应用研究Page 11人体描述人体描述参考文献:Human Motion:Modeling and Recognition of Actions and Interactions Page 12运动跟踪运动跟踪参考文献:运动目标跟踪算法研究综述n运动目标的跟踪,即通过目标的有效表达,在图像序列中寻找与目标运动目标的跟踪,即通过目标
11、的有效表达,在图像序列中寻找与目标模板最相似候选目标区位置的过程。模板最相似候选目标区位置的过程。n就是在序列图像中为就是在序列图像中为目标定位目标定位。n范例范例Page 13四种跟踪方法的比较四种跟踪方法的比较。Page 14运动目标的特征运动目标的特征参考文献:自动目标识别与跟踪技术研究综述Page 15运动表征运动表征。Page 16行为识别行为识别n人的行为理解与描述是指对人的运动模式进行分析和识别人的行为理解与描述是指对人的运动模式进行分析和识别,并用自然语并用自然语言等加以描述言等加以描述.n可以简单地认为是时变数据的分类问题,即将测试序列与预先标定的代可以简单地认为是时变数据的
12、分类问题,即将测试序列与预先标定的代表典型行为的参考序列进行匹配表典型行为的参考序列进行匹配.n行为理解的行为理解的关键问题关键问题是如何从学习样本中是如何从学习样本中获取参考行为序列获取参考行为序列,并且学习并且学习和匹配的行为序列能够处理在相似的运动模式类别中空间和时间尺度上和匹配的行为序列能够处理在相似的运动模式类别中空间和时间尺度上轻微的特征变化轻微的特征变化.Page 17行为识别方法行为识别方法Page 18基于模板匹配的方法基于模板匹配的方法n首先将图像序列转换成一组静态形状模式首先将图像序列转换成一组静态形状模式n然后在识别过程中用输入图像序列提取的特然后在识别过程中用输入图像
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 人体 行为 识别 概述
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【人****来】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【人****来】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。