《智能视频监控技术关键技术研究.pdf》由会员分享,可在线阅读,更多相关《智能视频监控技术关键技术研究.pdf(72页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、北京交通大学硕士学位论文智能视频监控技术关键技术研究姓名:许洪伟申请学位级别:硕士专业:计算机科学与技术指导教师:张宁20090601中文摘要中文摘要摘要:智能视频监控技术是计算机视觉领域近年来新兴的一个研究方向。它主要的研究目标是利用计算机视觉技术、图像视频处理技术和人工智能技术对监控视频的内容进行高层语义分析,并且根据分析的结果对视频监控系统进行控制,从而使视频监控系统具有较高的智能化水平。因此,智能视频监控技术在公共安防、智能交通等领域有广阔的应用前景,成为国内外专家学者研究的热点。实际视频监控系统中的场景往往是错综复杂、变化无常的,而准确地对运动目标检测和跟踪是进行行为理解等后续处理的
2、基础。本文的研究目标是针对固定摄像机下的复杂监控场景,研究相应环境下人的检测和跟踪的相关模型及算法。本文针对三种常用的运动目标检测算法和不同背景模型的研究和分析,提出了融入阴影检测和混合高斯模型的目标检测算法,并对目标检测结果进行建模,为后续跟踪提供了准确有效的输入。通过M a t l a b 对该算法进行仿真,实验结果表明,该算法能够有效的处理多模态背景并对运动阴影有很好的抑制作用。针对现有粒子滤波算法多采用手动选取待跟踪目标的缺点,本文提出了自动建模的粒子滤波跟踪算法。通过对上述章节中的检测目标进行自动建模,为基于颜色的粒子滤波跟踪算法提供有效的模型输入,实现了运动目标的自动建模和跟踪。通
3、过M a t l a b 进行算法仿真,采用P E T S 2 0 0 6 通用测试视频进行实验,实验验证了自动目标建模的有效性,跟踪结果显示粒子滤波算法对于非刚体的人的跟踪有很好的鲁棒性。针对基于颜色的单一视觉信息在复杂监控场景下描述目标不充分及缺乏稳定性的缺点,本文提出了一种基于粒子滤波框架的自适应多信息融合的跟踪算法,其中利用颜色和纹理双重信息描述目标,通过自适应权值更新将两种信息融合在一起,使跟踪算法能够根据当前跟踪形势自适应调整两种信息的权重,实现了目标的鲁棒性跟踪。关键词:智能视频监控;目标检测;粒子滤波;目标跟踪;自适应信息融合分类号:T P 3 9 1 4 1北京交通人学硕士论
4、文A BS T R A C TA B S T R A C T:I n t e l l i g e n tV i d e oS u r v e i l l a n c et e c h n o l o g yi sa ne m e r g i n gr e s e a r c ho r i e n t a t i o ni nt h ef i e l do fc o m p u t e rv i s i o n T h em a i ng o a li st or e a l i z et h eh i g h-l e v e ls e m a n t i ca n a l y s i so f
5、t h es u r v e i l l a n c ev i d e ob yi n t e g r a t i n gc o m p u t e rv i s i o nt e c h n o l o g y,i m a g e v i d e op r o c e s s i n gt e c h n o l o g ya n da r t i f i c i a li n t e l l i g e n c et e c h n o l o g y T h ea n a l y s i sr e s u l t sC a nb eu s e dt oc o n t r o lt h e
6、v i d e os u r v e i l l a n c es y s t e mi t s e l f T h u s,I n t e l l i g e n tV i d e oS u r v e i l l a n c et e c h n o l o g yh a sab r o a dp r o s p e c t si np u b l i cs e c u r i t y,i n t e l l i g e n tt r a n s p o r t a t i o na n do t h e ra r e a so fa p p l i c a t i o n,w h i c
7、 hm a d et h et e c h n o l o g yb e c o m e sah o tr e s e a r c hb yd o m e s t i ca n df o r e i g ne x p e r t sa n ds c h o l a r s V i d e oS u r v e i l l a n c eS y s t e mi nt h ea c t u a ls c e n e sa r eo f t e nv e r yc o m p l e xa n dv o l a t i l e,a n dt h eb a s i co ft h ed e s c
8、r i p t i o n,u n d e r s t a n d i n ga n df o l l o w u pt od e a lw i t hi nt h ei n t e l l i g e n tv i d e os u r v e i l l a n c es y s t e mi sa c c u r a t e l yd e t e c t i n ga n dt r a c k i n gt h em o v i n gt a r g e t s T h i sp a p e ri sc o m m i t t e dt ot h er e l e v a n tm o
9、d e l sa n da l g o r i t h m so fh u m a nd e t e c t i o na n dt r a c k i n gu n d e rt h es p e c i f i cs u r v e i l l a n c es c e n e s A f t e rr e s e a r c h i n gt h r e ec l a s s i ca l g o r i t h m sf o rm o v i n go b j e c t sd e t e c t i o n,a n dg i v i n gt h ea n a l y s i so
10、fd i f f e r e n tb a c k g r o u n dm o d e l s,at a r g e td e t e c t i o na l g o r i t h mb a s e do ns h a d o wd e t e c t i o na n dG a u s s i a nM i x t u r eM o d e li sp r o p o s e d W h a t Sm o r e,t h ep a p e rh a se s t a b l i s h e do b j e c t sm o d e lb a s e do nt h er e s u
11、l to fd e t e c t i o no fm o v i n gt a r g e t s,w h i c hC a np r o v i d et h ea c c u r a t ea n de f f e c t i v ei n p u to ft h ef o l l o w u pt r a c k i n g T h ea l g o r i t h mh a sb e e ns i m u l a t e do nt h eM a t l a bs o f t w a r ep l a t f o r m E x p e r i m e n t ss h o wt h
12、 ea l g o r i t h mi nd e a l i n gw i t hm u l t i m o d a lb a c k g r o u n di se f f e c t i v ea n dC a ns u p p r e s st h es h a d o wo ft h em o v e m e n tp e r f e c t l y T oc o n q u e rt h ed r a w b a c ko fs e l e c t i n gt h et a r g e tm a n u a l l yi nt h ee x i s t i n gP a r t
13、i c l eF i l t e ra l g o r i t h m,a na u t o m a t i cm o d e l i n go ft h eP a r t i c l eF i l t e ra l g o r i t h mi sp r o p o s e d T oa u t o m a t i cm o d e lt h et a r g e td e t e c t e di nt h ea b o v e-m e n t i o n e ds e c t i o n s,w h i c hp r o v i d e st h ei n p u tm o d e lo
14、 ft h eP a r t i c l eF i l t e ra l g o r i t h mb a s e do nc o l o Lr e a l i z e st h ea u t o m a t i cm o d e l i n ga n dt a r g e tt r a c k i n g T h ep a p e rh a ss i m u l a t e dt h eP a r t i c l eF i l t e rt r a c k i n ga l g o r i t h mo nt h eM a t l a bs o f t w a r ep l a t f o
15、r m,w h i c hu s et h eP E T S 2 0 0 6(P e r f o r m a n c eE v a l u a t i o no fT r a c k i n ga n dS u r v e i l l a n c e)c o m m o nv i d e od a t a b a s ea st h ei n p u td a t a E x p e r i m e n t ss h o wt h et r a c k i n ga l g o r i t h mi na u t o m a t i cm o d e l i n gt a r g e ti s
16、e f f e c t i v ea n dh a sg o o dr o b u s t n e s so nt r a c k i n gn o n r i g i dt a r g e t,s u c ha sh u m a n T oo v e r c o m et h es h o r t c o m i n go fs i n g l ev i s u a lc u ei nc o m p l e xe n v i r o n m e n t s,aA B S T RA C Tt r a c k i n ga l g o r i t h mb a s e do na d a p t
17、 i v ec u ef u s i o nm e c h a n i s mi sp r o p o s e d T h ec o l o rc u ea n dt e x t u r ec u ea r eu t i l i z e dt or e p r e s e n tt h et a r g e ta n dd e m o c r a t i ci n t e g r a t i o ni sa p p l i e dt of u s i o nt h e s et w oc u e s,t h u sr e a l i z i n gt h et r a c k i n ga l
18、 g o r i t h mo n-l i n ea d j u s t i n gt h ew e i g h to ft w oC U e Sa n dr e a l i z i n gt h er o b u s tt r a c k i n g K E Y W O R D S:I n t e l l i g e n tV i d e oS u r v e i l l a n c e;O b j e c tD e t e c t i o n;P a r t i c l eF i l t e r,O b j e c tT r a c k i n g;A d a p t i v ec u e
19、f u s i o nC 1 A S S N O:T P 3 9 1 4 1北京交通人学硕+论文独创性声明本人声明所呈交的学位论文是本人在导师指导下进行的研究工作和取得的研究成果,除了文中特别加以标注和致谢之处外,论文中不包含其他人已经发表或撰写过的研究成果,也不包含为获得北京交通大学或其他教育机构的学位或证书而使用过的材料。与我一同工作的同志对本研究所做的任何贡献均已在论文中作了明确的说明并表示了谢意。学位论文作者签名:锑碳j#签字嗍加。尹年月如学位论文版权使用授权书本学位论文作者完全了解北京交通大学有关保留、使用学位论文的规定。特授权北京交通大学可以将学位论文的全部或部分内容编入有关数据库
20、进行检索,并采用影印、缩印或扫描等复制手段保存、汇编以供查阅和借阅。同意学校向国家有关部门或机构送交论文的复印件和磁盘。(保密的学位论文在解密后适用本授权说明)学位论文作者签名:以,芸t b签字闩期:w。7 年多月,同致谢转眼间两年的硕士学习生活即将结束,在论文结束之际,心中感慨良多。回想紧张、短暂的研究生生活,有过学习课程时的安逸,有过实验室作项目时的充实,也有过准备论文和实验时的紧张。此时,我要感谢读硕士期间所有帮助和关心过我的人。首先,要感谢我的导师张宁教授,他兢兢业业、踏实严谨的工作作风,给我留下了受益终生的财富。在论文的各个阶段,导师给予我悉心指导,使论文研究工作能顺利进行。在此谨向
21、导师表示最诚挚的敬意。另外,要特别感谢张宏勋老师和张宝鹏老师,他们对本论文的I l i O N 完成给予了很大帮助。他们对科研的严谨态度、博大精深的学术造诣和对学生的热心关怀,都将成为我今后学习的榜样。感谢实验室宋晓虹老师和侯亚欣老师,感谢他们在学习、生活上给予的帮助和在实验室项目中的指导。同时感谢实验室的同门和师弟、师妹们:马亮、李峰、于水晶、王文明、王举、王飞、姚丽娟等,他们都给予我学习和生活上的帮助。项目中的相互讨论和生活中的互帮互助,让我的实验室生活充实而值得留恋。在此感谢他们陪我度过了人生这段难忘的日子。最后,感谢我的家人,在求学路上父母给了我无限的帮助和指导。生活中的劝慰和人生路上
22、的指引,让我能顺利完成学业,在此对他们表示最深深的敬意。引言1 引言1 1 研究背景及意义随着人们安防意识的不断增强,视频监控以其直观、方便、信息丰富的特点得到了广泛的应用。加之近年来视频监控系统所需硬件设备(如摄像机、云台、网络传输设备等)成本日益降低,视频监控在我国逐步进入普及阶段。越来越多的摄像机被部署在诸如交通路口、机场、商场、停车场和商业大楼等公共场所,这些摄像机被用于观察被监控场景中的人和车辆等目标的活动。但是目前监控系统的功能往往比较单一,常常需要监控人员持续的监视屏幕,通过人为解释获得视频信息,然后做出相应的决策。但让监控人员长期盯着众多的电视监视器是一项繁重而乏味的工作,特别
23、是当监控点较多时,监控人员几乎无法做到全面完整的监控。同时,大多数监控场景出现异常情况的数量较少并且比较随机,这样人工监控不仅造成巨大的人力浪费,而且很容易使得监控人员思想松懈从而导致漏报。鉴于此,目前国内外学术界及工业部门开始着眼于研究新一代具有智能化视频监控功能的监控系统,这类系统的核心问题是对进入监控场景的运动目标(诸如人、汽车等)进行实时的检测、跟踪和理解,并由此做出相应的判断和处理n。一1。智能视频监控系统作为近年来计算机视觉领域兴起的一个新的应用方向,是利用计算机视觉技术对视频信号进行处理、分析和理解,并对视频监控系统进行控制,从而使视频监控系统具有像人一样的智能。因此,计算机视觉
24、技术是智能视频监控系统中的核心技术。智能视频监控系统在民用和军事中有着广泛的应用H 5 6,7 1,此外,智能视频监控也可用于银行、机场、政府重要机构等公共场所的无人值守呻引,这些系统的显著特点是减少对人工的依赖。在1 9 9 6 年至1 9 9 9 年间,在美国国防高级研究计划局D A R P A(D e f e n s eA d v a n c e dR e s e a r c hP r o j e c t sA g e n c y)资助下,卡内基梅隆大学、戴维S A R N O F F 研究中心等几家著名机构合作,联合研制了视频监视与监控系统V S A M m 川(V i d e oS
25、u r v e i l l a n c ea n dM o n i t o r i n g)。该项目的目标是拟发展一种自动的视频解译技术,实现对复杂区域如战场或其它的一些重要场合内的人员行动的监视。智能监控技术在交通中同样有着重要的应用和发展,如美国的喷气动力实验室(J e tP r o p u l s i o nl a b o r a t o r y)就资助了五个关于大范围交通检测技术的研究项目:A u t o s c o p c,C M SM o b i l i z e r,M a s t o rT r a f f i cV i s i o n,A u t o c o l o r 和R o
26、 a d W a t c h,其中前三个项目成果业已应用于商业系统中。这些系统大部分都是利用区域的块特北京交通人学硕十论文征或颜色特征来实现目标的跟踪。美国的A R D A 机构(A d v a n c e dR e s e a r c h&D e v e l o p m e n tA c t i v i t y,A R D A)在2 0 0 3 年秋开始主持一项高级研究计划V A C E(V i d e o A n a l y s i sa n dC o n t e n tE x t r a c t i o n),旨在通过目标的检测、识别和跟踪达到检测、识别和理解目标的行为。由欧洲F a m
27、 e W o r kV 负责的一个视觉监控核心项目A d v i s o r d e n g 也是为了研究和开发类似的智能监控系统。英国雷丁大学(U n i v e r s i t yo f R e a d i n g)已开展了对车辆和行人的跟踪及其交互作用识别的相关研究比1。P f i n d e r n 2 1 系统可恢复单个人体的3 D 描述,并在复杂场景中跟踪。为了扩大监控范围,解决单摄像机监控中多运动目标在相互遮挡时难以得到准确的目标信息等问题,复杂背景中多运动目标跟踪系统丌始采用多摄像机协同工作的方式。C M U 开发了适用于大范围场景的多摄像机监控系统引,能在复杂场景中检测、跟踪
28、人和车辆。I B M 与M i c r o s o f t 等公司也在逐步将基于视觉的手势识别接口应用于商业领域中n 屯1 5,。在我国,中国科学院自动化研究所模式识别国家重点实验室对智能视频监控也做了大量研究,他们在人体运动分析、交通行为事件分析、交通场景视频监控和智能轮椅视觉导航等领域取得了许多科研成果n 铲捌。由于智能视频监控具有传统视频监控无法比拟的优点,而且符合当前信息社会化、数字化、网络化和智能化的发展趋势,因此成为研究的热点。智能视频监控系统自动完成对感兴趣目标的分析与描述,而对目标的实时检测和跟踪是其中的主要环节,是基于视频的运动分析、行为理解等后续工作的基础,所以对于智能视频
29、监控的目标检测和跟踪算法的研究具有极其重要的意义。1 2 研究现状目前,国内外专家、学者对智能视频监控技术进行了深入的研究。其中,主要研究方向分为基于内容的研究和基于应用的研究。1 2 1 基于内容的研究智能视频监控主要是对实时采集的视频序列进行分析处理,基于内容的研究是对视频帧中的运动目标进行检测、跟踪,并对检测和跟踪的结果、特征等进行分析,实现对视频序列中运动目标的高层语义理解。研究的重点集中在视频序列中以汽车为代表的刚体和以人为代表的非刚体上。现阶段由于人体视觉行为分析具有重要的应用价值和巨大挑战,成为国内外研究的重点和难点。人体运动的视觉分析主要是针对包含入的运动图像序列进行分析处理,
30、它通常涉及到运动检测、目标分类、人的跟踪及行为理解与描述。其中,运动检测、2引言目标分类、人的跟踪属于视觉中的低级和中级处理部分;行为理解和描述属于高级处理瞳,具体框架如图卜1 所示,并分别做具体阐述。l、运动检测运动检测的目的是从序列图像中将变化区域从背景图像中提取出来。运动区域的有效分割对于目标分类、跟踪和行为理解等后续的处理是非常重要的。然而,由于背景图像的动态变化,如天气、光照、影子及混乱干扰等的影响,使得运动检测成为一项相当困难的工作。运动检测最常用的方法有:帧间差分n 3 瑚吨铂、光流法哺删和背景减除啪侧。时间差分法对动态环境具有较强的自适应性,但一般不能完全取出所有相关的特征像素
31、点,在运动实体内部容易产生空洞现象。光流法在摄像机运动的情况下也能检测出独立的运动目标,但是它的计算方法相当复杂,且抗噪性能差,因此不能应用于实时处理的系统中心。背景减除一般能够提供最完全的特征数据,但对于动态场景的变化,如光照和外来无关事件的干扰等特别敏感。厂1 订介贪俞图1-1 智能视频监控系统框架F i gl-1T h eF r a m e w o r ko f t h eV i d e oS u r v e i l l a n c eS y s t e m针对以上方法各自的优缺点,国内外专家学者对不同场景下的运动检测算法做了进一步的改进。S t a u f f e r 与G r i m
32、 s o n。蜘利用自适应的混合高斯背景模型(即对每个像素点利用混合高斯分伟建模),利用在线估计来更新模型,从而可靠地处理3北京交通人学硕十论文了光照变化、背景混乱运动的干扰等影响。但是该方法开始的背景学习过程缓慢,尤其是在复杂背景情况下,不能高效的进行运动检测。此外,该方法不能有效区分运动的物体和运动阴影。在此基础上K a e w T r a K u l P o n g 和B o w d e n 口羽提出了一种改进的自适应混合背景复合模型,通过重新定义背景更新方程(U p d a t eF u n c t i o n),能够高效、准确的应对复杂背景变化下的自适应背景更新。通过对背景模型进行颜
33、色空间的计算,实现了阴影探测,有效解决了运动目标的阴影检测。A t s u s h iS h i m a d a 和D a i s a k uA r i t a 口提出了动态控制自适应混合高斯背景模型,为每个像素点建立一个动态的高斯混合模型,当发生光照变化、物体运动时,增加相应像素点的高斯分布个数,从而在解决背景变化的同时降低了计算时间。2、目标分类目标分类的目的是从检测到的运动区域中将对应于人的运动区域提取出来。针对不同的应用场景,该步骤可以进行取舍。例如已知场景中仅仅存在人的运动,该步骤将省略;又如交通道路上的监控,视频序列中可能出现飞鸟、流云、摇动的树枝等运动物体,因此进行目标分类对后续
34、的跟踪有重要的意义。目标分类大体可分为基于形状信息的分类和基于运动特性的分类。基于形状信息的分类是利用检测出的运动区域的形状特征进行目标分类的方法。例如V S A M 1 采用区域分散度、面积、高宽比等作为特征,利用三层神经网络方法将运动目标划分为人、人群、车和背景干扰;K u n o 与W a t a n a b e 1 使用简单的人体轮廓模式的形状参数从图像中检测运动的人。基于运动特性的分类是利用人体运动的周期性进行目标分类的方法口5 蚓,例如C u t l e r 与D a v i s 5 1 通过跟踪感兴趣的运动目标,计算出目标随着时间变化的自相关性,而人的周期性运动使得其自相关也是周
35、期性的,因此通过时频化方法分析目标是否存在周期性的运动特性而将人识别出来。3、人的跟踪跟踪等价于在连续的图像帧间创建基于位置、速度、形状、纹理、色彩等有关特征的对应匹配问题乜。在视频跟踪方法中,跟踪问题可以看成是在线的贝叶斯估计问题口7 1,即从所有的历史观测数据中推理出下一时刻的状态值,也就是最优贝叶斯估计。而状态变量中可以包含目标在图像中的位置、大小及运动速度。在实际中,必须利用一些数学工具来近似求解最优贝叶斯估计。常用的数学工具有卡尔曼滤波m 1(K a l m a nF i l t e r i n g)、C o n d e n s a t i o n 算法。州、粒子滤波(P a r t
36、 i c l eF i l t e r)算法0。4 2 1 及M e a nS h i f t 算法H 3 1 等。其中K a l m a n 滤波是基于高斯分布的状态预测方法,不能有效地处理多峰模式的分和情况;C o n d e n s a t i o n 算法是以因子抽样4引言为基础的条件密度传播方法,结合可以学习的动态模型,可完成鲁棒的运动跟踪。粒子滤波对于系统模型没有特殊的要求,而且能够保持状态的多模态分布,不易受杂波的影响,在跟踪领域得到了很大的发展。但常规粒子滤波跟踪算法存在计算量大、采样效率低等问题,而且由于实际跟踪场景的复杂性,给常规粒子滤波跟踪算法提出了很大的挑战。M e a
37、 nS h i f t 算法以其无需参数、快速模式匹配的特征被广泛应用到目标跟踪领域,并且它在非刚性物体跟踪中有很好的实时性。但是它缺乏必要的模板更新,在跟踪过程中由于窗口宽度大小保持不变,当目标尺度有变化时,跟踪就会失败。4、行为理解与描述人的行为理解与描述,是指对人的运动模式进行分析和识别,并用自然语言等加以描述。行为理解可以简单地被认为是时变数据的分类问题,即将测试序列与预先标定的代表典型行为的参考序列进行匹配。因此,行为理解的关键问题是如何从学习样本中获取参考行为序列,并且学习和匹配的行为序列必须能够处理在相似的运动模式类别中空间和时间尺度上的轻微特征变化口。匹配时变数据的技术通常有:
38、动态时间规整H4 1(D y n a m i cT i m eW a r p i n g,D T W)、隐马尔可夫模型H 5 1(H i d d e nM a r k o vM o d e l s,H M M s)、神经网络“引(N e u r a lN e t w o r k,N N)、基于概率约束的P e t r i 网络刀(AC o n s t r a i n e dP r o b a b i l i s t i cP e t r iN e t)等。D T W具有概念简单、算法鲁棒的特点。即使测试序列模型与参考序列模型的时间尺度不能完全一致,只要时间次序约束存在,它仍能较好的完成测试序列
39、和参考序列之间的模式匹配。H M M s 的使用涉及至U O I I 练和分类两个阶段,训练阶段包括指定一个隐马尔可夫模型的隐藏状态数,并且优化相应的状态转换和输出概率以便产生的输出符号与特定的运动类别之间所观察到的图像特征相匹配。匹配阶段涉及到一个特定的H M M 可能产生相应于所观察图像特征的测试符号序列的概率计算。N N 同样也是目前比较感兴趣的匹配时变数据的方法,可以分析人的运动模型,或者使用径向基函数网络从运动中识别人的行为。M a s s i m i l i a n oA l b a n e s e 与R a m aC h e l l a p p a 等人H 7 1 提出了基于P
40、e t r i 网络的计算框架,用来识别人体的行为。该框架是对概率P e t r i 网络(P r o b a b i l i s t i cP e t r iN e t P P N)的扩展,可以很好的处理复杂多目标的交互情况,对不确定的低水平处理有很好的鲁棒性,此外对不确定的潜在行为也有很好的理解。1 2 2 基于应用的研究由于智能视频监控的研究有重要的理论价值和应用价值,目前已成为国际性5J 匕京交通人学硕十论文的研究热点。针对具体的应用的研究,主要涉及到特定场景下的异常行为检测、密度检测和人数统计、人脸识别等。下面介绍主要的两种研究热点,异常行为检测、密度检测和人数统计。1、异常行为检测
41、现有的视频监控系统,大都缺乏主动监控的能力,因此在发生异常事件时,只能成为查找证据的依据。而智能视频监控的异常行为检测功能,可以自动分析监控场景中的视频序列,对异常行为进行检测报警,可以起到主动监控的功能,因此成为研究的热点之一。J a s p e rS n o c k 等人H 踟通过分析楼梯台阶的监控场景,提出了自动检测人的异常行为的方法。从视频帧中提取人脚的位置和速度特征,并计算前景域中的平均光流参数特征。通过上述两个特征来建立隐马尔可夫模型(H M M),利用正常视频序列训练单个H M M,最终通过视频序列中的阈值概率实现异常行为的探测。T a oX i a n g 等人H 们提出了一套
42、渐进自适应模型,用来学习视频监控场景中的在线异常检测。首先使用引导数据集进行模型初始化,使用似然比检测(L R T)实现在线的异常检测,最后使用基于渐进最大期望(E M)学习和模型自适应方法实现模型的在线更新。从而使该方法可以实现完全无监督的学习、鲁棒性的异常检测、实时在线监控、适应复杂背景的变化等功能。T h iV D u o n g 等人嘞1 提出了转换隐半马尔可夫模型(S w i t c h i n gH i d d e nS e m i M a r k o vM o d e l,S H S M M),用来实现行为的识别和异常探测。S H S M M 是一个两层的扩展H S M M,用来
43、实现建模任务。2、密度检测和人数统计在视频监控中,准确的估计监控场景中的人员密度具有很高的实用价值和应用空间。在交通控制领域,准确的行人密度检测,可以提高交通的安全性和吞吐量。监控场景中的人数统计,也有广阔的应用空间。例如,对学校或公共场所进行人员密度和人数统计,可以帮助职权部门标定非安全区或规范同常交通。通过长时间的人数统计,可以应用到环境的规划,地铁、人行道的设计等领域嗡。H R a h m a l a n 等人瞄2 5 3 3 利用灰度级依赖矩阵(G r e yL e v e lD e p e n d e n c yM a t r i x)、M i n k o w s k i 分形维度(
44、M i n k o w s k iF r a c t a lD i m e n s i o n)和平移不变式正交切比雪夫矩(T r a n s l a t i o nI n v a r i a n tO r t h o n o r m a lC h e b y s h e vM o m e n t s)来完成图像的特征抽取,对得到的特征值利用自组织图(S e l fO r g a n i z i n gM a p)进行密度分类。P r a h l a dK i l a m b i 等人H 刚开发了一套能够对人行道监控环境中个人和人群进行跟踪和人数统计的系统,利用几何预测(G e o m e t
45、 r i cP r o j e c t i o n s),正常行人问会保持一定距离的先验知识,融入摄像头标定,最终实现了鲁棒的行人跟踪和人数统计。6引言1 3 本文的主要工作和内容安排复杂监控场景下准确的运动目标检测和鲁棒性的目标跟踪,是整个智能视频监控系统的关键,也是实现更高层行为理解与描述的基础。本文研究的对象是复杂环境下固定摄像头的监控场景,研究内容主要有复杂场景中的运动目标检测和目标的跟踪。通过分析各运动目标检测算法,结合各算法的优缺点和实际应用环境的需求,本文研究了背景减除的运动区域检测方法和基于多高斯分布背景估计的运动区域检测方法。在目标跟踪方面,主要研究内容包括粒子滤波理论及其实
46、现方法,利用粒子滤波理论来解决目标跟踪问题,构建基于粒子滤波的跟踪框架。并提出了基于颜色和纹理双重信息融合的目标跟踪算法,完成了目标的鲁棒性跟踪。本文各章的内容的安排如下:第一章引言论述了课题开展的背景和研究意义,对智能视频监控技术研究的发展、现状及主要研究做了简要的阐述,同时对论文的结构进行介绍。第二章深入研究了运动目标检测的技术。首先分析了当前目标检测技术中的相关算法,并对各自的优缺点进行了分析和比较。文中提出了融入阴影检测和混合高斯模型的目标检测算法,对目标检测结果进行建模,为后续跟踪提供了准确有效的输入。通过实验验证了混合高斯模型在处理多模态背景时的有效性。第三章深入研究了粒子滤波算法
47、理论,并介绍了粒子滤波理论在目标跟踪领域的应用。针对现有粒子滤波算法多采用手动选取待跟踪目标的缺点,本文提出了自动建模的粒子滤波跟踪算法。通过M a t l a b 进行算法仿真,采用P E T S 2 0 0 6 通用测试视频进行试验,跟踪结果显示粒子滤波算法对于非刚体的人的跟踪有很好的鲁棒性。第四章提出了基于颜色和纹理双重信息融合的目标跟踪算法。算法中融合了颜色和纹理双重信息,既保证了颜色对非刚性目标的鲁棒性,又增加了纹理对运动目标的平移、旋转、放缩等变换的鲁棒性。此外纹理对亮度变化不敏感,也使该算法更能适应复杂的监控场景变化。通过M a t l a b 进行算法仿真,实验显示双重信息融合
48、的跟踪算法,对颜色变化有很好的鲁棒性。第五章对本文研究内容进行了总结,并对下一步工作进行了展望。7北京交通人学硕+论文2 复杂环境下运动目标检测技术研究本章首先对帧间差分、背景减除和光流法三种运动检测算法进行研究,讨论各方法的原理,分析、比较了各自的优缺点,并对背景模型的建立进行深入的分析。文中提出了复杂环境下基于混合高斯背景模型的运动目标检测算法,并在算法中融入了阴影检测以消除运动阴影给后续跟踪带来的影响,最后介绍了运动目标位置确定的相关算法,为后续章节跟踪算法提供了有效的输入模型。文中通过实验验证了混合高斯模型在处理多模态背景时的有效性,并对实验结果进行了总结和分析。2 1运动目标检测技术
49、概述运动目标检测(M o v i n g-O b j e c t i v e sD e t e c t i n g,M O D)是指将序列图像中变化区域从背景中分割出来。M O D 的基本任务是从图像序列中检测出运动信息,得到所需的运动矢量,从而为后继的跟踪建立模型,完成跟踪和识别的最初处理。M O D是智能视频监控中最重要的实现步骤和组成部分之一,是计算机视觉、目标识别与跟踪、模式识别、运动图象编码、基于内容的检索、安全监控等领域的重点与难点,在交通、国防和工业等领域有着广泛的应用前景。然而,由于监控场景的多样性,给复杂场景下的运动目标检测带来了极大挑战。这些影响因素包括:天气和光照的变化、
50、背景混乱运动的干扰、运动目标的影子及摄像机的运动等。由于对运动目标的检测与分割影响着运动目标能否被正确跟踪与分类,因此准确的M O D 算法研究仍是智能视频监控系统研究的重要课题之一。现有的视频运动目标检测方法主要分为三类,且各有优缺点,下面分别进行概要性说明。2 1 1帧间差分在图像序列中,通过逐像素比较可直接求取前后两帧图像或相邻几帧图像之间的差别。帧间差分【2 3。2 5】就是利用图像序列中连续两帧或几帧图像的差异来进行运动检测的,即对图像序列中时间上相邻的两幅图像求绝对差,然后用一个阈值判断变化的区域。假设k 帧和k 1 帧图像分别为f i c(i j)和f i c 1(i,j),则他