《无人机航拍视频中目的检测与跟踪研究.docx》由会员分享,可在线阅读,更多相关《无人机航拍视频中目的检测与跟踪研究.docx(10页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、无人机航拍视频中目的检测与跟踪研究目的检测和跟踪技术是无人机航拍领域的重要研究方向。总结了无人机航拍视频中目的检测和跟踪的常用方法并对其进行了分类。分析了各类别的优缺点,并讨论了无人机航拍视频中目的检测与跟踪的难点及将来发展趋势。关键词:无人机;目的检测;目的跟踪;航拍引言无人机又称为无人驾驶飞行器,是一种具有遥控、自动、半自主、全自动飞行能力的飞行器。常见的无人机主要分为固定翼无人机、直升机和多旋翼无人机。2010年前,固定翼无人机和无人直升机在航拍领域占据了主流地位,然而,在近几年中,随着控制技术、传感器技术和计算机视觉领域的快速发展,多旋翼无人机成为了航拍领域的新星,尤其是四旋翼无人机和
2、八旋翼无人机遭到了航拍领域的青睐,其模型如图1所示。多旋翼尤其是四旋翼无人机之所以遭到广泛关注和应用主要是由于有下面特点1:操控简单,四旋翼无人机能够实现垂直起降,不受场地的限制,飞行经过中动作灵敏并可实现空中悬停;便于携带,旋翼无人机具有体积小、便于携带且操作灵敏等特点;经济实惠,多旋翼无人机最大的优点就是成本低,所以,遭到广泛应用。目的检测与跟踪技术作为计算机视觉领域的关键技术,遭到了各界学者的广泛关注。在无人机航拍领域中,为了实现追踪拍摄,目的检测和跟踪必不可少。因而,目的检测和跟踪技术是无人机航拍领域的重要研究方向2。另外,航拍视频中由于画面较大,目的在场景中所占面积较小,背景复杂,目
3、的易发生尺度、旋转、光照和遮挡干扰以及相机抖动等影响,航拍视频中目的的检测和跟踪变得尤为复杂,检测和跟踪工作变得愈加困难。本文主要就无人机航拍视频中的目的检测和跟踪技术展开讨论,对目的检测和跟踪算法的分类、优缺点和应用范围进行总结,并对航拍视频中目的检测和跟踪算法的难点和发展趋势加以讨论。1无人机航拍视频目的检测技术对无人机航拍视频中的目的进行跟踪时,首先需要对目的进行检测,目的检测的准确与否会直接影响后续对目的的处理,所以,目的检测技术在无人机航拍视频目的的检测和跟踪系统中起到了至关重要的作用。目前,运动目的检测算法相对来讲比拟成熟,可应用于无人机航拍视频的目的检测算法主要有下面几种:1)帧
4、间差分法。主要通过连续两帧一样位置像素点间的灰度差来确定目的的移动,算法操作简单,易于实现,但是,该算法只适用于静态背景和目的单一条件下的目的检测,所以,应用于无人机航拍视频的目的检测时,只适用于无人机悬停状态下的运动目的的检测,应用范围有限。2)背景差分法。其原理是通过预先设置背景,然后通过对检测图像和预设背景作差的方式提取目的。该方法能够得到较为完好的目的图像并且能够知足实时性要求。但是,在实际背景与预设背景相差较大或者实际检测经过中发生明显光照变化的情况下,该方法检测精度会下降较大。所以,该算法同样只适用于无人机悬停状态下的目的检测。3)光流法。该方法将光流作为灰度像素点在图像上的瞬时运
5、动场,进而实现对目的的跟踪。该方法根据原理主要分为四类:基于梯度的方法、基于匹配的方法、基于能量的方法和基于相位的方法。光流法的工作流程为:首先,在图像中等间隔选取光流点;其次,计算光流点的运动矢量(常用HS法和LK法等);最后,根据运动矢量检测运动目的。与前两种方法相比,由于光流场能够反响像素点的灰度运动情况,所以,光流目的检测法能够进行动态背景下的目的检测。4)特征匹配法。主要通过提取待检测目的的特征(角点特征、颜色特征等)建立目的模板,然后在实时视频中通过检测图像中的特征图目的模板进行类似性判别,进而实现目的的检测。目前常用的特征匹配算法有SIFT6、SUF7、BISK8和FEAK9等。
6、特征匹配法是目前应用最为广泛的目的检测和识别算法。其不但能够检测出目的,同时能够实现对目的进行识别,并对目的的尺度、旋转、光照和遮挡等具有较好的鲁棒性。特征匹配算法既适用于动态背景的目的检测,也适用于静态目的的检测。2无人机航拍视频目的跟踪技术目的跟踪技术是通过确定视频连续帧中目的的位置和大小来实现的,主要的跟踪方法主要有下面几种。21CamShift算法10CamShift算法是对MeanShift算法的改良,是由Bradski提出的连续自适应漂移算法。MeanShift算法是一种基于核密度估计的非参数形式匹配算法。首先,手动选取待跟踪目的区域,使用MeanShift颜色直方图信息作为模板,
7、再对下一帧图像的颜色直方图提取,进行匹配,通过计算类似度获得类似度密度分布图,图中的极值位置即为目的的位置。由于MeanShift算法模板不能实现实时更新且在跟踪经过中核函数带宽固定不变(跟踪窗口固定不变),所以,当目的发生尺度变化或外界干扰时,会造成跟踪目的不准确或者跟踪目的丢失的现象。Cam-Shift算法是将视频中的每一帧都进行MeanShift运算,不仅能够实现对目的模板进行更新,可以以实现自动调节跟踪窗口大小的功能。CamShift算法流程大致分为下面几步:1)将图像从GB空间转化为HSV空间,此步骤的主要目的是为了减小跟踪经过中光照的影响;2)目的初始化,手动选取目的的位置和大小并
8、提取目的区域的H分量的直方图;3)计算图像反向投影,以为反向投影图中像素点亮度越大,其为目的区域的概率就越大;4)利用MeanShift算法进行迭代运算,移动搜索窗口的中心到迭代的最大位置;5)调整搜索窗口的大小;6)重复步骤35,直至视频最后一帧。算法的详细流程图如图2所示。22卡尔曼滤波算法11卡尔曼滤波算法是一种小方差最佳线性递推方法,通过当前目的信息可实现对下一帧目的位置进行预测,进而实现目的的跟踪。卡尔曼滤波算法是通过状态方程和预测方程两个方程实现的,状态方程可实现对系统的状态进行客观描绘;预测方程可实现系统对下一时刻状态的预测。其工作原理如图3所示。23粒子滤波算法12粒子滤波的本
9、质是用带有权值的粒子表示后验概率,这些粒子随着目的模型的移动而移动,最后与目的模板进行匹配并更新权值,这些粒子的状态加权即为后验概率。粒子滤波一般可分为4个步骤:1)采样:在系统的状态空间中随机采集粒子并对其进行加权,以反映目的的状态;2)重采样:为了防止粒子退化的现象,保留权值较大的粒子,减少权值小的粒子;3)状态转移:粒子滤波利用状态转移目的在下一时刻的状态,即可得到新的粒子;4)系统观测:利用观测数据来推算粒子的权值,进而得到概率密度函数。算法详细流程如图4所示。24特征匹配算法13基于特征匹配的目的跟踪是采用目的的局部特征信息,通过特征匹配来进行跟踪的算法。目前常用的特征匹配算法有SI
10、FT、SUF、OB、BISK和FEAK等。基于特征匹配的目的跟踪算法可分为4步:特征点检测;特征描绘;特征点挑选;特征点匹配。跟踪算法的详细流程如图5所示。四种常用算法的原理和优缺点如表1所示。3无人机航拍视频目的检测和跟踪技术难点航拍视频中目的的检测与跟踪要想到达良好的效果,首先必须能够准确检测出目的的位置;其次要对检测出的目的进行持续、准确跟踪。当目的遭到外界背景和遮挡等干扰时,具有较好的抗干扰性,并在通过干扰时能够具有迅速恢复跟踪的能力。目前,无人机航拍视频的目的识别和跟踪主要面临如下问题:1)光线的变化。室外无人机航拍经过中避免不了光线的变化,光线的亮度变化使总体环境和跟踪目的的颜色、
11、亮度等特征都会随之改变,对目的检测和跟踪产生影响。2)复杂背景。航拍视频具有大视场、大广角的特点,所以,航拍视频具有信息量大、背景复杂、视场不确定性和目的在视场中占据面积较小等特点。目的容易遭到复杂背景和类似目的的干扰,这种不确定性因素对航拍经过中的目的检测和跟踪会造成较大干扰。3)目的尺度、旋转问题。无人机航拍视频中,由于无人机飞行高度、飞行角度和飞行方向等问题,非常容易造成目的的尺度变化和旋转变化。当尺度和旋转变化范围较大时,会造成识别和跟踪算法精度显著下降。4)目的遮挡。在无人机航拍视频中,目的会经常出现被外界事物遮挡的情况,这对目的检测和跟踪算法会产生较大影响,当目的遭到严重遮挡时,甚
12、至造成目的检测无法实现、目的跟踪失败等问题。4无人机航拍视频目的检测与跟踪瞻望随着无人机航拍领域的快速发展,航拍视频的目的检测与跟踪技术必然会得到快速发展,在将来将有下面2个方面的发展特点:1)向着实时性更强的方向发展。随着计算机运算能力的发展和算法的不断创新和改良,目的检测和跟踪的快速性会不断提高,知足实时性的需求。2)向着鲁棒性更强的方向发展。衡量目的检测和跟踪性能好坏的一个重要因素就是算法的鲁棒性。将来目的检测算法发展的一个重要目的就是运用较少的信息,就能够实现准确的目的检测和跟踪,并对外界干扰具有较高的鲁棒性。5结束语本文具体介绍了无人机航拍视频目的检测和跟踪的常用方法,分析了各方法的
13、基本原理、优缺点和适用范围,最后指出了研究难点和发展趋势,相信通过各界学者的共同努力,无人机航拍视频目的检测和跟踪将会发生宏大的飞跃。参考文献:1朱玮基于视觉的四旋翼飞行器目的识别及跟踪南京:南京航空航天大学学位论文,20142李文辉航拍视频中运动目的的检测与跟踪算法研究西安:西安电子科技大学学位论文,20143林雯新型基于帧间差分法的运动人脸检测算法研究计算机仿真,2010,27(10)4汪国强,盖琪琳,于怀勇,等基于背景差分法的视频目的检测算法研究黑龙江大学工程学报,2014,5(4)5吴振杰基于改良光流法的运动目的检测与跟踪系统郑州:郑州大学学位论文,201210王巍,孟朝晖一种改良的CamShift目的跟踪方法信息技术,2015(1)11瞿卫欣,程承旗基于Kalman滤波的CamShift运动跟踪算法北京大学学报(自然科学版),2015,51(5)12李忠海,王莉,崔建国基于CamShift和ParticleFilter的小目的跟踪算法计算机工程与应用,2011,47(9)13邓集洪,魏宇星基于局部特征描绘的目的定位光电工程,2015,41(1)作者:刘亚伟李小民