《数字图像处理与分析基础第三章基础知识课件.ppt》由会员分享,可在线阅读,更多相关《数字图像处理与分析基础第三章基础知识课件.ppt(85页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、数字图像处理与分析基础第三章基础知识1第1页,此课件共85页哦第三章 图像处理基础知识1、图像处理的视觉基础、图像处理的视觉基础2、图像的数学模型、图像的数学模型3、图像质量评价、图像质量评价4、对设计图像处理系统的影响、对设计图像处理系统的影响2第2页,此课件共85页哦3.1图像处理的视觉基础视觉生理/视觉特性/视觉模型视觉基础/视觉应用它们与图像研究的关系见图3-1。3第3页,此课件共85页哦图3-1 视觉研究与图像的关系视觉研究基础研究视觉心理现象法则(心理学)视觉信息加工机理(生理学)应用研究视环境的改善和视机能应用(照明工程学、人类工程学)图像改善和评价(图像工程)模拟视觉机能的信息
2、处理(信息工程、人工智能心理测定模拟技术4第4页,此课件共85页哦1、图像质量评价与视觉心理、图像质量评价与视觉心理对图像质量的最终评价是由人的感觉器官和心理状态来决定的。与图像内容以及观察者的心理因素有关。从图像信息传输角度出发,图像系统评价的真正尺度应该是发出信息者的意图为接收信息者所理解的程度,而不是对发出信息者发出的图像象素信息集合的简单接收。5第5页,此课件共85页哦2、画面组成和视觉心理、画面组成和视觉心理“”视野指眼球不动时所能见到的范围p如果把注视点作为中心,可见的范围上方约65。,下方约75。,左右视角约为104。(现在的电视画面约占7。8。),但视力好的部位仅限于中央2。3
3、。左右。为了适应大的画面和立体景象的机理,眼球必须转动使视线移动。p中心视力分辨率强,可以进行图像细节的认识。p周边视力分辨率差,可以将视目标特征部分检出,利用检出的目标图像特征去控制眼球运动。p另外周边视可以认识图像的全貌,而中心视只能认识图像的一小部分。p要产生充分的临场感,画面尺寸应该产生30。以上视野,如宽银幕电影。6第6页,此课件共85页哦3、视觉的时空频率分析、视觉的时空频率分析影响图像锐度的主要因素。视觉神经具有的Mach效应和RocaSulzer微分效应,中枢神经的Craik-Obrien积分效应等是视觉信息处理的基础,因此可以将视觉特性和图像处理结合起来研究。空间分辨力p人眼
4、对空间景物细节的分辨能力有限,对黑白图像约为一度。时间分辨力p对亮度的响应有时延和残留,因而对景物亮度的变化也有分辨力,过快的变化无法分辨p“视觉惰性”。当离散画面的重复频率不低于24Hz时,可形成连续画面的感觉,即人眼不能分辨相邻两幅画面间的差别,而低于24Hz时,有闪烁感。7第7页,此课件共85页哦3、视觉的时空频率分析、视觉的时空频率分析人眼对画面静止部分的分辨率高于活动部分,p对静止部分减少时间分辨率,而对活动部分减少空间分辨率,可以达到数据压缩的效果。幅度分辨力p人眼对景物亮度层次的分辨力也有限,过小的亮度差别无法分辨。对彩色图像的色调和饱和度的分辨力p人的视觉对彩色细节的分辨力要比
5、亮度细节差,在国际无线电咨询委员会(ITU-R,原CCIR)601标准中,就利用了这种特性,将色差信号的空间分辨率减半,仍可以得到非常好的图像质量。对立体图像的景深分辨力等8第8页,此课件共85页哦4、视觉生理和模型的研究、视觉生理和模型的研究视觉生理p指视觉信息的产生部分视细胞(图像信息感受器)和其它神经细胞以及大脑高级中枢的神经系统的信息产生、传输和处理的机理p插入单个细胞的微小电极,p侧抑制现象、马赫效应等p对大脑高级神经中枢的“思考过程”才刚起步。9第9页,此课件共85页哦人类视觉机制今后的研究方向从基础研究逐步转到和图像相关的视觉综合化、体系化的研究。p搞清决定图像质量的主观因素,做
6、出其总的结构模型;p找出人脑真正接收信息的容量,大脑有效接收图像的显示方式;p弄清图像信源和信宿的结构,建立起包括人的因素在内的信息论;p研究视觉和其它感觉的相乘作用,即视觉和其它感觉的互相影响;p开发自组织作用的综合研究,进一步建立发展“思考过程”;p研究视觉和行为的关系。10第10页,此课件共85页哦视觉基础讲述内容人类视觉感知过程视觉的简单数学模型色度学知识Philosophical Considerations11第11页,此课件共85页哦3.1.1人类视觉感知过程人眼结构眼睛中图像的形成视觉特性12第12页,此课件共85页哦视觉生理特点对图像处理方法的影响很大1、人眼的结构13第13
7、页,此课件共85页哦图3-3 视锥细胞和视杆细胞在视网膜上的分布锥状(锥状(cone)视觉)视觉:白昼视觉,色彩;杆状(杆状(rod)视觉)视觉:夜视觉,低照度敏感。14第14页,此课件共85页哦2、眼睛中图像的形成成像的几何原理视觉信息的产生视觉信息的传递视觉信息的加工处理15第15页,此课件共85页哦(1)成像的几何原理)成像的几何原理图3-4 用眼睛观察树的光学表示法,C点为晶状体的光学中心当晶状体的折射能力由最小变到最大时,晶状体的聚焦中心与视网膜之间的距离由17mm缩小到14mm。当眼睛聚焦到远于3m的物体时,晶状体的折射能力最弱,当聚焦到非常近的物体时,其折射能力最强。16第16页
8、,此课件共85页哦成像尺寸计算观测者看一个距离100m,高15m的树。设x表示视网膜上形成的图像的大小,单位mm,有:15/100=x/17,x=2.55mm17第17页,此课件共85页哦(2)视觉信息的产生)视觉信息的产生光化电过程色觉理论主要有两种p三色学三种视色素,对光的影响峰值分别在红、绿、蓝区,综合后形成色觉信息。p四色学说三对视色素(白-黑,红-绿,黄-蓝),它们的组合响应产生色觉信息18第18页,此课件共85页哦Fig3 人类感光细胞的敏感曲线400 450 500 550 600 650 700100806040200蓝绿红波长(nm)光吸收特性%三种不同频率响应的锥,各对红、
9、绿、蓝具有最强的响应,彩色的识别功能19第19页,此课件共85页哦(3)视觉信息的传递)视觉信息的传递眼球内眼球外20第20页,此课件共85页哦(4)视觉信息的加工处理)视觉信息的加工处理简单型细胞p检测图像的明暗边界和线条的位置和方向,复杂型细胞p对直线和边界的运动方向敏感,p低级超复杂型细胞检测直线和边界的长度、宽度,p而高级超复杂型细胞可以检测曲线和边缘曲度等21第21页,此课件共85页哦3、视觉特性视觉特性亮度适应与鉴别分辨力对比灵敏度同时对比效应阈值效应和掩盖效应视觉运动特性视觉空间频率特性视觉时间频率特性22第22页,此课件共85页哦图3-5主观亮度感受特性 23第23页,此课件共
10、85页哦(2)分辨力在不同的亮度适应级,人眼的分辨力不同,如图3-6所示,I是背景光强,I是光强的变化,称为韦伯比,表示光强分辨力 图3-6光强分辨力的典型韦伯比24第24页,此课件共85页哦(3)对比灵敏度II+II/I强度I2%具有恒定背景的对比灵敏度25第25页,此课件共85页哦(4)同时对比效应I0I+III/I强度I2%具有可变背景的对比灵敏度心理学实验表明,人眼感受到的亮度不是光强的简单函数,如马赫带效应和同时对比效应。26第26页,此课件共85页哦马赫带效应图3-727第27页,此课件共85页哦同时对比效应图3-828第28页,此课件共85页哦(5)视觉阈值效应和掩盖效应)视觉阈
11、值效应和掩盖效应视觉阈值p正好可以被看到的刺激(干扰或失真)值,它是一个统计值,在图像质量的主观评价中有广泛的应用。“掩盖效应视觉阈值随图像内容的变化而变化,在平坦区阈值低,对失真也敏感;在边缘和纹理区,视觉存在掩盖效应,对失真不敏感。29第29页,此课件共85页哦(6)视觉运动特性)视觉运动特性周边视力对图像中运动变化部分很灵敏,有特征抽取作用,从而控制眼肌转动视轴,使视力集中对准这些部位,以便看清其细节。电视眼球标记摄像机(television eye-marker camera)试验30第30页,此课件共85页哦(7)视觉空间频率特性)视觉空间频率特性亮暗在空间上作正弦变化的条纹图案,物
12、理对比度和感觉对比度之比随空间频率变化而变化的曲线,称为调制传递函数MTF(Modulation Transfer Function)对比灵敏度1000100101 10 100图3-9 典型MTF曲线空间频率/cdeg-131第31页,此课件共85页哦图3-10 闪烁对MTF的影响闪烁频率为1HZ闪烁频率为6HZ闪烁频率为16HZ闪烁频率为20HZ对比灵敏度300100 301030.3 1 3 10 30空间频率/cdeg-132第32页,此课件共85页哦(8)视觉时间频率特性)视觉时间频率特性1 2 5 10 20 50 Hz视觉阈值0.01 0.1图3-11 时间频率特性时间频率/Hz
13、33第33页,此课件共85页哦3.1.2 视觉的简单数学模型视觉的简单数学模型亮度视觉模型彩色视觉模型34第34页,此课件共85页哦1、亮度视觉模型、亮度视觉模型输入图像Ii(x,y)光学系统H(x,y)输出图像Io(x,y)图3-13 线性光学系统光学系统的调制传递函数MTF 35第35页,此课件共85页哦简单的黑白视觉对数模型神经信号光接受器对数线性系统图3-143 黑白视觉对数模型36第36页,此课件共85页哦视觉信息的融合号数-2-4图3-15 侧抑制结构LOGa1LOGanLOGa2网膜信号感受器加权因子LOGa1LOGa0LOGan37第37页,此课件共85页哦黑白视觉扩展模型in
14、out|H2(Wx,Wy)|H1(Wx,Wy)|H1(Wx,Wy)H2(Wx,Wy)H3(Wx,Wy)光感受器线性系统线性系统线性系统非线性网络|H3(Wx,Wy)|38第38页,此课件共85页哦2、彩色视觉模型、彩色视觉模型ThomasYoung三色假说 g3g1g2d3d2d1e3e1e2线性系统-黄绿色视锥感受器蓝色视锥感受器绿色视锥感受器LOGLOGLOG+-+H2(Wx,Wy)H1(Wx,Wy)H3(Wx,Wy)神经信号图3-16 彩色视觉模型39第39页,此课件共85页哦彩色响应在图3-16模型中,e1、e2、e3代表视网膜三个具有S1()、S2()、S3()谱灵敏度的感受器,其输
15、出分别为 C()为入射光谱的能量分布函数 40第40页,此课件共85页哦彩色信息融合e1、e2、e3经对数传传递后合并为d1、d2、d3输出:41第41页,此课件共85页哦色谱灵敏度曲线波长(nm)S1()S2()S3()相对灵敏度1.00.50450 500 550 600 650图3-17 根据Konig数据得到的视网膜锥状细胞的色谱灵敏度曲线42第42页,此课件共85页哦图3-19 彩色视觉扩展型模型线性系统-+-黄绿色视锥感受器蓝色视锥感受器绿色视锥感受器HE2(Wx,Wy)HE1(Wx,Wy)HE3(Wx,Wy)非线性网络非线性网络非线性网络HL2(Wx,Wy)HL1(Wx,Wy)H
16、L3(Wx,Wy)神经信号43第43页,此课件共85页哦3.1.3色度学色度学3个基本颜色红(R,red)、绿(G,green)和蓝(B,blue)国际照明委员会(CIE),1931年规定3种基本色的波长为R:700nm,G:546.1nm,B:435.8nm。44第44页,此课件共85页哦三色系统图3-20 彩色加法系统(左)与减法系统(右)利用3基色叠加可产生光的3补色:品红(M,magenta,即红加蓝)、蓝绿(C,cyan,即绿加蓝)、黄(Y,yellow,即红加绿)。按一定的比例混合3基色或将1个补色与相对的基色混合就可以产生白色。光的混合满足加色定理。45第45页,此课件共85页哦
17、色度图46第46页,此课件共85页哦颜色特征区分颜色通常用3种基本特性:p辉度(又常用亮度、明度)p色调p饱和度。色调和饱和度合起来称为色度。颜色可以用辉度和色度共同表示47第47页,此课件共85页哦坐标系为组成某种颜色所需的红、绿、蓝的量称为3个刺激量,分别用R、G、B表示。颜色还可以用色品值r、g、b(相对色系数)表示,定义如下 48第48页,此课件共85页哦彩色匹配规则:任何彩色可以用不多于三个基色配成;混合色的光亮度等于各分量亮度之和;人眼不能分解混合彩色的各个分量;在某一亮度等级上的彩色匹配可适用于较宽的亮度范围;彩色相加定律:若一彩色C1与彩色C2相匹配(同样彩色感觉),而彩色C1
18、与彩色C2相混合的彩色匹配,可以如下表示:pC1=C2,即C1彩色与C2彩色相匹配;p1C1+2 C2,即一混合色包含1份的C1和2份的C2。p彩色相加定律表示为:p若 C1=C2,C1=C2p则 1C1+2 C2=1C1+2 C249第49页,此课件共85页哦彩色匹配彩色相减:当C1、C2混合色与C1、C2混合色相匹配时,若C2与C2相匹配,则C1和C1也匹配,即已知 C1+C2=C1+C2,若 C2=C2,则 C1=C1转移定律:若C1与C2匹配,C2又与C3匹配,则C1与C3匹配,即已知 C2=C1,C2=C3,则 C1=C3匹配定律(Grassman定理):在亮度既不太高,也不太低的条
19、件下,有三种配色方案:p C=1C1+2 C2+3 C3p C+1C1=2 C2+3 C3p C+1C1+2 C2=3 C350第50页,此课件共85页哦小 结研究眼的生理特点非常重要,对显示系统的设计具有决定性意义仿生的图像处理系统是目前研究的热点和难点51第51页,此课件共85页哦3.2图像的数学模型 Images Mathematic Model连续模型连续模型离散模型离散模型随机场模型随机场模型52第52页,此课件共85页哦3.2.1图像的连续模型基本的连续模型照明反射模型通用的彩色模型彩色电视色度坐标噪声模型53第53页,此课件共85页哦1、基本的连续模型、基本的连续模型图像可以用灰
20、度级G在x,y二维空间的连续变换来描述,即:Sg(x,y)f(x,y)图3.2.1 图像处理的基本框图图像=g(x,y),时间序列图像的描述为:图像序列=g1(x,y),g2(x,y),gt(x,y)或:图像序列=g(x,y,t)。图像处理 f(x,y)=Sg(x,y)(3-23)式(3-23)中S可以是有意施加的某种处理方法,也可以是图像系统中导致图像退化的原因。G(x,y)=S-1f(x,y)(3-24)式(3-24)是图像复原的基本模型。54第54页,此课件共85页哦(2)、照明反射模型(3)、彩色模型2、离散模型3、随机场模型三、图像的数字化f(x,y)=i(x,y)r(x,y),其中
21、 0 i(x,y)Bm,0 r(x,y)1,i(x,y)照射分量,r(x,y)反射分量,Bm最大光照强度。gmin g gmax,gmin=imin rmin,gmax=imax rmax。gmin,gmax 是图像灰度范围。该模型常用于同态滤波,计算机图形:真实感模型2、照明反射模型、照明反射模型55第55页,此课件共85页哦3、通用的彩色模型通用的彩色模型RGB模型HSI模型56第56页,此课件共85页哦(1)RGB模型 图3-2557第57页,此课件共85页哦xyz相对三色系数(色品坐标)x+y+z=1,(x,y)CIE色度图。对应于 x=y=0.33的 E点,称等能量点,CIE标准白光
22、。0.800.20.8xy520nm700-770nm红蓝绿NTSCPAL紫 色度图色品坐标系58第58页,此课件共85页哦NTSC美国National television system committee:YIQ,Y亮度,I、Q色度Y=0.299R+0.587G+0.114BI=0.5R-0.231G-0.269BQ=0.203R-0.5G+0.297BPAL(Phase alternation line):YUV,Y亮度,U、V色度Y=0.299R+0.587G+0.114BU=-0.169R-0.331G+0.5BV=0.5R-0.419G-0.081B彩色信号传输:亮度、色度信号59
23、第59页,此课件共85页哦(2)HSI模型模型视觉生理模型色调(H,Hue)、色饱和度(S,Saturation)以及明度(I,Intensity)(Museum,孟塞尔颜色系统)在特定应用环境中,用于图像分析有特殊的优势p在只有光照亮度发生变化的应用中,不考虑明度,只使用色度进行区域分割。60第60页,此课件共85页哦圆锥体模型61第61页,此课件共85页哦RGB到HSI62第62页,此课件共85页哦HSI到RGB63第63页,此课件共85页哦颜色特征丰富了图像处理的方法色彩的识别,色彩分解,提取特征。滤色镜,遥感、着色后细胞红绿蓝红黄绿蓝紫64第64页,此课件共85页哦4、彩色电视色度坐标
24、系统、彩色电视色度坐标系统RGB三基色系统称为“物理三基色”CIE另外规定了一种虚拟的三基色系(XYZ)标准色度系统,在匹配各种彩色时,三基色系数都是正值65第65页,此课件共85页哦NTSCNTSC制式彩色电视接收显示原色的系统RNGNBN,发送系统YIQ均建立在XYZ之上 66第66页,此课件共85页哦彩色坐标间的关系相关的其它变换关系为 67第67页,此课件共85页哦5、噪声的模型噪声的特征噪声的来源噪声模型68第68页,此课件共85页哦(1)噪声的特征)噪声的特征图像信号,f(x,y)噪声,n(x,y),随机性的,可以用随机过程来描述。一般常用统计特征来描述,如均值、方差、相关函数等。
25、均值En(x,y)反映噪声的直流分量,均方值En2(x,y)反映噪声的总功率,均方差E(n(x,y)-En(x,y)2描述噪声的交流功率,均值的平方En(x,y)2,表示噪声的直流功率。69第69页,此课件共85页哦(2)噪声的来源外部噪声:p从处理系统外来的影响,如电磁波干扰。内部噪声:p(1)由光和电的基本性质引起的噪声。p(2)机械运动产生的噪声。p(3)元器件材料本身的缺陷带来的噪声。p(4)系统内部电路噪声。70第70页,此课件共85页哦噪声分类从统计观点看p平稳噪声凡是统计特征不随时间变化的;p非平稳噪声统计特征随时间变化的。从噪声幅度分布的统计来看p其密度函数有高斯型、瑞利型等,
26、分别称为高斯噪声和瑞利噪声。按噪声频谱形状命名的,如频谱均匀分布的噪声称为白噪声,频谱与频率成反比的称为1/f噪声,频谱与频率平方成正比的称为三角噪声71第71页,此课件共85页哦(3)噪声的模型)噪声的模型加法性噪声:g(x,y)=f(x,y)+n(x,y)(3-43)乘法噪声:g(x,y)=f(x,y)1+n(x,y)=f(x,y)+f(x,y)n(x,y)(3-44)72第72页,此课件共85页哦3.2.2 离散模型离散模型73第73页,此课件共85页哦 数字图像,数字化数字图像,数字化(1)连续画面空间坐标离散化采样:方形、三角形、正六角形点阵等。采样点阵(2)采样点(像素)幅值(实数
27、)取整量化:均匀、非均匀/矢量、标量74第74页,此课件共85页哦1、图像的均匀采样、图像的均匀采样yxxy图3-27 典型的采样方式75第75页,此课件共85页哦二维采样定理对于二维有限带宽信号fc(x,y),如果其二维傅立叶变换只在的范围内不为零,那么采样间隔必须满足这样才能保证信号可以重构。该条件称为Nyquist采样定理 76第76页,此课件共85页哦2、图像的量化、图像的量化q1 q0 q2 qN-1 0 f0 f1 f2 fN-1 fN fq图3-28 量化过程量化的准则是:若则 77第77页,此课件共85页哦量化误差“量化误差”“量化失真”p由量化误差产生的图像失真称为。最优量化
28、器量化均方误差最小非线性78第78页,此课件共85页哦非均匀采样和量化非均匀采样p灰度级变化大区域精确采样,平滑区域粗采样。非均匀量化p灰度级变化剧烈处,人眼分辨力差,边界附近较少灰度级;p平缓区域较多灰度级,避免假轮廓79第79页,此课件共85页哦3、数字图像的表示整数矩阵向量80第80页,此课件共85页哦数字图像,矩阵元素:像元、图像元素、像素电视图像:512512 128;一般图像:256 256 64。(1)整数矩阵81第81页,此课件共85页哦图3-29 数字图像举例xy0g(x,y)82第82页,此课件共85页哦矩阵图像清晰度(可分辨的细节的程度)取决于N和 k。N小,“检测板效应”;k小,“假轮廓”。图像的数据量(bit)图3-29中g(x,y)既可以表示整幅图像,也可以表示x行y列交点处的图像的像素值,g(x,y)的值都是整数。83第83页,此课件共85页哦只改变灰度级:8、16、32、64、128、25684第84页,此课件共85页哦只改变空间分辨率512、256、128、64、32、1685第85页,此课件共85页哦