《误差理论与数据处理第六章幻灯片.ppt》由会员分享,可在线阅读,更多相关《误差理论与数据处理第六章幻灯片.ppt(23页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、误差理论与数据处理第六章第1页,共23页,编辑于2022年,星期二l 回归分析的基本概念和主要内容回归分析的基本概念和主要内容l 一元线性回归方程的求法一元线性回归方程的求法l 回归方程的方差分析和显著性检验回归方程的方差分析和显著性检验l一元非线性回归方法一元非线性回归方法重点与难点重点与难点第2页,共23页,编辑于2022年,星期二一、函数与相关一、函数与相关函数关系:可以用明确的函数关系式精确地函数关系:可以用明确的函数关系式精确地 表示出来。表示出来。相关关系:这些变量之间既存在着密切的关相关关系:这些变量之间既存在着密切的关 系,又不能由一个(或几个)自系,又不能由一个(或几个)自
2、变量的数值精确地求出另一个因变量的数值精确地求出另一个因 变量的数值,而是要通过试验和变量的数值,而是要通过试验和 调查研究,才能确定它们之间的调查研究,才能确定它们之间的 关系。关系。第一节回归分析的基本概念第一节回归分析的基本概念第3页,共23页,编辑于2022年,星期二二、回归分析思路二、回归分析思路1 1、由数据确定变量之间的数学表达式回归方、由数据确定变量之间的数学表达式回归方 程或经验公式;程或经验公式;2 2、对回归方程的可信度进行统计检验;、对回归方程的可信度进行统计检验;3 3、因素分析。、因素分析。第一节回归分析的基本概念第一节回归分析的基本概念第4页,共23页,编辑于20
3、22年,星期二一元线性回归:一元线性回归:确定两个变量之间的线性关系。确定两个变量之间的线性关系。一、回归方程的确定一、回归方程的确定例:确定某段导线的电阻与温度之间的关系:例:确定某段导线的电阻与温度之间的关系:19.119.125.025.030.130.136.036.040.040.046.546.550.050.076.3076.3077.8077.8079.7579.7580.8080.8082.3582.3583.9083.9085.1085.10散点图:散点图:2020 2525 3030 3535 4040 4545 505076767878828280808484第二节一元
4、线性回归第二节一元线性回归第5页,共23页,编辑于2022年,星期二从散点图可以看出:电阻与温度大致成线性关系。从散点图可以看出:电阻与温度大致成线性关系。设测量数据有如下结构形式:设测量数据有如下结构形式:式中,式中,分别表示其它随机因素对电阻值分别表示其它随机因素对电阻值 影响的总和。影响的总和。思路:要求电阻思路:要求电阻y y与与x x的关系,即根据测量数据要求出的关系,即根据测量数据要求出和和 的估计值。根据测量数据,可以得到的估计值。根据测量数据,可以得到7 7个测量方程,结合前面所学,未知数有两个,个测量方程,结合前面所学,未知数有两个,而方程个数大于未知数的个数,适合于用最小而
5、方程个数大于未知数的个数,适合于用最小二乘法求解。二乘法求解。第二节一元线性回归第二节一元线性回归第6页,共23页,编辑于2022年,星期二设得到的回归方程设得到的回归方程残差方程为残差方程为根据最小二乘原理可求得回归系数根据最小二乘原理可求得回归系数b b0 0和和b b。对照第五章最小二乘法的矩阵形式,令对照第五章最小二乘法的矩阵形式,令第二节一元线性回归第二节一元线性回归第7页,共23页,编辑于2022年,星期二则误差方程的矩阵形式为则误差方程的矩阵形式为对照对照 ,设测得值,设测得值 的精度相等,则有的精度相等,则有将测得值分别代入上式,可计算得将测得值分别代入上式,可计算得第二节一元
6、线性回归第二节一元线性回归第8页,共23页,编辑于2022年,星期二其中其中第二节一元线性回归第二节一元线性回归第9页,共23页,编辑于2022年,星期二二、回归方程的方差分析及显著性检验二、回归方程的方差分析及显著性检验问题:这条回归直线是否符合问题:这条回归直线是否符合y y 与与x x之间的客之间的客观规律?回归直线的预报精度如何?观规律?回归直线的预报精度如何?u对对N N个观测值与其算术平均值之差的平方个观测值与其算术平均值之差的平方和进行分解;和进行分解;u从量值上区别对个观测值的影响因素;从量值上区别对个观测值的影响因素;u用用F F检验法对所求回归方程进行显著性检检验法对所求回
7、归方程进行显著性检验。验。方差分析法方差分析法第二节一元线性回归第二节一元线性回归第10页,共23页,编辑于2022年,星期二(一)回归方程的方差分析(一)回归方程的方差分析1 1、引起变差的原因:、引起变差的原因:A A、自变量、自变量x x取值的不同;取值的不同;B B、其它因素(包括试验误差)的影响。、其它因素(包括试验误差)的影响。2 2、方差分析、方差分析总的离差平方和(即总的离差平方和(即N N个观测值之间的变差)个观测值之间的变差)可以证明:可以证明:第二节一元线性回归第二节一元线性回归第11页,共23页,编辑于2022年,星期二S=U+QS=U+Q其中其中U U回归平方和,反映
8、总变差中由于回归平方和,反映总变差中由于x x和和y y的线性关的线性关 系而引起系而引起 y y变化的部分。变化的部分。Q Q残余平方和,反映所有观测点到回归直线的残残余平方和,反映所有观测点到回归直线的残 余误差,即其它因素对余误差,即其它因素对y y变差的影响。变差的影响。第二节一元线性回归第二节一元线性回归第12页,共23页,编辑于2022年,星期二(二)回归方程显著性检验(二)回归方程显著性检验 F F检验法检验法基本思路:基本思路:方程是否显著取决于方程是否显著取决于U U和和Q Q的大小,的大小,U U越大,越大,Q Q越小,越小,说明说明y y与与x x的线性关系愈密切。的线性
9、关系愈密切。计算统计量计算统计量F F对一元线性回归,应为对一元线性回归,应为查查F F分布表,根据给定的显著性水平分布表,根据给定的显著性水平 和已知的和已知的自由度自由度1 1和和N-2N-2进行检验:进行检验:第二节一元线性回归第二节一元线性回归第13页,共23页,编辑于2022年,星期二 回归在回归在0.010.01的水平上高度显著。的水平上高度显著。回归在回归在0.050.05的水平上显著。的水平上显著。回归在回归在0.10.1的水平上显著。的水平上显著。回归不显著。回归不显著。若若 第二节一元线性回归第二节一元线性回归第14页,共23页,编辑于2022年,星期二(三)残余方差与残余
10、标准差(三)残余方差与残余标准差残余方差:排除了残余方差:排除了x x 对对y y的线性影响后,衡量的线性影响后,衡量y y 随机波动的特征量。随机波动的特征量。残余标准差:残余标准差:含义:含义:越小,回归直线的精度越高。越小,回归直线的精度越高。第二节一元线性回归第二节一元线性回归第15页,共23页,编辑于2022年,星期二(四)方差分析表(四)方差分析表来源来源平方和平方和自由度自由度方差方差 F F显著性显著性回归回归残余残余 1 1 N-2 N-2 总计总计 N-1N-1 三、重复试验情况三、重复试验情况1 1、重复试验的意义、重复试验的意义“回归方程显著回归方程显著”:只表明因素:
11、只表明因素x x的一次项对的一次项对y y的影响的影响显著;难以确定影响显著;难以确定影响y y的是否还有其它不可忽略的的是否还有其它不可忽略的因素?因素?x x和和y y是否线性是否线性?不表明该方程拟合得很好。不表明该方程拟合得很好。第二节一元线性回归第二节一元线性回归第16页,共23页,编辑于2022年,星期二 为检验一个回归方程拟合的好坏,可通过重复为检验一个回归方程拟合的好坏,可通过重复试验,获得误差平方和试验,获得误差平方和 和失拟平方和和失拟平方和 ,然后,然后用用 对对 进行进行F F检验。检验。2 2、重复试验回归直线的求法、重复试验回归直线的求法1 1)设)设N N个试验点
12、,每个试验点重复个试验点,每个试验点重复m m次试验,则将次试验,则将 这这m m次试验取平均值,然后再按照前面的方法进次试验取平均值,然后再按照前面的方法进 行拟合,见表行拟合,见表6 65 5和表和表6 66 6。2 2)方差分析)方差分析第二节一元线性回归第二节一元线性回归第17页,共23页,编辑于2022年,星期二来源来源 平方和平方和 自由度自由度 方差方差 F F 显著性显著性回归回归失拟失拟误差误差总计总计 3 3)方差检验)方差检验:判断一元回归方程拟合效果判断一元回归方程拟合效果:判断失拟平方和对试验误差的影响判断失拟平方和对试验误差的影响:综合判断一元回归方程拟合效果综合判
13、断一元回归方程拟合效果第二节一元线性回归第二节一元线性回归第18页,共23页,编辑于2022年,星期二1 1)分组法平均值法)分组法平均值法 将自变量由小到大次序排列,分成个数(近于)相等的两个将自变量由小到大次序排列,分成个数(近于)相等的两个组(分组数等于未知数个数),建立相应观测方程:组(分组数等于未知数个数),建立相应观测方程:b b和和b b0 02 2)图解法紧绳法)图解法紧绳法四、回归直线的简便求法四、回归直线的简便求法第二节一元线性回归第二节一元线性回归第19页,共23页,编辑于2022年,星期二2 2、求解未知参数。可化曲线回归为直线回归,、求解未知参数。可化曲线回归为直线回
14、归,用最小二乘法求解;可化曲线回归为多项式用最小二乘法求解;可化曲线回归为多项式回归。回归。1 1、确定函数类型并检验。、确定函数类型并检验。一、求解思路一、求解思路二、回归曲线函数类型的选取和检验二、回归曲线函数类型的选取和检验1 1、直接判断法、直接判断法2 2、作图观察法,与典型曲线比较,确定其属于何、作图观察法,与典型曲线比较,确定其属于何种类型,然后检验。种类型,然后检验。第三节一元非线性回归第三节一元非线性回归第20页,共23页,编辑于2022年,星期二3 3、直线检验法(适用于待求参数不多的情况)、直线检验法(适用于待求参数不多的情况)a a、预选回归曲线、预选回归曲线b b、c
15、 c、求出几对与、求出几对与x,yx,y相对应的相对应的Z Z1 1,Z,Z2 2值值d d、以、以Z Z1 1,Z,Z2 2为坐标作图,若为直线,则说明原为坐标作图,若为直线,则说明原选定的曲线类型是合适的,否则重新考虑。选定的曲线类型是合适的,否则重新考虑。第三节一元非线性回归第三节一元非线性回归第21页,共23页,编辑于2022年,星期二4 4、表差法(适用于多项式回归,含有常数项多于两、表差法(适用于多项式回归,含有常数项多于两个的情况)个的情况)a a、用试验数据画图;、用试验数据画图;b b、确定定差、确定定差 ,列出,列出x xi i,y,yi i各对应值;各对应值;c c、根据
16、、根据x,yx,y的读出值作出差值的读出值作出差值 ,看其是否与确定,看其是否与确定 方程式的标准相符,若一致,则说明原选定的曲线方程式的标准相符,若一致,则说明原选定的曲线 类型是合适的。类型是合适的。三、化曲线回归为直线回归问题三、化曲线回归为直线回归问题 用用直直线线检检验验法法或或表表差差法法检检验验的的曲曲线线回回归归方方程程都都可可以以通通过过变变量量代代换换转转为为直直线线回回归归方方程程,利利用用线线性性回回归归 分分 析析 方方 法法 可可 求求 得得 相相 应应 的的 参参 数数 估估 计计 值值。第三节一元非线性回归第三节一元非线性回归第22页,共23页,编辑于2022年,星期二回归曲线方程的效果与精度:回归曲线方程的效果与精度:残余平方和残余平方和残余标准差残余标准差相关指数相关指数衡量回归曲线效果好坏衡量回归曲线效果好坏的指标的指标可以作为可以作为根据回归根据回归方程预报方程预报y y值的精度值的精度指标指标第三节一元非线性回归第三节一元非线性回归第23页,共23页,编辑于2022年,星期二