《第十章 统计回归模型精选文档.ppt》由会员分享,可在线阅读,更多相关《第十章 统计回归模型精选文档.ppt(38页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、第十章 统计回归模型本讲稿第一页,共三十八页马氏链模型马氏链模型 系统在每个时期所处的状态是随机的系统在每个时期所处的状态是随机的 从一时期到下时期的状态按一定概率转移从一时期到下时期的状态按一定概率转移 下时期状态只取决于本时期状态和转移概率下时期状态只取决于本时期状态和转移概率 已已知现在,将来与过去无关(无后效性)知现在,将来与过去无关(无后效性)描述一类重要的描述一类重要的随机动态随机动态系统(过程)的模型系统(过程)的模型马氏链马氏链(Markov Chain)时间、状态均为离散的随机转移过程时间、状态均为离散的随机转移过程本讲稿第二页,共三十八页通过有实际背景的例子介绍马氏链的基本
2、概念和性质通过有实际背景的例子介绍马氏链的基本概念和性质例例1.人的健康状况分为健康和疾病两种状态,设对特定年龄人的健康状况分为健康和疾病两种状态,设对特定年龄段的人,今年健康、明年保持健康状态的概率为段的人,今年健康、明年保持健康状态的概率为0.8,而今年患而今年患病、明年转为健康状态的概率为病、明年转为健康状态的概率为0.7,11.1 健康与疾病健康与疾病 人的健康状态随着时间的推移会随机地发生转变人的健康状态随着时间的推移会随机地发生转变 保险公司要对投保人未来的健康状态作出估计保险公司要对投保人未来的健康状态作出估计,以制订保以制订保险金和理赔金的数额险金和理赔金的数额 若某人投保时健
3、康若某人投保时健康,问问10年后他仍处于健康状态的概率年后他仍处于健康状态的概率本讲稿第三页,共三十八页Xn+1只取决于只取决于Xn和和pij,与与Xn-1,无关无关状态状态与与状态转移状态转移状态转移具状态转移具有无后效性有无后效性 120.80.20.30.7本讲稿第四页,共三十八页 n 0a2(n)0 a1(n)1设投保设投保时健康时健康给定给定a(0),预测预测 a(n),n=1,2设投保时设投保时疾病疾病a2(n)1 a1(n)0 n时状态概率趋于稳定值,稳定值与初始状态无关时状态概率趋于稳定值,稳定值与初始状态无关3 0.778 0.222 7/9 2/9 0.7 0.77 0.7
4、77 0.3 0.33 0.333 7/9 2/9 状态状态与与状态转移状态转移120.80.20.30.710.80.220.780.22本讲稿第五页,共三十八页1230.10.0210.80.250.180.65例例2.健康和疾病状态同上,健康和疾病状态同上,Xn=1 健康健康,Xn=2 疾病疾病p11=0.8,p12=0.18,p13=0.02 死亡为第死亡为第3种状态,记种状态,记Xn=3健康与疾病健康与疾病 p21=0.65,p22=0.25,p23=0.1 p31=0,p32=0,p33=1 本讲稿第六页,共三十八页n 0 1 2 3 a2(n)0 0.18 0.189 0.183
5、5 a3(n)0 0.02 0.054 0.0880 a1(n)1 0.8 0.757 0.7285 设投保时处于健康状态,预测设投保时处于健康状态,预测 a(n),n=1,2 不论初始状态如何,最终都要转到状态不论初始状态如何,最终都要转到状态3;一旦一旦a1(k)=a2(k)=0,a3(k)=1,则对于则对于nk,a1(n)=0,a2(n)=0,a3(n)=1,即从状态即从状态3不会转移到其它状态。不会转移到其它状态。状态状态与与状态转移状态转移001 50 0.1293 0.0326 0.8381 本讲稿第七页,共三十八页马氏链的基本方程马氏链的基本方程基本方程基本方程本讲稿第八页,共三
6、十八页马氏链的两个重要类型马氏链的两个重要类型 1.正则链正则链 从任一状态出发经有限次转移能以从任一状态出发经有限次转移能以正概率到达另外任一状态(如例正概率到达另外任一状态(如例1)。)。w 稳态概率稳态概率本讲稿第九页,共三十八页马氏链的两个重要类型马氏链的两个重要类型 2.吸收链吸收链 存在吸收状态(一旦到达就不会离开的存在吸收状态(一旦到达就不会离开的状态状态i,pii=1),且从任一非吸收状态出发经有限次且从任一非吸收状态出发经有限次转移能以正概率到达吸收状态(如例转移能以正概率到达吸收状态(如例2)。)。有有r个吸收状态的吸收链个吸收状态的吸收链的转移概率阵标准形式的转移概率阵标
7、准形式R有非有非零元素零元素yi 从第从第 i 个非吸收状态出发,被某个吸收个非吸收状态出发,被某个吸收状态吸收前的平均转移次数。状态吸收前的平均转移次数。本讲稿第十页,共三十八页11.2 钢琴销售的存贮策略钢琴销售的存贮策略 钢琴销售量很小,商店的库存量不大以免积压资金钢琴销售量很小,商店的库存量不大以免积压资金 一家商店根据经验估计,平均每周的钢琴需求为一家商店根据经验估计,平均每周的钢琴需求为1架架存贮策略存贮策略:每周末检查库存量,仅当库存量为零时,才:每周末检查库存量,仅当库存量为零时,才订购订购3架供下周销售;否则,不订购。架供下周销售;否则,不订购。估计在这种策略下失去销售机会的
8、可能性有多大,以及每周估计在这种策略下失去销售机会的可能性有多大,以及每周的平均销售量是多少。的平均销售量是多少。背景与问题背景与问题本讲稿第十一页,共三十八页问题分析问题分析 顾客的到来相互独立,需求量近似服从波松分布,其参数由顾客的到来相互独立,需求量近似服从波松分布,其参数由需求均值为每周需求均值为每周1架确定,由此计算需求概率架确定,由此计算需求概率 存贮策略是周末库存量为零时订购存贮策略是周末库存量为零时订购3架架 周末的库存量周末的库存量可能是可能是0,1,2,3,周初的库存量可能是,周初的库存量可能是1,2,3。用马氏链描述不同需求导致的周初库存状态的变化。用马氏链描述不同需求导
9、致的周初库存状态的变化。动态过程中每周销售量不同,失去销售机会(需求超过库动态过程中每周销售量不同,失去销售机会(需求超过库存)的概率不同。存)的概率不同。可按稳态情况(时间充分长以后)计算失去销售机会的概可按稳态情况(时间充分长以后)计算失去销售机会的概率和每周的平均销售量。率和每周的平均销售量。本讲稿第十二页,共三十八页模型假设模型假设 钢琴每周需求量服从波松分布,均值为每周钢琴每周需求量服从波松分布,均值为每周1架架 存贮策略存贮策略:当周末库存量为零时,订购:当周末库存量为零时,订购3架,周初到架,周初到货;否则,不订购。货;否则,不订购。以每周初的库存量作为状态变量,状态转移具有无后
10、以每周初的库存量作为状态变量,状态转移具有无后效性。效性。在稳态情况下计算该存贮策略失去销售机会的概率,在稳态情况下计算该存贮策略失去销售机会的概率,和每周的平均销售量。和每周的平均销售量。本讲稿第十三页,共三十八页模型建立模型建立 Dn第第n周需求量,均值为周需求量,均值为1的波松分布的波松分布 Sn第第n周初库存量周初库存量(状态变量状态变量)状态转状态转移规律移规律 Dn 0 1 2 3 3P 0.368 0.368 0.184 0.061 0.019状态转移阵状态转移阵 本讲稿第十四页,共三十八页模型建立模型建立 状态概率状态概率 马氏链的基本方程马氏链的基本方程正则链正则链 稳态概率
11、分布稳态概率分布 w 满足满足 wP=w已知初始状态,可预测第已知初始状态,可预测第n周初库存量周初库存量Sn=i 的概率的概率n,状态概率状态概率 本讲稿第十五页,共三十八页第第n周失去销售机会的概率周失去销售机会的概率 n充分大时充分大时 模型求解模型求解 从长期看,失去销售机会的可能性大约从长期看,失去销售机会的可能性大约 10%。1.估计在这种策略下失去销售机会的可能性估计在这种策略下失去销售机会的可能性D 0 1 2 3 3P 0.368 0.368 0.184 0.061 0.019本讲稿第十六页,共三十八页模型求解模型求解 第第n周平周平均售量均售量从长期看,每周的平均销售量为从
12、长期看,每周的平均销售量为 0.857(架架)n充分大时充分大时 需求不超过存量需求不超过存量,销售需求销售需求需求超过存量需求超过存量,销售存量销售存量 思考:为什么这个数值略小于每周平均需求量思考:为什么这个数值略小于每周平均需求量1(架架)?2.估计这种策略下每周的平均销售量估计这种策略下每周的平均销售量本讲稿第十七页,共三十八页敏感性分析敏感性分析 当平均需求在每周当平均需求在每周1(架架)附近波附近波动时,最终结果有多大变化。动时,最终结果有多大变化。设设Dn服从均值为服从均值为 的的波松分布波松分布 状态转移阵状态转移阵 0.80.91.01.11.2P0.0730.0890.10
13、50.1220.139第第n周周(n充分大充分大)失去销售机会的概率失去销售机会的概率 当平均需求增长(或减少)当平均需求增长(或减少)10%时,失去销售机时,失去销售机会的概率将增长(或减少)约会的概率将增长(或减少)约12%。本讲稿第十八页,共三十八页11.3 基因遗传基因遗传背景背景 生物的外部表征由内部相应的基因决定。生物的外部表征由内部相应的基因决定。基因分优势基因基因分优势基因d 和劣势基因和劣势基因r 两种。两种。每种外部表征由两个基因决定,每个基因可以是每种外部表征由两个基因决定,每个基因可以是d,r 中的中的任一个。形成任一个。形成3种基因类型:种基因类型:dd 优种优种D,
14、dr 混种混种H,rr 劣种劣种R。基因类型为优种和混种基因类型为优种和混种,外部表征呈优势;基因类外部表征呈优势;基因类型为劣种型为劣种,外部表征呈劣势。外部表征呈劣势。生物繁殖时后代随机地(等概率地)继承父、母的各生物繁殖时后代随机地(等概率地)继承父、母的各一个基因,形成它的两个基因。父母的基因类型决定一个基因,形成它的两个基因。父母的基因类型决定后代基因类型的概率后代基因类型的概率完全完全优势优势基因基因遗传遗传本讲稿第十九页,共三十八页父母基因类型决定后代各种基因类型的概率父母基因类型决定后代各种基因类型的概率父母基因类型组合父母基因类型组合后代各种后代各种基因类型基因类型 的概率的
15、概率DDRRDHDRHHHRDRH1000011/21/200101/41/21/401/21/23种基因类型:种基因类型:dd优种优种D,dr混种混种H,rr劣种劣种R完全优势基因遗传完全优势基因遗传P(D DH)=P(dd dd,dr)=P(d dd)P(d dr)P(R HH)=P(rr dr,dr)=P(r dr)P(r dr)=1 1/2=1/2=1/2 1/2=1/4本讲稿第二十页,共三十八页随机繁殖随机繁殖 设群体中雄性、雌性的比例相等,基因类型的分布设群体中雄性、雌性的比例相等,基因类型的分布相同(记作相同(记作D:H:R)每一雄性个体以每一雄性个体以D:H:R的概率与一雌性个
16、体交配,其后代的概率与一雌性个体交配,其后代随机地继承它们的各一个基因随机地继承它们的各一个基因 设初始一代基因类型比例设初始一代基因类型比例D:H:R=a:2b:c (a+2b+c=1),记记p=a+b,q=b+c,则群体中优势基因和劣势基因比例则群体中优势基因和劣势基因比例 d:r=p:q(p+q=1)。假设假设建模建模状态状态Xn=1,2,3 第第n代的一个体属于代的一个体属于D,H,R状态概率状态概率 ai(n)第第n代的一个体属于状态代的一个体属于状态i(=1,2,3)的概率。的概率。讨论基因类型的演变情况讨论基因类型的演变情况本讲稿第二十一页,共三十八页基因比例基因比例 d:r=p
17、:q转移概率矩阵转移概率矩阵状态转移概率状态转移概率随机繁殖随机繁殖本讲稿第二十二页,共三十八页马氏链模型马氏链模型自然界中通常自然界中通常p=q=1/2稳态分布稳态分布D:H:R=1/4:1/2:1/4基因类型为基因类型为D和和H,优势表征优势表征绿色,绿色,基因类型为基因类型为R,劣势表征劣势表征黄色。黄色。解释解释“豆科植物的茎,绿色豆科植物的茎,绿色:黄色黄色=3:1”(D+H):R=3:1随机繁殖随机繁殖本讲稿第二十三页,共三十八页近亲近亲繁殖繁殖在一对父母的大量后代中在一对父母的大量后代中,雄雌随机配对繁殖,讨论一雄雌随机配对繁殖,讨论一系列后代的基因类型的演变过程。系列后代的基因
18、类型的演变过程。状态定义为配对的基因类型组合状态定义为配对的基因类型组合Xn=1,2,3,4,5,6配对基因组合为配对基因组合为DD,RR,DH,DR,HH,HR状态转移概率状态转移概率马氏链模型马氏链模型本讲稿第二十四页,共三十八页I0RQ状态状态1(DD),2(RR)是吸收态,是吸收态,马氏链是吸收链马氏链是吸收链不论初始不论初始如何,经若干代近亲繁殖,将如何,经若干代近亲繁殖,将全变为优种或劣种全变为优种或劣种.计算从任一非吸收态计算从任一非吸收态出发,平均经过几代出发,平均经过几代被吸收态吸收。被吸收态吸收。纯种纯种(优种和劣种优种和劣种)的某的某些品质不如混种,近亲些品质不如混种,近
19、亲繁殖下大约繁殖下大约56代就需代就需重新选种重新选种.近亲繁殖近亲繁殖本讲稿第二十五页,共三十八页11.4 等级结构等级结构社会系统中的等级结构,适当、稳定结构的意义社会系统中的等级结构,适当、稳定结构的意义描述等级结构的演变过程,预测未来的结构;描述等级结构的演变过程,预测未来的结构;确定为达到某个理想结构应采取的策略。确定为达到某个理想结构应采取的策略。引起等级结构变化的因素:引起等级结构变化的因素:系统内部等级间的转移:提升和降级;系统内部等级间的转移:提升和降级;系统内外的交流:调入和退出系统内外的交流:调入和退出(退休、调离等退休、调离等).用马氏链模型描述确定性转移问题用马氏链模
20、型描述确定性转移问题 转转移比例视为概率移比例视为概率本讲稿第二十六页,共三十八页基本模型基本模型a(t)等级结构等级结构等级等级 i=1,2,k(如助教、讲师、教授)(如助教、讲师、教授)数量分布数量分布 n(t)=(n1(t),n2(t),nk(t)ni(t)t 年属于等级年属于等级i 的人数,的人数,t=0,1,比例分布比例分布 a(t)=(a1(t),a2(t),ak(t)转移矩阵转移矩阵 Q=pijk k,pij 是每年从是每年从i 转至转至j 的比例的比例本讲稿第二十七页,共三十八页基本模型基本模型本讲稿第二十八页,共三十八页基本模型基本模型 基本模型基本模型 本讲稿第二十九页,共
21、三十八页基本模型基本模型等级结构等级结构a(t)状态概率状态概率P转移概率矩阵转移概率矩阵本讲稿第三十页,共三十八页用调入比例进行稳定控制用调入比例进行稳定控制问题:给定问题:给定Q,哪些等级结构可以哪些等级结构可以用合适的调入比例保持不变用合适的调入比例保持不变a为稳定结构为稳定结构本讲稿第三十一页,共三十八页用调入比例进行稳定控制用调入比例进行稳定控制求稳定结构求稳定结构 a=(a1,a2,a3)(a1+a2+a3=1)(0.5,0.5,0)a2=a1a3=1.5a2(0,0.4,0.6)a*稳定域稳定域BB(0,0,1)(0,1,0)(1,0,0)A可行域可行域A例例 大学教师大学教师(
22、助教、讲师、教授助教、讲师、教授)等等级级 i=1,2,3,已知每年转移比例,已知每年转移比例本讲稿第三十二页,共三十八页用调入比例进行稳定控制用调入比例进行稳定控制研究稳定域研究稳定域B的结构的结构寻求寻求a aQ 的另一种形式的另一种形式本讲稿第三十三页,共三十八页用调入比例进行稳定控制用调入比例进行稳定控制稳定域是稳定域是k维空间中以维空间中以 si 为顶点的凸多面体为顶点的凸多面体研究稳定域研究稳定域B的结构的结构本讲稿第三十四页,共三十八页用调入比例进行稳定控制用调入比例进行稳定控制例例(0,1,0)(1,0,0)(0,0,1)0.2860.286S1S2S3B稳定域稳定域B是以是以
23、si为顶点的三角形为顶点的三角形本讲稿第三十五页,共三十八页用调入比例进行用调入比例进行动态动态调节调节问题:给定问题:给定Q和初始结构和初始结构 a(0),求一系列的调入求一系列的调入比例比例 r,使尽快达到或接近理想结构使尽快达到或接近理想结构逐步法:对于逐步法:对于Q和和 a(0),求求 r使使 a(1)尽量接近尽量接近 a*,再将再将 a(1)作为新的作为新的a(0),继续下去。继续下去。模型模型本讲稿第三十六页,共三十八页例例(0,1,0)(1,0,0)(0,0,1)a(0)0.2860.286a*a(1)用调入比例进行用调入比例进行动态动态调节调节求求r 使使a(1)尽量接近尽量接近a*本讲稿第三十七页,共三十八页7423560.6390.36100.1650.1650.6700.7470.25300.2070.2070.5860.8270.17300.2350.2350.5310.8830.11700.2530.2530.4950.9220.07800.2640.2640.4720.9490.05100.2720.2720.457r(t),a(t)的计算结果的计算结果a(7)已接近已接近a*观察观察r(t)的特点的特点用调入比例进行用调入比例进行动态动态调节调节10.50.500.10.10.8r(t)a(t)t本讲稿第三十八页,共三十八页