2022年数据分析培训提纲.doc

《2022年数据分析培训提纲.doc》由会员分享，可在线阅读，更多相关《2022年数据分析培训提纲.doc（21页珍藏版）》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。

1、数据分析培训提纲1概论1.1数据分析的重要性（1）贯彻质量治理8项原则的需要QM的8项原则之一为：基于事实的决策方法。要防止决策失误必须提供足够的信息，以及进展科学决策。信息：有意义的数据。数据：能客观反映事实的材料和数字。要使数据提升为信息，才能将其增值。为此，必须从数据搜集和分析上运用科学的方法，使之便于利用。（2）通过数据的搜集和分析可证明QMS是否适宜和有效。（3）协助识别和评价QMS持续改良的时机。（4）加强对各种意见和决策的分析、推断、评审、质疑才能 因而，数据分析是保障QMS有效运转的重要手段。1.2数据分析的一般过程1.2.1数据搜集（1）搜集范围产品、体系和过程的数据，如：产

2、品检测中的不合格，QMS质量目的完成情况、持续改良情况、过程监视和测量情况等。事实上在QMS的各个过程中，都会产生一些数据，在治理中必须依照当前及长远目的的需要，确定应搜集那些数据，重点如何。（2）搜集方法 1）各种报表和原始记录（留意分类） 2）区域网中的数据库 3）留意明确搜集人、搜集时间、搜集方式、传递方式。（3）搜集的要求 1）及时 2）精确 数据的质量，“进来的是垃圾，出去的依然垃圾” 3）完好 数据工程齐全，数量符合要求。1.2.2数据分析、处理（1）数据的审查和挑选 剔除奇异点，确定数据是否充分（2）数据排序 按其重要度进展排序，以确定分析处理的对象和顺序（3）确定分析内容，进展

3、统计分析（4）分析推断 在统计分析的根底上，以目的值或标准为依照，对统计分析结果（绘图或计算）作进一步分析，以获得指导过程改良的明确信息，找出主要咨询题和薄弱环节，并提出相应的改良建议。（5）编写报告 对分析推断得出的规律、趋势整理成报告（附有直观的图表）-1-1.2.3数据的利用不能为分析而分析，要有“的”放矢，数据分析应指导治理。数据分析是为了科学决策，决策的结果，可通过前后比照来分析推断其有效性。数据分析应对其全过程做到闭环治理。为此，应将数据分析信息有效地传递，做到信息共享。在风险评估的根底上，采取适当措施。2统计分析技术2.1概述2.1.1什么是统计分析技术（1）统计技术 运用数理统

4、计的方法对数据进展分析，找出其规律和趋势。如：常用的操纵图、回归分析、试验设计等。（2）分析技术运用逻辑分析的方法对数据进展分析，找出妨碍事物的要素及其妨碍程度。如常用的陈列图、因果图、饼图、QFD和 FMEA等方法。2.1.2统计技术应用的根底条件（1）日常治理秩序健全，产质量量有可追溯性。（2）消费过程相对稳定。 妨碍质量的要素已标准化，过程质量处于受控状态。（3）具备必要的物质、技术根底 测试手段适用，必要的图表及计算处理器具或软件。（4）大量的数据计算和处理运用计算机2.2统计技术的根底知识2.2.1随机变量及其分布（1）什么是随机变量： 变量数值有变化的量，相对常量而言。 随机要素随

5、机（不是人为偏向）要素（多种要素），如：年降雨量，抛硬币。 加工尺寸由模具磨损、机器磨损、材料、人的操作重复性、环境等决定。 随机变量受随机要素妨碍的在一定范围内取值的量抽样必须随机，不能有倾向性，。（2）分布间距X 直方图： fini n数据总数n参数 频率：fi= ni第i组的频数 连续型随机变量： X O 为一光滑曲线，此曲线为分布函数。 分布的特征：形状（对称、偏斜）、位置、分布宽度（最大值最小值）。2.2.2总体与样本 总体研究对象的全体，如一批电缆，可视为总体，研究其总长，每一根（或段）电缆则为总体中的一个个体（成员），一批所有电缆的总长为总体。 总体用变量X表示-2- 样本从总体

6、中抽出的部份个体组成的集合称为样本。 抽样 由于不可能研究每一个个体。 从样本推断总体，必须正确反映总体的信息，正确抽样。 随机抽样简单随机样本、随机数表 Xi 099 能够构成2500个随机数。2.2.3正态分布 钟形曲线，曲线下的面积表示概率 对称，中间高，两边低 X（， 2） X 总体的均值；总体标准差 正态分布检验： 直方图 概率纸 横坐标X的等距取值 ；纵坐标不等距0.01%99.99% 在概率纸上描出的点呈不断线，则为正态分布。 正态分布的分布函数值 近似正态分布总趋势符合正态分布，但有个别的奇异点。2.2.4常用统计特征量（样本） 统计量不含未知数的样本函数称为统计量。 统计量是

7、由样本得出，但其对可能总体情况（产品的某些特性值）具有重要意义。（1）反映样本位置的统计量 1）均值样本的算术平均值 X 样本中的数据多数分布在样本均值附近，因而它是表示样本位置的最好的统计量。 局限性：容易受数据中的特大、特小值（异常值）的妨碍。 假设有5个样本，观测值为 3，5，7，9，11 X=7 假如误将11记为21 X=9 当数据异常时，把X作为数据的代表不太适宜，需要引入新的统计量。 2）中位数样本中的数据从大到小陈列后处在中间位置上的数。 样本容量 n为奇数时，它为中间的一个数 n为偶数时，它为中间的两个数的平均值，记为M 如样本为 10，15，23，30 则M=（15+23）/

8、2=19 10，15，23，30，35 则M=23 中位数受异常值的妨碍较小，如：其M均为7 3，5，7，9，11 3，5，7，9，21（2）反映数据波动的统计量 1）极差 R=Xmax Xmin 极差计算简便，但对样本信息利用不够，且它受异常值的妨碍较大。两者极差差异相当大，但中位数一样 如：前例中 3，5，7，9，21 则极差为18 3，5，7，9，11 极差为8 2）方差和标准差 样本方差：较充分利用数据，反映数据的波动 S22= （XiX）2/（n1）-3- 即单个样本数据与样本均值之差的平方和除以（样本容量1） 假设样本为 3，5，7，9，11 n=5 S2=（37）2+（57）2+

9、（77）2+（97）2+（117）2/4=10 5，6，7，8，9 则S2=2.5 S2小说明数据波动小，即数据较为集中。 标准差方差的平方根 S2 =S， 如S2=16， 则S=4 由于方差虽可反映数据的波动，但其量纲为原始数据的量纲的平方，在量纲上不明确，故引入标准差。2.2.5正态分布总体参数可能当一个特征量（总体函数）服从正态分布时，其分布可由，2唯一确定，假设样本的观察数据服从正态分布时，则可用样本的均值和方差去可能总体。可能值 =X 2=S2 这时需留意三个层次对应的三种符号、总体； X、S样本； 、2可能值2.3常用统计分析方法2.3.1记实统计（描绘性统计）（1）记实统计的概念

10、记实统计是提醒数据分布特性的概述和显示定量数据的程序。重要的数据特性： 1）趋中性（多数常常分布在中间）能够通过模型或中位数来描绘。 2）数据范围 如最大、最小值的区间，标准区域 3）数据分布 如对称度，分布规律（可用数学模型描绘）（2）记实统计的表达方法 常用简单的图形来有效地传递信息，如：饼图、条形图表、直方图等，其优点在于能显示定量分析中不易发觉的数据的异常特性，能够显示复杂数据，适于非专业人员分析相关数据，它易于理解并能够在所有层次用于分析和推断。（3）记实统计的应用用于数据的概述并描绘特征， 通常是定量数据分析的第一步，它可提供抽样数据特性（如均值和标准偏向）的定量量值，然而其量值取

11、决于抽样大小和所采纳的抽样方法。记实统计对搜集定量数据的所有领域均适用，如：描绘产品特性的关键量值（如中值或范围）描绘过程参数（如温度）对顾客调查中搜集数据的统计。2.3.2抽样检查抽样是为得到关于一个总体的一些特性的信息，而去研究总体的代表性部份（即样本），通过样本的特性来推断总体的特性的方法。可利用抽样技术，如简单随机的、系统的、连续的、跳批等，来获取样本。抽样方法的选择取决于抽样的目的和详细条件。针对不同的对象和目的，有许多抽样标准，如GB/T2828是针对连续批产品验收，GB/T15239针对孤立批产品验收。2.3.3统计过程操纵（SPC）2.3.3.1概述（1）历史：休哈特1924年

12、创造操纵图，3060年代世界质量治理以此为根底来操纵质量特性。（2）统计过程操纵的作用：-4- 1）完成QC的重要任务，即“监测”妨碍质量的全部消费过程的变量和过程参数。 2）确定过程参数和产品特性是在期望的范围内，依然偏离了上述范围。 3）当过程中的咨询题暴露无遗时，将危及产品特性，因而需要统计过程操纵来预见咨询题马上出现，从而降低消费费用。 4）理解过程变差，并协助到达统计操纵状态，处于统计操纵状态，其功能可预测。 5）改良受控状态。（3）SPC的应用条件 1）测量系统误差必须能被识别或给予补偿、消除，测量系统误差可按（MSA）去操纵。 2）测量过程参数的偏向，都应是随机误差，同时效劳正态

13、分布。 3）过程在统计操纵之下，均值和标准差近于恒定，分布范围在3之内。2.3.3.2操纵图根底知识（1）操纵图的优点 1）简便，便于现场操作者使用 2）有助于稳定过程和本钱 3）促进过程信息交流（二、三班制工人间，工艺、质管人员） 4）易识别造成变差的缘故，防止混淆、减少时间和资源的浪费（2）应留意区别以下概念： 公差（容差）：同意的参数变动范围 偏向：与公称值之差 变差：一批样本中参数的变动范围（3）变差的两类缘故 1）一般缘故 造成随时间推移，稳定且可重复的分布过程的变差缘故，关于稳定系统的偶尔缘故（如周期振动），需要采取系统措施： 消除普遍缘故 大都由治理人员纠正 85%咨询题属此类

14、一个稳定系统遭到偶尔要素干扰，排除干扰则受控。 2）特别缘故（可查明的缘故） 不是一直作用于过程的构成变差缘故，其妨碍过程分布改变（如热处理夜班工人睡觉），假设存在特别缘故，过程将不稳定。 关于特别缘故需要采取部分措施： 消除特别缘故 由与过程直截了当相关人员施行 15%咨询题属此类2.3.3.3操纵图的构造观测值 USL上偏向线（统计量） UCL上操纵限 A 警示线（2）X （中心线） LCL下操纵限 LSL下偏向线 -5- 序号（观测值的顺序号） 警示线：虽不能说明的咨询题已发生，但可提供重要信息。短期内有较多的值在警示线外，应予注重，调查其缘故，加以消除。在发生咨询题之前予以现场警示（2

15、对应于概率95.4%），4.6%将在线外。 A= k 我国 A=3 合格概率99.93%，不合格概率0.23% 汽车、电子（如焊点PPM） A=6 不合格概率2.72.3.3.6绘制操纵图的一般步骤（随机抽样）（1）搜集数据描点按一定时间间隔，采集样本，测定每一样品特性值 计数 样本容量n 可一样或不同 计量 分组（子组） 一样 子组内ni一般为5 一个样本的样品应当是在根本一样的消费条件下消费的（不能分层）（2）计算操纵限 一般无特别缘故不应超出操纵线，否则已失控，暴露出咨询题，应加以消除。（3）分析 推断是否异常或受控，有经历可遵照（4）改良 针对一般缘故，采取系统措施2.3.3.5操纵图

16、的两类作用（1）监控 中线CL、UCL、LCL都用以往数据可由试消费、往常消费统计、初次统计得到。（2）分析 可先测出数据，在计算UCL、LCL、CPK。2.3.4均值图X、极值图R2.3.4.1概述 XR 图 X 过程突变其反响最快 R 较长周期较小波动2.3.4.2绘图步骤（1）选择子组： 子组内样本数ni=25 子组的作用：子组的均值，比单次测量值更能表征总体。 考前须知： 1）测量误差带来妨碍，所产生不合格品的概率，要比过程本身大得多（应测量精确足够精细） 2）nI Xi超过的概率 ni=2 概率为0.21% ni=3 概率为0.01% 意味着ni Xi向中心线靠拢 因而ni 有次序的

17、数组的均值，非常有作用。 3）周期性抽样（抽样频率） 应该操纵抽样条件一致：机台、模具不变，否则难以分清两类（一般、特别）缘故。 持续连续过程：几秒钟抽取一个样本，这对研究过程才能非常方便而可信。 慢速过程：一般不频繁抽样。 一般的周期可取15、30、60min，这可反映一段时间后过程的变化。潜在的缘故：-6- 如换班、操作人员更换等。 初期过程不稳定，抽样频率高，间隔短，消费过程稳定后可放慢。（2）总样本容量：子组数n一般取n=25（样本数），20为小样本，100属大样本。 通常总样本数N=100即n=25，ni=4如此可保证变差的主要缘故有时机出现。（3）绘制X-R图 1）计算Xi 各子组

18、的Xi 的均值 Ri 子组内RI =RimaxRimin 2）确定操纵表的刻度（纵坐标） X2（XimaxXimin） R：一般可取X图的2倍 3）计算操纵限X图： UCLX= X+A2R LCLX= XA2R R图： UCLR=D4R LC LR=D3R （n7无下限） 表ni234567D43.272.572.282.112.001.92D3-0.08A21.881.020.730.580.480.42 4）将操纵限画到图上 一个受控的过程应是只有百分率非常低的点失控，同意在失控点采取措施。 2.3.4.3异常情况分析（1）异常情况 1）任何点超过操纵线。 全在中心线上或下 2）“链”（连

19、续构成的7个点） 连续上升或下降 3）明显的非随机性图形，如周期波动，子组内第一个数总为最大值。 4）过程分布宽度增大，过程失控，过程分布宽度增大。2 5）数据点的分布规律。68.2% 6）图形趋势。 正态分布决定数据密集性，2/3点应落中1/3区域内95.4% 连续3点有2点超警示线（2） 连续5点有4点在1/3以外。（2）异常缘故 1）描点、计算有误 3 99.73% 2）测量系统变化（如检验员、量具变化有零飘） 3）测量量具分辨力不够，精确度、精细度不够，过度磨损（7个点偏一侧） 4）过程输入有变化（原材料不均匀，设备毛病，刀具松动） 5）环境变化（温度）、变速、调速（自动）过程、取样方

20、法分层（如材料批次混淆，几根芯轴每轴测一个数） -7- 6）每个样本中有不同过程的测量值。 7）数据通过编辑（X、R波动大的数据已被剔除，更改数据） 假设超出操纵限的点多，则有特别缘故存在。2.3.4.4过程才能分析假设处于统计状态，才能评价过程才能CPK留意：CPK与CP之区别 CP：X=时，即中值与容差中心重合。 CPK：X时，即中值有偏移时。（1）过程的标准差： =R/d2=R/d2 d2为常数，查表可得（2）单边容差：USLXXLSL Z= 或 Z= CPK=Z/3R/d2R/d2（3）双边容差：USLX ZUSL= ZLSL= CPK=Zmin/3 R/d2 R/d2 Zmin=ZU

21、SL和ZLSL中的较小者X LSL（4）提高过程才能的途径：采取系统措施，减少构成变差的一般缘故，即通过治理措施来改变过程操纵，可采取： 1）将X调整到与目的值一致或接近。 2）保持设备功能、输入材料的一致性。 3）改良过程操作方法 4）改良培训方法，提高培训有效性 5）改善工作环境为了清晰地识别妨碍过程才能的缘故，运用因果图、陈列图是极为有益的。（5）例如（见图）-8-2.3.5 中位数X图2.3.5.1 概述（1）中位数如何确定 奇数：1，5，7，11，22共5个数字，按其数值大小顺序陈列，位于中间的数值7即为中位数，记为X=7 偶数：2，6，10，13，17，21共6个数字，按其数值大小

22、顺序陈列，位于中间的两个数字为10，13，则X=1/2（10+13）=11.5（2）采纳中位数的优点 1）简便易学易用，特别适用车间工人监控过程情况。 2）可显示过程输出的分布及变差趋势。 3）便于比拟几个过程的输出情况及同一过程不同阶段的输出情况（可在同一张纸上描出几个X图）。2.3.5.2 中位数图绘图特点由于X（中位数）图与X-R相类似，故仅留意其不同之处即可。（1）搜集数据 1）子组内样本数 ni10时，样本数宜为奇数，以便于找出中位数。 2）只绘一张X图 刻度设置 图上刻度与量具一致，并考虑： * 产品容差+超出标准的读数（即可能的最大读数）； * （1.52）(测量最大值-测量最小

23、值)； 3）将每个子组的单值描在图中一条垂直线上并圈出每个子组的中位数，将各中位数连成一条折线，从其中可看出趋势。 4）将每个中位数（X）和极差（R） 值填入数值表，以理解其趋势。（2）操纵限 X：UCLX=X+A2R LCLX=X - A2Rn2345678910A21.881.190.800.690.550.510.430.410.36d21.131.692.062.232.532.702.852.973.08R：UCLR=D4R LCLR=D3R R 的操纵限用来推断是否有超出操纵限的点，其中：D4，D3及R与（X-R）图的数据一样。-9-（3）过程才能 =R/d2，d2可由上表查出。假

24、设过程服从正态分布，中位数的极差处于统计状态，则可用直截了当来评价过程才能。过程才能计算方法与X-R图一样。（4）中位数图的替代方法假设操纵限由往常数据得到，则可简化，用于监控。 1）只描Xi的点不必记录数据。 2）标出Rmax和Rmin（5）例如-10-2.3.6 不合格率P2.3.6.1概述（1）计数型数据 X-R和X图均只适用于可通过测量得到数据的量值统计分析。 对消费中有许多工程只需要推断合格与否，如击穿、外观等。在治理活动中，如量具合格与否，以及其他QM治理工程，行政治理工程都可利用计数型数据进展分析。（2）不合格率pnp 1）p的概念 n 被检工程数量n，发觉不合格数量为np，则p

25、= 2）留意：* 区别不合格的百分数为p100 * 一个零件上多个被检工程不合格，只能记为一个不合格数。 3）将检测结果分为子组时，应以能找出不合格数为原则，。 将不合格数与子组大小相比，得出pi。 4）确定要治理的特性。 选择统计分析的对象时，应将精力集中到对过程改良最有积极作用的特性上。这时，应考虑： * 顾客需求（主要指内部顾客） 当前存在咨询题或有潜在咨询题的区域。 * 浪费或功能不好，如：过度超差、报废、返工、与目的不符等。 * 特性间的互相关系，假设几个特性趋势一致，只需描绘一个特性。2.3.6.2 p图的绘制（1）搜集数据 1）选择子组容量、数量及分组频率。 * 子组容量ni 一

26、般ni=50200或更多，子组容量应足够大，以使其内有假设干不合格。 * 分组频率 每个子组间隔时间，一般宜依照产品周期来确定分组频率，以便协助发觉咨询题及时采取操纵措施。间隔短，反响快。但与子组容量要求可能有矛盾，时间太短可能没有足够数量的样品。 * 子组数n 一般n25，应有足够长时间，否则看不清操纵状态是否稳定。 2）计算p（2）绘制p图 1）座标 纵座标p-11- 横座标 子组组别（如间隔小时、天为一子组） 2）描点绘图 p图只有一个（3）计算操纵限1n 1）过程不合格率均值pn 关于n个子组 p= pii=1 2）计算上、下操纵限 UCLP=p+ p（1-p） n LCLP =p-

27、p（1-p） n （4）过程才能 1）p为过程才能，如p=0.0312 说明功能检验出的失效（或毛病）率为3.12% 相应的合格率为96.88% 假设这为100%检验的结果，不合格被剔除，顾客虽能够免于接收不合格品的风险，但3%的平均不合格率，则非常浪费。 2）p反映了过程消费和可能预期的现阶段消费水平。 p不是被动的单值。 3）提高p的考前须知 * 假设过程处于统计操纵状态，p则反映了变差的缘故。 * 留意区别变差的一般缘故和特别缘故，关于前者必须采取治理措施。 * 如需进一步追溯变差的可疑缘故，则宜给X-p图。 * 将过程定位在目的值上。 确定过程目的值时，可先作p图，求p。（5）例如（见胶片图）-12-