《宠物猫砂公司前期工作要点.docx》由会员分享,可在线阅读,更多相关《宠物猫砂公司前期工作要点.docx(101页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、宠物猫砂公司前期工作要点xxx有限公司目录第一章 公司基本情况5一、 公司简介5二、 核心人员介绍5第二章 行业背景分析7第三章 现代工程咨询方法概述9一、 现代工程咨询方法框架9二、 现代工程咨询方法的特点10第四章 现代工程咨询方法13一、 逻辑框架矩阵的编制13二、 层次分析法概述及优缺点23第五章 数据采集分析与知识管理27一、 大数据系统和数据挖掘技术27二、 数据分析与挖掘概述31第六章 规划咨询方法34一、 宏观分析方法34二、 调查方法37第七章 资源环境承载力影响因素识别及评价指标39一、 环境承载力影响因素识别及评价指标39二、 生态承载力影响因素识别及评价指标40第八章
2、市场分析41一、 弹性系数法41二、 市场需求预测42第九章 流动资金估算45一、 分项详细估算法45二、 流动资金估算应注意的问题48第十章 建设投资简单估算法49一、 预备费估算49二、 单位生产能力估算法50第十一章 资产证券化方案分析51一、 资产证券化模式设计51二、 PPP项目资产证券化60第十二章 并购融资及债务重组67一、 公允价值估值方法67二、 并购融资方式72第十三章 财务分析的价格及选取原则81一、 财务分析的价格体系81二、 财务分析的取价原则83第十四章 财务分析概述86一、 财务分析的作用86二、 财务分析的基本原则87第十五章 投资项目经济影响分析方法90一、
3、分析原则及基本方法90二、 重大项目的经济安全影响分析92第十六章 经济效益与费用的识别与计算98一、 经济效益与费用的估算原则98二、 直接效益与直接费用的识别与计算98第一章 公司基本情况一、 公司简介本公司秉承“顾客至上,锐意进取”的经营理念,坚持“客户第一”的原则为广大客户提供优质的服务。公司坚持“责任+爱心”的服务理念,将诚信经营、诚信服务作为企业立世之本,在服务社会、方便大众中赢得信誉、赢得市场。“满足社会和业主的需要,是我们不懈的追求”的企业观念,面对经济发展步入快车道的良好机遇,正以高昂的热情投身于建设宏伟大业。公司在发展中始终坚持以创新为源动力,不断投入巨资引入先进研发设备,
4、更新思想观念,依托优秀的人才、完善的信息、现代科技技术等优势,不断加大新产品的研发力度,以实现公司的永续经营和品牌发展。二、 核心人员介绍1、谢xx,中国国籍,无永久境外居留权,1971年出生,本科学历,中级会计师职称。2002年6月至2011年4月任xxx有限责任公司董事。2003年11月至2011年3月任xxx有限责任公司财务经理。2017年3月至今任公司董事、副总经理、财务总监。2、石xx,1974年出生,研究生学历。2002年6月至2006年8月就职于xxx有限责任公司;2006年8月至2011年3月,任xxx有限责任公司销售部副经理。2011年3月至今历任公司监事、销售部副部长、部长
5、;2019年8月至今任公司监事会主席。3、汤xx,1957年出生,大专学历。1994年5月至2002年6月就职于xxx有限公司;2002年6月至2011年4月任xxx有限责任公司董事。2018年3月至今任公司董事。4、邓xx,中国国籍,1976年出生,本科学历。2003年5月至2011年9月任xxx有限责任公司执行董事、总经理;2003年11月至2011年3月任xxx有限责任公司执行董事、总经理;2004年4月至2011年9月任xxx有限责任公司执行董事、总经理。2018年3月起至今任公司董事长、总经理。5、姚xx,中国国籍,无永久境外居留权,1958年出生,本科学历,高级经济师职称。1994
6、年6月至2002年6月任xxx有限公司董事长;2002年6月至2011年4月任xxx有限责任公司董事长;2016年11月至今任xxx有限公司董事、经理;2019年3月至今任公司董事。第二章 行业背景分析宠物猫砂是用于宠物排泄物处理的一种产品,通常与猫砂盆一并使用。宠物猫砂是一种消耗量非常大的宠物用品,具有良好的吸水性、低粉尘、除臭性等特点。经过多年发展,我国宠物猫砂产品种类逐渐增加,根据制造原料不同,宠物猫砂可分为膨润土猫砂、植物猫砂、硅胶猫砂以及其他猫砂,其中植物猫砂又可分为木屑猫砂、纸屑猫砂、豆腐猫砂等。近年来,随着国内养宠人数不断增加,宠物猫砂市场需求逐渐释放,行业规模逐年扩大。全球范围
7、内,宠物猫砂主要消费市场集中在北美、欧洲、日本、中国等国家和地区,知名度较高的宠物猫砂品牌包括雀巢、PMC、Clorox、杜威、玛氏等。近年来,我国宠物行业发展速度较快,截止到2019年底,我国养宠人数已经超过6180万人,2019年,我国城镇仅犬、猫宠物的市场规模超过2020亿元,同2018年相比增长18.2%。宠物猫砂作为一种消耗量非常大的宠物用品,其市场规模随着宠物市场规模的扩大而扩大。2019年,我国宠物猫砂消费量达到300千吨左右。我国宠物猫砂市场较为成熟,产品种类琳琅满目,且市场参与者较多,包括蓬莱海天矿业、辽宁恒杰、江苏益和等。由于国内大部分公司品牌建设力度较小,产品多集中在中低
8、端市场,且产品同质化现象严重,特别是膨润土猫砂和豆腐猫砂,因此国内多数企业的综合竞争实力不足,同时在国际市场的知名度较低。膨润土猫砂生产成本、技术含量较低,在我国猫砂市场上占据较大的市场份额,但膨润土猫砂粉尘较多,且使用后无法回收,随着居民环保意识增强,以及居民消费能力提升,膨润土猫砂市场占比将有所下降,未来环保、可再生、抗菌、附加功能高的新型宠物猫砂市场发展前景较好。宠物猫砂的销售渠道包括线上和线下实体店两种,其中线下包括商超、宠物店等渠道,近年来,得益于电商行业的快速发展,宠物猫砂线上销售规模逐渐扩大。宠物猫砂是一种消耗量非常大的宠物用品,目前我国宠物猫砂市场较为成熟,且产品种类琳琅满目,
9、但我国宠物猫砂产品多集中在中低端市场,产品同质化现象严重,国内企业在国际市场竞争中处于劣势地位。随着我国养宠人数增加,宠物猫砂市场仍存在较大的发展空间,随着居民消费升级,环保、附加值高的宠物猫砂市场发展前景较好。第三章 现代工程咨询方法概述一、 现代工程咨询方法框架(一)现代工程咨询方法体系现代工程咨询方法体系包括哲学方法、逻辑方法和学科方法。哲学方法一般是辩证地分析事物的两面性,包括它的优点和缺点、正面效应和反面效应;逻辑方法是用概念、判断、推理、假说等逻辑思维形式,对事物进行归纳、演绎、综合;学科方法是利用各种学科中常用的研究方法,包括文献法、观察法、访谈法、问卷法、测量法和实验法、价值工
10、程方法、网络控制方法、市场调查研究方法、战略规划研究方法、财务评价方法、经济评价方法、风险分析方法等。(二)常用现代工程咨询方法基于咨询工程师的基本能力要求,以项目周期的全过程咨询服务为主线,重点集中于投资项目前期咨询服务领域,常用的现代工程咨询方法包括综合分析、规划咨询、市场分析、项目评价、项目管理等五大类,每一大类中又包括若干具体方法。需要说明的是,虽然我们将某一具体方法归于某一大类名下,但其并不是仅限应用于此类项目咨询领域,亦可应用于其他项目咨询中。如利益相关者分析法,经常应用于规划咨询,同时也常用于社会评价;如德尔菲法,不仅应用于市场预测,同时也应用于规划咨询、社会评价等。二、 现代工
11、程咨询方法的特点现代工程咨询方法的特点是,定性分析和定量分析相结合,重视定量分析;静态分析与动态分析相结合,重视动态分析;统计分析与预测分析相结合,重视预测分析。定性分析与定量分析1定性分析定性分析是通过研究事物构成要素间的相互联系来揭示事物本质的方法,它是在逻辑分析、判断推理的基础上,对客观事物进行分析与综合,从而找出事物发展内在规律性,确定事物的本质。在工程咨询研究中,许多难以用计量表达的场合,定性分析方法可以发挥重要作用。2定量分析定量分析是依据统计数据,选择建立合适的数学模型,计算出分析对象的各项指标及其数值的一种方法。它是通过反映一定质的事物量的关系来揭示事物内在规律的方法,在数学、
12、统计学、运筹学、计量学、计算机等学科基础之上,通过方程、数学图表和模型等方式来研究事物的本质。在工程咨询工作中采用定量分析的方法,对复杂事物进行数据处理,进行比较分析,可以使问题更为清晰,解决方案更精确。静态分析与动态分析1静态分析静态分析是观测和评价事物某一时点状态的一种方法。如项目评价中通过计算静态投资回收期、总投资收益率、资本金净利润率等指标,可以对项目的财务效益得出初步的判断。2动态分析在工程咨询服务的各个阶段,特别是在项目决策评价阶段,要树立动态观念,如考虑资金时间价值、市场供求变化、技术发展变化、社会经济环境的变化等。现代项目财务评价一般以动态分析为主,主要进行项目现金流量分析,计
13、算财务净现值、内部收益率等指标,并进行风险概率分析等。统计分析与预测分析1统计分析统计分析是对分析对象过去和现在的信息进行收集、整理、统计和分析。在现代工程决策研究咨询中经常需要采取多种方法和渠道,收集大量的统计数据,包括行业、区域、市场、技术、企业等的统计资料和信息,从而分析、归纳和总结事物的发展规律,把握发展动向;在项目执行阶段,也需要对项目的执行情况进行监控,对投资、质量、进度等进行统计分析,并与计划进行比较,判断项目的进展情况,以便采取有针对性的应对措施,促进项目的顺利进行。2预测分析预测分析是依据分析对象过去和现在的信息,采用一定的方法,对事物未来发展趋势进行分析、推测、判断的方法。
14、预测分析是现代工程咨询的重要方法,尤其是在投资前期决策阶段,预测分析是项目咨询的重要工作。投资项目决策是建立在对未来预测的基础上的,需要对未来的社会经济环境、产业政策走向、技术发展趋势、市场需求变化、原材料供应、配套条件约束、资金市场等进行预测。第四章 现代工程咨询方法一、 逻辑框架矩阵的编制逻辑框架的编制过程,同时也是对项目各要素的不断分析和加深认识的过程,按照因果关系进行逻辑分析,理顺项目的层次,找出问题的关键,提出解决问题的方案和对策。在逻辑框架的分析过程中,应重点解决以下问题:1为什么要进行这一项目,如何度量项目的宏观目标;2项目要达到什么具体目标,不同层次的具体目标和宏观目标之间有何
15、联系;3怎样达到这些具体目标;4有哪些外部因素在项目具体目标的取得上是必须考虑的;5项目成功与否的测量指标是什么,如何进行检测;6验证项目指标的数据从哪里得到;7项目实施中要求投入哪些资源,需要的费用是多少;8项目计划的内容及实施的主要外部条件是什么;9如何检查项目的进度。(一)逻辑框架的编制步骤逻辑框架矩阵表的编制,可以按照以下步骤进行:1确定项目的具体目标;2确定为实现项目具体目标所要实现的产出成果;3确定为达到每项产出成果所需要投入的活动;4确定项目的宏观目标;5用“如果,那么”的逻辑关系自下而上检验纵向逻辑关系;6确定每一层次目标的实现所需要的重要假设和外部条件;7依次确定项目的直接目
16、标、产出成果和宏观目标的可验证的指标;8确定指标的客观验证方法;9确定各项投入活动的预算成本和验证指标及方法;10对整个逻辑框架的设计进行对照检查和核对。(二)目标层次的逻辑关系表述目标层次的逻辑关系表述,目的是要确定各层次的目标关系,分析项目的宏观目标、具体目标和产出成果及其逻辑关系。主要做法是:1宏观目标构成项目逻辑框架的最上层次,其他项目也可能为此目标做出贡献。要对项目进行目标体系的分解和分析,可借助目标树的方法进行分析,确定项目的宏观目标和具体目标。项目宏观目标的分析表述要尽量做到具体化。2项目具体目标是达到宏观目标的分目标之一,也是该项目希望达到的目标,是用以评价某一项目最后是否取得
17、成功的判断依据。项目规划的使命就是要努力保证项目具体目标的实现。3各项产出成果是为实现项目具体目标必须达到的结果。它们从其效果来看应是合适的、必要的、足够的。4项目必要的投入活动的表述,应注意简洁明了,不要列举太多的具体活动,只要使项目的基本结构和方案能够得到清晰表达就足够了。5将各项投入活动和产出成果逐一编号,表示时间顺序或优先顺序。6项目概述应有严密的逻辑性:为了达到产出成果而开展相应的投入活动各项产出成果是达到项目直接目标所必需的条件,与重要假设及外部条件结合构成项目具体目标的先决条件;项目具体目标是达到宏观目标的条件之一。(三)重要假设的表述逻辑框架矩阵中的“重要假设”,是由外部条件即
18、项目之外的影响因素转化而来的。项目之外的影响因素指在项目的控制范围以外但对项目的成功有影响的条件。在确定重要假设时,一般要回答这样的问题,即“哪些外部因素对项目的实施显得特别重要,但项目本身又不能加以控制?”一旦发现上述这些外部条件或项目之外的影响因素存在,就要进行认真分析,并放入逻辑框架矩阵表内,提醒项目管理者注意监视此类条件的变化。如有可能,应施加一定的影响,使其尽可能向有利于项目实施的方向转变。重要假设条件的存在,是由多种原因造成的。首先是项目所在地的特定自然环境及其变化。例如农业项目,管理者无法控制的一个主要外部因素是气候,变化无常的天气可能使庄稼颗粒无收,计划彻底失败。这类风险还包括
19、地震、干旱、洪水、台风、病虫等自然灾害。其次,政府在政策、计划、发展战略等方面的失误或变化给项目带来严重影响。例如,一些发展中国家的产品价格极不合理,农产品价格很低,那么即使项目的设计和实施完成得再好,仍然逃脱不了经济上的失败。另外,管理体制也是项目无法控制的因素。僵化的管理体制往往造成项目投入产出与其具体目标和宏观目标的分离。例如,一些国家的农田灌溉设施由水资源部门管理,一个具体的农业项目(包括良种、化肥、农药、农机设施、农技服务、水利灌溉等多项内容)可能因为水资源部门不合理的水量分配而大大降低效益。列入逻辑框架矩阵表的重要假设条件要具备3个条件:对项目的成功很重要项目本身无法对之进行控制;
20、有可能发生。重要假设可以描述自然条件,如保证一定期间范围内的降水量是多少、粮食价格保持稳定、农民愿意采纳新技术、农民愿意使用新的信贷系统等;也可以描述与此项目有关的其他项目,如世界银行灌溉项目一定要按时完成,或者施肥项目届时结束等。这里需要强调的是“可能发生的”这一点,即不确定的程度,例如我们假定将有充足的降雨量,没有这个条件,新的品种就不会达到增产的目标。如果你想测定这种不确定性的程度,仍要了解这种假设变成现实的可能性有多大。(四)客观验证指标和验证方法的表述逻辑框架法要求,项目的每一个要素都应是可以测定的,包括投入、产出、具体目标和宏观目标,以及重要假设和外部条件。因此,项目的评价指标及其
21、检验方法在逻辑框架分析中占有重要位置。1客观验证指标逻辑框架垂直各层次目标,应有相对应的客观且可度量的验证指标,包括数量、质量、时间及人员等,来说明层次目标的结果,验证每一个目标的实现程度,这种指标的确立应该是客观的,不能凭主观臆断,同时又是可以被验证的。为了验证层次目标实现的程度,逻辑框架采用的验证指标应具备下列条件:(1)清晰的量化指标,以测定项目目标的实现程度;(2)必须针对项目主要具体目标,突出重点指标;(3)验证指标与对应目标的关系明确合理;(4)验证指标与层次目标一一对应,是唯一的、单独的;(5)验证指标必须是完整的、充分的、定义准确的;(6)验证指标必须是客观的,不是人为可以变动
22、的;(7)间接指标的采用。有时项目很难找到直接的验证指标,需要采用间接指标。间接指标与验证对象的关系必须是明确的,如一个卫生项目的目的是降低婴死亡率,但在较短时间内很难验证这个比例,那么只能用家长受过专门训练的比例和医疗卫生设施的使用比例作为间接指标。(8)验证指标的准确性。准确的指标应该包括明确的定义、定量和定性的数据以及规定的时间。确定指标时,要尽可能选择简易可行、成本较低的信息收集途径。如要了解农民收入,可能需要很复杂的调查研究,但有时通过对一个村农户电视机、自行车拥有量调查便可有所了解。如果发现所确定的指标不足以准确的说明宏观目标、具体目标或产出成果,就应该以其他指标来代替。2客观验证
23、方法某项指标被作为检验某个目标层次的标准,它来源于哪本书、哪个统计报表或文件,必须提出明确的验证方法。这里所指的统计报表或文件应该具有权威性。此外,也可在此注明验证指标的具体形式。主要资料来源(监测和监督)和验证方法可按照数据收集的类型、信息的来源渠道和收集方法进行划分(1)数据收集类型。数据收集应符合验证指标的要求,每个层次的指标都有不同的数据收集要求,因此数据收集必须有针对性,简明扼要。(2)咨询信息来源。验证方法需要说明资料信息来源的可靠性,找出省钱省时的途径。一般的信息来自建设单位、当地群众和官方文件等3个方面。(3)数据收集技巧。在数据类型和来源明确之后,要确定是否符合信息管理的数据
24、质量要求,再编制表格。如果采用抽样调查的方法,应对取样规模、内容、统计标准等进行充分考虑和安排。简单的抽样调查或案例分析是不够的,验证指标一般都有一些比较常用的数据收集和处理方法与技巧,可根据要求和条件加以选择。(五)确定项目的投入形式和投入量项目投入是项目计划的重要组成部分。投入形式和投入数量体现了项目规模,直接影响到项目的效果。认真做好这项工作是项目成功的重要保证。确定项目投入形式和投入数量的具体做法如下1根据逻辑框架内所列出的每项投入活动,确定所需要的人、财、物的数量;2明确投资者和受益者;3人员投入以人月为计算单位;4对所投入的设备、物资应登记清楚,并要注明所指的具体投入活动;5计算投
25、入总量;6计算每个产出成果的投入总量;7在效益风险分析的基础上估计可能附加的投入量以及逻辑框架内反映不出来的隐性投入(如组建办公室、秘书及司机等的费用负担),并通过讨论加以落实;8当资金提供单位限定了资金数量时,项目设计必须从量化方面考虑,计划要说明多少投入量能够取得什么结果。总之,应根据实际可能性和必要性来计算投入量,其结果应能反映出不同层次的利益和责任。最后将研究和估算结果填入逻辑框架表内。(六)最后的复查项目的投入形式和投入量确定后,逻辑框架矩阵表至此已全部完成。这时需要进行通盘检查。应包括如下内容:1垂直逻辑关系(目标层次)是否完善、准确;2客观验证指标和验证方法是否可靠,所需信息是否
26、可以获得;3前提条件是否真实,符合实际;4重要假设是否合理;5项目的风险是否可以接受;6成功的把握是否很大;7是否考虑了持续性问题,这种持续性是否反映在成果、活动或重要假设当中;8效益是否远远高于成本;9是否需要辅助性研究。为保证逻辑框架各项内容表述的准确性,还要对所制定的逻辑框架进行进一步核实。核实的内容包括:1项目具有一个宏观目标;2项目具体目标不是对产出成果的重复描述;3项目具体目标是项目的管理责任(与产出是相对的),项目产出实现之后,项目的具体目标应该能够实现。这里的管理责任是指项目直接目标的客观性;4项目的具体目标应描述清楚;5所有产出成果都是完成具体目标的必要条件;6各项产出成果描
27、述清楚;7各项产出成果描述为投入活动的结果;8所设计的投入活动都是完成某项产出的必要条件;9宏观目标应描述清楚;10宏观目标与具体目标之间具备“如果,那么”的逻辑相关性,没有忽略重要的步骤;11投入层重要假设不包括任何前提条件,因为前提条件是活动开始之前已经开展的工作;12在同一层次上,产出加上重要假设构成达到项目直接目标的必要及充分条件;13项目直接目标加上重要假设构成实现宏观目标的关键条件;14投入与产出之间的关系是真实的;15产出与项目具体目标之间的关系是真实的;16投入、产出、项目具体目标和宏观目标的纵向逻辑关系是真实的;17项目具体目标的指标独立于产出。它们不是产出的总结,而是检测具
28、体目标的尺度;18项目具体目标的测定指标能够恰当地反映项目具体目标的重要内容;19项目具体目标的指标可以检测数量、质量和时间标准;20产出的指标在数量、质量和时间上是客观可验证的;21宏观目标的指标在数量、质量和时间上客观可验证的;22在投入层所描述的投入能够反映完成项目的所需的资源;23验证方法应说明在哪里可获得验证每个指标的信息;24整个逻辑框架矩阵的内容,可以据以确定项目的评价计划。二、 层次分析法概述及优缺点(一)层次分析法概述层次分析法(简称AHP)是美国匹茨堡大学运筹学家T.L.satty教授于20世纪70年代初,在为美国国防部研究“应急计划”时,应用网络系统理论和多目标综合评价方
29、法,提出的一种层次权重决策分析方法。该方法将决策问题的有关元素分解成目标、准则、方案等层次,在此基础上进行定性分析和定量分析的一种决策方法。这一方法的特点,是在对复杂决策问题的本质影响因素及其内在关系等进行深人分析之后,构建一个层次结构模型,然后利用较少的定量信息,把决策的思维过程数学化,从而为求解多准则或无结构特性的复杂决策问题提供一种简便的综合决策分析方法。层次分析法的应用范围十分广泛,应用的领域包括:经济与计划;能源政策与资源分配;政治问题及冲突;人力资源管理;教育发展;医疗卫生;环境工程;军事指挥与武器评价;企业管理与生产经营决策;项目评价;规划咨询;资源环境承载力评价等。层次分析法优
30、缺点1层次分析法的优点(1)系统性的分析方法层次分析法把研究对象作为一个系统,按照分解、比较判断、综合的思维方式进行决策,成为继机理分析、统计分析之后发展起来的系统分析的重要工具。系统的思想在于不割断各个因素对结果的影响,层次分析法中每一层的权重设置最后都会直接或间接影响到结果,而且在每个层次中的每个因素对结果的影响程度都是量化的,非常清晰明确。(2)简洁实用的决策方法这种方法既不单纯追求高深数学,又不片面地注重行为、逻辑、推理,而是把定性方法与定量方法有机地结合起来,将多目标、多准则又难以全部量化处理的决策问题化为多层次单目标问题,通过两两比较确定同一层次元素相对上一层次元素的数量关系后,最
31、后进行简单的数学运算。该方法计算简便,结果明确,且易于决策者了解和掌握。(3)所需定量数据信息较少层次分析法主要是从评价者对评价问题的本质、要素的理解出发,比一般的定量方法更讲究定性的分析和判断。由于层次分析法是一种模拟人们决策过程的思维方式的一种方法,该方法把判断各要素的相对重要性化为简单的权重进行计算。2层次分析法的缺点(1)不能为决策者提供新方案对于大部分决策者来说,如果一种分析方法能替我们分析出在我们已知的方案里的最优者,然后能指出已知方案的不足,或者甚至能提出改进方案的话,这种分析方法才是比较完美的。而层次分析法只能从原有备选方案中选择较优者,而不能为决策者提供解决问题的新方案。(2
32、)指标过多时工作量大,且权重难以确定当我们希望能解决较普遍的问题时,指标的选取数量很可能也就随之增加,而指标的增加就意味着我们要构造层次更深、数量更多、规模更庞大的判断矩阵,那么就需要对许多的指标进行两两比较的工作。由于一般情况下两两比较是用1至9来说明其相对重要性,如果有越来越多的指标,对每两个指标之间的重要程度的判断可能就会出现困难,甚至会对层次单排序和总排序的一致性产生影响,使一致性检验不能通过,如果不能通过,就需要进行调整,在指标数量多的时候其调整的工作量大,且权重难以确定。(3)特征值和特征向量的精确求法比较复杂在求判断矩阵的特征值和特征向量时,所用的方法和我们多元统计所用的方法是一
33、样的。在二阶、三阶的时候,还比较容易处理,但随着指标的增加,阶数也随之增加,其人工计算也变得越来越困难,需要借助计算机来完成。第五章 数据采集分析与知识管理一、 大数据系统和数据挖掘技术(一)数据挖掘概述1大数据大数据是指超过既往数据库系统规模、传输速度和处理能力,或者既往数据库系统结构无法容纳的数据。大数据常以万亿或EB衡量,且种类多、实时性强,蕴藏的商业价值大。很多现有的新或旧的信息基础设施、工具和技术可用来开发和利用大数据中蕴藏的价值。大数据有各种各样的来源:传感器、气候信息、公开的信息、如杂志、报纸、文章、买卖记录、网络日志、病历、事监控、视频和图像档案,及大型电子商务。大数据是数据挖
34、掘产生与生存发展的土壤。如今数据每五年翻一番,面对前所未有的海量数据,为了从中发现有用的信息必须进行数据挖掘。此外,计算机存储、处理大量数据,以及运算的能力大为增强,为数据挖掘创造了条件,使其成为一门独特的学科和技术。2数据挖掘与数据分析的区别数据挖掘与数据分析的主要区别在于:(1)处理工作量。数据分析的数据量可能并不大,而数据挖掘的数据量极大。(2)制约条件。数据分析是从某些假设出发,建立方程或模型,而数据挖掘不作假设,可以自动建立方程。(3)处理对象。数据分析往往是针对数字型数据,而数据挖掘对象类型繁多,例如图像、声音、文本等。(4)处理结果。数据分析可以解释结果的含义;数据挖掘的结果不易
35、解释,着眼于预测未来,并提出决策建议。想要从数据中发现规律(即认知),往往需将数据分析和数据挖掘结合起来。(二)数据挖掘步骤按挖掘对象,数据挖掘分为数据库与数据仓库挖掘和网络挖掘两种,各自步骤分述如下。1数据库与数据仓库挖掘数据挖掘一般有信息收集、数据集成、数据规约、数据清理、数据变换、数据挖掘、模式评估和知识表示8个步骤。(1)信息收集。从确定的挖掘对象中提取特征,然后选择合适的收集方法,将收集到的信息存入数据库。对于海量数据,必须选择合适的数据仓库。(2)数据集成。把来源、格式、特点、性质不同的数据按逻辑或物理属性加以编排,以便以后使用。(3)数据规约。多数数据挖掘算法耗时很长,商业数据往
36、往较多,数据挖掘更耗时间。数据规约就是简化已有可用数据集的表示,规约后数量大减,但仍能保持原数据的完整性,对规约数据的挖掘结果,与对规约前数据的挖掘结果相同或几乎相同。(4)数据清理。有些数据不完整(属性缺少属性值)、含噪声(属性值错误),不一致(同一信息有多种表示),需要清理,使其完整、正确、一致后存入数据仓库。(5)数据变换。将数据变换成适合数据挖掘的形式。实数型数据,可将其分层和离散化。(6)数据挖掘。根据数据格式、属性与特点,选择合适的处理工具,例如统计方法、事例推理、决策树、规则推理、模糊集,甚至神经网络,取得有用的信息。(7)模式评估。由行业专家核实数据挖掘结果是否合理、是否可用。
37、(8)知识表示。将数据挖掘得到的信息以可视方式交给用户,或作为新的知识存人知识库,供其他应用程序使用。并非所有的数据挖掘都要走上述的每一步。若只有一个数据源,则可以省略数据集成。数据规约、数据清理、数据变换合称数据预处理。数据挖掘至少60%的费用要花在信息收集阶段,而至少60%以上的精力和时间要花在数据预处理上。数据挖掘是一个反复多次的过程,若一次未满足要求或未得到有用结果,则需回到前面,经过调整后重新开始。2,网络挖掘网络挖掘可分为网络用户行为挖掘与网络信息挖掘。前者基本不在工程咨询人员关心之列。后者可理解为“从WWW中发现和分析有用的信息”。网络信息挖掘是在已知数据样本的基础上,通过归纳学
38、习、机器学习、统计分析等发现挖掘对象间的内在关系与特性,进而在网络中提取用户感兴趣的信息,获得更高层次的知识和规律。网络信息挖掘沿用了Robot,全文检索、人工智能的模式识别、神经网络等技术。现在的搜索引擎使用了这些技术,能够在网页或网站数据库中为用户搜寻有用信息。网络信息挖掘具体步骤如下:(1)确立目标样本。由用户选择目标文本,提取特征信息。(2)提取特征信息。根据目标样本的词频分布,从统计词典中提取挖掘目标的特征向量并计算出相应的权值。(3)网络信息获取。先利用搜索引擎站点选择待采集站点,再利用Robot程序采集静态Web页面,最后获取被访问站点网络数据库中的动态信息,生成WWW资源索引库
39、。(4)信息特征匹配。提取索引库中的源信息特征向量,并与目标样本的特征向量对照,将符合要求的信息交给用户。二、 数据分析与挖掘概述(一)信息分析信息分析是根据咨询问题的具体需要,对与之有关的信息进行整理、鉴别、评价、分析和综合,以便取得咨询所需新信息的过程。信息分析有如下几种用途:1跟踪。所谓跟踪,就是及时了解各领域新动向、新发展,从而发现问题、提出问题。2比较。比较各种事物的内部矛盾之后,把握事物间的联系,认识事物的本质,从而提出问题、确定目标、拟定方案并作出选择。3预测。利用已掌握的信息、知识和手段,推断事物的未来或未知方面。4评价。进行评价时应选择合适的变量和评价指标,应当考虑评价对象之
40、间的可比性。信息分析所用方法,可分为定性和定量分析两种。定性方法主要靠逻辑推理;而定量方法涉及数据间的数量关系,要建立数学模型,计算、求解。如今,信息越来越复杂,定性与定量分析已无法单独奏效,只能越来越多地结合起来。(二)数据分析数据分析是信息分析的一部分,数据分析是对收集数据进行系统的分析,建立适当的模型,揭示数据中隐含的技术、经济、社会和其他关系,以及发展趋势,为有关的咨询活动提交的有用的数字、信息或建议。数据分析的对象可分为时间序列和截面数据。如企业历年的咨询收入、利润总额等就是时间序列。截面数据是在同一时间的数据,如企业同一年咨询业务数目、营业额、费用、收入、人工耗费等。两种数据都要注
41、意样本容量大小。对于截面数据,常用线性或非线性回归模型体现数据之间的各种关系。数据分析属定量分析,包括数据统计分析、时间数据分析、空间数据分析。(三)数据挖掘数据挖掘就是从数据中挖掘出隐含、先前未知、有潜在用途,最终可为人理解的关系、模式、趋势和其他有用信息,并建立模型,用于预测、判断或决策,帮助企业更好地适应变化并做出更明智的决策的过程。数据挖掘广泛应用于制造、金融、零售、保健、中医药及电信等行业的客户关系管理、风险防范、供应链管理、竞争优势分析、部门分析等领域。数据挖掘要用到统计分析、人工智能、数据库和神经网络等方面的知识,如记忆推理、聚类分析、关联分析、决策树、神经网络、基因算法等。数据
42、挖掘需要用户参与,并非某种单一工具、技术或软件即可独自完成。另一方面,并非所有信息查询都可视为数据挖掘。例如,使用数据库管理系统查找个别记录,或用搜索引擎查找互联网特定的网页,属于信息检索,不能视为数据挖掘。当然,数据挖掘技术也有强大的信息检索能力。第六章 规划咨询方法一、 宏观分析方法宏观分析方法可以分为定性分析和定量分析两种基本类型。定量分析主要是对事物的状态和过程进行描述,常用的方法包括区位熵、偏离一份额分析法、城市规模等级模型的应用;定性分析则是对状态和过程的因果机制进行解释,如波特钻石模型、利益相关者分析等方法的应用。定性分析往往主观性较强,而定量分析通常忽略许多约束性因素,在规划咨
43、询过程中,通常采取定性定量相结合的方式弥补二者的不足。宏观分析中通常采用区域分析、空间分析、相关分析等定性与定量相结合的方法,揭示研究对象的各种特征,为规划政策和规划方案的制定提供有价值的信息。(一)区域分析区域分析是对区域发展的自然条件和社会经济背景特征及其对区域社会经济发展的影响进行分析,探讨区域内部各自然和人文要素之间以及区域之间相互联系的规律的一种综合性方法。区域分析涉及地理学、经济学、社会学、政治学以及生物学等许多学科,以经济学和地理学为主,主要有经济学的投入一产出分析法、地理学的区域系统分析法如区位熵、偏离一份额分析法等。投入一产出分析法更多是对区域内各部门之间联系的分析,投入一产
44、出分析的基本思路对规划咨询中各方面关系的把握具有重要的作用,其主要内容是:为获得一定的产出,必须有一定的投入,国民经济各部门之间在投入与产出上存在着极其密切的生产技术联系和经济联系。地理学理论与方法的应用使得区域分析中对区域发展问题的研究更加深入和全面。其在规划研究中的应用主要是对人流、物流、技术流、信息流、资金流等五种流态在区域内相互作用机制的分析,表现在包括交通网络、通信网络、邮递网络等方面的流向分析和主要包括原材料及半成品流量、资金融通量、产品扩散、技术转让、商品流通、信息传输和客货流量等方面的流量分析。通过这些分析,主要目的是明确区域发展的基础,评估潜力,为选择区域发展的方向、调整区域
45、产业结构和空间结构提供依据。地理学中的城市规模等级模型方法常应用于分析区域内部城市的集聚与分散状态,以了解和把握一定尺度区域内部的城市体系特点及其发展演化特征,为正确制定区域城市体系的发展战略提供支撑。此外,区域分析过程中,地图和遥感技术的运用对区域分析的作用尤为显著。它不但直观,而且可以应用现代计算机技术对信息进行加工处理,使分析更为方便、可靠。(二)空间分析空间分析主要通过空间数据和空间模型的联合分析来挖掘空间目标的潜在信息,包括空间位置、分布、形态、距离、方位等。对发展资源的空间配置进行分析,包括空间分布和空间作用,是规划咨询的重要任务之一。物质要素的空间分布有点状分布(如学校、医院等)
46、、线状分布(如交通路网能源管网等)、面状分布(如不同区的人口分布等),可分别采用离散程度测度、网络测度、位商、罗伦兹曲线等测度分析方法。测度空间分布的方法可用来分析调查对象的空间分布变化以及与其他相关对象的空间分布之间的关系。规划政策或规划方案涉及不同地域空间(如城市、乡村等)发展资源的空间分布,因此产生的影响也具有空间属性。比如一个新超级市场的建设会对附近其他超级市场产生影响,这些都反映了城市构成要素之间的空间作用,可以用城市空间引力模型进行分析。(三)相关分析根据定性分析,可以知道规划对象(如都市圈、城市等)中的各种要素之间存在着相关关系,如居住人口分布与公共设施分布之间的相关关系,土地开
47、发强度与交通可达性之间的相关关系等。相关系数可以定量测定各个对象之间的相关程度,以验证定性分析的结论,常用的相关分析方法有区位熵、偏离一份额分析等。二、 调查方法规划咨询与决策过程是建立在相关信息基础上的,规划咨询的调查工作就是收集与规划对象相关的信息,一般可分为环境(包括自然生态环境和人文环境)、经济和社会三个基本领域,各个领域的信息均具有时间(不同阶段)和空间(不同地域)的属性。规划咨询过程中不同阶段对各个领域的信息要求是不同的。规划咨询的调查方法是对研究对象过去和现在的相关信息、数据进行收集、整理、分析的方法,与规划类型、调查目的和调查对象有关,大致可分为文献方法、访谈方法、实地调查方法和问卷调查方法四种类型,各种调查方法都有适用性和局限性,在实际规划咨询工作中,一般采用多种方法相结合的方式进行。(一)文献方法规划咨询中的大量调查多采用文献方法。与规划咨询相关的主要文献来源包括统计资料(如国家和地方的经济、社会和环境等方面的统计年鉴)、普查资料(如人口普查、经济普查、产业普查等)、文件资料(如政府的有关文件、