《低温奶项目前期工作要点.docx》由会员分享,可在线阅读,更多相关《低温奶项目前期工作要点.docx(97页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、低温奶项目前期工作要点xxx有限责任公司目录第一章 项目简介5一、 项目名称及项目单位5二、 项目建设地点5三、 建设规模5四、 项目建设进度5五、 建设投资估算5六、 项目主要技术经济指标6第二章 现代工程咨询方法8一、 层次分析法的基本步骤8二、 逻辑框架法的概念及模式11第三章 现代工程咨询方法概述15一、 现代工程咨询方法框架15二、 现代工程咨询方法的特点16第四章 行业背景分析19第五章 工程咨询信息及其管理21一、 工程咨询信息类型及来源21二、 工程咨询信息及其管理概述25第六章 数据采集分析与知识管理27一、 大数据系统和数据挖掘技术27二、 网络信息搜索和提取方法31第七章
2、 资源环境承载力概述35一、 资源环境承载力分析的类型35二、 资源环境承载力的内涵38第八章 规划咨询方法41一、 宏观分析方法41二、 综合平衡方法44第九章 市场分析46一、 企业竞争能力分析46二、 专家预测法48第十章 流动资金估算51一、 流动资金估算应注意的问题51二、 分项详细估算法51第十一章 建设期利息估算55一、 建设期利息估算的前提条件55二、 建设期利息的估算方法55第十二章 并购融资及债务重组56一、 并购融资方式56二、 公允价值估值方法64第十三章 资金成本分析70一、 权益资金成本分析70二、 资金成本的构成71第十四章 偿债能力分析和财务生存能力分析74一、
3、 财务生存能力分析74二、 偿债能力分析76第十五章 财务分析概述82一、 财务分析的作用82二、 财务分析的步骤83第十六章 投资项目经济影响分析方法85一、 经济影响分析模型简介85二、 重大项目的经济安全影响分析88第十七章 经济分析概述95一、 经济分析的基本方法95二、 经济分析与财务分析的异同与联系95第一章 项目简介一、 项目名称及项目单位项目名称:低温奶项目项目单位:xxx有限责任公司二、 项目建设地点本期项目选址位于xx(待定),占地面积约41.00亩。项目拟定建设区域地理位置优越,交通便利,规划电力、给排水、通讯等公用设施条件完备,非常适宜本期项目建设。三、 建设规模该项目
4、总占地面积27333.00(折合约41.00亩),预计场区规划总建筑面积45640.98。其中:主体工程30398.68,仓储工程6999.44,行政办公及生活服务设施4726.74,公共工程3516.12。四、 项目建设进度结合该项目建设的实际工作情况,xxx有限责任公司将项目工程的建设周期确定为24个月,其工作内容包括:项目前期准备、工程勘察与设计、土建工程施工、设备采购、设备安装调试、试车投产等。五、 建设投资估算(一)项目总投资构成分析本期项目总投资包括建设投资、建设期利息和流动资金。根据谨慎财务估算,项目总投资16404.27万元,其中:建设投资12630.16万元,占项目总投资的7
5、6.99%;建设期利息326.35万元,占项目总投资的1.99%;流动资金3447.76万元,占项目总投资的21.02%。(二)建设投资构成本期项目建设投资12630.16万元,包括工程费用、工程建设其他费用和预备费,其中:工程费用10607.61万元,工程建设其他费用1656.68万元,预备费365.87万元。六、 项目主要技术经济指标(一)财务效益分析根据谨慎财务测算,项目达产后每年营业收入32500.00万元,综合总成本费用27203.46万元,纳税总额2662.07万元,净利润3861.94万元,财务内部收益率15.65%,财务净现值368.54万元,全部投资回收期6.65年。(二)主
6、要数据及技术指标表主要经济指标一览表序号项目单位指标备注1占地面积27333.00约41.00亩1.1总建筑面积45640.98容积率1.671.2基底面积16399.80建筑系数60.00%1.3投资强度万元/亩289.282总投资万元16404.272.1建设投资万元12630.162.1.1工程费用万元10607.612.1.2工程建设其他费用万元1656.682.1.3预备费万元365.872.2建设期利息万元326.352.3流动资金万元3447.763资金筹措万元16404.273.1自筹资金万元9744.003.2银行贷款万元6660.274营业收入万元32500.00正常运营年
7、份5总成本费用万元27203.466利润总额万元5149.257净利润万元3861.948所得税万元1287.319增值税万元1227.4710税金及附加万元147.2911纳税总额万元2662.0712工业增加值万元9360.5813盈亏平衡点万元14441.94产值14回收期年6.65含建设期24个月15财务内部收益率15.65%所得税后16财务净现值万元368.54所得税后第二章 现代工程咨询方法一、 层次分析法的基本步骤当一个决策者在对问题进行分析时,首先要将分析对象的因素建立起彼此相关因素的层次系统结构,这种层次结构可以清晰地反映出相关因素(目标、准则、对象)的彼此关系,使得决策者能
8、够把复杂的问题顺理成章,然后进行逐一比较、判断,从中选出最优的方案。运用层次分析法大体上分成四个步骤:建立层次结构模型;构造比较判别矩阵;单准则下层次排序及其一致性检验;层次总排序及其一致性检验。(一)建立层次结构模型层次分析法先将决策的目标、考虑的因素(评价准则)和决策对象(行动方案)按它们之间的相互关系分为最高层、中间层和最低层,其中最高层称为目标层,这一层中只有一个元素,就是该问题要达到的目标或理想的结果;中间层为准则层,层中的元素为实现目标所采用的措施、政策、准则等,准则层中可以不止一层,可以根据问题规模的大小和复杂程度,分为准则层、子准则层;最低层为方案层,这一层包括了实现目标可供选
9、择的方案。据此绘出层次结构模型图,模型中,目标、评价准则和行动方案处于不同的层次,彼此之间关系用线段表示,评价准则可细分多层。在层次结构模型中,各层均由若干因素构成,当某个层次包含因素较多时,可将该层次进一步划分成若干子层次。通常应使各层次中的各因素支配的元素一般不超过9个,这是因为支配元素过多会给两两比较带来困难。一个好的层次结构模型对解决问题极为重要,因此,在构建层次结构模型时,应注意以下四点:1自上至下顺序地存在支配关系,用直线段表示上一层次因素与下一层次因素之间的关系,同一层次及不相邻元素之间不存在支配关系;2整个结构不受层次限制;3最高层只有一个元素,每个元素所支配元素一般不超过9个
10、,元素过多可进一步分层;4对某些具有子层次结构可引入虚元素,使之成为典型层次结构模型。(二)构造比较判别矩阵层次结构建立后,评价者根据自己的知识、经验和判断,从第一个准则层开始向下,逐步确定各层不同因素相对于上一层因素的重要性权数。层次分析法在确定各层不同因素相对于上一层各因素的重要性权数时,通常使用两两比较的方法。(三)单准则下层次排序及其一致性检验层次分析法的信息基础是比较判断矩阵。由于每个准则都支配下一层若干个因素,这样对于每一个准则及它所支配的因素都可以得到一个比较判断矩阵。因此,根据比较判断矩阵如何求出各因素对于准则的相对排序权重的过程称为单准则下的排序。计算权重的方法有多种,其中和
11、法和根法是比较成熟并得到广泛应用的方法。1和法2根法3判断矩阵一致性检验由于客观事物的复杂性,会使我们的判断带有主观性和片面性,完全要求每次比较判断的思维标准一致是不大可能的。事实上,在构建比较判断矩阵时,我们虽然不要求判断具有一致性,但一个混乱的,经不起推敲的比较判断矩阵有可能导致决策的失误,所以我们希望在判断时应大体上的致。而上述计算权重方法,当判断矩阵过于偏离一致性时,其可靠程度也就值得怀疑了,故对于每一层次作单准则排序时,均需要作一致性的检验。(四)层次总排序及其一致性检验1层次总排序计算同一层次中所有元素对于最高层(总目标)的相对重要性标度(又称排序权重向量)称为层次总排序。2总排序
12、一致性检验人们在对各层元素作比较时,尽管每一层中所用的比较尺度基本一致,但各层之间仍可能有所差异,而这种差异将随着层次总排序的逐渐计算而累加起来,因此需要从模型的总体上来检验这种差异尺度的累积是否显著,检验的过程称为层次总排序的一致性检验。二、 逻辑框架法的概念及模式(一)LFA的基本概念LFA是一种概念化论述项目的方法,即用一张简单的框图来清晰地分析一个复杂项目的内涵和各种逻辑关系,以便给人们一个整体的框架概念。LFA是将几个内容相关、必须同步考虑的动态因素组合在一起,通过分析各种要素之间的逻辑关系,从设计策划到目标实现等方面来评价一项活动或工作。LFA为项目策划者和评价者提供一种分析框架,
13、用以确定工作的范围和任务,并对项目目标和达到目标所需的手段进行逻辑关系分析。LFA的核心是项目的各种要素之间的因果关系,即“如果”提供了某种条件,“那么”就会产生某种结果。这些条件包括事物内在的因素及其所需要的各种外部条件。(二)LFA的基本模式逻辑框架分析方法的结果是要形成一个逻辑框架表。由于该表能够充分体现表内包含的各项内容之间的逻辑关系,而且这种逻辑关系构成了一个矩阵式框架结构,因此,逻辑框架表又称为逻辑框架矩阵表。LFA的模式是一张4X4的矩阵。1目标层次逻辑框架表汇总了项目实施活动的全部要素,并按宏观目标、具体目标、产出成果和投入的层次归纳了投资项目的目标及其因果关系。(1)宏观目标
14、。项目的宏观目标即宏观计划、规划、政策和方针等所指向的目标,该目标可通过几个方面的因素来实现。宏观目标一般超越了项目的范畴,是指国家、地区、部门或投资组织的整体目标。这个层次目标的确定和指标的选择一般由国家或行业部门选定,一般要与国家发展目标相联系,并符合国家产业政策、行业规划等的要求。(2)具体目标。具体目标也叫直接目标,是指项目的直接效果,是项目立项的重要依据。一般应考虑项目为受益目标群体带来的效果,主要是社会和经济方面的成果和作用。这个层次的目标由项目实施机构和独立的评价机构来确定,目标的实现由项目本身的因素来确定。(3)产出。这里的“产出”是指项目“干了些什么”,即项目的建设内容或投人
15、的产出物。一般要提供可计量的直接结果,要直截了当地指出项目所完成的实际工程(如港口、铁路、输变电设施、气井、城市服务设施等),或改善机构制度、政策法规等。在分析中应注意,在产出中,项目可能会提供的一些服务和就业机会,往往不是产出而是项目的目的或目标。(4)投入和活动。该层次是指项目的实施过程及内容,主要包括资源和时间等的投入。2客观验证指标逻辑框架垂直各层次目标,应有相对应的客观且可度量的验证指标,包括数量、质量、时间及人员等,来说明层次目标的结果,验证每一个目标的实现程度,这种指标的确立应该是客观的,不能凭主观臆断,同时又是可以被验证的。3客观验证方法在逻辑框架水平逻辑层次上,对应验证指标的
16、是验证方法。验证方法就是主要资料来源和验证所采用的方法。主要资料来源(监测和监督)和验证方法可按照数据收集的类型、信息的来源渠道和收集方法进行划分。4重要的假定条件在逻辑框架的4个目标层次之间有一些重要的限制条件,称为假定条件,即必要的外部条件或风险。重要的假定条件主要是指可能对项目的进展或成果产生影响,而项目管理者又无法控制的外部条件,即不可控风险或限制条件。第三章 现代工程咨询方法概述一、 现代工程咨询方法框架(一)现代工程咨询方法体系现代工程咨询方法体系包括哲学方法、逻辑方法和学科方法。哲学方法一般是辩证地分析事物的两面性,包括它的优点和缺点、正面效应和反面效应;逻辑方法是用概念、判断、
17、推理、假说等逻辑思维形式,对事物进行归纳、演绎、综合;学科方法是利用各种学科中常用的研究方法,包括文献法、观察法、访谈法、问卷法、测量法和实验法、价值工程方法、网络控制方法、市场调查研究方法、战略规划研究方法、财务评价方法、经济评价方法、风险分析方法等。(二)常用现代工程咨询方法基于咨询工程师的基本能力要求,以项目周期的全过程咨询服务为主线,重点集中于投资项目前期咨询服务领域,常用的现代工程咨询方法包括综合分析、规划咨询、市场分析、项目评价、项目管理等五大类,每一大类中又包括若干具体方法。需要说明的是,虽然我们将某一具体方法归于某一大类名下,但其并不是仅限应用于此类项目咨询领域,亦可应用于其他
18、项目咨询中。如利益相关者分析法,经常应用于规划咨询,同时也常用于社会评价;如德尔菲法,不仅应用于市场预测,同时也应用于规划咨询、社会评价等。二、 现代工程咨询方法的特点现代工程咨询方法的特点是,定性分析和定量分析相结合,重视定量分析;静态分析与动态分析相结合,重视动态分析;统计分析与预测分析相结合,重视预测分析。定性分析与定量分析1定性分析定性分析是通过研究事物构成要素间的相互联系来揭示事物本质的方法,它是在逻辑分析、判断推理的基础上,对客观事物进行分析与综合,从而找出事物发展内在规律性,确定事物的本质。在工程咨询研究中,许多难以用计量表达的场合,定性分析方法可以发挥重要作用。2定量分析定量分
19、析是依据统计数据,选择建立合适的数学模型,计算出分析对象的各项指标及其数值的一种方法。它是通过反映一定质的事物量的关系来揭示事物内在规律的方法,在数学、统计学、运筹学、计量学、计算机等学科基础之上,通过方程、数学图表和模型等方式来研究事物的本质。在工程咨询工作中采用定量分析的方法,对复杂事物进行数据处理,进行比较分析,可以使问题更为清晰,解决方案更精确。静态分析与动态分析1静态分析静态分析是观测和评价事物某一时点状态的一种方法。如项目评价中通过计算静态投资回收期、总投资收益率、资本金净利润率等指标,可以对项目的财务效益得出初步的判断。2动态分析在工程咨询服务的各个阶段,特别是在项目决策评价阶段
20、,要树立动态观念,如考虑资金时间价值、市场供求变化、技术发展变化、社会经济环境的变化等。现代项目财务评价一般以动态分析为主,主要进行项目现金流量分析,计算财务净现值、内部收益率等指标,并进行风险概率分析等。统计分析与预测分析1统计分析统计分析是对分析对象过去和现在的信息进行收集、整理、统计和分析。在现代工程决策研究咨询中经常需要采取多种方法和渠道,收集大量的统计数据,包括行业、区域、市场、技术、企业等的统计资料和信息,从而分析、归纳和总结事物的发展规律,把握发展动向;在项目执行阶段,也需要对项目的执行情况进行监控,对投资、质量、进度等进行统计分析,并与计划进行比较,判断项目的进展情况,以便采取
21、有针对性的应对措施,促进项目的顺利进行。2预测分析预测分析是依据分析对象过去和现在的信息,采用一定的方法,对事物未来发展趋势进行分析、推测、判断的方法。预测分析是现代工程咨询的重要方法,尤其是在投资前期决策阶段,预测分析是项目咨询的重要工作。投资项目决策是建立在对未来预测的基础上的,需要对未来的社会经济环境、产业政策走向、技术发展趋势、市场需求变化、原材料供应、配套条件约束、资金市场等进行预测。第四章 行业背景分析低温奶也称为巴氏杀菌乳、巴氏杀菌奶等,是指采用巴氏杀菌法加工而成的牛奶。低温奶需要低温条件储藏、冷链运输,一般保质期较短,与常温奶相比,低温奶保留了生乳中的天然活性物质以及酶的高活性
22、,其口感更自然清甜。近年来,随着居民生活品质不断提高,以及消费观念逐渐改变,低温奶市场需求持续增加,行业发展前景较好。近年来,我国低温奶市场一直处于快速增长态势,2019年,我国低温奶市场规模接近850亿元,同比增长15.2%,2014-2019年年复合增长率为15.8%,其中巴氏奶市场增速较快,2019年我国巴氏奶市场规模超过340亿元。与欧美等发达国家相比,我国低温奶在液态奶消费市场的占比较低,随着居民消费升级和营养意识提升,未来我国低温奶市场发展空间广阔。2018年,农业农村部、发展改革委等九部委联合印发的关于进一步促进奶业振兴的若干意见提出,要重点生产巴氏杀菌乳、发酵乳、奶酪等乳制品。
23、在国家政策鼓励下,各大企业争相入驻低温奶市场,包括伊利、蒙牛、新希望、三元、光明等国内企业以及安佳、日本明治等外资乳企。目前我国乳制品市场仍以常温奶产品为主,其消费占比超过70%,但经过多年发展,常温奶市场相对饱和,盈利空间有限,相比之下,低温奶市场盈利空间广阔。2019年,我国冷链物流市场规模接近3400亿元,冷库总容量超过4500万吨,冷链物流市场规模持续扩大,为低温奶市场发展提供了广阔的空间。同时随着电商行业的快速发展,京东物流、每日优鲜、叮咚买菜等电商平台逐渐崛起,低温奶销售渠道逐渐扩大,目前电商平台已经成为低温奶第三大销售渠道。受冷链、运输距离等因素限制,低温奶品牌区域性强,例如华东
24、地区以光明、伊利、蒙牛等低温奶品牌为主;华南地区以卡氏、燕塘、晨光等地方性品牌为主;西南、西北地区以新希望、蒙牛等品牌为主;华中地区以光明、蒙牛、伊利等品牌为主,其中光明市占比最大。近年来,随着居民生活品质不断提高,以及消费观念逐渐改变,低温奶市场需求持续增加。目前我国低温奶市场处于快速增长态势,与欧美等发达国家相比,我国低温奶在液态奶消费市场的占比较低,随着冷链物流逐渐完善,以及销售渠道不断扩展,未来我国低温奶行业发展空间广阔。第五章 工程咨询信息及其管理一、 工程咨询信息类型及来源(一)信息类型工程咨询需要的信息,量大、面广。为了便于识别、分析、存储与保管,可从不同的角度将其分类。例如,从
25、信息属性、来源、形态、用途、载体,是否随时而变或是否经过加工处理等角度划分。1不同属性的信息工程咨询中常用如下几种属性信息:(1)法律。国家、各级政府颁布的有关投资与工程建设的各种法律、法规、规章等。(2)规划与政策。国家和地方的各种规划(战略、行业),以及财政、税收、货币、投资和产业等方面的政策。(3)标准与规范。国家各部门或专业协会发布的技术经济指标、定额、标准与规范等。(4)自然与资源。调查、统计或其他机构保存或取得的河流、湖泊、沼泽、山脉、森林、植被、矿藏、水文等地理资料,气象、气候等天文资料等。(5)行业统计。全国乃至全球各行业规模与产业动向、生产与销售、进出口、技术,以及主要企业、
26、公司等的现状、竞争态势,以及发展趋势等。(6)投资与项目。全国乃至全球各种项目的实施过程与结果,包括投资、规模、技术来源、标准、设备、产品性能和目标市场等。(7)区域社会与经济状况。区域的社会、民族、文化、教育、宗教、习俗等人文状况,区域经济发展、税收、财政、基础设施等。2来源不同的信息(1)内部信息。企业或项目已有或反映企业及项目状况,不希望外人获知的信息。(2)外部信息。诸如宏观政策的变动、市场动态、竞争情况、政策法规、技术发展等方面的信息。3媒介与形式不同的信息信息有多种形式,如数据、文字、图样、影像、录音。信息载体或媒介亦有多种,如书籍、文件、报告、会议、数据库和磁盘等。4原始信息与加
27、工信息信息有原始和加工信息。原始信息,如人口普查记录;加工信息,利用某些方法,根据原始信息取得的判断、评价、预测及建议等,如对人口构成的分析。5用途不同的信息信息的用途五花八门,如标准、规范、手册等,通常用于技术方案设计;如生产资料价格、概算定额等,通常用于投资估算;如税率、产品价格、影子价格等,通常用于项目财务分析或经济分析;行业基准收益率、市场竞争情况等,通常用于投资项目决策。6动态信息与静态信息信息可分为静态和动态两类,前者指不随时间变化或变化较小的信息,如道路、停车场、交通附属设施等;后者为随时变化的信息,如道路状况、交通事故、天气、车辆密度与流量等。7显性信息与隐性信息显性信息指以文
28、字、图形或其他符号明显记载于书籍或其他介质的信息。隐性信息是须经过分析、联系与推断才能获得的信息。(二)工程咨询对信息的基本要求信息是咨询和决策的基础,至少应满足如下要求。1来源须可靠,必须来源于实际,不能含有虚假、伪造的成分。2必须全面或较全面反映客观事物与过程,不得将片面、残缺的信息用于咨询。3必须适合或基本适合选用的咨询方法。不同的咨询方法需要不同范围和时间段的信息。如果不能适合选用的咨询方法,就应选择其他咨询方法。(三)信息来源信息来源很多,例如图书馆、档案馆、调查或咨询机构、学校、出版与研究机构、商场、国家与地方统计局及其他政府或新闻机构、国际组织与外国驻华机构、互联网等。1网络和出
29、版物从互联网上能够快速检索到最新、非常有价值的信息。当然,对这些信息必须特别注意加以鉴别,去伪存真。公开出版物同样发布大量有用的信息,例如行业年鉴、调查与统计报告、专题研究报告等。2借阅与购买从合作单位、专门机构索取或购买资料是一种重要的信息来源。如到各种图书馆借阅文献与资料,购买国家或地方统计局出版的综合与行业统计年鉴,向某些调查机构索取或购买调查报告,向测量部门购买卫星图片、航测或航拍图片,向地震部门购买地震分布资料,向水文、气象部门采购历年水文、气象资料,向城市主管部门采购地理信息资料,向地质勘探部门采购地质勘探资料等。3自有信息从事规划、勘察、设计、科研、监理等咨询活动的咨询企业,积累
30、了大量宝贵信息,例如水文地质与地形勘察报告、图档、投资估算、设计概算、工程决算、可行性研究报告、监理报告、实验报告、总结报告、国内外工程招标信息、最新行业动态和资讯、竞争企业情报、国内外工程规范和标准惯例、公司资质和专业资质、人力资源、公文公告、财务信息、企业管理制度和报表模板等,不少咨询企业还拥有专利。二、 工程咨询信息及其管理概述(一)工程咨询信息的内涵信息资源是工程咨询行业的核心资源,通过获取海量有效的信息,依靠信息、知识和智慧、先进科技手段进行服务。信息爆炸的社会要求工程咨询行业服务机构拥有获取信息、处理信息的能力和手段。工程咨询项目管理信息化是结合行业业务特点,以信息资源开发利用为核
31、心,利用现代信息技术、网络技术等现代科技,强化信息技术在业务中的渗透,在工程咨询项目各环节中推广应用信息技术,以提高工程咨询机构管理决策能力,提升咨询工作效率,增强机构行业竞争力。工程咨询需要的信息,涉及自然、资源、气候、水文、地质、人口、人文、项目投入产出、市场(商品、劳动力、金融)、财政及政策、货币政策、法规、标准与规范、发展规划等。(二)工程咨询信息管理的必要性我国经济进入新常态,全球化、绿色发展、结构调整、新技术应用等成为发展主基调,这不仅需要规模巨大的投资,而且更加注重发展质量,这就给工程咨询业带来了极大的发展机遇,也对工程咨询信息管理提出了新的需求。未来工程咨询将更多的应用建筑信息
32、模型技术(BIM)、大数据、物联网、地理信息系统(GIS)无人机应用、AR仿真模拟、人工智能辅助查询与分析系统等,也迫切要求工程咨询业能够尽快改变传统咨询手段,必须针对新技术、新产业进行调整,建立完善的数据分析与知识管理方法。传统的信息管理模式工作流程繁琐,耗费人力物力,亟待向智能管理模式迈进。工程咨询信息管理以丰富的信息资源为管理重点,利用“互联网+”、数据库管理系统等先进的信息管理手段,协助工程咨询人员能够从海量的业务数据中提供有用的信息,进而做出科学的判断以及正确的决策,从而实现为工程咨询的决策提供更加全面及时的信息支出,使工作更加便捷,回复也更加及时,大幅减少出现错误的概率,安全性更高
33、。第六章 数据采集分析与知识管理一、 大数据系统和数据挖掘技术(一)数据挖掘概述1大数据大数据是指超过既往数据库系统规模、传输速度和处理能力,或者既往数据库系统结构无法容纳的数据。大数据常以万亿或EB衡量,且种类多、实时性强,蕴藏的商业价值大。很多现有的新或旧的信息基础设施、工具和技术可用来开发和利用大数据中蕴藏的价值。大数据有各种各样的来源:传感器、气候信息、公开的信息、如杂志、报纸、文章、买卖记录、网络日志、病历、事监控、视频和图像档案,及大型电子商务。大数据是数据挖掘产生与生存发展的土壤。如今数据每五年翻一番,面对前所未有的海量数据,为了从中发现有用的信息必须进行数据挖掘。此外,计算机存
34、储、处理大量数据,以及运算的能力大为增强,为数据挖掘创造了条件,使其成为一门独特的学科和技术。2数据挖掘与数据分析的区别数据挖掘与数据分析的主要区别在于:(1)处理工作量。数据分析的数据量可能并不大,而数据挖掘的数据量极大。(2)制约条件。数据分析是从某些假设出发,建立方程或模型,而数据挖掘不作假设,可以自动建立方程。(3)处理对象。数据分析往往是针对数字型数据,而数据挖掘对象类型繁多,例如图像、声音、文本等。(4)处理结果。数据分析可以解释结果的含义;数据挖掘的结果不易解释,着眼于预测未来,并提出决策建议。想要从数据中发现规律(即认知),往往需将数据分析和数据挖掘结合起来。(二)数据挖掘步骤
35、按挖掘对象,数据挖掘分为数据库与数据仓库挖掘和网络挖掘两种,各自步骤分述如下。1数据库与数据仓库挖掘数据挖掘一般有信息收集、数据集成、数据规约、数据清理、数据变换、数据挖掘、模式评估和知识表示8个步骤。(1)信息收集。从确定的挖掘对象中提取特征,然后选择合适的收集方法,将收集到的信息存入数据库。对于海量数据,必须选择合适的数据仓库。(2)数据集成。把来源、格式、特点、性质不同的数据按逻辑或物理属性加以编排,以便以后使用。(3)数据规约。多数数据挖掘算法耗时很长,商业数据往往较多,数据挖掘更耗时间。数据规约就是简化已有可用数据集的表示,规约后数量大减,但仍能保持原数据的完整性,对规约数据的挖掘结
36、果,与对规约前数据的挖掘结果相同或几乎相同。(4)数据清理。有些数据不完整(属性缺少属性值)、含噪声(属性值错误),不一致(同一信息有多种表示),需要清理,使其完整、正确、一致后存入数据仓库。(5)数据变换。将数据变换成适合数据挖掘的形式。实数型数据,可将其分层和离散化。(6)数据挖掘。根据数据格式、属性与特点,选择合适的处理工具,例如统计方法、事例推理、决策树、规则推理、模糊集,甚至神经网络,取得有用的信息。(7)模式评估。由行业专家核实数据挖掘结果是否合理、是否可用。(8)知识表示。将数据挖掘得到的信息以可视方式交给用户,或作为新的知识存人知识库,供其他应用程序使用。并非所有的数据挖掘都要
37、走上述的每一步。若只有一个数据源,则可以省略数据集成。数据规约、数据清理、数据变换合称数据预处理。数据挖掘至少60%的费用要花在信息收集阶段,而至少60%以上的精力和时间要花在数据预处理上。数据挖掘是一个反复多次的过程,若一次未满足要求或未得到有用结果,则需回到前面,经过调整后重新开始。2,网络挖掘网络挖掘可分为网络用户行为挖掘与网络信息挖掘。前者基本不在工程咨询人员关心之列。后者可理解为“从WWW中发现和分析有用的信息”。网络信息挖掘是在已知数据样本的基础上,通过归纳学习、机器学习、统计分析等发现挖掘对象间的内在关系与特性,进而在网络中提取用户感兴趣的信息,获得更高层次的知识和规律。网络信息
38、挖掘沿用了Robot,全文检索、人工智能的模式识别、神经网络等技术。现在的搜索引擎使用了这些技术,能够在网页或网站数据库中为用户搜寻有用信息。网络信息挖掘具体步骤如下:(1)确立目标样本。由用户选择目标文本,提取特征信息。(2)提取特征信息。根据目标样本的词频分布,从统计词典中提取挖掘目标的特征向量并计算出相应的权值。(3)网络信息获取。先利用搜索引擎站点选择待采集站点,再利用Robot程序采集静态Web页面,最后获取被访问站点网络数据库中的动态信息,生成WWW资源索引库。(4)信息特征匹配。提取索引库中的源信息特征向量,并与目标样本的特征向量对照,将符合要求的信息交给用户。二、 网络信息搜索
39、和提取方法(一)概过现在,虽然不能说人类所有文献与其他信息都上了互联网,但是网上的信息极为丰富,许多都可用于咨询。但是,许多咨询人员还不善于甚至不知道如何从网上快速、安全、有效地获得自己需要的信息和知识。咨询工程师应当知晓网上有何利信息,应掌握从网上获取信息的方法与基本技巧。对于网上的信息,可利用浏览器和搜索引擎获取。浏览器是供用户阅读网页内容的软件;而搜索引擎,指从互联网上搜集信息的特定电脑程序。早期的搜索引擎是收集互联网中服务器的地址,按这些服务器拥有的资源类型将其编成不同的目录,各个目录再逐层分类。搜索引擎则沿着此类层级向下搜索,找到用户想要的信息。这种方式只适用于互联网信息不多的时代。
40、随着互联网上信息的迅猛增长,出现了新式搜索引擎,性能大为改进,能够找到网站每一页的起始地址,随后搜索网上所有超级链接,把代表超级链接的所有词汇放入一个数据库。搜索引擎的功能不再限于搜索,已经添加了电子商务、新闻信息服务、个人免费电子信箱服务等。(二)搜索引擎工作原理搜索引擎有信息搜集、信息整理和接受用户查询三部分,各自工作原理大致如下:1搜集信息:搜索引擎利用称为网络蜘蛛(spider)的自动搜索机器人程序,从少数几个网页开始,将各个网页的超链接连结在一起,只要网页上有适当的超链接,机器人便可以遍历绝大部分网页。2整理信息:这个过程称为“建立索引”。搜索引擎不仅要保存搜集到的信息,还要按照一定
41、规则编排之。这样,搜索引擎无须重新翻查已保存的所有信息,便能迅速找到所要的资料,从而能够大大加快搜索速度。3接受查询:对于每时每刻都会接到的大量用户几乎同时发出的查询请求,搜索引擎按照各个用户的要求检查自己的索引,能在极短时间内找到用户需要的资料,并交给用户。目前,搜索引擎交给用户的主要是网页链接,用户按照这些链接便能找到含有自己所需资料的网页。搜索引擎一般会在这些链接下加一段有关这些网页的摘要,以便用户判断此网页是否含有自己需要的内容。(三)搜索引擎种类现在,搜索引擎有很多种,可以从不同的角度分类。按搜索方法,分全文索引、目录索引、元搜索、垂直搜索、集合式搜索、门户搜索、个性搜索、专家型搜索
42、与免费链接列表等。按搜索对象,分购物、自然语言、新闻、MP3、图片等搜索引擎。按搜索范围,分桌面、地址栏、本地等搜索引擎。按出现的时间,分第三代、第四代搜索引擎等。现在,用的较多的搜索引擎有Google,百度、Yahoo、MSNSearch,Webcrawler,Lycos,CNetSearch,LookSmart等。(四)搜索方法与技巧要想使搜索引擎能在网上快速找到有关咨询的资料,首先要明确查询目的。目的不同,查询策略与方法不同。在明确目的之后,还应了解查询的种类与技巧,学会恰当地使用关键词。搜索方法的选择取决于搜索的内容。不同搜索引擎的复杂条件查询功能和实现方法各有不同,网站中一般都有“帮
43、助”和“说明”解释各自的功能和方法。现在的搜索引擎都有模糊查询功能。当用户输入关键词时,搜索引擎不但交给用户关键词的网址,还发来与关键词意义相近的内容。比如,查找“建筑报”一词时,模糊查询搜索的结果会有“建筑报”“建设报”“建筑时报”等的网址。网址的排列,一般是完全符合关键词在最前边,其次是相近的。模糊查询的结果往往并非用户所需,为了排除不需要的结果,各种搜索引擎也设置了相应的功能。第七章 资源环境承载力概述一、 资源环境承载力分析的类型根据承载主体的涵盖范围来划分,可将承载力分为两类:第一类是以某一具体的自然要素作为分析对象,又称为单要素承载力分析,如土地资源、水资源、矿产资源承载力等资源支
44、持要素,或空气、水等环境约束要素;另一类是从区域整体的角度出发进行的综合承载力分析,如区域承载力、生态承载力等。单要素承载力是宗合承载力分析的前提,综合承载力分析是对单要素承载力在区域尺度上的系统集成,因而必须是在作为其组成要素的主要资源环境承载力问题已经基本解决的基础上才能进行。(一)土地资源承载力分析土地资源承载力是承载力研究中较早开始且最为成熟的研究领域,目前“以多少土地、粮食,养活多少人口”仍是土地资源承载力分析的核心内容。在开放系统下,从区域资源、环境、生态与发展之间的关系出发进行实证分析成为土地资源承载力分析的重要发展方向。技术方法层面,借助3S技术等获取准确的资源空间信息并实现基
45、础数据的空间化,提高了分析的科学性和精确程度。(二)水资源承载力分析水资源承载力通常是指在一定的区域范围内,在确保社会发展处于良性循环条件下,以区域可利用水量为依据,能够维持工农业生产、城市规模、生活质量、生态需求的状况下,水资源所能持续的人口数量。水资源承载力的承载主体是区域的水资源量,即可供区域开发利用的各种形式、各种质地的水资源,其承载对象是所有与水相关联的人类活动,包括工农业生产、商业娱乐和人类生活。以水资源的可持续利用为中心,探讨影响区域水资源承载力的因素及其相互关系已成为水资源承载力分析的重点问题。同时,考虑到水资源具有动态性、随机性和不确定性等特点,在水资源承载力分析方法中逐步引
46、入系统动力学、多目标情景规划等动态分析方法。此外,水资源承载力分析还要充分考虑水资源的调入、调出以及跨区占用问题,在开放系统下对区域水资源承载力进行评价也是水资源承载力分析的重要问题。(三)矿产资源承载力分析矿产资源承载力是指在一个可预见的时期内,在当时的科学技术、自然环境和社会经济条件下,矿产资源的经济可采储量(或其生产能力)对社会经济发展的承载能力。矿产资源对社会经济发展的承载力也就是对社会物质生产、人口、环境的支持程度,可以从矿产资源对物质生产、人口生产和环境生产等方面建立承载力指标体系。(四)环境承载力分析环境承载力是指在一定时期内,在维持相对稳定的前提下,自然环境所能容纳的人口规模和经济规模的大小,一般用环境容量进行衡量。环境容量是指区域自然环境和环境要素对人为干扰或污染物容纳的承受量或负荷量。环境承载力概念由环境容量概念演化而来,通过对区域大气、水、土壤、噪声、固废和辐射等环境要素的承载力开展分析,明确环境对各种污染物的容纳能力以及人类在不损害环境的前提下能够进行的最大活动限度。广义上,生态承载力和环境承载力在一起分析,统称生态环境承载力。由于生态环境承载力的动态性特点,生态环境承载力传统的数据获取与分析方法,通过将地面观测与