《大数据治理体系6211489.docx》由会员分享,可在线阅读,更多相关《大数据治理体系6211489.docx(74页珍藏版)》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、数据治理体系目录1.范围围12.规范范性引用文文件13.术语语、定义和和缩略语54.总体体说明84.1.概述84.2.目标94.3.原则95.数据据治理体系系105.1.总体框架架105.2.组织架构构115.2.11.组织构成成115.2.22.角色职责责125.3.系统架构构125.3.11.系统功能能框架125.3.22.系统模块块流程145.4.系统边界界155.4.11.与企业级级省大数据据平台关系系165.4.22.与对外能能力开放平平台关系165.4.33.与平台运运维系统关关系166.数据据治理核心心模块176.1.数据标准准管理176.1.11.背景176.1.22.186.
2、1.33.目标及原原则196.1.44.业务分类类和定义196.1.55.技术功能能要求236.1.66.本期建设设范围及内内容266.1.77.实施要求求276.2.元数据管管理276.2.11.背景和定定义276.2.22.元数据运运营模式296.2.33.元模型标标准296.2.44.元数据运运维336.2.55.本期重点点建设内容容346.3.数据质量量管理346.3.11.与传统经经营分析系系统的区别别346.3.22.范围和原原则356.3.33.与其它功功能模块的的关系366.3.44.本期数据据质量功能能需求386.3.55.本期数据据质量运维维要求396.4.数据资产产管理4
3、06.4.11.数据资产产概述406.4.22.数据资产产范围416.4.33.与其它功功能模块的的关系426.4.44.本期数据据资产功能能需求426.4.55.本期建设设内容456.5.数据安全全管理456.5.11.数据安全全概述456.5.22.建设原则则466.5.33.建设内容容466.5.44.边界关系系466.5.55.技术功能能476.5.66.管理要求求487.数据据治理场景景527.1.背景描述述527.2.场景一:银行伪卡卡交易判别别527.2.11.背景介绍绍527.2.22.场景描述述537.3.场景二:银行手机机贷业务547.3.11.背景介绍绍547.3.22.
4、场景描述述548.附录录55附录一:数数据标准框框架55附录二:数数据标准体体系定义内内容示例56前言本规范的制制订是为了了更好地实实现中国移移动企业级级省大数据据平台数据治治理子系统统的建设和管理理,为省大大数据平台台上的各类基基础技术和和应用提供供支撑,加加强省大数数据平台上上数据的管管控力度,增增强数据治治理子系统统自身管理理能力。本规范主要要包括以下下几方面的的内容:总总体说明、数据治理体系、数据治理核心模块、数据治理场景等。本规范是中中国移动企企业级大数数据平台系系列规范之一。该该系列规范范的结构、名名称或预计计的名称如如下:序号标准编号标准名称1QB-Y-*-20155中国移动企企
5、业级大数数据平台目标架架构2QB-Y-*-20155中国移动企企业级省大数据平台台技术规范范总册3QB-Y-*-20155中国移动企企业级省大数据平台台技术规范范分册4QB-Y-*-20155中国移动企企业级省大数据平台台技术规范范技术方案案分册5QB-Y-*-20155中国移动企企业级省大大数据平台台技术规范范数据模型型分册6QB-Y-*-22015中国移动企企业级省大大数据平台台技术规范范外部接口口分册7QB-Y-*-20155中国移动企企业级省大大数据平台台技术规范范服务开放放分册8QB-Y-*-22015中国移动企企业级省大大数据平台台技术规范范服务开放放技术方案案分册9QB-Y-*-
6、22015中国移动企企业级省大大数据平台台技术规范范数据治理理分册10QB-Y-*-22015中国移动企企业级省大大数据平台台技术规范范数据治理理技术方案案分册11QB-Y-*-22015中国移动企企业级省大大数据平台台技术规范范运营维护护分册12QB-Y-*-22015中国移动企企业级省大数据平平台技术规规范安全管管理技术方方案本规范由中中移技印发。本规范由中中国移动通通信集团公公司业务支支撑系统部部提出,集集团公司技技术部归口口。本规范起草草单位:中中国移动通通信集团公公司业务支支撑系统部部。本规范主要要起草人:段云峰、汪新勇、赵静、周立、任怡健、王保强、潘刚、刘童桐、王金金、陶涛、刘虹、
7、张红星、魏春辉。VI1. 范围本规范规定定了中国移移动企业级级省大数据据平台数据据治理子系系统的建设设内容,适适用于中国国移动各省省(直辖市市、自治区区)公司企企业级省大大数据平台台数据治理理子系统的的建设。2. 规范性引用用文件下列文件中中的条款通通过本规范范的引用而而成为本规规范的条款款。凡是标标注日期的的引用文件件,其随后后所有的修修改单(不不包括勘误误的内容)或或修订版均均不适用于于本规范。然而而,鼓励根根据本规范范达成协议议的各方对对是否使用用这些文件件的最新版版本进行研研究。凡是是不标注日日期的引用用文件,其其最新版本本适用于本本规范。1中国移动动省级经营营分析系统统业务规范范(v
8、1.0)中国移动通通信有限公公司2中国移动动省级经营营分析系统统技术规范范(v1.0)中国移动通通信有限公公司3QB-J-010-20066中国移动动省级经营营分析系统统数据质量量管理系统统建设方案案(v1.5)中国移动通通信有限公公司4QB-J-006-20066中国移动动省级经营营分析系统统数据仓库库逻辑数据据模型说明明(v1.5)中国移动通通信有限公公司5QB-J-007-20066中国移动动省级经营营分析系统统数据集市市业务技术术规范(vv1.5)中国移动通通信有限公公司6QB-J-008-20066中国移动动省级经营营分析系统统与源系统统接口规范范(v1.5)中国移动通通信有限公公司
9、7QB-J-009-20066中国移动动省级经营营分析系统统与BOSSS系统互互动技术规规范(v11.5)中国移动通通信有限公公司8QB-J-003-20066中国移动动省级经营营分析系统统业务规范范(v1.5)基础业务务分册中国移动通通信有限公公司9QB-J-004-20066中国移动动省级经营营分析系统统业务规范范(v1.5)数据业务务分册中国移动通通信有限公公司10QB-J-005-20066中国移动动省级经营营分析系统统业务规范范(v1.5)集团客户户分册中国移动通通信有限公公司11QB-J-001-20066中国移动动业务运营营支撑系统统(BOSSS)业务务技术规范范营销资源源管理分
10、册册(2.00版)中国移动通通信有限公公司12QB-J-001-20066中国移动动业务运营营支撑系统统(BOSSS)业务务技术规范范客服信息息分册(22.0版)中国移动通通信有限公公司13QB-J-001-20066中国移动动业务运营营支撑系统统(BOSSS)业务务技术规范范(2.00版)中国移动通通信有限公公司14QB-J-021-20077中国移动动省级经营营分析系统统数据仓库库逻辑数据据模型规范范(v2.0)中国移动通通信有限公公司15QB-J-020-20077中国移动动省级经营营分析系统统与源数据据接口规范范(v2.0)中国移动通通信有限公公司16QB-J-022-20077中国移
11、动动省级经营营分析系统统数据集市市业务技术术规范(vv2.0)中国移动通通信有限公公司17QB-J-019-20077中国移动动省级经营营分析系统统业务规范范渠道运营营管理分析析监控分册册(v1.0)中国移动通通信有限公公司18QB-J-018-20077中国移动动省级经营营分析系统统业务规范范客户服务务分册(vv2.0)中国移动通通信有限公公司19QB-J-017-20077中国移动动省级经营营分析系统统业务规范范集团客户户分册(vv2.0中国移动通通信有限公公司20QB-J-016-20077中国移动动省级经营营分析系统统数据质量量管理系统统业务技术术规范(VV2.0)中国移动通通信有限公
12、公司21中国移动动业务支撑撑网4A安全技技术规范中国移动通通信有限公公司22中国移动动省级经营营分析系统统技术规范范总册(vv2.0全全量版)中国移动通通信有限公公司23中国移动动省级经营营分析系统统技术规范范逻辑模型型分册(vv2.0全全量版)中国移动通通信有限公公司24中国移动动省级经营营分析系统统技术规范范数据集市市分册(vv2.0全全量版)中国移动通通信有限公公司25中国移动动省级经营营分析系统统技术规范范数据质量量管理子系系统分册(v2.0全量版)中国移动通通信有限公公司26中国移动动省级经营营分析系统统业务规范范(v2.0全量版版)中国移动通通信有限公公司27中国移动动省级经营营分
13、析系统统技术规范范源系统接接口分册(v2.0全量版)中国移动通通信有限公公司28QB-J-002-20088中国移动动省级NGG1-BAASS技术术规范总册册(v1.0)中国移动通通信集团公公司29QB-J-003-20088中国移动动省级NGG1-BAASS技术术规范数据据集市分册册(v1.0)中国移动通通信集团公公司30QB-J-004-20088中国移动动省级NGG1-BAASS技术术规范逻辑辑模型分册册(v1.0)中国移动通通信集团公公司31QB-J-005-20088中国移动动省级NGG1-BAASS技术术规范源系系统接口分分册(v11.0)中国移动通通信集团公公司32QB-J-00
14、6-20088中国移动动省级NGG1-BAASS技术术规范元数数据管理分分册(v11.0)中国移动通通信集团公公司33QB-J-007-20088中国移动动省级NGG1-BAASS技术术规范数据据质量管理理子系统分分册(v11.0)中国移动通通信集团公公司34QB-J-008-20088中国移动动省级NGG1-BAASS业务务技术规范范客户分析析及运营分分册(v11.0)中国移动通通信集团公公司35QB-J-001-20088中国移动动省级NGG1-BAASS业务务规范(vv1.0)中国移动通通信集团公公司36QB-Y-003-20099中国移动动省级NGG1-BAASS技术术规范总册册(v2
15、.0)中国移动通通信集团公公司37QB-Y-004-20099中国移动动省级NGG1-BAASS技术术规范数据据集市分册册(v2.0)中国移动通通信集团公公司38QB-Y-005-20099中国移动动省级NGG1-BAASS技术术规范逻辑辑模型分册册(v2.0)中国移动通通信集团公公司39QB-Y-006-20099中国移动动省级NGG1-BAASS技术术规范外部部接口分册册(v2.0)中国移动通通信集团公公司40QB-Y-007-20099中国移动动省级NGG1-BAASS技术术规范元数数据管理分分册(v22.0)中国移动通通信集团公公司41QB-Y-008-20099中国移动动省级NGG1
16、-BAASS技术术规范数据据质量管理理子系统分分册(v22.0)中国移动通通信集团公公司42QB-Y-002-20099中国移动动省级NGG1-BAASS业务务规范(vv2.0)中国移动通通信集团公公司43QB-Y-052-20100中国移动动省级NGG2-BAASS(vv3.0)业务规范范中国移动通通信集团公公司44QB-Y-053-20100中国移动动省级NGG2-BAASS(vv3.0)技术规范范总册中国移动通通信集团公公司45QB-Y-054-20100中国移动动省级NGG2-BAASS(vv3.0)技术规范范数据集市市分册中国移动通通信集团公公司46QB-Y-055-20100中国移
17、动动省级NGG2-BAASS(vv3.0)技术规范范逻辑模型型分册中国移动通通信集团公公司47QB-Y-056-20100中国移动动省级NGG2-BAASS(vv3.0)技术规范范外部接口口分册中国移动通通信集团公公司48QB-Y-057-20100中国移动动省级NGG2-BAASS(vv3.0)技术规范范元数据管管理分册中国移动通通信集团公公司49QB-Y-058-20100中国移动动省级NGG2-BAASS(vv3.0)技术规范范数据质量量管理子系系统分册中国移动通通信集团公公司50QB-Y-059-20100中国移动动省级NGG2-BAASS(vv3.0)技术规范范多OP能力交交互分册中
18、国移动通通信集团公公司51QB-Y-060-20100中国移动动省级增值值业务综合合运营平台台业务规范范(v1.0)中国移动通通信集团公公司52QB-Y-061-20100中国移动动省级增值值业务综合合运营平台台技术规范范(v1.0)中国移动通通信集团公公司53QB-Y-062-20100中国移动动省级增值值业务综合合运营平台台技术规范范-数据管理理分册(vv1.0)中国移动通通信集团公公司54QB-Y-063-20100中国移动动省级增值值业务综合合运营平台台接口规范范中国移动通通信集团公公司55QB-Y-039-20111中国移动动省级NGG2-BAASS(vv3.5)业务规范范中国移动通
19、通信集团公公司56QB-Y-038-20111中国移动动省级NGG2-BAASS(vv3.5)技术规范范总册中国移动通通信集团公公司57QB-Y-040-20111中国移动动省级NGG2-BAASS(vv3.5)技术规范范数据集市市分册中国移动通通信集团公公司58QB-Y-041-20111中国移动动省级NGG2-BAASS(vv3.5)技术规范范逻辑模型型分册中国移动通通信集团公公司59QB-Y-042-20111中国移动动省级NGG2-BAASS(vv3.5)技术规范范外部接口口分册中国移动通通信集团公公司60QB-Y-043-20111中国移动动省级NGG2-BAASS(vv3.5)技术
20、规范范元数据管管理分册中国移动通通信集团公公司61QB-Y-044-20111中国移动动省级NGG2-BAASS(vv3.5)技术规范范数据质量量管理子系系统分册中国移动通通信集团公公司62QB-Y-045-20111中国移动动省级NGG2-BAASS(vv3.5)技术规范范OP能力交交互分册中国移动通通信集团公公司63QB-Y-046-20111中国移动动省级增值值业务综合合运营平台台业务规范范(v1.5)中国移动通通信集团公公司64QB-Y-047-20111中国移动动省级增值值业务综合合运营平台台技术规范范(v1.5)中国移动通通信集团公公司65QB-Y-048-20111中国移动动省级
21、NGG2-BAASS技术术规范系统统安全管理理分册(vv1.5)中国移动通通信集团公公司66QB-Y-044-20122中国移动动省级NGG2-BAASS(vv4.0)业务规范范中国移动通通信集团公公司67QB-Y-045-20122中国移动动省级NGG2-BAASS(vv4.0)技术规范范总册中国移动通通信集团公公司68QB-Y-045.1-20012中国移动动省级NGG2-BAASS(vv4.0)技术规范范数据集市市分册中国移动通通信集团公公司69QB-Y-045.2-20012中国移动动省级NGG2-BAASS(vv4.0)技术规范范逻辑模型型分册中国移动通通信集团公公司70QB-Y-0
22、45.3-20012中国移动动省级NGG2-BAASS(vv4.0)技术规范范外部接口口分册中国移动通通信集团公公司72QB-Y-045.4-20012中国移动动省级NGG2-BAASS(vv4.0)技术规范范元数据管管理分册中国移动通通信集团公公司73QB-Y-045.5-20012中国移动动省级NGG2-BAASS(vv4.0)技术规范范数据质量量管理子系系统分册中国移动通通信集团公公司74QB-Y-046-20122中国移动动省级增值值业务综合合运营平台台业务规范范V2.00.0中国移动通通信集团公公司75QB-Y-047-20122中国移动动省级增值值业务综合合运营平台台技术规范范V2
23、.00.0中国移动通通信集团公公司76QB-Y-047.1-20012中国移动动省级增值值业务综合合运营平台台技术规范范数据管理理分册V22.0.00中国移动通通信集团公公司77QB-Y-044-20133中国移动动省级NGG2-BAASS(vv4.5)业务规范范中国移动通通信集团公公司78QB-Y-045-20133中国移动动省级NGG2-BAASS(vv4.5)技术规范范总册中国移动通通信集团公公司79QB-Y-045.1-20013中国移动动省级NGG2-BAASS(vv4.5)技术规范范数据集市市分册中国移动通通信集团公公司80QB-Y-045.2-20013中国移动动省级NGG2-B
24、AASS(vv4.5)技术规范范逻辑模型型分册中国移动通通信集团公公司81QB-Y-045.3-20013中国移动动省级NGG2-BAASS(vv4.5)技术规范范外部接口口分册中国移动通通信集团公公司82QB-Y-045.4-20013中国移动动省级NGG2-BAASS(vv4.5)技术规范范元数据管管理分册中国移动通通信集团公公司83QB-Y-045.5-20013中国移动动省级NGG2-BAASS(vv4.5)技术规范范数据质量量管理子系系统分册中国移动通通信集团公公司84QB-Y-045.6-20113中国移动动省级NGG2-BAASS(vv4.5)技术规范范安全管理理技术方案案中国移
25、动通通信集团公公司85QB-Y-046-20133中国移动动省级增值值业务综合合运营平台台业务规范范V2.5.0中国移动通通信集团公公司86QB-Y-047-20133中国移动动省级增值值业务综合合运营平台台技术规范范V2.5.0中国移动通通信集团公公司87QB-Y-047.1-20013中国移动动省级增值值业务综合合运营平台台技术规范范数据管理理分册V22.5.0中国移动通通信集团公公司3. 术语、定义义和缩略语语下列术语、定定义适用于于本规范:字母名词解释CCWMCWM标准准是OMGG组织定义义的数据仓仓库和相关关系统的国国际元数据据标准,给给出了各种种元数据结结构的标准准定义。CCWM标
26、准准的目的在在于:使数数据仓库和和商业智能能软件的元元数据在异异构的数据据分析工具具、数据仓仓库平台、元元数据存储储库等系统统之间进行行交互。EETL特指从数据据源系统到到大数据平平台的数据据抽取、转转换和加载载。G管理元数据据描述大数据据平台中管管理领域相相关概念、关关系、规则则的数据,主主要包括人人员角色、岗岗位职责、管管理流程等等信息。H核心元模型型大数据平台台核心元模模型是以CCWM为基基础扩展形形成的,针针对大数据据平台的物物理模型、逻逻辑模型、数数据处理过过程、接口口单元、指指标和维度度编码等主主要实体进进行精确定定义,并要要求各省大大数据平台台统一遵循循的元模型型。定义核核心元模
27、型型的目的是是建立大数数据平台的的统一元数数据管理标标准,为元元数据管理理的功能层层与应用层层解耦、为为企业级总总部大数据据平台和企业级省省大数据平平台的元数数据交换和和相互理解解提供统一一的语义基基础。H核心元模型型参照表核心元模型型参照表是是对核心元元模型中的的枚举类型型属性进行行枚举值定定义的编码码表。参照照表为枚举举类型属性性的每个枚枚举值定义义了唯一的的编码,并并明确该编编码的语义义,是核心心元模型标标准化定义义的重要组组成部分。J技术元数据据描述大数据据平台中技技术领域相相关概念、关关系、规则则的数据。主主要包括对对数据结构构、数据处处理方面的的特征描述述,覆盖大大数据平台台数据源
28、接接口、数据据仓库、EETL、OLAPP、数据挖挖掘、前端端展现等全全部数据处处理环节。S数据处理过过程数据从数据据源系统到到大数据平平台前端使使用的整个个处理过程程,包含大大数据平台台数据仓库库内部的数数据抽取、转转换和加载载。S数据采集点点覆盖大数据据平台数据据处理环节节的、获取取每个环节节运行状态态的实体。该该实体可以以是程序实实体也可以以是任务实实体S数据质量报报告数据质量报报告是对数数据质量日日常监控以以及质量评评估等过程程累积的各各种信息进进行汇总、梳梳理、统计计和分析,形形成的统计计报告S数据质量监监控通过获取大大数据平台台各环节的的数据质量量监控信息息,结合元元数据库中中的有关
29、检检查规则,对对各个环节节的数据质质量情况进进行判断,并并及时向数数据质量监监控人员报报告。S数据质量规规则库数据质量规规则库是对对数据质量量管理活动动所用到的的各种判断断及校验规规则进行归归类和存放放的存储结结构,存储储的内容包包括采集规规则、监控控规则、告告警规则和和审计规则则等S数据质量信信息库数据质量管管理子系统统存储层上上的存储结结构,用于于存储数据据质量信息息采集程序序采集的数数据质量信信息、质量量评估信息息、问题解解决方案和和问题处理理流程信息息等S省公司中国移动通通信集团各各省(直辖辖市、自治治区)移动动通信有限限公司。SSQL脚本本自动解析SQL脚本本自动解析析指通过对对SQ
30、L脚本本的词法、语语法和语义义进行分析析,自动生生成满足CCWM规范范要求的数数据处理过过程的技术术元数据的的功能。Y业务元数据据描述大数据据平台中业业务领域相相关概念、关关系、规则则的数据。主主要包括业业务术语、信信息分类、指指标定义(指指标口径)、业业务规则等等信息。Y元模型元模型是描描述元数据据的基础模模型结构,用用于说明元元数据对象象的各种属属性、结构构和关系。Y元数据元数据是描描述数据间间关系的数数据。大数数据平台中中元数据泛泛指描述数数据概念(Concepts)、数据间关系(Roles)、数据处理规则(Rules)的数据,其中,领域语义(Semantics)和知识(Knowledg
31、e)也属于元数据的范畴。D数据标准指在中国移移动台企业业级省大数数据平台下下为了使企企业内外部部使用和交交换的数据据是一致和和准确的,经经协商一致致制定并由由大数据治治理委员会会主管机构构批准,具具有行业特特点且共同同使用和重重复使用的的一种规范范性约束。D数据标准体体系指数据标准准按照中国国移动企业业级省大数数据平台需需求对数据据进行标准准化的划分分归类。D数据标准内内容按照数据标标准体系划划分的要求求分别给出出各数据标标准制定的的规范内容容。D行业参考模模型实体中国移动规规范中原定定义或新增增加的逻辑辑数据模型型LDM实体体。D公共代码标标准需要引用外外部公共标标准机构的的标准。如如:世界
32、各各国和地区区名称代码码等。下列略缩语语适用于本本规范:缩写英文描述中文描述ASTAbstrract Synttax TTree抽象语法树树BOSSBusinness Operratioon Suupporrt Syystemm业务运营支支撑系统CWMCommoon Waarehoouse Metaamodeel公共仓库元元模型ETLExtraactioon Trransfformaationn Loaadingg抽取、转换换和加载OLAPOn-liine AAnalyysis Proccess在线分析处处理XMIXML MMetaddata InteerchaangeXML元数数据交换BIB
33、usinness Inteelliggencee商务智能RESTRepreesenttatioonal Statte Trransffer表述性状态态转移4. 总体说明4.1. 概述本规范用于于指导企业业级省大数数据平台数据治理子系统统建设,规定了省大数据据平台数据据治理的范围围和要求,明确了数据治理子系统的体系结构,制定了数据治理子系统的功能和处理流程。数据治理子系统包含数据标准管理、元数据管理、数据质量管理、数据资产管理、数据安全管理等功能模块。本方案借鉴资产管理的方法理论来管理数据,将数据作为一种特殊的资产,对进入平台的数据进行标准化的规范约束,并以元数据作为驱动,连接数据的标准管理、数
34、据质量管理、数据数据安全管理的各个阶段,形成统一、完善的数据治理体系,以解决实际业务问题为导向,增强数据治理子系统对业务发展的支撑能力。4.2. 目标数据治理子子系统的建建设为数据据治理工作提提供强有力力的系统支支撑。本期期规范建设设目标是以以元数据为为驱动,建立立省大数据据平台完整整的数据治理体系。从组织架构、系统统功能等方面面增强数据据宏观管控控,并实现现精细化管管理,具体体包括:l 数据治理组组织架构管管理:定义数据治治理所需人人员组织上上的岗位和职责责,从管理理角度支撑撑数据治理理工作的落地地和执行。l 数据标准管管理:建立立企业级省省大数据平平台数据标标准体系,并并制定数据据标准运维
35、维管控制度度和流程。l 元数据管理理:降低元元数据使用用难度、提提升用户体体验,使大大数据平台台各类用户户均能参与与到元数据据运营维护护当中。l 数据质量管管理:为内内、外部用用户提供平平台化的数数据质量监监控;通过过扩充和优优化公共规规则库、保保证数据的的完整性、一一致性、准准确性、及及时性、合合法性,提提升用户使使用感知;并提提供数据质质量应用满满足个性化化需求。l 数据资产管管理:重点点建设从规规划、注册册、运维到到注销的全全流程管理理体系,使使数据资产产管理系统统化、可视视化。l 数据安全管管理:建立立体系化的的数据安全全管控策略,通通过用户安安全管理、数数据安全管管理实现全全方位数据
36、据安全管控控机制,通通过技术手手段与管理理措施相结结合的方式式落实数据据安全,做做到事前可可管、事中中可控、事事后可查。4.3. 原则企业级省大大数据平台台数据治理理子系统建建设应遵循循以下基本本原则:1. 有效性原则则体现大数据据平台数据据治理过程程中数据的的标准、质质量、价值值、管控的的有效性、高高效性。2. 价值化原则则体现数据治治理过程中中以数据资资产为价值值核心,最最大化大数数据平台的的数据价值值。3. 统一性原则则体现大数据据平台架构构统一、标标准统一、元元数据统一一、质量流流程统一、资资产价值统统一的一体体化管控平平台体系。4. 开放性原则则体现平台化化、开放性性运维思想想,实现
37、人人人参与数数据治理、人人人参与数数据运维。5. 产品化原则则体现大数据据平台数据据治理能力力的显性化化,通过产产品化互联联网思维服服务大数据据平台数据据生态圈用用户。6. 安全性原则则体现安全的的重要性、必必要性,保保障大数据据平台数据据安全和数数据治理过过程中数据据的安全可可控。5. 数据治理体体系5.1. 总体框架数据治理总总体框架包包括组织架架构、数据据治理模块块、数据运运维三部分分。通过组组织架构建建立管理办办法,制定定工作流程程,确定角角色职责。数数据治理模模块主要包包括数据标标准管理、元元数据管理理、数据质质量管理、数数据资产管管理、数据据安全管理理,各模块块协同运营营,确保大大
38、数据平台台的数据一一致、安全全、有效。数数据运维贯贯穿整个数数据治理体体系的流程程中,实现现平台化的的运维管理理思路。数数据治理总总体框架如如图5Error! Bookmark not defined.所示:核心领域大数据平台数据治理工具数据安全管理数据资产管理元数据管理数据质量管理数据标准管理组织架构组织架构定义角色与职责规划和策略管理办法数据运维质量运维管控运维资产运维组织架构合适吗图Error! No text of specified style in document.Error! Bookmark not defined.数据治理理体系框架架5.2. 组织架构是否模糊化,简要说一下
39、数据治理需要由专人、专职负责,不明说建立专业机构。数据治理组组织的构建建旨在通过过建立数据据治理组织织架构明确确各级角色色和职责,保障数据治理的各项管理办法、工作流程的实施,推送数据治理工作的有序开展。 5.2.1. 组织构成数据治理组组织架构主主要由数据据治理委员员会、数据据治理中心心和各业务务部门构成成。组织架架构划分和和角色设定定如图 5Error! Bookmark not defined.所示:图 Error! No text of specified style in document.Error! Bookmark not defined. 数据治理理组织架构构图5.2.2. 角
40、色职责组织责任体体系是数据据治理责任任落地的保保障,数据据治理组织织架构通过过明确各角角色职责,实实行认责制制度,让数据治理理工作更好好的融入到到数据日常常使用和相相关的工作作中,从而而推动数据据运维自治治的实现,如表5-1。表5-1数数据治理组组织架构角角色职责定定义内容组织结构角色角色描述角色主要职职责数据治理委委员会数据管理决决策者由公司主管管领导和各各业务部门门领导组成成负责牵头数数据治理工工作;制定定数据治理理的政策、标标准、规则则、流程,协协调认责冲冲突;对数据事实实治理,保保证数据的的质量和隐隐私;在数据出现现质量问题题时负责仲仲裁工作。数据治理中中心数据平台运运营者数据管理中中
41、心机构的的平台运营营人员负责提交数数据标准的的要求及数数据质量规规则和业务务规范,解解释数据的的业务规则则和含义;监督各项项数据规则则和规范的的约束的落落实情况;负责数据治治理平台中中整体数据据的管控流流程制定和和平台功能能系统支撑撑的实施;负责平台的的整体运营营、组织、协协调。各业务部门门数据提供者者相关数据开开发提供人人员负责数据及及相关系统统的开发,有有责任执行行数据标准准和数据质质量内容;负责从技术术角度解决决数据质量量问题;作为数据出出现质量问问题时的主主要责任者者。数据维护者者数据维护人人员制定相关数数据标准、数数据制度和和规则;遵守和执行行数据标准准管控相关关的流程,根根据数据标
42、标准要求提提供相关数数据规范;作为数据出出现质量问问题时的次次要责任者者。数据消费者者数据使用人人员,包含含内部用户户和外部用用户作为数据治治理平台数数据管控流流程的最后后参与使用用者;是数据资产产价值的获获益人;作为数据治治理平台数数据闭环流流程的发起起人。5.3. 系统架构5.3.1. 系统功能框框架数据治理功功能框架明明确了数据据治理在企企业级省大大数据平台台中的定位位,并以合合理的功能能层次划分分指导数据据治理系统统相关功能能建设。系系统功能框框架如图5Error! Bookmark not defined.所示。 图Error! No text of specified style in document.Error! Bookmark not defined.数据治理理功能框架架图l 企业级省大大数据平台台门户:企业级省大大数据平台台统一的访访问接口,供企业内、外部用户户、第三方方独立开发发者访问及及使用数据据治理相关关产品或功能能,并负责统一一访问认证证及日志记记录。l 能力开放平平台:企业级省大大数据平台台统一的对外外服务层,数数据治理相相关的产品品及应用均均通过这个个层次进行注册、发发布,并对内、外部部开放。l 数据治理系系统: 数据标准:在数据标标准管理组组织架构