《血脉关系-功能(1).docx》由会员分享，可在线阅读，更多相关《血脉关系-功能(1).docx（66页珍藏版）》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、1.1数据血缘关系数据的血缘关系作为数据治理很重要的部分，需要引起格外的重 视。在大数据时代，数据爆发性增长，海量的、各种类型的数据在快 速产生。这些庞大复杂的数据信息，通过联姻融合、转换变换、流转 流通，又生成新的数据，汇聚成数据的海洋。数据的产生、加工融合、 流转流通，到最终消亡，数据之间自然会形成一种关系。数据的血缘 关系主要包含了一些特有的特征：1 .归属性。一般来说，特定的数据归属特定的组织或者个人，数据 具有归属性。2 .多源性。同一个数据可以有多个来源（多个父亲）。一个数据可 以是多个数据经过加工而生成的，而且这种加工过程可以是多个。3 .可追溯性。数据的血缘关系，体现了数据的生
2、命周期，体现了数 据从产生到消亡的整个过程，具备可追溯性。4 .层次性。数据的血缘关系是有层次的。对数据的分类、归纳、总 结等对数据进行的描述信息又形成了新的数据，不同程度的描述信息 形成了数据的层次。血缘关系解析血缘解析（也称血统解析）是指从某一实体出发，往回追溯其处 理过程，直到数据系统的数据源接口。对于不同类型的实体，其涉及 的转换过程可能有不同类型，如：对于底层仓库实体，涉及的是ETL 处理过程；通过对收集报表指标SQL语句的加工分析、对收集报表指d、输出数据项输入输出类型备注文件路径输出单行文本框，不可编辑说明输出单行文本框，不可编辑序号输出单行文本框，不可编辑文件名称输出单行文本框
3、，不可编辑文件大小输出单行文本框，不可编辑文件解析路径增加/修改sql文件解折路径文件路径：文件路径描述:保存 I 关闭输入数据项输入输出类型备注文件路径单文本框，可编辑文件路径描述单文本框，可编辑1.1.1.4 日志文件分析a.功能描述Log脚本分析是通过收集各个系统的LOG日志的SQL处理片段, 通过分析SQL语句中的表字段关系，来汇总各个LOG日志解析到得表 字段的对应关系，展示在报表指标中的血缘关系。Schema文件列表分析文件路径说明序号文件名称文件大小无直询结果请选择标准分类)b.输入数据项输入输出类型备注Schema下拉框，可编辑文件列表分析按钮增加标识按钮修改标识按钮删除标识按
4、钮C.处理开始选择或则输入查询条件后台数据处理页面展示数据列表信息开始1）输入查询条件，默认查询出相关联的对应的代码血缘关系。2）输入表名称、字段名称，可以模糊查询出符合输入项条件的代码血缘关系信息。3）展示代码指标的设置信息。d.输出数据项输入输出类型备注文件路径输出单行文本框，不可编辑说明输出单行文本框，不可编辑序号输出单行文本框，不可编辑文件名称输出单行文本框，不可编辑文件大小输出单行文本框，不可编辑文件解析路径增加/修改sql文件解折路径文件路径:文件路径描述:输入数据项输入输出类型备注文件路径单文本框，可编辑保存按钮关闭按钮输出数据项输入输出类型备注文件路径单文本框，可编辑文件路径描
5、述单文本框，可编辑文件解析路径删除数据项输入输出类型备注确认要删除SQL解析文件夹吗？文件路径描述单文本框，可编辑JAVA程序解析a、功能描述JAVA脚本分析是通过收集各个系统的JAVA程序的SQL处理片段, 通过分析SQL语句中的表字段关系，来汇总各个JAVA程序解析到得 表字段的对应关系，展示在报表指标中的血缘关系。)Schema文件踣径无宜询结果文件列表序号文件名称文件大小分析情选择标准分类b、输入数据项输入输出类型备注Schema下拉框，可编辑文件列表分析按钮增加标识按钮修改标识按钮删除标识按钮C、处理选择或则 输入查询条件选择或则 输入查询条件后台数据处理页面展示数据 列表信息页面展
6、示数据 列表信息开始1）输入查询条件，默认查询出相关联的对应的代码血缘关系。2）输入表名称、字段名称，可以模糊查询出符合输入项条件的 代码血缘关系信息。3）展示代码指标的设置信息。d、输出数据项输入输出类型备注文件路径输出单行文本框，不可编辑说明输出单行文本框，不可编辑序号输出单行文本框，不可编辑文件名称输出单行文本框，不可编辑文件大小输出单行文本框，不可编辑文件解析路径增加/修改sql文件解折路径文件路径:文件路径描述:输入数据项输入输出类型备注文件路径单文本框，可编辑保存按钮关闭按钮输出数据项输入输出类型备注文件路径单文本框，可编辑文件路径描述单文本框，可编辑文件解析路径删除数据项输入输出
7、类型备注确认要删除SQL解析文件夹吗？文件路径描述单文本框，可编辑SHELL解析a、功能描述SHELL脚本分析是通过收集各个系统的SHELL处理片段，通过分 析SHELL语句中的表字段关系，来汇总各个SHELL解析到得表字段的 对应关系，展示在报表指标中的血缘关系。 1 C没有数据数据项输入输出类型备注详细信息申请类型输入单行文本框，可编辑必输目标模型输入单行文本框，可编辑必输目标字段输入单行文本框，可编辑来源模型输入单行文本框，可编辑必输来源字段输入单行文本框，可编辑转换规则输入单行文本框，可编辑必输添加按钮修改按钮c）处理1）显示数据支持50条翻页。2）点击按钮添加数据到右侧。d）输出来源
8、数据项输入输出类型备注申请类型输出单行文本框，不可编辑验证信息输出单行文本框，不可编辑目标系统名称输出单行文本框，不可编辑Schema输出单行文本框，不可编辑表输出单行文本框，不可编辑表名称输出单行文本框，不可编辑字段输出单行文本框，不可编辑字段名称输出单行文本框，不可编辑加工规则输出单行文本框，不可编辑加工脚本输出单行文本框，不可编辑系统名称输出单行文本框，不可编辑Schema输出单行文本框，不可编辑表输出单行文本框，不可编辑表名称输出单行文本框，不可编辑字段输出单行文本框，不可编辑字段名称输出单行文本框，不可编辑上传下载标识按钮去除标识按钮验证按钮申请按钮需要审核血缘修改b）输入数据项输入
9、输出类型备注详细信息申请类型输入单行文本框，可编辑必输目标模型输入单行文本框，可编辑必输目标字段输入单行文本框，可编辑来源模型输入单行文本框，可编辑必输来源字段输入单行文本框，可编辑转换规则输入单行文本框，可编辑必输添加按钮修改按钮c）处理1）显示数据支持50条翻页。2）点击按钮添加数据到右侧。d）输出数据项输入输出类型备注申请类型输出单行文本框，不可编辑验证信息输出单行文本框，不可编辑目标系统名称输出单行文本框，不可编辑Schema输出单行文本框，不可编辑表输出单行文本框，不可编辑表名称输出单行文本框，不可编辑字段输出单行文本框，不可编辑字段名称输出单行文本框，不可编辑加工规则输出单行文本框
10、，不可编辑加工脚本输出单行文本框，不可编辑来源系统名称输出单行文本框，不可编辑Schema输出单行文本框，不可编辑表输出单行文本框，不可编辑表名称输出单行文本框，不可编辑字段输出单行文本框，不可编辑字段名称输出单行文本框，不可编辑上传下载标识按钮去除标识按钮验证按钮申请按钮需要审核血缘删除b）输入数据项输入输出类型备注详细信息申请类型输入单行文本框，可编辑必输目标模型输入单行文本框，可编辑必输目标字段输入单行文本框，可编辑来源模型输入单行文本框，可编辑必输来源字段输入单行文本框，可编辑转换规则输入单行文本框，可编辑必输添加按钮修改按钮系统名称下拉框文件列表分析按钮增加标识按钮修改标识按钮删除标
11、识按钮C、处理c）处理1）显示数据支持50条翻页。2）点击按钮添加数据到右侧。d）输出数据项输入输出类型备注申请类型输出单行文本框，不可编辑验证信息输出单行文本框，不可编辑目标系统名称输出单行文本框，不可编辑Schema输出单行文本框，不可编辑表输出单行文本框，不可编辑表名称输出单行文本框，不可编辑字段输出单行文本框，不可编辑字段名称输出单行文本框，不可编辑加工规则输出单行文本框，不可编辑加工脚本输出单行文本框，不可编辑来源系统名称输出单行文本框，不可编辑Schema输出单行文本框，不可编辑表输出单行文本框，不可编辑表名称输出单行文本框，不可编辑字段输出单行文本框，不可编辑字段名称输出单行文本
12、框，不可编辑上传下载标识按钮去除标识按钮验证按钮申请按钮需要审核血脉分析查询类型.表字段系统名称：1104系统表字段：本月日均余额【M_AVG）查向a）功能描述数据血缘关系-血脉分析-提供血脉分析功能。b）输入数据项输入输出类型备注查询类型输入单行文本框，可编辑系统名称输入单行文本框，可编辑必输SCHEMA输入单行文本框，可编辑必输表名称输入单行文本框，可编辑必输表字段输入单行文本框，可编辑查询按钮c）处理1）输入项下拉框选项查询2）显示数据图表显示，可拖拽。/询类型表字段模型系统：ATMP表字段设备喜铜表（WSDEVKE d）输出数据项输入输出类型备注申请类型输出单行文本框，不可编辑图表显示
13、影响分析设备空阴表 WSDEVKEY功能控制表 WSDEVFUNS设智妁号UNTID】A设各始号UNTIDa、功能描述血缘影响分析功能以选择的数据为起点，以目标分析对象为终点, 按照转换关系逐层扩展。血缘影响分析图可以直观地展示目标对象的 产生过程，包括从哪些数据源转换而来，经历了哪些转换过程。当某 数据出现错误或者异常时，可通过血缘影响分析图向上分析锁定问题 产生的影响。b）输入数据项输入输出类型备注查询类型输入单行文本框，可编辑系统名称输入单行文本框，可编辑表字段输入单行文本框，可编辑代码名称输入单行文本框，可编辑必输，模糊查询转换规则输入单行文本框，可编辑必输，模糊查询查询按钮c、处理开
14、始选择或则 输入查询条件后台数据处理页面展示数据 列表信息开始1）输入查询条件，默认查询出相关联的指标血缘关系。2）输入表名称、字段名称，可以模糊查询出符合输入项条件的指 标血缘关系信息。3）展示指标的设置信息。d、输出数据地图数据项输入输出类型备注血缘关系图输出查询荚型：表字段模型系统：1104系统表字段货款信副 dms_loan_inf(笠询a.功能描述以数据起源的贴源为起点，以目标分析对象指标为终点，按照转 换关系逐层扩展。数据地图可以直观的展示了目标对象的产生过程, 包括从哪些数据源转换而来，经历了哪些转换过程。比如在报表取数 口径不一致或则报表指标取数不准确造成数据出现错误或者异常时
15、, 可通过数据地图分析锁定问题产生的源头。转换过程影响分析功能是需要将变换的过程完全显示出其脉络, 可以对这些数据参与哪些数据对象的构成，影响能力、影响范围进行 查询的过程进行显示，从而反映当前最新的数据对象，当对某些数据 转换过程进行修改时，可通过影响关系图向下分析，当对某些数据进 行修改时，可通过影响关系图向下分析，得到哪些数据对象会受到影b.输入数据项输入输出类型备注查询类型输入单行文本框，可编辑模型系统输入单行文本框，可编辑表字段输入单行文本框，可编辑代码名称输入单行文本框，可编辑模糊查询转换规则输入单行文本框，可编辑模糊查询查询按钮c.处理选择或则输入查询条件后台数据处理页面展示数据
16、列表信息1) 输入项支持模糊查询2) 输入项支持表和字段级关系、转换规则查询d.输出3) 输入项支持模糊查询4) 输入项支持表和字段级关系、转换规则查询d.输出数据项数据项输入输出类型备注数据关系图输出数据血缘关系统计分析报告血缘表字段级统计报告a）功能描述数据血缘关系表字段统计报告功能通过不同的表字段查询条件, 来查询各个表字段的使用情况。b）输入c）处理数据项输入输出类型备注链接开始选择或则输入查询条件后台数据处理页面展示数据列表信息开始1）符合条件的血缘关系统计信息。2）图表展示血缘关系。d）输出开始选择或则输入查询条件后台数据处理页面展示数据列表信息开始1）输入查询条件，默认查询出相关
17、联的对应的代码血缘关系。2）输入表名称、字段名称，可以模糊查询出符合输入项条件的代码血缘关系信息。3）展示代码指标的设置信息。数据项输入输出类型备注血缘统计报告图表展示血缘表级统计报告a）功能描述数据血缘关系表级统计报告通过不同的查询条件，来查询各个表级的统计报告。b）输入c）处理数据项输入输出类型备注链接开始选择或则输入查询条件后台数据处理页面展示数据列表信息开始_1）图表展示血缘关系数据项的统计报告。2）展示血缘关系的统计报告。d）输出数据项输入输出类型备注血缘表级统计报告数据血缘关系申请审批流程需要申请审批流程的功能可提交给各审批流程拥有审批权限的 负责人，审批需审批的任务，此审批流程分
18、为两部分，一部分为申请 审批流程，一部分为审批流程。审批流程包含审批内容包括审批流程类型，审批范围，审批流 程名，审批流程，创建日期等。指定部门及人员逐一审批、顺序 审批或会签，配置审批流程，系统中那些功能是审批范围需要约 定，可根据用户需求约定那些功能需要审批;审批流程可以选择基本审批流程和建立新的审批流程，可填写 申请原因，基本审批流程可选择已配置的权限管理人员进行审批, 可选择本人审批和他人审批，选择本人审批此流程可直接结束， 选择他人审批，需要他人到系统管理-申请审批管理中处理此笔审 批。新建审批流程则可以建立用户自己的审批流程，支持此用户所 有功能的审批流程，建立我的审批流程需从部门
19、中选择具体的用 户名，可单选可多选，单选则是一个人审批，多个则是多个人审 批，可设置多个人顺序审批，设置好在功能需要审批时则会出现 我的审批流程选项，用户可根据实际情况选择。审批可选择通过，全部通过（不含驳回的项目），全部通过（包 含驳回的项目），选择通过表示可有审批意见的全部或者部分通过 申请的事项，全部通过（不含驳回的项目）表示如果审批列表有 驳回的事项，则通过审批的不包含驳回的部分，全部通过（包含 驳回的项目）表示如果审批列表有驳回的事项，则通过审批的包 含驳回的部分，驳回部分失效；也可选择驳回，驳回表示可有审 批意见的全部或者部分驳回申请的事项，全部驳回（不含通过的 项目）表示如果审批
20、列表有部分通过的事项，则驳回审批的不包 含通过的部分，全部驳回（包含通过的项目）表示如果审批列表 有部分通过的事项，则驳回审批的包含通过的部分；点击验证是 对通过或者驳回事项的所有数据进行验证，验证选中列表数据中是否和已有数据重复，是否有不符合规则的数据，是否有空数据等等情况。审批进度可帮助使用者详细查询出审批的情况，可查询审批类别、 审批人、部分、审批进度，审批日期。1.2数据血缘关系数据库设计数据血缘解析表补充说明表名数据血缘解析表(B_Data_BloodFate_Analysis)列名数据类型/长关系度空/非空约束条 件字段描述备注IDInteger上空PKID物理主键，自动 生成Ap
21、prolDInteger非空PK审批IDTargetSysteml dVarhcar2(50)目标表系统IDTargetSCHAVarchar (30)非空目标SCHAMETargetTableVarchar (60)非空目标表TargetColuVarchar (60)非空目标字段SourceSystemldVarhcar2(50)来源表系统IDSourceSCHAVarchar (60)非空来源SCHAMESourceTableVarchar (60)非空来源表SourceColuVarchar (60)非空来源字段ETLIDVarchar (120)非空程序IDRulelDVarchar
22、 (120)规则DAysTimeTimestape非空解析时间解析完成提交审批后数据插入该表数据血缘表表名数据血缘表(B_Data_BloodFate)列名数据类型/长关 系度空/非空约束条件字段描述备注IDInteger非空PKID物理主键TargetSystemldVarhcar2(50)目标表系统IDTargetSCHAVarchar (30)非空目标SCHAMETargetTableVarchar (60)非空目标表TargetColuVarchar (60)非空目标字段SourceSystemldVarhcar2(50)来源表系统IDSourceSCHAVarchar (60)非空来
23、源SCHAMESourceTableVarchar (60)非空来源表SourceColuVarchar (60)非空来源字段SubmllserlDVarchar(120)非空提交用户IDApproUserlDVarchar(120)非空审批用户IDETLIDVarchar(120)非空程序IDRulelDVarchar(120)规则DCreateTimeTimestape非空创建时间UpdateTimetimestape更新时间UpdateUserlDtimestape更新用户ID补充说明审批完成后数据才会进入该表审批表表名审扑匕表(B_Approval)列名数据类型/长关系 度空/非空约束
24、条件字段描述备注ApprolDInteger非空PK审批ID物理主键，自动 生成SubmUserlDVarchar (120)非空提交用户IDApproUserlDVarchar (120)非空审批用户IDSubmllserDescVarchar (500)非空提交用户 描述ApproUserDescVarchar (500)审批用户 描述SubmTimeTimestape非空提交时间ApproTimeTimestape审批时间ApproStatVarchar (2)审批状态0-未审批,1- 审批通过,2- 审批不通过，3- 部分通过RemarksVarchar (500)备注补充说明解析完成
25、提交审批后数据插入该表1. 2. 4规则表表名规则表(B_Rules)列名数据类型/长关 系度空/非空约束条件字段描述备注RulelDInteger非空PK规则D物理主键，自动 生成RuleDesctext规则描述SQLCreateTimeTimestap非空创建时间UpdateTimeTimestap更新时间补充说明解析完成后数据才会进入该表配置表（配置上传目录）表名配置表（配置上传目录）（B_UploadDir_conf）列名数据类型/长关 系度空/非空约束条件字段描述备注IDInteger非空PKID物理主键，自动 生成UploadDirVarhcar2(120)目录SystemldVa
26、rhcar2(50)系统IDUserIDVarhcar2(120)用户IDDirDescVarhcar2(500)描述CreateTimeTimestap非空创建时间补充说明1.3接口参数说明血缘关系解析脚本上传L3.LL1查询功能号脚本上传-查询(UploadDijconf)URL用例说明GET:获取上传目录配置信息名称字段类型说明入参系统IDSystemldstring必填，下拉选择框出参目录UploadDirstring描述DirDescstring创建时间CreateTimeTimestap结果示例配置表(配置上传目录)L3.LL2 增力口功能号脚本上传-增加URL用例说明POST:上
27、传目录配置信息名称字段类型说明入参目录UploadDirstring必填，下拉选择框系统IDSystemldstring必填描述DirDescstring必填用户IDUserIDstring自动获取登录用户创建时间CreateTimeTimestap自动获取系统时间出参目录UploadDirstring描述DirDescstring创建时间CreateTimeTimestap结果示例返回新增加的目录L3.LL3删除功能号脚本上传-删除(UploadDir_conf)URL用例说明POST:获取上传目录配置信息名称字段类型说明入参IDIDInteger必填，下拉选择框出参目录UploadDirs
28、tring描述DirDescstring创建时间CreateTimeTimestap结果示例刷新列表L3.LL4修改功能号脚本上传-修改(UploadDir_conf)URL用例说明POST:上传目录配置信息名称字段类型说明入参目录UploadDirstring必填系统IDSystemldstring必填描述DirDescstring必填IDIDInteger自动获取出参目录UploadDirstring描述DirDescstringd、输出数据项输入输出类型备注文件路径输出单行文本框，不可编辑说明输出单行文本框，不可编辑点击相应的目录后显示目录中所有文件列表序号输出单行文本框，不可编辑文件名
29、称输出单行文本框，不可编辑文件大小输出单行文本框，不可编辑文件解析路径增加/修改sql文件解折路径文件路径:文件路径描述:输入数据项输入输出类型备注文件路径单文本框，可编辑创建时间CreateTimeTimestap结果示例刷新列表脚本分析功能号脚本分析URL用例说明GET:分析脚本中SQL语句名称字段类型说明入参选择需要分析的文件，并点击分析按钮出参显示出文件中所有SQL语句。并把解析按钮激活结果示例脚本解析功能号脚本解析URL用例说明GET:获取解析完成的结果名称字段类型说明入参上一步解析完成的所有SQL出参TargetSCHA目标SCHAMEVarchar (30)TargetTable目标表Varchar (60)TargetColu目标字段Varchar (60)SourceSCHA来源SCHAMEVarchar (60)SourceTable来源表Varchar (60)SourceColu来源字段Varchar (60)验证结果默认为“待验证”结果示例解析验证功能号解析验证URL用例说明GET:获取解析完成的结果名称字段类型说明入参Targetsystem Id目1 小表系统IdVarhcar2(50)验证时系统获取TargetSCHA目标SCHAMEVarchar (30)T