《DD 2015-05 地质资料数据管理技术要求.docx》由会员分享，可在线阅读，更多相关《DD 2015-05 地质资料数据管理技术要求.docx（32页珍藏版）》请在taowenge.com淘文阁网|工程机械CAD图纸|机械工程制图|CAD装配图下载|SolidWorks_CaTia_CAD_UG_PROE_设计图分享下载上搜索。
1、中国地质调查局地质调查技术标准DD201505地质资料数据管理技术要求中国地质调查局2015年12月目次前言.1范围.12术语和定义.13数据管理内容与对象.23.1数据管理内容.23.2数据管理对象.23.3数据的技术状态.23.4数据目录及元数据的技术状态.23.5数据工作区域.33.6数据工作角色.34数据汇交验收整理.34.1数据汇交验收的主要内容.44.2数据汇交验收基本流程.44.3待检文件夹命名规则.44.4待检记录信息.44.5待著录文件夹命名规则.44.6验收检查.44.7验收不合格的处置.44.8验收合格单的填写.44.9待著录记录信息.44.10暂存备查.54.11原始光
2、盘移交馆藏.55数据编目.55.1数据著录的主要内容.55.2目录著录及元数据采集.55.3目录初编及核心元数据初采.55.4简单核心元数据志采集.55.5元数据移交.55.6数据移交交换存储空间的命名规则.55.7增量目录及增量核心元数据的数据集命名规则.55.8数据发布.55.9暂存备查与销毁.65.10维护更新.66数据存储运行.66.1数据存储管理的主要内容.66.2数据存储维护主要流程.6I6.3入库日志填写.76.4数据日志填写.76.5数据移交.76.6馆藏机构内目录与元数据的复制.76.7入库测试空间数据目录命名规则.76.8新增数据消息发布.76.9数据维护.77数据备份、恢
3、复与介质管理.77.1数据备份、恢复与介质管理的主要内容.77.2备份计划与策略.77.3操作日志建立.87.4备份介质移交.87.5备份介质的保管.87.6定期抽查.88数据服务复制.88.1数据服务复制的主要内容.88.2数据加工与管理.88.3复制加工.88.4暂存备查.88.5质量管理.98.6其他.9附录A（规范性附录）地质资料数据管理中主要用表格格式.10II前言本标准按照GB/T1.1-2009标准化工作导则第1部分：标准的结构和编写给出的规则起草。本标准根据中国地质调查局地质资料数据管理的工作需要，参照GB/T26162.1-2010信息与文献文件管理第一部分：通则等，结合地质
4、资料数据管理过程研究及相关管理系统开发的实际需求分析编制而成。本标准由中国地质调查局提出。本标准由中国地质调查局归口。本标准起草单位：中国地质调查局发展研究中心。本标准主要起草人：李晨阳、王新春、吴轩、孔昭煜、高学正、商云涛、李晓蕾、何春珍、王芳、刘伟。本标准由中国地质调查局负责解释。III地质资料数据管理技术要求1范围本标准规定了地质资料数据（以下简称“数据”）管理内容与对象、数据汇交验收整理、数据编目、数据存储运行、数据备份恢复、数据服务复制等基本要求。本标准适用于地质资料馆藏机构电子文件的汇交验收、著录整理、存储维护、加工制作、数据发布、共享交换等工作，其他工作可参照执行。2术语和定义下
5、列术语和定义适用于本文件。2.1利用access查找、使用或检索信息的权利、机会和方法。2.2分类classification在文件管理中，依据分类体系中所规定的逻辑结构、方法和程序规则，按照类目对业务活动和/或文件进行的系统标识和整理。2.3转换conversion将文件从一种载体转换到另一种载体或从一种格式转换成另一种格式的过程。2.4销毁destruction消除或删除文件，使之无法恢复的过程。2.5处置disposition按照文件处置规范或其他规定，对文件实施保管、销毁或移交的一系列过程。2.6记录document可以作为一个单元记录下来的信息或对象。2.7标引indexing1为方
6、便文件或信息的检索而建立检索入口的过程。2.8元数据metadata描述文件的背景、内容、结构及其管理过程的数据。2.9文件records机构或个人在履行其法定义务或开展业务活动过程中形成、接收并维护的作为证据和情报的信息。2.10移交transfer保管过程中文件的保管权、所有权和/或责任权的变化。3数据管理内容与对象3.1数据管理内容数据管理工作内容包括：数据汇交验收整理管理、数据著录管理、数据存储运行管理、数据服务复制与产品加工制作管理、数据发布与分发管理，数据更新与维护管理以及支撑数据管理的数据运行环境管理和应急处置与预案管理。3.2数据管理对象数据管理对象包括在不同技术状态下的地质资
7、料电子文件，地质资料目录数据、电子文件的元数据。3.3数据的技术状态数据的技术状态包括：a)待检数据：已通过抽检、拷贝复制进入计算机汇交验收整理存储空间准备开展验收整理的数据；b)待著录数据：已通过验收合格、完成整理、转存进计算机著录存储空间，等待著录的数据；c)待入库数据：已完成著录和元数据采集，并建立好数据、目录数据和元数据一一对应，转存进计算机入库交换存储空间的数据；d)馆藏数据：完成验收、基本整理和著录，基本保存汇交资料原貌，面向保存和长期保藏，存入馆藏中央存储空间的数据；e)加工数据：由馆藏数据复制而来，可以提供以数据服务加工处理的数据；f)服务数据：经过加工处理，可以提供用户服务的
8、数据，包括简单复制产生的数据和产品加工产生的数据；g)更新数据：通过使用发现属于地质资料馆藏机构在汇交、验收、整理、著录、入库、加工过程出现错误，并由地质资料馆藏机构进行改正、替换的数据。3.4数据目录及元数据的技术状态数据目录及元数据的技术状态包括：a)初编目录/元数据：由著录员完成著录，但未经校对、复核的目录/元数据；b)复核目录/元数据：已完成校对、复核的目录/元数据；2c)待入库目录/元数据：已建立起数据、目录数据和元数据一一对应关系，转存进计算机入库交换存储空间的数据；d)馆藏目录/元数据：以保存和长期保藏为目的目录与元数据；e)内部局域网检索目录数据/元数据：经过标引处理，可提供服
9、务检索，但未经保密技术处理、包含涉密信息的目录数据与元数据；f)互联网检索目录数据/元数据：经过标引处理，可提供服务检索，已经保密技术处理、不包含涉密信息、可在互联网发布的目录数据与元数据。3.5数据工作区域内部工作网络中建立如下逻辑分开的数据工作区域：a)数据汇交验收区：在此区域中开展汇交验收工作，包含汇交验收存储空间；b)数据著录区：在此区域中开展著录及核心元数据采集工作，包含待著录数据存储空间；c)数据存储运行区：在此区域中部署馆藏中央存储设备、服务器，存储、运行馆藏数据，并作数据入库前检查以及馆藏数据的硬盘备份和磁带备份，包含数据移交交换存储空间、数据入库检查与光盘备份存储空间；d)数
10、据备份区：在此区域中进行光盘刻录转换与年度光盘特性抽查工作；e)数据复制与加工区：在此区域部署服务器、存储设备，开展数据加工处理工作，形成面向服务的多种数据库，包含多个数据存储空间；f)数据服务区：向各种用户提供多种类型数据服务的区域，包含面向服务的数据存储空间。3.6数据工作角色数据工作区域内将分别设立如下角色：a)数据汇交验收主管及汇交验收员：数据汇交验收主管负责管理数据汇交验收区域内的日常工作，包括现场管理，负责区域内存储空间的访问授权管理，负责最终复核本区域完成的验收、整理数据，并向后续工作移交；数据汇交验收员根据数据汇交验收主管的工作指示，完成数据验收、整理工作和互检；b)数据著录主
11、管及著录员、目录维护人员：数据著录主管负责管理数据著录的日常工作，包括现场管理，负责区域内目录数据库的访问授权管理，负责复核著录与采集的元数据，向后续工作移交目录与元数据，并负责根据反馈意见，安排目录数据的更新维护工作；数据著录员根据数据著录主管的工作指示，完成著录、元数据采集和互检工作；c)数据存储主管及存储操作员：数据存储主管负责馆藏中央数据的日常管理、巡检、访问控制管理、数据性能调优、存储空间调整等工作；存储操作员根据系统运行维护方案，进行日常巡检，并进行记录，根据存储主管的授权，完成馆藏中央数据的磁带备份；d)数据备份主管及备份操作员：数据备份主管负责馆藏中央数据的光盘备份，负责组盘设
12、计及刻盘复核，负责授权备份操作员进行读取拟备份数据，负责安排年度光盘抽检计划；备份操作员根据数据备份主管授权安排，进行光盘备份操作和光盘抽检操作；e)数据复制加工主管及复制加工操作员、光盘刻录员：数据复制加工主管负责组织、管理数据复制与加工的日常工作，负责生产现场管理，根据数据加工、复制任务要求，制定相应计划并安排实施，负责数据复制加工区内存储空间管理和访问控制。复制加工操作员根据数据复制加工主管的安排和授权，进行数据复制加工操作。光盘刻录员根据数据复制加工主管安排和授权，对数据复制加工操作员完成的数据产品进行光盘刻录操作。4数据汇交验收整理34.1数据汇交验收的主要内容数据汇交验收的主要内容
13、包括：接收汇交单位通过离线方式汇交的地质资料电子文件、目录与元数据；依据有关标准规范，进行数据检查；出具数据汇交意见；以地质资料汇交要求和相关标准规范为基准，进行以规范化为目的的基本数据整理。4.2数据汇交验收基本流程4.2.1接收汇交数据介质，经抽检合格率高于最低限时，将数据复制到汇交验收存储空间对应的待检文件夹（命名规则见4.3）中，并在此文件夹中记录有关信息（内容格式见4.4）；汇交验收主管建立对此文件夹的访问控制。从此点开始进入数据管理环节。4.2.2对应纸介质，建立数据的馆藏档案号。汇交验收主管分配验收任务。4.2.3汇交验收员按汇交验收主管安排的任务，将数据下载到本机工作空间，依据
14、有关标准规范，进行数据检查验收，提出数据检查验收报告（见表A.1）；依据数据检查验收结果，向汇交人出具数据汇交意见；不合格数据退回。4.2.4验收合格数据由汇交验收员在本机继续进行基本数据整理。4.2.5基本数据整理结束后的数据转入已验收待著录存储空间对应的待著录文件夹（命名规则见4.5）中，并在此文件夹中，记录有关信息（内容格式见4.9）。4.2.6通过地质资料馆藏机构自动化系统发布4.9项中的信息。4.3待检文件夹命名规则J+档号+半角空格+YYYYMMDD格式的年月日。4.4待检记录信息待检应记录：汇交人，汇交时间，介质（原始汇交光盘）编号，接收人，待检文件夹建立时间。4.5待著录文件夹
15、命名规则C+档号+半角空格+YYYYMMDD格式的年月日。4.6验收检查汇交验收员的基本数据整理结束后，应进行全面互检（见表A.2）；汇交验收主管应进行抽检（见表A.3），比例不少于10%，以确保整理质量。4.7验收不合格的处置验收不合格、需退回汇交人的数据，由汇交验收主管复核，汇交结论意见除验收人和验收主管签字外，尚须汇交验收工作所属处室领导签字。4.8验收合格单的填写验收合格数据进入待著录文件夹时，填写验收合格单（见表A.4），除由验收人签字外，须由验收主管审查并签字。4.9待著录记录信息待著录应记录：登记馆藏档案号，题名，介质（原始汇交光盘）编号，验收人，验收结论意见，进入待著录状态时间
16、。44.10暂存备查待验收数据、待著录数据都须保留在各存储空间中2年以备查，并由汇交验收主管置于只读状态。超过2年后，待验收数据由汇交验收主管经数据存储主管授权后上传馆藏数据存储运行区，转存进相应存储空间对应文件夹中，永久保存；待著录数据由汇交验收主管决定是否继续留存，如无继续留存需要，汇交验收主管填写数据销毁申请单（见表A.5），由汇交验收工作所属处室负责人签字后，执行销毁操作。4.11原始光盘移交馆藏汇交的磁、光介质管理按现有规程标记地质资料馆藏机构档案号后，填写原始光盘移交清单（见表A.6），移交馆藏部门，按国家档案局有关标准保存。5数据编目5.1数据著录的主要内容以验收合格进入待著录状
17、态的数据为数据源和参照，依据有关标准规范，进行目录著录、元数据采集；目录数据的维护与修改。5.2目录著录及元数据采集目录著录及元数据采集，依靠联机著录系统开展。在目录著录完成后开展描述元数据采集，参照目录著录成果进行采集。5.3目录初编及核心元数据初采初编目录及初采核心元数据，须由数据著录主管进行全面复核合格后，方可进入复核目录及复核元数据状态。5.4简单核心元数据志采集主要内容如下：馆藏档案号，题名，著录人，著录完成日期，复核人，复核意见，复核完成日期。5.5元数据移交每季度最后一天，当季度形成的所有待入库数据（位于待著录存储空间待著录文件夹的数据），并与复核目录、复核核心元数据，建立一一对
18、应关系，形成增量数据、增量目录数据和增量元数据，填写数据移交单（见表A.7），由著录工作所属处室负责人签字后，转存进数据移交交换存储空间（命名规则见5.6），移交馆藏数据存储部门。5.6数据移交交换存储空间的命名规则档号+半角空格+YYYYMMDD格式的年月日5.7增量目录及增量核心元数据的数据集命名规则增量目录及增量核心元数据，组成单独的数据集，在著录系统服务器保存1年。增量目录及增量核心元数据的数据集命名规则如下：CI+增量形成的年月和MI+增量形成的年月5.8数据发布5数据上传数据移交交换空间后，由著录主管分别将简单元数据志、增量总数通过地质资料馆藏机构自动化系统发布。5.9暂存备查与销
19、毁数据移交交换存储空间的数据将保留1年以备查。超过1年后，由存储运行主管决定是否继续留存，如无继续留存需要，数据存储运行主管填写数据销毁申请单（见表A.5），由数据存储运行所属处室负责人签字后，执行数据销毁操作。5.10维护更新数据著录主管根据数据工作中定期反馈的目录数据和核心元数据修改建议（见表A.8），对目录数据进行维护修改，并在收到反馈意见10个工作日内，将修改后的目录数据和核心元数据，以及处理情况说明，返还数据存储维护主管。6数据存储运行6.1数据存储管理的主要内容数据存储管理的主要工作内容包括：复核上一环节移交的待入库数据、待入库增量目录数据、待入库增量元数据；在完成必要的入库前操作
20、后，将待入库电子文件导入中央存储区；按系统运行的要求，建立中央存储区内的访问控制，维护数据存储系统的稳定运行；根据数据整理加工的要求，将新入库的数据向数据复制、加工区导出用于加工的数据；提供对馆内其他工作的目录与元数据服务支撑。6.2数据存储维护主要流程6.2.1数据存储运行主管复核移交清单信息与待入库数据实体、待入库目录、待入库元数据的一致性。存储操作员根据存储运行主管的工作指派，复核具体各档数据实体的数量，按不低于10%比例复核数据实体的有效性，对目录、元数据开展抽检工作。如发现不能现场修改或需要与待验收数据比对的问题，填写复核问题清单（见表A.9）并由存储主管审核后，交上一环节检查处理。
21、6.2.2复核合格数据，由数据存储操作员下载至入库测试空间（命名规则见6.7），进行入库前操作。6.2.3存储主管根据馆藏数据与数据库设计、馆藏数据与数据库更新操作规程，编制目录、元数据入库操作要求（见表A.10），设定入库操作访问控制。数据存储操作员，根据存储主管编制的入库操作大纲，对待入库目录、元数据进行必要的脚本测试，在数据备份工作人员完成组盘刻盘、分配好光盘号、磁盘号，将数据实体文件夹名改为电子文档号后，依据数据及数据库建设与组织标准，导入馆藏中央数据库，并填写入库日志（内容格式见6.3）。6.2.4存储主管须在增量数据入库完成后，建立分类浏览视图，更新有关数据字典，建立馆藏档案号、电
22、子文档号和光盘、磁盘号间的对应关系。利用相应的软件工具，维护馆藏数据管理系统。6.2.5存储主管根据数据整理加工的要求，编制导出数据脚本，填写导出数据清单（见表A.11），复核后提交所属处室负责人审核签字后，按照脚本向数据复制加工区导出数据，填写导出数据日志（内容格式见6.4）。6.2.6导出数据清单编号，导出操作内容，导出操作时间，导出操作人，批准人，数据清单。6.2.7目录维护人员根据馆藏机构内部签署确定的处理原则编写脚本，根据脚本对增量目录进行处理形成包含保密信息的内部局域网检索目录以及内部局域网检索元数据，经存储主管复核后，填写数据提供单（见表A.12），由处室负责人审核签字后，离线方
23、式转服务部门。66.2.8目录维护人员根据馆藏机构保密办确定的目录脱密处理原则，编写目录保密技术处理脚本，对增量目录进行保密技术处理处理，形成保密技术处理增量目录，并填写保密技术处理操作日志。保密技术处理操作日志主要内容包括：6.2.9导出数据清单编号，保密技术处理操作内容，操作时间，操作人，批准人，涉密数据清单，保密技术处理脚本编号，保密委审核意见编号，移交单号。6.2.10存储主管对目录保密技术处理脚本、增量目录和保密技术处理增量目录进行认真复核后，填写数据保密技术处理审查请示单（见表A.13），由所属负责人审核签字后向馆藏机构保密办提交。6.2.11目录维护人员依据馆藏机构保密办审查意见
24、进行修改后，填写数据提供单（见表A.12），经存储主管复核、所属负责人签字后，以离线方式转交服务部门。6.3入库日志填写入库日志内容包括：日志编号，入库数据内容，库内目标数据集，操作内容，操作时间，操作人。6.4数据日志填写数据日志内容包括：导出数据清单编号，导出操作内容，导出操作时间，导出操作人，批准人，数据清单。6.5数据移交数据存储运行主管须在接收待入库数据的10个工作日内将新增的数据入库，并将新增的目录与元数据按4.2的规定进行操作后，移交服务部门。6.6馆藏机构内目录与元数据的复制对馆内其他工作包括光磁介质库房管理、数据复制加工提供的目录与元数据，由存储主管依据经所属处室负责人签字批
25、准的申请单（见表A.14），通过建立管理数据库间的同步复制关系，提供相应的数据。6.7入库测试空间数据目录命名规则CI+增量形成的年月+T和MI+增量形成的年月+T6.8新增数据消息发布存储主管负责在馆藏机构业务管理系统上发布新增数据消息，以便其他部门申请利用。6.9数据维护存储主管须安排专人，收集、整理目录数据及元数据在使用中发现的各种问题，提出修改建议，填写目录修改建议表，经存储主管复核、所属负责人签字后，提交著录主管进行处理。原则上，每月5日前，应提交上一月汇总整理的目录修改建议表。7数据备份、恢复与介质管理7.1数据备份、恢复与介质管理的主要内容对馆藏中央数据进行备份操作，建立服务器或
26、磁盘阵列为介质的离线与在线备份；对备份介质进行以长期保存为目的的保管。7.2备份计划与策略7备份主管依据馆藏技术环境以及数据备份需求，定期编制数据备份计划和备份策略。原则上，每月不少于开展一次全集检查，每季度需要备份两套全集数据用于异地备份。7.3操作日志建立备份主管在数据存储运行区操作在线存储设备，如磁带库与磁带机，依据备份策略进行在线数据备份，并建立有关操作日志：日志编号，备份对象，备份策略，操作人，操作结束时间，使用磁带数，磁带编号。7.4备份介质移交备份光盘、磁盘、磁带由备份主管填写移交清单（见表A.6），经负责人签字，交馆藏库房管理部门保管与维护。7.5备份介质的保管备份介质由存储、
27、备份管理部门在专门的介质间内保管。在备份操作间中，所有备份介质将统一进行标识、编号，不允许有任何未经授权的光、磁盘。7.6定期抽查数据备份主管须每年根据相关标准，制定抽检计划（见表A.15），对存有数据的备份介质进行抽查。介质的物理管理由库房管理负责，介质数据特征由数据部门负责。8数据服务复制8.1数据服务复制的主要内容根据用户需求，以及产品开发计划，以馆藏数据为基础对象，进行数据原态复制操作，和以数据重新组织为主的基本数据产品研制开发，开展涉密数据的保密技术处理工作，制作数字水印、数字产品包装、全文数据整理、标识与图像空间配准，建立面向服务的数据与数据库，为数据服务部门提供服务数据及对应的元
28、数据。8.2数据加工与管理数据加工主管在馆藏数据存储主管的协助下，负责根据加工任务计划安排，建立本工作区域的访问控制管理，满足安全与保密管理需要。数据加工主管负责建立本工作区域数据复制、加工生产质量检查制度，建立日志管理制度。日常对馆外用户服务数据由数据复制加工主管依据服务管理部门的资料加工委托单（见表A.16）中所列项及要求安排数据复制加工员开展。8.3复制加工由数据复制加工主管开放必要的访问授权后，由复制加工人员进行复制处理后，添加数字水印，转入对外刻录目录，由数据复制加工主管复核后，向光盘刻录员发出刻录通知（见表A.17）。光盘刻录员完成刻录操作后，经数据复制加工主管复核，由服务管理部门
29、送交馆外用户。8.4暂存备查8前述数据复制完成后，该批数据由数据复制加工操作员转存进数据复制加工存储空间留存备查，留存期暂定25年。超过5年由数据复制加工主管填写数据销毁申请单（见表A.5），由所属处室负责人签字同意后，执行销毁操作。8.5质量管理数据复制加工过程中，须认真进行自检、互检和组检，并填写互检表（见表A.2）和组检表（见表A.3）。8.6其他原则上，不得使用活动硬盘以及未印有馆藏机构标识的光盘向馆外复制数据。对馆外刻盘复制数据的计算机相对固定，并进行技术监控。不得使用其他计算机进行光盘复制工作，即不得用非专用计算机对外刻录光盘。9档号题名数据类型字节数分类电子文件数量存在问题：结论意见：验收主管复核意见：备注：AA附录A（规范性附录）地质资料数据管理中主要用表格格式A.1汇交数据检查验收单表A.1汇交数据检查验收单10操作员互检员检查时间档号、题名存在问题：备注：A.2数据整理与复制加工质量互检表表A.2数据整理与复制加工质量互检表主管（签字）：11操作员抽检比例组检员检查时间数据内容存在问题：备注：A.3数据整理与复制加工质量组检表表A.3数据整理与复制加工质量组检表主管（签字）：12验收人验收时间存储位置合格数据清单：备注：A.4数据合格单表A.4数据合格单主管（签字）：13申请人部门销毁原因销毁方法存储空间数据清单：处室领