首页 > 技术信息 > 正文 文章搜索:
《科学数据共享工程质量管理规范》标准培训教材
发布时间:2006/6/15  来源:科学数据共享工程办公室  浏览次数:8697

一、目的意义

科学数据共享工程所涉及的科学数据资源丰富,涵盖领域多。目前各种科学数据标准不统一,数据质量参差不齐。科学数据共享工程如果没有一套完善的质量管理规范和手段,就无法对各部门提供的共享数据是否满足用户的需求,是否达到工程的要求进行评估,一些不符合要求的数据就可能进入科学数据共享工程中。低质量的科学数据会误导用户,甚至导致错误结论;低质量的科学数据会降低科学数据共享工程的权威性;科学数据共享的长期性有赖于数据的高质量。因此,迫切需要制定科学数据共享工程质量管理规范。

科学数据共享工程质量管理规范的目的与作用就是对科学数据共享工程所涉及的数据、服务、运行管理及建设等方面的质量进行科学、有效的规范和控制,指导科学数据共享工程各个科学数据共享中心(网)的数据、服务、运行管理及建设的质量管理。

科学数据共享工程质量管理规范的制定,可以提高科学数据共享工程数据的质量和权威性,保障科学数据共享工程所提供给广大用户的大量科学数据资源和多种多样服务的质量,有效地监督和控制科学数据共享工程建设和运行管理的质量。

二、标准内容

质量是产品满足规定的、隐含的需要的特征总和。

科学数据共享工程质量主要包括产品本身的质量及对产品的质量描述的质量。

科学数据共享工程质量管理涉及的内容多、范围大、领域广,既包括数据质量,又包括服务质量、同时还涉及运行管理与工程建设中的质量问题。

科学数据共享工程质量管理规范是指导科学数据共享工程数据、服务、运行管理及建设质量管理的一个规范标准。主要参考了GB/T19000-2000 ISO9000)质量管理体系―基础与术语,GB/T 19001-2000ISO 9001)质量管理体系―要求,ISO19113 Geographic informationQuality principles ISO19114 Geographic information Quality evaluation procedures 等标准规范。科学数据共享工程质量管理规范是在广泛调研的基础上,参考国内外现有的相关标准,研制质量管理规范,征求全国同行专家的意见,经反复修改后进入各个试点应用,并在应用中逐步完善。

科学数据共享工程质量管理规范要求产品本身的质量及对产品的质量描述的质量都必须合格。该规范阐述了质量描述的基本原理,详细说明了识别及报告质量信息的基本方法。该规范给出的是质量描述、质量评价的通用方法,而不是给出产品需要满足的最小质量标准。故能灵活地处理不同产品的不同质量问题,又能处理不同用户对同一产品的不同质量要求问题。

科学数据共享工程质量管理规范主要包括了总则、数据质量、服务质量、运行管理质量及建设质量五部分。

(一)总则

科学数据共享工程质量管理规范中的总则包含了质量管理、质量描述、质量评价和质量控制四个方面的内容。

“质量管理”要求识别相应产品规范或用户需求中的质量信息,在元数据、质量评价报告中形成正确的质量描述,并在这些规范上的质量结果均为“合格”。在此基础上建立了科学数据共享工程质量管理框架。

“质量描述”通过识别产品规范或用户需求中的质量元素来描述质量信息,可用来描述数据、服务、运行管理及建设的质量。质量采用质量定量元素和质量非定量元素两个组件分别描述。

“质量评价”过程是产生和报告质量结果的一系列步骤。

“质量控制”大体上可分为自查、第三方检查及项目组验收三个步骤,其对象为:数据、服务、运行管理和建设以及对它们的质量描述。

(二)数据质量

“数据质量”阐述了数据质量描述的基本原理,详细说明了识别及报告数据质量信息的基本方法,规范了数据质量评价的过程、方法及数据质量评价报告的内容。

(三)服务质量

“服务质量”阐述了服务质量描述的基本理论,详细说明了识别及报告服务质量信息的基本方法,规范了服务质量评价的过程、方法及服务质量评价报告的内容。

(四)运行管理质量

“运行管理质量”阐述了运行管理质量描述的基本理论,详细说明了识别及报告运行管理质量信息的基本方法,规范了运行管理质量评价的过程、方法及运行管理质量评价报告的内容。

(五)建设质量

“工程建设质量”阐述了建设质量描述的基本理论,详细说明了识别及报告建设质量信息的基本方法,规范了建设质量评价的过程、方法及建设质量评价报告的内容。

三、标准应用

科学数据共享工程质量管理规范阐述了质量描述的基本理论,详细说明了识别及报告质量信息的基本方法,规范了质量评价的过程、方法及质量评价报告的内容。科学数据共享工程质量管理规范应用到各个科学数据共享中心(网),适用于数据、服务、运行管理及建设的质量管理。

(一)工作思路

科学数据共享工程质量管理规范应用时,需要规范的对象是数据、服务、运行管理、建设的质量管理。科学数据共享工程数据质量管理的范围主要针对科学数据结果的质量管理,不涉及科学数据采集过程的质量管理。注意规范的指导性原则,具体的科学数据共享中心(网)质量管理规范由各中心(网)参照研制。

在参照科学数据共享工程质量管理规范开展各个科学数据共享中心(网)质量管理规范制定工作时,需要考虑数据资源现状,在科学与现实间找平衡;需要强调规范的实用性,解决科学数据质量管理的主要问题;需要兼顾通用性和可操作性;同时需要适应跨部门、跨领域的特点。

(二)总则的使用

科学数据共享工程质量管理规范在科学数据共享工程实际应用中,需要遵照质量管理的基本原则,即强调用户需求,加强组织管理、过程管理和系统管理,持续地改进以及基于事实的决策。

首先,各科学数据共享中心(网)需要参照科学数据共享工程质量管理规范,研制各自科学数据共享中心(网)的质量管理规范,该规范应包含质量描述,质量评价和质量控制三个方面内容。

参考科学数据共享工程质量管理规范中的上述原则后,确定各科学数据共享中心(网)质量管理规范中的质量描述使用质量定量元素和质量非定量元素两个组件来描述数据、服务、运行管理及建设的质量。一个质量定量元素可细分为多个质量定量子元素,每个质量定量子元素用多个质量定量子元素描述子(例如范围、测量、评价过程、结果、值类型、值单位、日期)描述。

参照科学数据共享工程质量管理规范所提供的科学数据共享工程的质量评价过程,明确需要产生和报告质量结果的一系列步骤。建议仔细查看规范中的评价和报告质量结果的过程流。

科学数据共享工程质量管理规范已经清晰的划分出科学数据共享工程的质量控制的三个步骤(自查、第三方检查及项目组验收)及其对象(数据、服务、运行管理、建设及对它们的质量描述)。需要注意的是质量描述要正确,在指定规范上的质量评价结果要合格。

(三)质量管理涉及的四个重要方面

1、数据质量

科学数据共享工程质量管理规范在科学数据共享工程的数据质量管理应用中,建议进一步遵照科学数据共享工程质量管理规范中的数据质量部分,数据质量部分分六个章节阐述了数据质量描述的基本原理,详细说明了识别及报告数据质量信息的基本方法,规范了数据质量评价的过程、方法及数据质量评价报告的内容。

首先使用“数据质量描述基本原理”中包含的数据质量描述组件,即定量元素和非定量元素,及其对应的数据质量定量子元素和数据质量定量子元素描述子。数据质量定量元素及其子元素包含有完整性元素(多余、缺少)逻辑一致性元素(概念、值域、格式、拓扑)位置精度元素(绝对精度、相对精度、栅格数据位置精度),时间精度元素(时间测量精度、时间一致性、时间正确性)和专题精度元素(分类正确性、非定量属性正确性、定量属性精度)。数据质量非定量元素包含有目的元素,用途元素,数据志元素。数据质量定量子元素描述子包括有数据质量范围,数据质量测量,数据质量评价过程,数据质量结果,数据质量值类型,数据质量值单位,数据质量日期。数据质量描述的对象是数据集系列、数据集或数据集内具有相同特征的一部分数据。

在识别数据质量时,分为两个主要的部分。其一是识别定量的数据质量信息,包括识别可用的数据质量定量元素,新建的附加数据质量定量元素,数据质量定量子元素,新建的附加数据质量定量子元素,以及数据质量定量子元素描述子。其二是识别非定量的质量信息,包括识别可用的数据质量非定量元素和新建的附加数据质量非定量元素。

在进行数据质量评价时,按照数据质量评价过程进行评价,建议参照评价和报告数据质量结果的过程流。过程流具体分为五个步骤,其一,识别可用的数据质量定量元素、数据质量定量子元素及数据质量范围;其二,识别数据质量测量;其三,选择并运用数据质量评价方法;其四,决定数据质量结果;其五,决定一致性。使用范围是既可用在静态数据集上,也可用在动态数据集上。可以使用的数据质量评价方法有两个,即直接评价方法(完全检查,取样)和间接评价方法。注意仅在直接评价方法不可用时才用间接评价方法。

在进行数据质量控制时,应使用数据质量概要测试包。控制的对象为:数据、数据质量描述及数据质量评价报告。任何纳入科学数据共享工程的数据必须提供与本规范一致的元数据及质量评价报告。质量描述必须识别所列六个数据规范中的所有质量信息,并在这些数据规范上的数据质量结果均为合格。数据质量概要测试包分别含有了组件测试,正确性测试,定量的质量可用性测试,非定量的质量可用性测试,排斥性测试,数据质量定量子元素描述子使用正确性测试,在元数据中报告数据质量信息测试,以及用“数据质量评价报告”报告定量的质量信息的测试等。

最后在报告数据质量信息时,分为两个部分。其一,定量数据质量信息应在元数据中报告,同时在“数据质量评价报告”中报告。其二,非定量数据质量信息应在元数据中报告。建议参照本规范中提供的示例,形成最终的数据质量评价报告。

科学数据共享工程质量管理规范的数据质量管理部分适用于科学数据共享工程各种数据的质量评价;也适用于描述和评价一个数据集在产品规范规定的指标内的质量信息;同时可确定某数据集质量,判断该数据是否满足特定应用;也可用于描述其数据质量需求。

2、服务质量

科学数据共享工程质量管理规范在科学数据共享工程的服务质量管理应用中,建议进一步遵照科学数据共享工程质量管理规范中的服务质量部分,服务质量部分分六个章节阐述了服务质量描述的基本原理,详细说明了识别及报告服务质量信息的基本方法,规范了服务质量评价的过程、方法及服务质量评价报告的内容。

首先使用“服务质量描述基本原理”中包含的服务质量描述组件,即定量元素和非定量元素,及其对应的数据质量定量子元素和数据质量定量子元素描述子。服务质量定量元素及其子元素包含有完整性元素(缺少)和逻辑一致性元素(结果一致性、格式一致性、效率一致性)服务质量非定量元素包含有目的元素,用途元素和数据志元素。

下面的工作,基本类似于识别数据质量部分。

在识别服务质量时,同样分为两个主要的部分。具体参照对应的科学数据共享工程质量管理规范中的服务质量部分。

在进行服务质量评价时,按照服务质量评价过程进行评价,建议参照评价和报告服务质量结果的过程流。可以使用的服务质量评价方法有两个,即直接评价方法和间接评价方法。

在进行服务质量控制时,应使用服务质量概要测试包。控制的对象为:服务和服务质量描述。任何纳入科学数据共享工程的服务必须提供与本规范一致的元数据及质量评价报告。质量描述必须识别所列九个服务规范中的所有质量信息,并在这些富翁规范上的服务质量结果均为合格。

最后在报告服务质量信息时,同样分为两个部分。建议参照本规范中提供的示例,形成最终的服务质量评价报告。

科学数据共享工程质量管理规范的服务质量管理部分适用于科学数据共享工程各种服务的质量评价;也适用于描述和评价服务在服务规范规定的指标内的质量信息;同时可依据本标准确定服务的质量,判断是否满足特定应用;也可用于描述服务质量需求。

3、运行管理质量

科学数据共享工程质量管理规范在科学数据共享工程的运行管理质量管理应用中,建议进一步遵照科学数据共享工程质量管理规范中的运行管理质量部分,运行管理质量部分分六个章节阐述了运行管理质量描述的基本原理,详细说明了识别及报告运行管理质量信息的基本方法,规范了运行管理质量评价的过程、方法及运行管理质量评价报告的内容。

首先使用“运行管理质量描述基本原理”中包含的运行管理质量描述组件,即定量元素和非定量元素,及其对应的运行管理质量定量子元素和运行管理质量定量子元素描述子。运行管理质量定量元素包含有运行管理规范中叙述定量质量信息的部分。运行管理质量非定量元素包含有目的元素,用途元素,数据志元素。

下面的工作,基本类似于识别数据质量部分。

在识别运行管理质量时,同样分为两个主要的部分。具体参照对应的科学数据共享工程质量管理规范中的运行管理质量部分。

在进行运行管理质量评价时,按照运行管理质量评价过程进行评价,建议参照评价和报告运行管理质量结果的过程流。可以使用的运行管理质量评价方法有两个,即直接评价方法和间接评价方法。

在进行运行管理质量控制时,应使用运行管理质量概要测试包。控制的对象为:运行管理、运行管理质量描述。任何纳入科学数据共享工程的运行管理必须提供与本规范一致的质量评价报告。质量描述必须识别所列四个运行管理规范中的所有质量信息,并在这些规范上的运行管理质量结果均为合格。

最后在报告运行管理质量信息时,同样分为两个部分。建议参照本规范中提供的示例,形成最终的运行管理质量评价报告。

科学数据共享工程质量管理规范的运行管理质量管理部分适用于科学数据共享工程运行管理的质量评价;也适用于描述和评价运行管理在管理规范规定的指标内的质量信息;同时可依据本标准确定运行管理的质量,判断是否满足特定应用;也可用于描述运行管理质量需求。

4、建设质量

科学数据共享工程质量管理规范在科学数据共享工程的建设质量管理应用中,建议进一步遵照科学数据共享工程质量管理规范中的建设质量部分,建设质量部分分六个章节阐述了建设质量描述的基本原理,详细说明了识别及报告建设质量信息的基本方法,规范了建设质量评价的过程、方法及建设质量评价报告的内容。

首先使用“建设质量描述基本原理”中包含的建设质量描述组件,即定量元素和非定量元素,及其对应的建设质量定量子元素和建设质量定量子元素描述子。建设质量定量元素包含有建设规范中叙述定量质量信息的部分。建设质量非定量元素包含有目的元素,用途元素,数据志元素。

下面的工作,基本类似于识别数据质量部分。

在识别建设质量时,同样分为两个主要的部分。具体参照对应的科学数据共享工程质量管理规范中的建设质量部分。

在进行建设质量评价时,按照建设质量评价过程进行评价,建议参照评价和报告建设质量结果的过程流。可以使用的建设质量评价方法有两个,即直接评价方法和间接评价方法。

在进行建设质量控制时,应使用建设质量概要测试包。控制的对象为:建设、建设质量描述。任何纳入科学数据共享工程的建设必须提供与本规范一致的质量评价报告。质量描述必须识别所列两个建设规范中的所有质量信息,并在这些规范上的建设质量结果均为合格。

最后在报告建设质量信息时,同样分为两个部分。建议参照本规范中提供的示例,形成最终的建设质量评价报告。

科学数据共享工程质量管理规范的建设质量管理部分适用于科学数据共享工程建设的质量评价;也适用于描述和评价建设在管理规范规定的指标内的质量信息;

同时可依据本标准确定建设的质量,判断是否满足特定应用;也可用于描述建设质量需求。

四、常见问题

(一)标准的对象

科学数据共享工程质量管理规范需要规范的对象是科学数据共享工程数据、服务、运行管理、建设的质量管理。其中,数据质量管理主要对数据结果的管理,不涉及数据采集过程的质量管理。

(二)标准的定位

科学数据共享工程质量管理规范是对科学数据共享工程涉及的数据、服务、运行管理及建设的各方面质量进行科学、有效的规范和控制,指导科学数据共享工程各个科学数据共享中心(网)的数据、服务、运行管理及建设的质量管理。

(三)与科学数据共享中心(网)质量管理规范的关系

科学数据共享工程质量管理规范用来指导科学数据共享工程各个科学数据共享中心(网)的数据、服务、运行管理及建设的质量管理。重点是提供质量描述的基本原理和方法、质量评价的过程和方法、质量控制的基本原则和方法以及报告质量信息的基本方法。

各个科学数据共享中心(网)的具体质量管理规范需要各中心(网)参照科学数据共享工程质量管理规范进一步研究、细化和编制。

(四)与科学数据共享工程其他规范标准的关系

科学数据共享工程质量管理规范要求识别相应产品规范或用户需求中的质量信息,在元数据、质量评价报告中形成正确的质量描述,并在这些规范上的质量结果均为“合格”因此科学数据共享工程质量管理规范需要引用科学数据共享工程中的元数据内容标准、数据元目录、科学数据分类与编码标准、目录服务规范、数据与服务注册规范、WEB 服务应用规范、科学数据共享中心建设规范、科学数据共享网建设规范等。

(五)与已有业务质量管理规范的关系

科学数据共享工程质量管理规范与业务质量管理规范不矛盾,一般的业务质量管理规范侧重数据采集和建库的质量管理。

各个科学数据共享中心(网)的具体质量管理规范在参照科学数据共享工程质量管理规范的基础上,可吸收已有业务质量管理规范的内容。

(六)质量与考核

本规范旨在指导科学数据共享工程数据、服务、运行管理及建设的质量管理,提供的是一套完整的质量描述的基本原理,详细说明了识别及报告质量信息的基本方法,规范了质量控制的基本原则与方法。

在实际工作中,需要专门、有效的科学数据共享工程质量考核制度和相应的组织机构、人员、经费保障,才能真正使这套科学数据共享工程质量管理规范落到实处,监督好科学数据共享工程数据、服务、运行管理及建设的质量。