数据质量控制.doc

数据质量控制.doc

《数据质量控制.doc》由会员分享，可在线阅读，更多相关《数据质量控制.doc（4页珍藏版）》请在冰豆网上搜索。

数据质量控制

数据处理与质量控制是科技统计调查中一项非常重要和关键的工作，只有做好这项工作，统计数据的真实性和准确性才有保证，各级科技主管部门必须高度重视并实施好这项工作，不能流于形式。

本质量控制方案适用于科技机构年报和国家科技计划项目调查

一、组织分工

科技部统一制定科技统计调查的数据处理和质量控制方案，统一下发计算机数据处理程序；组织和指导省级科技主管部门进行数据处理和质量控制工作，并对省级科技主管部门上报的数据进行审核验收；及时掌握和了解各地区的工作情况，对数据处理和质量控制工作中出现的共性问题给出统一的解决办法。

省、地（市）科技主管部门必须按照科技部制定的方案和下发的程序，对数据的质量进行控制，对辖区内的数据进行审核验收，并将经过审核验收的数据报上一级主管部门。

在工作中如发现问题应及时向上一级反映。

二、数据处理与质量控制程序

数据处理与质量控制程序主要包括调查表回收、调查表人工审核、数据录入、计算机平衡关系检查、数据采集情况与对比检查、异常数据人工审核、数据转换（只针对科技机构年报）、汇总数据评估检查（只针对科技机构年报）、生成数据集几个环节。

各级科技主管部门应严格按照相应的程序进行操作，不漏过每一个环节。

不论在数据处理与质量控制的哪一个环节发现数据存在问题，都应认真对待，对有疑问的数据应向填报单位查询，对确有错误的数据应予以更正，对不合格的调查表要重新组织填报。

调查表人工审核

调查表回收

（主要由地市科技管理部门进行）

调查表数据录入

计算机平衡关系检查

数据采集情况与对比检查

数据转换

汇总数据评估检查

生成省级

数据集

生成评估表

数据转换

（只针对科技机构年报）

汇总数据评估检查

（只针对科技机构年报）

生成全国综合汇总表

和数据集

生成评估表

由省科技厅进行

由科技部进行

数据资料上报

科技部验收

检查通过

调查表人工审核

数据采集情况与对比检查

计算机平衡关系检查

科技部验收

科技部验收通过

由地市科技管理部门进行

验收结果反馈

异常数据人工审核

异常数据人工审核

三、各环节的工作内容和要点

1.调查表回收

在规定的时间内催收调查表，使应收调查表的回收率达到100%。

若调查表未能回收，但有正当理由并作出说明，视同回收。

对于在基层单位进行数据录入的情况，纸介质调查表应与电子版数据一并回收。

2.调查表人工审核

人工审核主要是依据审核人员的经验和填报单位的性质、特点等各种定性和定量的信息，对调查表上填报的数据进行审查。

人工审核借助于经验判断，注重从数据的真实性、指标概念和统计口径把握的角度对数据的准确性进行检查，可以发现计算机检查难以发现甚至根本无法发现的填报错误，因此必须按要求认真进行人工审核，决不能用计算机检查来替代。

人工审核应在回收报表阶段进行，对所有被调查机构的报表都应进行人工审核，可以采取对纸介质调查表人工审核或在计算机上对电子形式报表人工审核两种方式。

人工审核的具体内容及要求见《附件二科技统计年报调查表人工审核要点》。

3.调查表数据录入

使用《科技机构年报系统》（以下简称《年报系统》）、《国家科技计划项目年度调查系统》（以下简称《计划系统》）提供的“数据录入/修改”功能进行录入。

对于在基层单位进行数据录入的情况，只须把报表的数据文件导入相应的系统。

4.计算机平衡关系检查

计算机平衡关系检查，主要是依据调查表指标间的平衡关系和逻辑关系，对每一单位的调查表数据进行检查，检查填报数据的值域、数据之间是否满足给定的平衡关系式或逻辑关系式。

计算机平衡关系检查由《年报系统》、《计划系统》提供的“数据平衡检查”功能执行，并自动给出出错数据的信息，对不能通过计算机平衡关系检查但又符合实际情况的数据，应说明原因并保留原数据。

具体检查内容在相应系统的“维护数据平衡检查条件”功能中可以看到。

5.数据采集情况与对比检查

利用《年报系统》、《计划系统》提供的“数据采集情况与对比检查”功能，对调查表的回收情况及调查表数据相对上年的变动情况进行检查。

检查内容主要包括：

调查表已报、未报、新增情况及原因；属性指标变动情况；主要调查指标相对上年数据的变化等。

对比检查是针对每一单位的数据进行的检查。

完成数据采集情况与对比检查后，《年报系统》、《计划系统》会显示出相关信息，根据这些信息应进行相应的处理或给予说明。

具体内容分别见《科技机构年报系统使用说明》、《国家科技计划项目年度调查系统使用说明》。

6.异常数据人工审核

异常数据是指严重偏离常规的数据，在调查表的人工审核和计算机平衡检查阶段不一定能检查出来。

异常数据人工审核,主要是依据审核人员的经验和填报单位的各种定性和定量的信息，采用人机结合的检查方式，对已录入的数据是否异常进行检查和判断。

异常数据人工审核在调查表验收合格、数据录入计算机并通过计算机逻辑关系和平衡关系检查后进行。

经审核确定的异常数据应向填报单位核实，对确有错误的数据应予以更正。

只有通过异常数据人工审核后，才能进行数据汇总。

利用《年报系统》提供的“异常数据检查”功能，对科技机构年报表进行异常数据审核，审核的内容主要有3部分：

强度指标的异常分析；不同指标的对比分析；不同结构的对比分析。

具体内容、要求及操作见《附件三科技统计年报异常数据人工审核要点》和《科技机构年报系统使用说明》。

利用《计划系统》提供的“数据综合检查”功能，对科技计划项目调查表进行异常数据审核，审核的内容主要包括重要属性指标核实、数量指标规模核实等。

具体内容、要求及操作见《国家科技计划项目年度调查系统使用说明》。

7.数据转换（只针对科技机构年报）

《年报系统》提供“数据转换”功能，将各类调查表的调查指标转换成统一口径的指标，并对数据进行汇总。

指标转换是将分散在不同位置的相关指标加总，或是通过一定方式的处理得到调查表中没有而汇总需要的指标。

汇总是在数据转换后按事先的设计生成用于评估检查的评估表，并用“评估表输出”功能打印评估表。

数据转换处理应在完成前述各项检查后进行。

8.汇总数据评估检查（只针对科技机构年报）

对汇总数据进行评估检查是从总体上把握数据质量的重要环节。

评估检查主要依据经验并运用评估的方法，利用评估表判断数据的总体变化趋势、变化幅度、结构比例等是否异常，以便更准确地把握数据质量，纠正数据在总体上存在的重大偏差。

需要强调的是，评估检查不适用于对少量单位的数据进行检查。

具体内容与方法见《附件四科技统计年报数据评估办法》。

9.验收

指上级科技主管部门对下级科技主管部门上报的数据进行审核验收。

验收内容包括：

是否按要求报送各类资料、调查表与数据文件；调查表回收情况；根据上述各环节的审核结果对上报数据给出初步的验收意见。

科技部对各省（市）科技厅（科委）上报的数据验收的程序和内容见《附件一科技统计年报及计划项目调查数据验收内容与方式》。

10.数据集汇总

对各类统计数据完成上述各项检查并通过科技部验收后，即可进行数据汇总、生成数据集集。

运用《年报系统》提供的“年报数据集汇总”功能对各类机构的数据分别进行汇总，可生成科技机构年报数据集；运用《计划系统》提供的“数据汇总”功能对各类科技计划的数据分别进行汇总，可生成科技计划项目数据集。