数据处理技术规范.ppt
数据处理技术规范,第一次全国海洋调查领导小组办公室,第一次全国海洋经济调查,一、数据处理的相关概念二、总体要求三、数据处理的工作内容四、各级调查机构的任务及流程五、数据集制作要求,目 录,一、数据处理的相关概念,数据处理：调查数据的录入、审核、修改、上报和汇总等工作的总称。数据录入：利用统一的软件，将采集的数据录入并存储于数据库中的活动。录入数据审核：各级调查机构依据审核规则，对本级录入的调查数据进行有效性检查，以及去重审核、必要审核、确认审核和分专业详审的活动。上报数据审核：县级以上调查机构依据审核规则，对上报的数据进行汇总审核和专家会审的活动。数据汇总：各级调查机构依据汇总要求，对其负责区域的调查数据进行汇总的活动。,二、总体要求,1.使用统一的数据处理软件：在海洋经济调查过程中，各级调查机构应使用第一次全国海洋经济调查领导小组办公室（以下简称“全国调查办”）统一开发的专用软件，不应擅自修改软件系统的数据结构、程序模块、描述文件和操作规程等；2.确保调查数据的安全：第一次全国海洋经济调查的数据处理工作应采取必要的技术和安全防范措施，确保调查数据在传输、存储和使用等环节的安全；应建立网络安全系统（实现网络管理、漏洞检测、补丁管理与防病毒等功能），防止病毒侵袭和“黑客”攻击，严防数据丢失、泄密。,三、数据处理的工作内容及要求,数据处理包括调查表数据的录入、审核、上报、修改和汇总等环节，由于各级调查机构承担不同的任务，因此数据处理所涉及的环节和流程顺序有所差异。,领取纸质调查表,数据录入,录入数据审核,数据复录,上报数据审核,数据上报,修改,修改,修改,县地省级调查机构,地及以上各级调查机构,地及以上各级调查机构,修改,修改,1.调查表的管理,(1)调查表封装 沿海省、地市和县三级调查机构要对本级调查表进行人工初审、装册、装箱工作。调查表装册封面示意图和调查表装册清单（见附录A和B）。调查表要求存入有防火、防潮、防鼠措施的资料库，并有专人负责保管和发放，以保证安全，防止泄密、遗失或损毁。,调查表装册封面示意图（按套表装订）,_省（自治区、直辖市）_市_县（市、区）第一次全国海洋经济调查表本套表本县（市、区）共_册第_册 本册共有：调查单位数：_个负责人姓名联系人姓名联系人电话装册日期：年 月 日,第一次全国海洋经济调查表册清单（示意图）,第一次全国海洋经济调查表装册清单_省（自治区、直辖市）_市_县（市、区）册内调查表细目：调查单位名称：调查表数量：调查单位名称：调查表数量：调查单位名称：调查表数量：调查单位名称：调查表数量：调查单位名称：调查表数量：,（2）调查表领取及收回 数据处理人员在领取调查资料时，应在调查表接收（领取）登记表（见附录C）上履行签字手续，作为调查表管理的凭证。资料接收时应符合以下要求：资料装订符合规范；资料整洁无污损，报表书写工整、清晰；装册清单与实物相符；表种相符，数量正确。录入完成后，应将调查资料交还调查表管理人员。数据处理人员负责调查表领取后的保管、安全和保密。,调查表接收(领取)登记表（示意图）,调查表接收(领取)登记表,_省（自治区、直辖市）_市_县（市、区）,2.数据录入 沿海县、地市和省三级调查机构利用统一的调查数据采集处理系统，将领取的每一份纸质调查表中的数据，录入系统并存储于数据库中。,调查数据采集处理系统可自动对录入数据进行有效性检查，如有问题应核实、修改，数据录入人员必须对录入的数据与调查表进行核对，审核无误后签字；录入数据要按一定比例进行抽查复录核对（具体复录要求可参照第一次全国海洋经济调查数据质量控制技术规范），并按照第一次全国海洋经济调查数据质量控制技术规范的要求填写相应的登记表。所有对数据的订正，必须保证电子媒介数据与纸质报表的一致性。即对机器内数据修改的同时，原始报表上也要保留修改记录。,3.录入数据审核 沿海县、地市和省三级调查机构可依据审核规则，利用调查数据采集处理系统中的功能，辅助完成对本级录入数据的审核工作。包括有效性检查、去重审核、必要性审核、确认性审核和分专业详审。,可利用系统内置的审核规则，对不符合审核规则或重复的数据，系统将自动给出提示信息，完成有效性检查和去重审核。依据第一次全国海洋经济调查数据质量控制技术规范的要求，可利用内置系统的审核要点，对于不符合审核要点的数据，系统将自动给出提示信息，完成必要性审核。可利用系统的奇异值分析功能，对于系统发现的奇异值，应与填报单位核实其正确性，完成确认性审核。分专业详审是各级调查机构根据调查表所属行业、专业不同，组织各类技术人员和统计分析人员，通过人机互动方式，进行数据查询、过滤、排序等操作，获取数据分析表，并结合相关资料的比对分析和经验判断，进行数据取值的合理性和可靠性审查。,各调查机构通过系统和人工等方式对本级调查数据进行审核后，应按照第一次全国海洋经济调查质量控制技术规范的要求，填写相关记录表，并将调查表归还资料管理员，资料管理员要检查调查表的完整性。,4.数据修改 沿海省、地市和县三级调查机构应对录入审核后发现的错误进行修改，对于有效性检查和必要性审核发现的问题，应与纸质调查表进行核对，如不一致，应修改录入数据；如录入一致，仍无法通过审核，应与填表单位沟通后修改；对确认性审核发现的问题待核实后，如属于填报错误，应先修改纸质调查表，再对原录入数据进行修改。,5.数据上报 沿海省、地市和县三级调查机构完成本级调查数据录入工作，并按质量管理有关标准和规定完成了录入数据审核，可填写数据简要评审报告（见附录D），由本级海洋经济调查机构负责人签字，同时加盖同级海洋经济调查机构公章；利用调查办开发的调查数据采集处理系统，对需要上报的数据（包括上级调查机构驳回见重新核实修改后的数据）进行上报。,数据简要评审报告,数据简要评审报告（示意图）,6.上报数据审核 县级以上各级调查机构可依据统一的审核规则，利用调查数据采集处理系统中的功能，辅助完成对下级上报数据的审核工作。审核规则参见第一次全国海洋经济调查数据质量控制技术规范。包括汇总审核和专家会审。,汇总审核是以调查数据采集处理系统的汇总功能为辅助，通过汇总数据进行审核。可通过汇总表内相关指标的对比，分析上报数据的合理性；可通过汇总表指标数据与年度统计数据对比，分析其合理性；可通过各区域汇总数据的对比，分析是否存在异常数据。专家会审可邀请相关领域或行业的专家以会议形式，利用调查数据采集处理系统中的数据、汇总数据以及其他相关数据资料等，进行综合性审核。,审核之后，没有问题的数据予以通过；有问题的数据，利用海洋经济调查数据采集处理系统的标准模板，填写驳回意见，驳回至原上报机构。对于上报数据的审核应按照第一次全国海洋经济调查数据质量控制技术规范的有关规定执行，对数据审核过程中发现的问题，应提出具体、明确的书面审核意见，填写相应的记录表。如审核结果不符合数据质量控制的有关要求，须由调查对象按规定程序和方式予以更改或限时重新填报。,7.驳回意见接收与处理 除国家之外的各级调查机构，接收来自上级调查机构的驳回意见，对于驳回意见中属于本级录入的问题，应进行核实并修改；如经核实,数据不需要修改,应附文字说明；属于下级调查机构的问题，应附本级调查机构的意见再驳回至下一级调查机构。,8.数据汇总 各级调查机构可利用调查数据采集处理系统中的汇总功能，对其负责区域的调查数据进行汇总。,四、各级调查机构的任务分工与流程,1.负责第一次全国海洋经济调查数据处理工作的动员部署、组织指导和监督检查。2.负责制定数据处理标准和相关技术规定；编制调查有关名录、收集共享数据；统一组织将标准规定等下发给各级调查机构。3.负责搭建全国海洋经济基础信息平台，组织调查数据处理专用软件的开发调试、国家级数据处理环境的准备和部署、构建第一次全国海洋经济调查数据库；负责海洋经济调查数据的安全防范；组织数据处理软件操作手册的编写。4.负责组织将从涉海部委获取的共享数据及调查单位名录等，进行预处理，导入数据处理系统，并分类存储管理，形成共享数据库。5.负责根据区域、权限及调查任务的划分，由调查软件辅助将调查单位名录分发至各级调查机构。6.负责组织接收所有调查数据，并分类存储管理，形成第一次全国海洋经济调查数据库。7.负责对海区级调查机构上报的调查数据进行审核。8.负责组织完成全国第一次全国海洋经济调查数据汇总。9.组织开展全国海洋经济调查数据的分析加工、开发应用和维护管理，编制全国海洋经济调查数据集、名录等相关成果材料。,全国调查办-数据处理任务,共享数据导入：全国调查办组织将从涉海部委获取的共享数据及调查单位名录等，进行预处理，并分类存储管理，形成共享数据库。调查名录分发：全国调查办根据区域、权限及调查任务的划分，由调查软件辅助将调查单位名录分发至各级调查机构。调查数据接收：全国调查办组织接收所有调查数据，并分类存储管理，形成第一次全国海洋经济调查数据库。上报数据审核：全国调查办对海区级调查机构上报的调查数据进行确认性审核，没有问题的予以通过；有问题的，利用海洋经济调查数据采集处理系统中的标准模板，填写驳回意见，驳回至原上报机构。数据汇总：可利用调查数据采集处理系统中的汇总功能，国家调查办组织完成第一次全国海洋经济调查数据汇总。,全国调查办-数据处理流程,1.负责审核本海区内各沿海省级调查机构上报的调查数据。2.负责将本海区的调查数据上报至国家级调查机构。3.负责接收国家级调查机构的驳回意见，并进行相应处理。4.负责对本海区的调查数据进行汇总。,海区级调查机构-数据处理任务,海区级调查机构-数据处理流程,1.负责组织本省内非沿海地级市海洋及相关产业调查表数据的录入及复录。2.负责本级已录入海洋及相关产业调查数据的审核。3.负责审核本省内各沿海地级调查机构上报的海洋及相关产业调查数据。4.负责将本省的海洋及相关产业调查数据上报至上级调查机构。5.负责接收海区级调查机构的驳回意见，并作出相应处理。6.负责对本省海洋及相关产业调查数据进行汇总。,省级调查机构-数据处理任务,省级调查机构-数据处理流程,1.负责组织本市内非沿海县海洋及相关产业调查表数据的录入及复录。2.负责本级已录入海洋及相关产业调查数据的审核。3.负责审核本市各沿海县级调查机构上报的海洋及相关产业调查数据。4.负责将本市的海洋及相关产业调查数据上报至上级调查机构。5.负责接收省级调查机构的驳回意见，并作出相应处理。6.负责对本市海洋及相关产业调查数据进行汇总。,地级调查机构-数据处理任务,地级调查机构-数据处理流程,县级调查机构-数据处理任务,1.负责本县海洋及相关产业调查表数据的录入及复录。2.负责将本县的海洋及相关产业调查数据上报至上级调查机构。3.负责接收地级调查机构的驳回意见，并作出相应处理。4.负责对本县海洋及相关产业调查数据进行汇总。,县级调查机构-数据处理流程,五、数据集制作,1.数据集内容 省级以上调查机构在本级调查获取的数据基础上，利用统一的软件完成数据集的制作。全国海洋经济调查数据集的内容包括基础数据集和汇总数据集两部分。其中，基础数据集是利用数据库中存储的全部调查表的所有指标形成的清单数据制作。汇总数据集是利用统一的汇总表获得的汇总数据制作。,2.范围 省级调查机构负责完成本省调查数据集的制作，海区级调查机构负责完成海区内沿海省调查数据集的制作，北海海区负责辽宁、河北、天津、山东4省（直辖市）；东海海区负责完成江苏、上海、浙江、福建4省（直辖市）；南海海区负责广东、广西、海南3省；全国调查办负责全国海洋经济调查数据集的制作。,3.编制要求 省级及以上调查机构利用调查数据库，将各级调查机构范围内的调查基础数据和汇总数据导出，经编辑处理后，打印输出，制作数据集目录，并装订成册。,技术支持联系方式,2023/6/21,1.国家海洋信息中心 李巧稚 2.全国海洋经济调查领导小组办公室 李长如,
