1—未经许可不得转载统计制度方法研究2012年第4期国家统计局统计科学研究所————————————美国统计质量控制和评估的经验及对我国的启示设计管理司徐荣华张英花成金璟目前,人们对统计数据质量的认识已经发生了很大变化,一是注重从用户的角度来评价数据质量,强调用户对统计信息的满意程度;二是认为数据质量是一个综合性概念,应从适用性、准确性、及时性、有效性等多方面来衡量。为尽快研究制定既符合我国国情、又具有国际可比性的统计质量评价标准,提出切实可行的统计质量控制和管理办法,建立我国统计质量控制和评估机制,统计设计管理司于2011年组织了统计质量控制体系理论与实践赴美培训团。通过学习交流,我们对美国主要统计质量标准和美国主要统计机2012年3月8日
—2—构如何控制和评估统计质量有了一个基本认识,并深受启发。本文从介绍美国统计体制、主要统计质量标准入手,重点研究总结美国普查局控制和评估统计质量方面好的经验做法,旨在提出加强我国统计质量管理的意见和建议。一、美国统计质量标准(一)(一)美国联邦信息质量指南。美国联邦信息质量指南。美国是分散型的统计体制,白宫管理和预算办公室(OMB)负责统计工作的协调管理组织,其主要职能有:1.审批主要统计机构的调查项目;2.处理主要统计机构的信息发布请求;3.协调各统计机构间的事务;4.向统计机构和合作项目推荐财政计划;5.实施和解释数据质量法案。OMB为提高联邦各机构统计发布信息的质量,在2002年颁布了“联邦信息质量指南”,即“保证和提升联邦机构信息发布的优质性、客观性、有用性和完整性的指南”(GuidelinesforEnsuringandMaximizingtheQuality,Objectivity,Utility,andIntegrityofInformationDisseminatedbyFederalAgencies)。在该指南中,OMB将质量(Quality)定义为一个合集,具体包括了客观性(Objectivity)、有用性(Utility)、诚信(Integrity)。具体来看,客观性是指信息内容和信息发布是否准确、可靠、无偏。为保证信息的客观性,要求提供完整、准确和简明易懂的关于统计调查过程的文件资料,描述各种可能影响数据质量的误差来源。有3—用性是指发布的信息是否有用,是否满足用户需要。通过内部评估、用户满意度调查、对统计需求的预期、开发新统计产品等途径,从具体专业数据用户、研究者、决策者和公众的角度,来考虑联邦机构公布的数据信息是否有用,保证联邦统计数据最大限度地满足用户需求,并以此为标准来开发新的统计产品和服务。诚信是指信息安全和信息保护,避免信息被非法泄漏,避免在统计信息上的腐败和做假行为。联邦政府颁布了一系列关于信息保护法规和行政条款,如隐私法、信息自由法、机密信息保护和统计效率法、联邦信息安全管理法等,对外承诺联邦机构收集的个体信息资料只用于统计目的。可以说,“联邦信息质量指南”不仅阐述了信息质量的深刻内涵,而且也为联邦统计机构提出了信息质量的总要求和总目标,即信息的客观性、有用性和诚信。(二)统计调查标准和准则。在2006年9月,为了提高统计数据质量,有力保证各联邦统计机构的信息产品符合“联邦信息质量指南”的要求。白宫行政管理和预算办公室(OMB)在总结、推广和应用联邦统计机构的最佳统计实践的基础上,颁布了“统计调查标准和准则”(STANDARDSANDGUIDELINESFORSTATISTICALSURVEYS)。这个标准化文件详细记录了所有联邦统计机构必须遵守的统计专业准则以及所有统计活动必须达到的质量水平和预期目标,是规范联邦机构统计调查项目工作流程、保证联邦机构之间统计活动一致性和协调性的纲领性文件,也是
—4—用户了解联邦机构统计工作过程的重要文件资料。它对统计项目从调查目的、调查方法、汇总估计、质量控制到数据发布的整个过程作了十分具体详细的规定,并提出相应的目标和要求,同时附有实现这些标准的最佳统计实践指南。“统计调查标准和准则”的制订是对统计调查的方案设计、数据搜集、处理、发布等各环节的规范和约束,是调查数据质量的技术性保障。具体包括7个部分,共20条标准:1.统计概念、方法设计部分,具体包括调查计划(Planning)、调查设计(Design)、调查回答率(Rates)、调查体系(Systems)等4个标准;2.数据收集部分,包括制定抽样框(Frames)、填报者范围(Respondents)、数据收集方法(Methodology)等3个标准;3.数据加工和编辑部分,包括数据编辑(Editing)、不回答的分析和回答率计算(Non-responseAnalysisandResponseRateCalculation)、编码(Coding)、数据保护措施(DataProtection)、评估(Evaluation)等4个标准;4.估算和预测部分,包括估算和预测方法(DevelopingEstimatesandProjections)1个标准;5.数据分析部分,包括分析和报告计划(AnalysisandReportPlanning)、推理和比较(InferenceandComparisons)等2个标准;6.审查程序部分,包括数据质量评估(ReviewofInformation5—Products)1个标准;7.信息产品发布部分,包括信息发布(ReleasingInformation)、数据保护和避免泄漏(DataProtectionandDisclosureAvoidanceforDissemination)、调查文档(SurveyDocumentation)、文档和公共使用的原始数据发布(DocumentationandReleaseofPublic-UseMicrodata)等5个标准。二、美国普查局统计质量控制和评估的经验做法作为美国最大的统计机构,在遵循OMB和美国普查局的上级机构—商务部的信息质量指南基础上,普查局早在2002年10月就发布了自己的信息质量指南。近年来,在对OMB和其他统计机构的标准不断研究和实践的基础上,普查局于2010年5月发布了最新的统计质量标准,作为普查局各项调查统计质量控制和评估的依据。普查局在制定、使用这项标准中有以下几个方面的经验做法值得借鉴。(一)细化标准分类,明确标准的质量目标。秉承联邦“统计调查标准和准则”,普查局的统计质量标准也包括了7个方面20个具体准则。为了切实保证和提升统计数据质量,普查局将这些标准进行分类,并且与联邦信息指南规定的三个总要求相结合,明确了不同工作环节的标准应实现的信息质量目标。首先普查局将统计质量标准分为两大类,一是流程标准(“A”到“F”),根据信息产品开发和公布的不同流程而组织制定。二是支持标准(“S”),作为流程标准的辅助标准。流程标准包括:A.规划与
—6—发展;B.收集和获取数据;C.捕获和处理数据;D.生成估计和测量;E.分析数据和报告结果;F.发布信息支持标准。支持标准(S)包括:S1,保密标准;S2,数据和文件管理标准。保证和提升统计质量有用性的标准有:规划数据项目(A1),开发数据采集工具和辅助材料(A2),制定和实施抽样设计方案(A3),获取和使用行政记录(B2),审查信息产品(E3),发布信息产品(F1),为增加信息产品的透明度提供支持文档(F2)。保证和提升统计信息客观性的标准有:规划数据项目(A1),开发数据采集工具和辅助材料(A2),制定和实施抽样设计方案(A3),确定和实施数据收集方式(B1),获取和使用行政记录(B2),捕获数据(C1),编辑和输入数据(C2),数据编码(C3),为多种源头的数据建立连接(C4),从样本直接估算(D1),用模型估算(D2),测量和显示非抽样误差(D3),分析数据(E1),报告结果(E2),审查信息产品(E3),发布信息产品(F1),为增加信息产品透明度提供支持文档(F2),地址信息质量问题投诉(F3),数据和文档管理(S2)。保证和提升统计信息诚信的标准是保密性(S1)。这是个目标性标准,因为所有统计数据质量标准都包含了保护信息免受未经授权的访问或者发布的要求。(二)严格规定统计质量标准适用范围和使用条件。普查局的统计质量标准适用范围是所有由普查局发布的信息产品和生产这些产品的活动,包括向公众、赞助商、合作伙伴或其他客7—户提供的统计产品。所有普查局的雇员和宣誓就职的特殊员工以及与普查局合作的机构和个人,必须遵守这些标准。这些标准约束的信息产品可以采用印刷、电子或数字格式(例如,网络、CD、DVD和磁带),具体包括:新闻发布稿件;普查局出版物;工作底稿(包括技术文件或报告);专业论文(包括杂志文章、书籍章节、会议文件、海报和书面的研讨意见);摘要;项目研究报告;对外(如研讨会、大型会议等)的公开讲义;用来演示的讲义;表格和自定义表格;公众使用的数据文件;统计图表、数字和地图;以及传播这些信息产品的文件。同时,普查局对这些标准不适用的范围也作了详细的规定,具体包括:用于普查局内部不向公众传播的信息产品;提交给商务部内部使用的信息产品;用于普查局和商务部管理、不向外部提供的内部程序或者政策手册;普查局行政或管理流程中的信息产品;为满足信息自由法的要求而发布的信息产品;仅用于普查局机构间、机构内部的交换文件或者用于普查局以外的个人但不包含数据、不涉及分析或方法论信息的文件等。为了广泛用于普查局的统计项目和产品,统计质量标准描述较为广义,只列出标准的各项要求,没有列出达到各项要求的具体做法。同时,每种标准都有配套的关键术语列表,有些标准还附有事例。虽然要求每个调查项目都必须执行所有20项标准,不过具体实施中,项目负责人还需兼顾统计数据质量和项目规模,这里的项目规
—8—模是指满足所有标准要求时所涉及的预算、进度和资源等。如果项目负责人认为满足某个标准要求不可行,可以启动豁免程序。这时项目负责人要提交豁免文件,来论述此项目放弃执行某个统计质量标准的充足理由。豁免程序的出台,一方面保证了统计质量标准的顺利实施,另一方面为以后的统计质量标准修订,积累了处理标准外特殊情形的变通方法。(三)设置统计质量管理的专门机构,明确人员职责。为提高联邦统计数据质量、改进统计工作实践,早在1975年美国成立了联邦统计方法委员会,由白宫行政管理和预算办公室主管。委员会成员由白宫行政管理和预算办公室选定,由联邦统计机构的总统计师、经济学家和行政管理人员,主要职责包括:1.通报影响联邦统计数据质量的统计技术方法问题,并提出相应改进建议和措施。2.收集、评估和发布关于联邦统计机构统计调查方法和统计工作实践的信息。3.对联邦统计机构中应用的统计估计方法、调查设计、调查误差、行政记录利用以及数据发布、数据质量等统计方法问题提出相应的意见和建议。4.为不同联邦机构的统计专家提供相互交流、研讨的平台,推进和支持联邦机构之间统计合作研究。美国普查局也建立了自己的统计方法和标准委员会,成员包括来自不同调查项目组统计研究和方法分部的负责人。美国普查局人员工作组织模式是跟着项目走的,主要有经济项目、人口统计项目或十年一次人口普查项目等。他们将一个项目组称为一个总部,将分别负责9—项目规划、数据处理、数据分析和数据发布等各个环节的机构称为分部。其中,统计研究和方法分部负责项目统计方法的制定和实施,外勤和信息技术分部负责调查中数据收集、传输和处理,其他分部为项目组提供各种的行政、后勤和战略支持。也就是说,美国普查局统计方法和标准委员会的大部分成员分布于各调查项目组中。详见表1。在这种组织模式下,委员会有权对普查局项目的制度方法提出意见和建议,以确保每个调查项目采用的统计方法和实施办法合理可行。具体来看,普查局统计方法和标准委员会的职责包括:1.强化对普查局统计质量标准的认识和遵守意识。2.审查豁免请求,并就豁免申请是否批准向项目负责人提出参考意见。3.定期进行标准的审查和评估,即研究标准的执行好坏,并明确执行中的困难。4.对评估结果、豁免请求和普查局统计质量标准改进建议等内容进行存档。5.根据需要更新标准。项目组的统计方法和标准委员会成员(见表1)的职责包括:1.对负责和参与项目的标准执行情况提供指导意见。2.对负责和参与项表1统计方法和标准委员会成员分布情况项目总部统计方法和标准委员会成员十年一次人口普查总部十年一次人口普查统计研究分部负责人人口统计项目总部人口统计方法分部负责人经济项目总部经济项目统计方法和研究办公室负责人其他总部统计研究和方法论中心负责人