Skip to content

GCRI · Labs

面向试点的因果推断

因果推断区分干预实际产生的效果与仅仅伴随干预出现的现象。在 实验室 和试点中,它塑造设计:尽可能采用随机化,无法随机时采用可信的比较,并在两种情形下都明确假设。试点由此成为证据,表明某项创新是否有效、对谁有效以及在何种条件下有效。

02申请

因果推断与影响评估在此发挥的作用。

Causal inference and impact evaluation develop methods to determine whether and how interventions or exposures cause outcomes. They separate genuine effects from correlation. In research and evidence, methods and modelling and innovation, causal inference shows which risk reduction measures actually work. It supports allocating resources toward interventions with demonstrated effect across connected risks. The canonical description is on the STEM Commons.

随机化试点与分阶段推广

Where an innovation reaches sites in sequence, the order is randomised so early and late sites form a comparison, with the design and analysis registered beforehand.

准实验项目评估

双重差分、断点回归或合成控制设计可在无法随机化的情况下估计效应,并通过安慰剂检验来检视其假设。

Transporting effects from pilot to scale

Causal diagrams state which features of the pilot site an effect depends on, so planners can judge whether a new site shares them before expecting the same result.

03监测

影响评估。

团队遵循该方法时会使用的界面:其指标、状态与决策。名称为示例,数值仅作示意。

影响评估

Labs · 试点的因果推断 · 运行 R-7061

Parallel trends holdGCRI · Labs

事件研究

方法卡

方法
因果推断与影响评估
设计
双重差分
单位
196
标签
模型生成

稳健性检验

主要设定0.06是
剔除早期采用者0.26是
合成控制0.12是
Impact evaluation: the screen’s structure, terms and states for Labs.Example names and illustrative values; a design, not a record or a live system.
04数据

该方法使用的输入。

本平台上因果推断与影响评估所使用的数据集和记录,及各自的作用与其数值所带的标签。来源列于 来源登记册.

数据角色标签
试验和试点成果数据Effect estimation观测
行政记录Outcomes and covariates for comparison groups已发布统计
已登记的预分析计划Fixing estimands and tests已声明
Site characteristic surveys异质性与可迁移性已报告
05方法与证据

试点因果推断如何建模、衡量和检验。

模型、其假设、数据和不确定性,以科学家或工程师会核查的形式呈现。结构遵循已发表的方法。所取数值仅为示意,不是研究发现。

模型、方程与假设

用于试点因果推断的模型结构、其所作假设以及每项假设的检验方式。

要素 i 的风险Ri = f(Hi, Ei, Vi, Ci)危害、风险暴露、脆弱性和应对能力
预期年度损失EAL = ∑k pk · Lkover events k with annual probability pk
耦合系统xt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
假设为何制作如何检验
在一次事件中,危害与暴露相互独立使损失积分保持可计算与基于联合记录拟合的 copula 进行比较
耦合在工作点附近是线性的让冲击通过 A 传播在线性范围之外施加扰动并比较
脆弱性曲线可以在不同地点之间迁移使用很少有本地曲线可用在有观测损失的地方据此进行验证
输入
带溯源信息的版本化数据集
成果
分布,绝不是单一数字
代码
连同模型卡和测试一起发布
复现
相同的数据、代码、环境和随机种子
标准的风险与状态空间表述;所列假设是该方法的典型假设,供审查之用,并非结果。
FAIR 指导原则 · GO FAIR 和 FORCE11W3C PROV · 万维网联盟关于一致处理不确定性的指南 · IPCCCEOS 分析就绪数据 · 地球观测卫星委员会
06验证

结果如何核查。

识别假设通过安慰剂检验、证伪检验和 敏感性分析进行检验。跨情境的复现则用于检验外部效度。

核查如何开展
平衡性与事前趋势检验Comparison groups are tested for similarity before treatment
安慰剂检验和证伪检验Effects are sought where none should exist
对未观测混杂因素的敏感性分析会报告,隐藏的混杂因素需要达到多强才会改变结论
Replication across sites效应在独立情境中重新估计后,才会被推广

未观测到的混杂因素和溢出效应可能使估计产生偏差。在某一情境中发现的效应未必适用于另一情境。

07流程

流程如何运行。

Process explorer · Process

试点的因果推断:PRISMA 2020 综述报告规范

10 steps4 stages

流程

试点的因果推断:PRISMA 2020 综述报告规范

PRISMA 2020 是系统综述的报告指南;各步骤依循其核查清单,而非强制顺序,且没有任何 Nexus 文件采纳它。

  1. 01 Plan

    1. 01注册与协议记录 · 审查团队该指南要求说明注册信息、方案的获取方式以及任何修订。
    2. 02资格标准记录 · 审查团队该指南要求说明纳入与排除标准以及研究的分组方式。
  2. 02 查找与遴选

    1. 03检索:来源与策略步骤 · 审查团队该指南要求说明信息来源与完整的检索策略。它并不规定使用哪些来源。
    2. 04研究的遴选步骤 · 审查团队该指南要求说明如何判定研究符合纳入条件,包括有多少名审查人进行筛选。它并不规定审查人数量。
    3. 05流程图记录流程图显示检索到的记录数量、纳入的研究数量以及排除的理由。
  3. 03 分析

    1. 06数据收集步骤 · 审查团队该指南要求说明如何从报告中收集数据以及寻求了哪些数据项。
    2. 07偏倚风险步骤 · 审查团队该指南要求说明评估偏倚风险所使用的方法与工具。
    3. 08综合模型 · 审查团队该指南要求说明效应量指标与综合方法。它并不规定必须进行荟萃分析。
    4. 09证据的确定性步骤 · 审查团队该指南要求说明评估确定性所用的方法,并按结局报告结果。它并未指定分级量表。
  4. 04 报告

    1. 10审查报告记录该指南帮助作者报告开展综述的原因、所做的工作以及所得的发现。

ReportsOutline of an externally published reporting guideline, not a Nexus process and not a record of operation. PRISMA 2020 mainly covers reviews of intervention effects. No Nexus page names it. Every programme is at service level R0.

09管理责任

由谁维护该方法。

经济发展 负责管理联合体的因果推断与影响评估,并审查其在各平台的应用情况。

10已关联

本页在整个联合体中通向何处。

11问题

问题与解答。

因果推断与影响评估在本领域有哪些局限?
未观测到的混杂因素和溢出效应可能使估计产生偏差。在某一情境中发现的效应未必适用于另一情境。
结果如何核查?
通过安慰剂检验、证伪检验和敏感性分析检验识别假设。跨情境复现用于检验外部效度。
本页面上的数值是真实的吗?
The data names, roles and checks are real descriptions of practice. The canvas shows a design of the method’s use, not a run; no result is reported here.
该方法还应用于何处?
维持社会运转的 规范方法页面 列出应用该方法的每个平台。
报告贡献

从本页贡献证据。

Reports 是联合体的季刊。您对该主题的了解可以成为下一期中的证据、案例或更正,署名归您,并在属于您本人作品时以 CC BY 4.0 发布。

GCRI实验室Labs 证据方法与技术
实验室

带来一种方法、一个数据集或一个问题。

信息和咨询现已开放。每项咨询都会获得一个编号,并告知下一步;申请、付款、算力分配和注册只有在相应团队、条款和审查能力就绪时才会开放。