Skip to content

GCRI · Labs

Причинно-следственный анализ для пилотных проектов

Causal inference separates what an intervention does from what merely accompanies it. In labs and pilots it shapes the design: randomisation where possible, credible comparisons where not, and explicit assumptions in both. It is how a pilot becomes evidence that an innovation works, for whom and under what conditions.

02Заявка

Какую роль здесь играют причинно-следственный вывод и оценка воздействия.

Причинно-следственный анализ и оценка воздействия разрабатывают методы определения того, вызывают ли вмешательства или подверженность определённые результаты и как именно. Они отделяют реальные эффекты от корреляции. В исследованиях и доказательной базе, методах и моделировании и инновациях причинно-следственный анализ показывает, какие меры по снижении риска действительно работают. Он помогает направлять ресурсы на вмешательства с доказанным эффектом в связанных рисках. Основное описание приведено в STEM Commons.

Randomised pilots and stepped rollouts

Когда инновация внедряется на объектах последовательно, порядок рандомизируется, чтобы ранние и поздние объекты образовали сравнение; дизайн и анализ регистрируются заранее.

Quasi-experimental programme evaluation

Difference-in-differences, regression discontinuity or synthetic control designs estimate effects where randomisation was not possible, with placebo tests to probe their assumptions.

Перенос эффектов с пилотного уровня на масштабный

Causal diagrams state which features of the pilot site an effect depends on, so planners can judge whether a new site shares them before expecting the same result.

03Мониторинг

Оценка воздействия.

Экран, который команда использовала бы для следования этому методу: его показатели, состояния и решения. Названия приведены для примера, а значения иллюстративны.

Оценка воздействия

Labs · Causal inference for pilots · Run R-7061

Parallel trends holdGCRI · Labs

Событийный анализ

Карточка метода

Метод
Причинно-следственный вывод и оценка воздействия
Проектирование
разность разностей
Единицы
196
Метка
СМОДЕЛИРОВАНО

Проверки устойчивости результатов

Основная спецификация0.06Да
Исключить ранних последователей0.26Да
Синтетический контроль0.12Да
Impact evaluation: the screen’s structure, terms and states for Labs.Example names and illustrative values; a design, not a record or a live system.
04Данные

Что потребляет метод.

Наборы данных и записи, используемые причинно-следственным анализом и оценкой воздействия на этой платформе, с указанием роли каждого из них и метки, которую несут их значения. Источники перечислены в реестре источников.

ДанныеРольМетка
Trial and pilot outcome dataEffect estimationНАБЛЮДАЕМО
Административные записиРезультаты и ковариаты для групп сравненияОпубликованная статистика
Registered pre-analysis plansFixing estimands and testsЗАДЕКЛАРИРОВАНО
Обследования характеристик площадкиHeterogeneity and transportabilityСООБЩЕНО
05Методы и доказательная база

How causal inference for pilots is modelled, measured and tested.

Модель, её допущения, данные и неопределённость в том виде, в каком их проверил бы учёный или инженер. Структуры следуют опубликованным методам. Показанные значения являются иллюстративными, а не результатами.

Модель, уравнения и допущения

The model structure used for causal inference for pilots, the assumptions it makes and how each is tested.

Риск элемента iRi = f(Hi, Ei, Vi, Ci)опасность, подверженность, уязвимость и потенциал реагирования
Ожидаемый годовой ущербEAL = ∑k pk · Lkover events k with annual probability pk
Связанные системыxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
ДопущениеЗачем это создаётсяКак это проверяется
В пределах события опасность и подверженность независимыДелает интеграл убытков вычислимымСравнить с подгонкой копулы по совместным записям
Вблизи рабочей точки связи линейныПозволяет потрясениям распространяться через AВыйдите за пределы линейного диапазона и сравните
Кривые уязвимости переносятся между местамиМестные кривые редко доступныПроверять по наблюдаемым убыткам там, где они есть
Исходные данные
версионированные наборы данных с указанием происхождения
Результаты
распределения, а не отдельные числа
Код
выпускается вместе с карточкой модели и тестами
Воспроизведение
те же данные, код, среда и начальное значение
Стандартные формулировки риска и пространства состояний; перечисленные допущения типичны для метода и приведены для рецензирования, а не как результаты.
Руководящие принципы FAIR · GO FAIR и FORCE11W3C PROV · Консорциум Всемирной паутиныРуководство по единообразному учёту неопределённостей · МГЭИКCEOS Analysis Ready Data · Комитет по спутникам наблюдения Земли
06Валидация

Как проверяются результаты.

Допущения об идентификации проверяются с помощью плацебо-тестов, проверок на опровержимость и анализа чувствительности. Воспроизведение в разных условиях проверяет внешнюю валидность.

ПроверкаКак это делается
Balance and pre-trend checksComparison groups are tested for similarity before treatment
Placebo and falsification testsEffects are sought where none should exist
Sensitivity to unobserved confoundingAnalyses report how strong a hidden confounder would need to be to change the conclusion
Replication across sitesЭффекты повторно оцениваются в независимых условиях, прежде чем их обобщают

Ненаблюдаемые смешивающие факторы и побочные эффекты могут смещать оценки. Эффекты, найденные в одном контексте, могут не переноситься на другой.

07Процесс

Как устроен процесс.

Process explorer · Process

Causal inference for pilots: PRISMA 2020 review reporting

10 steps4 stages

Процесс

Causal inference for pilots: PRISMA 2020 review reporting

PRISMA 2020 является руководством по отчётности о систематических обзорах; шаги следуют его контрольному списку, а не обязательной последовательности, и ни один документ Nexus его не принимает.

  1. 01 Plan

    1. 01Регистрация и протоколЗапись · Группа рецензированияРуководство просит указать сведения о регистрации, доступ к протоколу и любые поправки.
    2. 02Критерии соответствияЗапись · Группа рецензированияРуководство просит указать критерии включения и исключения и то, как группировались исследования.
  2. 02 Поиск и отбор

    1. 03Поиск: источники и стратегииШаг · Группа рецензированияРуководство просит указать источники информации и полные стратегии поиска. Оно не определяет, какие источники используются.
    2. 04Отбор исследованийШаг · Группа рецензированияРуководство просит указать, как оценивалось соответствие исследований критериям, в том числе сколько рецензентов проводили отбор. Оно не фиксирует число рецензентов.
    3. 05Диаграмма потоковЗаписьДиаграмма потоков показывает число найденных записей, число включённых исследований и причины исключения.
  3. 03 Анализ

    1. 06Сбор данныхШаг · Группа рецензированияРуководство просит указать, как собирались данные из отчётов и какие элементы данных искались.
    2. 07Риск систематической ошибкиШаг · Группа рецензированияРуководство просит указать методы и инструменты оценки риска систематической ошибки.
    3. 08СинтезМодель · Группа рецензированияРуководство просит указать меры эффекта и методы синтеза. Оно не предписывает метаанализ.
    4. 09Степень уверенности: доказательная базаШаг · Группа рецензированияРуководство просит указать методы оценки определённости и сообщать результат по каждому исходу. Оно не называет шкалу оценки.
  4. 04 Отчёт

    1. 10Отчёт о рецензированииЗаписьРуководство помогает авторам сообщить, почему был проведён обзор, что они сделали и что обнаружили.

ReportsOutline of an externally published reporting guideline, not a Nexus process and not a record of operation. PRISMA 2020 mainly covers reviews of intervention effects. No Nexus page names it. Every programme is at service level R0.

09Ведение и сопровождение

Кто ведёт метод.

Экономическое развитие осуществляет ведение и сопровождение причинно-следственного анализа и оценки воздействия для Консорциума и анализирует их применение на разных платформах.

11Вопросы

Вопросы и ответы.

Каковы ограничения причинно-следственного анализа и оценки воздействия в этой области?
Ненаблюдаемые смешивающие факторы и побочные эффекты могут смещать оценки. Эффекты, найденные в одном контексте, могут не переноситься на другой.
Как проверяются результаты?
Допущения идентификации проверяются плацебо-тестами, проверками на опровержимость и анализом чувствительности. Репликация в разных условиях проверяет внешнюю валидность.
Значения на этой странице реальные?
The data names, roles and checks are real descriptions of practice. The canvas shows a design of the method’s use, not a run; no result is reported here.
Где ещё применяется этот метод?
Observatory Каноническая страница метода перечисляет все применяющие его платформы.
ОтчётыВнести вклад

Поделитесь доказательствами с этой страницы.

Reports является ежеквартальным изданием Консорциума. Ваши знания по этой теме могут стать доказательством, кейсом или исправлением в следующем выпуске с указанием вашего авторства и публикацией по лицензии CC BY 4.0, если это ваша собственная работа.

GCRIЛабораторииДоказательная база LabsМетоды и технические материалы
Лаборатории

Предложите метод, набор данных или вопрос.

Информация и запросы открыты уже сегодня. Запрос получает номер и указывает следующий шаг; заявки, платежи, выделение вычислительных ресурсов и регистрации открываются только тогда, когда существуют их команда, условия и возможности для проверки.

Правовая информация

Карты, данные и рисунки на этом сайте приводятся для контекста и общей информации. Они не являются советом, прогнозом или предупреждением; ограничения информации изложены в Оговорках и уведомлениях о данных.