Skip to content

GCRI · Araştırma kütüphanesi

Yöntemler ve teknik belgeler

Papers describing the quantitative and qualitative methods of The Global Centre for Risk and Innovation (GCRI), open enough for another team to apply, test or criticise them. Each states the method, its assumptions, its validation, where it fails and the software or data it needs. Methods link to their STEM Commons pages. Part of the research library.

01Çalışma alanı

Yöntemler ve teknik belgeler için çalışma alanı.

Kanıt derecelendirmesi

Methods and technical papers · Review wave 2 · Example interface, not a record

Two sources downgradedGCRI · GCRI

Ölçüte göre kesinlik

0 düşük ile 100 yüksek arası

Yüksek değer daha kesindir. Değerler örnektir.

İnceleme kuyruğu

  1. R-1Etkin ülke programlarıikinci incelemeci3 g sonra
  2. R-2Etiketli kanıt kayıtlarıikinci incelemeci2 g sonra
  3. R-3Uygulanan yöntemlerikinci incelemeci4 g sonra
Kanıt derecelendirmesi.Örnekleyici arayüz; canlı veri değildir.

GCRI · Evidence grading. Evidence grading: example names and illustrative values, not a record.

02Two traditions

Quantitative and qualitative, held to one standard.

Both kinds of method must be described well enough to be checked.

Quantitative

Models and statistics

Statistical, network, simulation and optimisation methods, such as uncertainty quantification.

Qualitative

Yapılandırılmış yargı

Interviews, expert elicitation, scenario workshops and case analysis, with policy and decision science.

Karma

Combined designs

Studies that combine both, stating how evidence of each kind is weighed.

03Reporting guides

The reporting guides a methods paper follows, by kind of method.

Kind of methodGuideReferans
Makine öğrenmesi dahil tahmin modelleriTRIPOD+AICollins ve diğerleri, BMJ, 2024
Agent-based and other simulation modelsODD protocol, second updateGrimm and others, 2020
Bilgisayar modeli kalibrasyonuCalibration with explicit model discrepancyKennedy and O’Hagan, 2001
Machine-learning models in deploymentModel cardsMitchell and others, 2019
Land change from remote sensingArea estimation from a reference sampleOlofsson and others, 2014
Yapılandırılmış uzman yargısıDocumented elicitation protocol with calibration questionsStated in each paper

Reviewed methods are designed for the Methods and Technical series, with each model described under NS-12 of the proposed Nexus Standards. Methods researchers can contribute replications and documented failures; both are published.

04Süreç

Sürecin nasıl işlediği.

Process explorer · Process

Methods and technical papers: Source to evidence record

10 steps4 stages2 gates

Süreç

Methods and technical papers: Source to evidence record

Bir kaynak kaydedilir ve değerlendirilir, kaydı etiketlenir ve sınıflandırılır, Dijital Kanıt Pasaportu menşei taşır; bir düzeltme her bağımlı kayda ulaşır.

  1. 01 Kabul

    1. 01Kaynağı tanımlayınKaynak · Kaynak sorumlusuKeşif, veri alımı değildir. Kaynak tanımlama; kaynak sınıfını, kaynak sorumlusunu, kurumsal rolü ve yetki alanını kaydeder.
    2. 03Kaynağı kaydedinAdımKayıt, keşfedilen bir kaynağı kanıt yaşam döngüsünün yönetilen bir katılımcısı hâline getirir. Herhangi bir onay veya belgelendirme anlamına gelmez.
  2. 02 Değerlendirme

    1. 04Yetki alanı ve hak sınıflandırmasıGeçitHak sınıflandırması lisansı, rızayı, gizliliği ve yeniden kullanım sınırlarını belirler. Sonuç erişimi ve yönlendirmeyi belirler.
    2. 05Kanıt kalitesi değerlendirmesiAdımKalite değerlendirmesi, bir kaydın tanımlanmış bir kullanıma uygun olup olmadığına karar verir. Kalite çok boyutludur ve hiçbir zaman tek bir puan değildir.
    3. 06Kanıt etiketiAdımHer bulgu dokuz kanıt etiketinden birini taşır. Eksik veri hiçbir zaman sıfır olarak değil, eksik olarak gösterilir.
  3. 03 Kayıt

    1. 07Kanıt sınıflandırmasıKayıtSınıflandırma, kayıtlara kaynağı doğrulanmış, kamuya açık güvenli veya kısıtlı gibi yaşam döngüsü durumları verir. Durumlar bir arada bulunabilir ve kanıtın kullanımını belirler.
    2. 08Kaynak sürümü ve tanımlayıcıKayıt · NXS-GRX (kanonik veri, kaynak izlenebilirliği ve risk)Bir kaynak sürümü hakları, zamansal kapsamı ve kaynak soyunu kaydeder. Bir UNI bir katalog aracılığıyla atanır ve hiçbir zaman elle yazılmaz.
    3. 09Dijital Kanıt PasaportuKayıtPasaport kaynak izlenebilirliğini, kaliteyi, hakları, yetki alanını, izin verilen kullanımı ve geçmişi kaydeder; böylece kanıt aktarıldığında bağlamını korur.
  4. 04 Kullanım ve düzeltme

    1. 02Düzeltme bağımlı kayıtlara ulaşırAdım · NXS-GRX (kanonik veri, kaynak izlenebilirliği ve risk)Bir kaynak düzeltmesi, eski sonuçları yeniden yazmadan bağımlı kesitlere ve ürünlere yayılır.
    2. 10Kamuya açık güvenli incelemeGeçitKamuya açık güvenlik incelemesi, bir kaydın kamuyla paylaşılıp paylaşılamayacağına karar verir. Ayrı bir aşamadır ve doğrulama değildir.

Data protocols: evidence lifecycle · Data protocols: core data objects and evidence records · The Global Risks Index (NXS-GRX)Designed programme process, not a record of operation. No cycle has run and every programme is at service level R0. A gate is a programme decision, never a public-authority approval, certification or deployment authorisation. The data-protocol pages describe a design, not a running system.

05What a methods paper contains

Six elements in every paper.

  1. 01

    Amaç

    The question the method answers and where it should not be used.

  2. 02

    Varsayımlar

    Sonuçların geçerli kalması için neyin doğru olması gerekir.

  3. 03

    Doğrulama

    How the method was tested, on which data and with what result.

  4. 04

    Arıza biçimleri

    Yöntemin yanıltıcı sonuçlar verdiği bilinen durumlar.

  5. 05

    Uygulama

    Software, versions and parameters, released where licences allow.

  6. 06

    İnceleme

    Who reviewed the paper and its review state.

06Açıklık neden önemlidir

Kimsenin kontrol edemediği bir yöntem kanıt değildir.

Risk decisions often rest on models and judgement that are hard to see. Open methods let independent researchers, source agencies and affected communities test them, find weaknesses and propose improvements. Where licensing or security prevents releasing code or data, the paper says so and describes the method in enough detail to assess.

09Sorular

Sorular ve yanıtlar.

Why publish methods separately from results?
So that the method can be reviewed and reused on its own, and so that results in many publications can point to one checked description.
Are qualitative methods treated as less rigorous?
No. They answer different questions. Both must state their design, assumptions and limits, and both are reviewed.
Can I reuse a GCRI method?
Evet, makalenin ve yayımlanmış yazılımların lisansı kapsamında. Lütfen yöntem makalesine ve sürümüne atıf yapın.
How are methods improved over time?
İnceleme, itiraz ve yeni kanıtlar yoluyla. Gözden geçirilmiş bir yöntem yeni bir sürüm olarak yayımlanır ve ona bağlı sonuçlar değişikliği belirtir.
Can I propose an improvement to a method?
Yes. Write to the research collaboration form with the method, the proposed change and your evidence. Proposals receive a reference and are reviewed on their merits.
RaporlarKatkıda bulunun

Bu sayfadan kanıt katkısında bulunun.

Reports, Konsorsiyumun üç ayda bir yayımlanan yayınıdır. Bu konu hakkında bildikleriniz bir sonraki sayıda kanıt, vaka veya düzeltme olabilir; size atfedilir ve kendi çalışmanızsa CC BY 4.0 kapsamında yayımlanır.

GCRI
Global Centre for Risk and Innovation

Bir yöntem, bir veri seti ya da bir soru getirin.

Bilgi ve başvurular bugün açıktır. Bir başvuru bir referans numarası alır ve bir sonraki adımı belirtir; başvurular, ödemeler, işlem kapasitesi tahsisleri ve kayıtlar yalnızca ekipleri, koşulları ve inceleme kapasiteleri mevcut olduğunda açılır.