GCRI · Biblioteca di ricerca
Metodi e documenti tecnici
Papers describing the quantitative and qualitative methods of The Global Centre for Risk and Innovation (GCRI), open enough for another team to apply, test or criticise them. Each states the method, its assumptions, its validation, where it fails and the software or data it needs. Methods link to their STEM Commons pages. Part of the research library.
The workspace for methods and technical papers.
Graduazione delle evidenze
Methods and technical papers · Review wave 2 · Example interface, not a record
Certezza per criterio
0 basso a 100 alto
Più alto è più certo. I valori sono esempi.
Coda di revisione
- R-1Programmi nazionali attivisecondo revisore3 g
- R-2Registri di evidenze con etichettesecondo revisore2 g
- R-3Metodi applicatisecondo revisore4 g
GCRI · Classificazione delle evidenze. Graduazione delle evidenze: nomi di esempio e valori illustrativi, non un registro.
Quantitativo e qualitativo, soggetti a un unico standard.
Both kinds of method must be described well enough to be checked.
Models and statistics
Metodi statistici, di rete, di simulazione e di ottimizzazione, come la quantificazione dell'incertezza.
Structured judgement
Interviste, Elicitazione strutturata del giudizio esperto, workshop su scenari e analisi di casi, con scienze delle politiche e delle decisioni.
Progetti combinati
Studies that combine both, stating how evidence of each kind is weighed.
Le linee guida di rendicontazione che un articolo metodologico segue, per tipo di metodo.
| Tipo di metodo | Guide | Riferimento |
|---|---|---|
| Prediction models, including machine learning | TRIPOD+AI | Collins and others, BMJ, 2024 |
| Agent-based and other simulation models | Protocollo ODD, secondo aggiornamento | Grimm e altri, 2020 |
| Computer model calibration | Calibration with explicit model discrepancy | Kennedy and O’Hagan, 2001 |
| Modelli di apprendimento automatico in uso | Model cards | Mitchell and others, 2019 |
| Cambiamenti della copertura del suolo dal telerilevamento | Stima delle superfici da un campione di riferimento | Olofsson and others, 2014 |
| Giudizio strutturato di esperti | Protocollo di elicitazione documentato con domande di calibrazione | Indicato in ciascun documento |
Reviewed methods are designed for the Methods and Technical series, with each model described under NS-12 of the proposed Nexus Standards. Methods researchers can contribute replications and documented failures; both are published.
Come si svolge il processo.
Process explorer · Process
Methods and technical papers: Source to evidence record
10 steps·4 stages·2 gates
Processo
Methods and technical papers: Source to evidence record
Una fonte viene registrata e valutata, il suo record etichettato e classificato, e un Digital Evidence Passport reca la provenienza; una correzione raggiunge ogni record dipendente.
01 Acquisizione
- 01Identificare la fonteFonte · Il custode della fonteIndividuare non significa acquisire. L'identificazione della fonte registra la classe della fonte, il custode, il ruolo istituzionale e la giurisdizione.
- 03Registrare la fontePassaggioLa registrazione rende una fonte individuata un partecipante governato del ciclo di vita delle evidenze. Non implica alcun avallo né alcuna certificazione.
02 Valutazione
- 04Classificazione della giurisdizione e dei dirittiSogliaLa classificazione dei diritti individua licenza, consenso, riservatezza e limiti al riutilizzo. Il risultato determina l'accesso e l'instradamento.
- 05Valutazione della qualità delle evidenzePassaggioLa valutazione della qualità decide se un record è idoneo a un uso definito. La qualità è multidimensionale e mai un punteggio unico.
- 06Etichetta di evidenzaPassaggioOgni risultato reca una di nove etichette di evidenza. I dati mancanti sono indicati come mancanti, mai come zero.
03 Registro
- 07Classificazione delle evidenzeRegistrazioneLa classificazione assegna ai record stati del ciclo di vita, come fonte verificata, adatto al pubblico o riservato. Gli stati possono coesistere e determinano l'uso delle evidenze.
- 08Rilascio della fonte e identificativoRegistro · NXS-GRX (dati canonici, provenienza e rischio)Un rilascio della fonte registra i diritti, la copertura temporale e la provenienza della fonte. Un UNI è assegnato tramite un catalogo e mai digitato a mano.
- 09Passaporto digitale delle evidenzeRegistrazioneIl passaporto registra provenienza, qualità, diritti, giurisdizione, uso consentito e cronologia, affinché le evidenze conservino il loro contesto quando circolano.
04 Uso e correzione
- 02La correzione raggiunge i record dipendentiFase · NXS-GRX (dati canonici, provenienza e rischio)Una correzione della fonte si propaga alle estrazioni e ai prodotti dipendenti senza riscrivere i risultati precedenti.
- 10Revisione sicura per la pubblicazioneSogliaLa revisione di idoneità al pubblico decide se un record può essere condiviso pubblicamente. È una fase distinta e non costituisce una convalida.
Data protocols: evidence lifecycle · Data protocols: core data objects and evidence records · The Global Risks Index (NXS-GRX)Designed programme process, not a record of operation. No cycle has run and every programme is at service level R0. A gate is a programme decision, never a public-authority approval, certification or deployment authorisation. The data-protocol pages describe a design, not a running system.
Sei elementi in ogni documento.
- 01
Finalità
La domanda a cui il metodo risponde e i casi in cui non dovrebbe essere usato.
- 02
Ipotesi
Cosa deve essere vero perché i risultati reggano.
- 03
Validazione
How the method was tested, on which data and with what result.
- 04
Modalità di guasto
Situazioni note in cui il metodo produce risultati fuorvianti.
- 05
Implementazione
Software, versions and parameters, released where licences allow.
- 06
Valutazione
Who reviewed the paper and its review state.
A method no one can check is not evidence.
Le decisioni sul rischio si fondano spesso su modelli e giudizi difficili da vedere. I metodi aperti consentono a ricercatori indipendenti, agenzie di origine e comunità interessate di metterli alla prova, individuarne i punti deboli e proporre miglioramenti. Quando licenze o ragioni di sicurezza impediscono di rilasciare codice o dati, il documento lo dichiara e descrive il metodo con un livello di dettaglio sufficiente per valutarlo.
Dove vengono applicati i metodi.
Pratica di modellizzazione: modelli e scenari. I metodi sottoposti a revisione possono comparire nella serie Methods and Technical. Protocolli sperimentali: protocolli e progettazione della ricerca dei Labs. Metodi quantitativi per la finanza: la Global Risks Alliance (GRA), modelli e metodi professionali.
Where this page’s references lead.
Gli organismi e i documenti alla luce dei quali si legge questa pagina. Stato ed edizioni cambiano; ogni link porta all'organismo emittente.
- Collins e altri, dichiarazione TRIPOD+AI, BMJ 385 (2024)
- Grimm and others, The ODD protocol for describing agent-based and other simulation models: a second update, Journal of Artificial Societies and Social Simulation 23 (2020)
- Kennedy and O’Hagan, Bayesian calibration of computer models, Journal of the Royal Statistical Society Series B 63 (2001)
- Mitchell e altri, Model cards for model reporting, Proceedings of FAT* 2019
- Olofsson e altri, Good practices for estimating area and assessing accuracy of land change, Remote Sensing of Environment 148 (2014)
- NS-12, artefatti software, di modelli e di IA/ML, uno standard proposto
Domande e risposte.
Why publish methods separately from results?
Are qualitative methods treated as less rigorous?
Can I reuse a GCRI method?
How are methods improved over time?
Can I propose an improvement to a method?
Contribuisci con evidenze da questa pagina.
Reports è la pubblicazione trimestrale del consorzio. Ciò che sai su questo tema può diventare un'evidenza, un caso o una correzione nella prossima edizione, attribuita a te e pubblicata con licenza CC BY 4.0 se si tratta di un tuo lavoro.
- E-mailPortale GW-GCRIInvialo da questa paginaUn'evidenza, una correzione, un caso, un metodo, una revisione, una traduzione o un contributo a un profilo. Arriva etichettata con questa pagina, così la riceve la persona redattrice che ne è responsabile.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- RapportiGCRIVedi tutti i modi per contribuireI tipi di contributo, come viene revisionato ciascuno, il riconoscimento che ricevi, la licenza e ciò che non è mai accettato.
Non inviare mai dati personali, dettagli su infrastrutture sensibili o qualsiasi cosa che tu non abbia il diritto di condividere. Un contributo viene sottoposto a revisione prima dell'uso; inviarlo non conferisce diritti di paternità né editoriali, e la sponsorizzazione non compra mai un risultato.
Porta un metodo, un set di dati o una domanda.
Informazioni e richieste sono aperte oggi. Una richiesta riceve un riferimento e indica il passo successivo; candidature, pagamenti, assegnazioni di calcolo e registrazioni si aprono solo quando esistono il team, le condizioni e la capacità di revisione.
Documenti legali.
Le mappe, i dati e le cifre di questo sito sono mostrati a titolo di contesto e di informazione generale. Non costituiscono consigli, previsioni né allerte; i limiti dell'informazione sono esposti nelle Dichiarazioni di esclusione di responsabilità e nelle Note sui dati.