Skip to content

GCRI · Labs

Quantificazione dell'incertezza nei laboratori

Uncertainty quantification asks how much confidence a result deserves, given measurement error, model structure, parameter choices and the conditions of the test. In laboratories and testbeds it connects a single experiment to a claim about performance in use, and it shows where a readiness or reproducibility claim is fragile.

02Domanda di adesione

Che cosa fanno qui la quantificazione dell'incertezza e la validazione dei modelli.

Uncertainty quantification and model validation characterise how uncertainty in inputs, parameters and model structure affects predictions. They establish how much confidence a model’s outputs deserve. In research and evidence, methods and modelling and innovation, uncertainty quantification shows where risk estimates are robust and where they are fragile. It guides where better data or models would change decisions. The canonical description is on the STEM Commons.

Measurement uncertainty budgets

Ogni fonte di errore in una catena strumentale è stimata e combinata secondo la Guide to the Expression of Uncertainty in Measurement, in modo che i risultati di laboratori diversi possano essere confrontati su una base comune.

Sensitivity analysis of simulation models

Gli input vengono variati sistematicamente per individuare quali determinano l'intervallo dei risultati, così che l'impegno di convalida e gli ulteriori test siano concentrati dove potrebbero modificare una conclusione.

Validation against independent experiments

Le previsioni del modello sono confrontate con esperimenti non utilizzati nella calibrazione, con metriche di concordanza e dominio di validità dichiarati prima che il modello sia usato per la progettazione.

03Monitoraggio

Analisi dell'incertezza.

La schermata che un gruppo utilizzerebbe per seguire questo metodo: misure, stati e decisioni. I nomi sono esempi e i valori sono illustrativi.

Analisi dell'incertezza

Labs · Uncertainty quantification · Run R-1480

Sensitivity rankedGCRI · Labs

Sensibilità di ordine totale

Distribuzione degli output

Input

Protocolli registratiUniformeprotocols, statedElicitazione strutturata del giudizio esperto
Studies with preregistrationLognormale of studies, statedElicitazione strutturata del giudizio esperto
Replications attemptedUniformestudi, dichiaratiElicitazione strutturata del giudizio esperto
Risultati negativi pubblicatiUniformepapers, statedElicitazione strutturata del giudizio esperto
Uncertainty analysis: the screen’s structure, terms and states for Labs.Example names and illustrative values; a design, not a record or a live system.
04Dati

Cosa utilizza il metodo.

Dataset e record utilizzati dalla quantificazione dell'incertezza e dalla validazione dei modelli su questa piattaforma, con il ruolo di ciascuno e l'etichetta che i loro valori recano. Le fonti sono elencate in registro delle fonti.

DatiRuoloEtichetta
Calibration certificatesInstrument uncertaintyStatistiche pubblicate
Inter-laboratory comparison resultsRiproducibilità tra laboratoriOSSERVATO
Ensemble di modelliDispersione strutturale e dei parametriMODELLATO
Protocolli strutturati di Elicitazione strutturata del giudizio espertoRanges where no data existSTIMATO
05Metodi ed evidenze

Come si modellano, si misurano e si sottopongono a test la quantificazione dell'incertezza nei laboratori.

Il modello, le sue ipotesi, i suoi dati e la sua incertezza, nella forma in cui uno scienziato o un ingegnere li verificherebbe. Le strutture seguono metodi pubblicati. I valori rappresentati sono illustrativi, non risultati.

Modello, equazioni e ipotesi

The model structure used for uncertainty quantification in laboratories, the assumptions it makes and how each is tested.

Rischio dell'elemento iRi = f(Hi, Ei, Vi, Ci)pericolo, esposizione, vulnerabilità e capacità di risposta
Perdita annua attesaEAL = ∑k pk · Lkover events k with annual probability pk
Sistemi accoppiatixt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
IpotesiPerché è realizzatoCome viene testato
Pericolo ed esposizione sono indipendenti all'interno di un eventoMantiene trattabile l'integrale delle perditeConfrontare con un adattamento di copula su registrazioni congiunte
Gli accoppiamenti sono lineari vicino al punto di funzionamentoConsente agli shock di propagarsi attraverso APerturbare oltre l'intervallo lineare e confrontare
Le curve di vulnerabilità si trasferiscono da un luogo all'altroLe curve locali sono raramente disponibiliValidare rispetto alle perdite osservate, dove esistono
Input
set di dati versionati con provenienza
Risultati
distribuzioni, mai valori singoli
Codice
pubblicato con la scheda del modello e i test
Riproduzione
stessi dati, codice, ambiente e seed
Formulazioni standard del rischio e dello spazio degli stati; le ipotesi elencate sono tipiche del metodo, dichiarate per la revisione, non risultati.
FAIR guiding principles · GO FAIR and FORCE11W3C PROV · World Wide Web ConsortiumGuidance on consistent treatment of uncertainties · IPCCCEOS Analysis Ready Data · Committee on Earth Observation Satellites
06Validazione

Come vengono verificati i risultati.

Le distribuzioni predittive sono verificate in termini di calibrazione e nitidezza rispetto a osservazioni escluse dalla stima. La verifica conferma che il codice risolve le equazioni previste.

VerificaCome si fa
Code verificationI risolutori vengono messi alla prova su problemi con soluzioni note prima dell'inizio della validazione
Validazione fuori campionePredictions are scored on data withheld from calibration
Copertura dell'intervalloSi verifica che gli intervalli dichiarati contengano gli esiti al tasso nominale
Domain of validityUse outside the tested conditions is flagged, not extrapolated silently

L'incertezza strutturale e le incognite ignote sono difficili da rappresentare. Il costo computazionale limita l'esplorazione dei modelli ad alta dimensionalità.

07Processo

Come si svolge il processo.

Process explorer · Process

Quantificazione dell'incertezza nei laboratori: pericolo, esposizione, vulnerabilità

10 steps4 stages

Processo

Quantificazione dell'incertezza nei laboratori: pericolo, esposizione, vulnerabilità

In IPCC AR6 Working Group II, climate risk results from interactions between hazards and a system’s exposure and vulnerability, and responses can add risk.

  1. 01 Fattori

    1. 01HazardDataset · Principal investigatorThe potential occurrence of a natural or human-induced physical event or trend that may harm people, property, services or ecosystems.
    2. 02ExposureDataset · Principal investigatorThe presence of people, livelihoods, species, ecosystems, infrastructure or assets in places and settings that could be adversely affected.
    3. 03SensitivityDataset · Principal investigatorThe degree to which a system or species is affected, either adversely or beneficially, by climate variability or change.
    4. 04Capacity to cope and adaptDataset · Principal investigatorThe ability of systems, institutions, humans and other organisms to adjust to damage, take opportunities or respond to consequences.
  2. 02 Valutazione

    1. 05Risk from responsesComponent · Principal investigatorRisks from climate responses arise when responses miss their objectives, or from trade-offs or negative side effects.
    2. 06VulnerabilityComponent · Principal investigatorThe propensity or predisposition to be adversely affected. It includes sensitivity to harm and lack of capacity to cope and adapt.
    3. 07RiskModel · LabsRisk results from dynamic interactions between hazards and the system’s exposure and vulnerability. Each may be uncertain and change.
  3. 03 Risposta

    1. 08Gestione del rischio e rispostaPassaggio · Ricercatore principaleLa gestione del rischio comprende piani, azioni, strategie o politiche che riducono la probabilità o l'entità delle conseguenze negative.
    2. 09Residual riskRecord · Principal investigatorThe climate impact risk that remains after adaptation and mitigation efforts. Adaptation can redistribute risk between areas and groups.
  4. 04 Decisione

    1. 10Decisione della parte responsabileDecisione · Ricercatore principaleL'inquadramento non indica un unico decisore. Le decisioni sulle risposte spettano alla parte responsabile secondo le proprie regole.

Sintesi di uno standard o metodo esterno, tratta dalle sue fonti pubbliche. Descrive ciò che dice il quadro, non il resoconto di alcuna esecuzione. Non indica che Nexus o un partner esegua, certifichi o approvi una fase. Un gate è una fase del metodo, mai un'approvazione di Nexus.

09Custodia

Chi mantiene il metodo.

Scienza dei sistemi e modellazione è custode della quantificazione dell'incertezza e della validazione dei modelli per il consorzio e verifica come vengono applicate nelle varie piattaforme.

11Domande

Domande e risposte.

Quali sono i limiti della quantificazione dell'incertezza e della validazione dei modelli in questo ambito?
L'incertezza strutturale e le incognite ignote sono difficili da rappresentare. Il costo computazionale limita l'esplorazione dei modelli ad alta dimensionalità.
Come vengono verificati i risultati?
Le distribuzioni predittive sono verificate in termini di calibrazione e nitidezza rispetto a osservazioni escluse dalla stima. La verifica conferma che il codice risolve le equazioni previste.
I valori di questa pagina sono reali?
The data names, roles and checks are real descriptions of practice. The canvas shows a design of the method’s use, not a run; no result is reported here.
Dove altro viene applicato questo metodo?
Il pagina canonica del metodo elenca ogni piattaforma che lo applica.
RapportiContribuisci

Contribuisci con evidenze da questa pagina.

Reports è la pubblicazione trimestrale del consorzio. Ciò che sai su questo tema può diventare un'evidenza, un caso o una correzione nella prossima edizione, attribuita a te e pubblicata con licenza CC BY 4.0 se si tratta di un tuo lavoro.

GCRILaboratoriEvidenze di LabsMetodi e aspetti tecnici
Laboratori

Porta un metodo, un set di dati o una domanda.

Informazioni e richieste sono aperte oggi. Una richiesta riceve un riferimento e indica il passo successivo; candidature, pagamenti, assegnazioni di calcolo e registrazioni si aprono solo quando esistono il team, le condizioni e la capacità di revisione.