Skip to content

GCRI · Foundry

Modellazione e simulazione

Risk models range from hydrodynamic flood simulations and power-flow studies to agent-based evacuation models and statistical loss models. They share three engineering needs: enough compute to run ensembles, enough discipline to reproduce a run months later, and enough honesty to state what the model cannot represent. This page sets out how model error enters, compounds through coupling and reaches decisions, how reproducibility is engineered, and where the limits sit.

02La domanda

Modellazione e simulazione: come si sviluppa il rischio.

Workloads, reproducibility and limits. The dossier below sets out how the risk develops, what is measured, where the data come from, how it is modelled and who decides.

Meccanismo

Structural and parameter error

Every model omits processes and fixes parameters from limited data. Calibration can fit the past for the wrong reasons, so a model that matches history may still fail in the conditions a decision is actually about.

Meccanismo

L'accoppiamento amplifica l'errore

When a flood model feeds a power-network model that feeds a hospital-continuity model, mismatched time steps, grids, units or assumptions produce plausible but wrong cascades. Each hand-off needs a declared contract and a sensitivity test of its own.

Meccanismo

Environment drift

A compiler flag, a library update, a different processor or an unrecorded random seed alters results. Without pinned containers, versioned code and recorded configuration, a run cannot be repeated and a change in output cannot be explained.

Meccanismo

Extrapolation

I modelli sono validati per un intervallo di condizioni e poi usati oltre di esso: un clima nuovo, un evento più grande, una città diversa. Al di fuori dell'intervallo validato un modello è un'assunzione con un numero allegato, e la sua etichetta deve dirlo.

03Metodi ed evidenze

How modelling and simulation is modelled, measured and tested.

Il modello, le sue ipotesi, i suoi dati e la sua incertezza, nella forma in cui uno scienziato o un ingegnere li verificherebbe. Le strutture seguono metodi pubblicati. I valori rappresentati sono illustrativi, non risultati.

Modello, equazioni e ipotesi

The model structure used for modelling and simulation, the assumptions it makes and how each is tested.

Rischio dell'elemento iRi = f(Hi, Ei, Vi, Ci)pericolo, esposizione, vulnerabilità e capacità di risposta
Perdita annua attesaEAL = ∑k pk · Lkover events k with annual probability pk
Sistemi accoppiatixt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
IpotesiPerché è realizzatoCome viene testato
Pericolo ed esposizione sono indipendenti all'interno di un eventoMantiene trattabile l'integrale delle perditeConfrontare con un adattamento di copula su registrazioni congiunte
Gli accoppiamenti sono lineari vicino al punto di funzionamentoConsente agli shock di propagarsi attraverso APerturbare oltre l'intervallo lineare e confrontare
Le curve di vulnerabilità si trasferiscono da un luogo all'altroLe curve locali sono raramente disponibiliValidare rispetto alle perdite osservate, dove esistono
Input
set di dati versionati con provenienza
Risultati
distribuzioni, mai valori singoli
Codice
pubblicato con la scheda del modello e i test
Riproduzione
stessi dati, codice, ambiente e seed
Formulazioni standard del rischio e dello spazio degli stati; le ipotesi elencate sono tipiche del metodo, dichiarate per la revisione, non risultati.
FAIR guiding principles · GO FAIR and FORCE11W3C PROV · World Wide Web ConsortiumGuidance on consistent treatment of uncertainties · IPCCCEOS Analysis Ready Data · Committee on Earth Observation Satellites
05Indicatori

Cosa viene misurato e con quale accuratezza.

Ogni indicatore riporta la sua unità, la sua cadenza, il tipo di fonte su cui si basa e l'etichetta di evidenza che un valore riporterebbe. Non sono mostrati valori: un programma li fornisce sotto la propria autorità.

IndicatoreUnitàCadenzaTipo di fonteEtichetta
Runs reproduced from recorded inputsproporzione di esecuzioni campionatetrimestraleAudit di riesecuzioneOSSERVATO
Hindcast skill on a held-out periodpunteggio di abilità specifico del modelloper versione del modelloValidazione rispetto alle osservazioniMODELLATO
Dispersione dell'ensembleunits of the output variableper insieme di esecuzioniStatistiche d'insiemeMODELLATO
Varianza attribuita a ciascuna fonte di incertezzaproporzione per input, parametro e strutturaper studioGlobale analisi di sensibilitàMODELLATO
Controlli dell'interfaccia di accoppiamento superatiproportion of hand-offsper esecuzioneControlli di unità, griglia e tempisticaOSSERVATO
Conservation closure errorunits of the conserved quantityper esecuzioneModel diagnosticsOSSERVATO
Versioni dei modelli in uso con revisione indipendenteproporzione di versioniper versioneRegistri di revisioneOSSERVATO
Calcolare per ciascun membro dell'ensembleore di core o ore di GPUper esecuzioneContabilità dello schedulerOSSERVATO
06Fonti

Da dove provengono le evidenze.

Set di dati pubblici e registri istituzionali specifici, ciascuno con la sua classe di licenza. Le fonti soggette ad accordo sono utilizzate solo alle relative condizioni e mai ripubblicate.

FonteCosa fornisceClasse di licenza
ERA5 reanalysis (Copernicus Climate Change Service)Hourly atmospheric and land forcing for hindcasts and validationGratuito e aperto, attribuzione
CMIP6 through the Earth System Grid FederationProiezioni dei modelli climatici per il forzante degli scenariCC BY 4.0 for most models
Output dei modelli di impatto ISIMIPSimulazioni armonizzate dell'impatto settoriale per l'intercomparazioneCC BY 4.0 per la maggior parte dei risultati
NASA EarthdataOsservazioni satellitari per la valutazione dei modelliFree and open, NASA data policy
ZenodoArchivi versionati e citabili di codice del modello, configurazione ed estratti di datiLicenza per record
Archivio Software HeritageLong-term preservation and persistent identifiers for source codeAccesso libero, licenza di ciascun repository
07Decisioni

Chi decide, e a cosa servono le evidenze.

Foundry prepara le evidenze. Le decisioni riportate di seguito sono prese dalle autorità indicate, secondo le rispettive norme, e mai dalla piattaforma.

Chi decideLa domandaEvidenze fornite da questa pagina
Responsabili di programma nei ministeriWhether a model is fit to inform a policy or investment choiceIntervallo di validazione, sensibilità, revisione indipendente e limiti dichiarati
Responsabili della revisione dei modelliSe una versione del modello può essere usata per una domanda e con quali avvertenzeCapacità di hindcast, verifica di estrapolazione, test di riproduzione
Gestori di infrastruttureWhether model scenarios are credible enough to size precautionsDispersione dell'ensemble, ipotesi di accoppiamento, confronto con eventi passati
Finanziatori della ricerca ed editori di riviste scientificheSe i risultati sono sufficientemente riproducibili da essere pubblicati o da ricevere ulteriori finanziamentiCodice archiviato, estrazioni di dati e registro delle riesecuzioni

Output prodotti da questo argomento

  • Run records with data cut, code version, container digest and configuration
  • Rapporti di validazione con le condizioni di validità dichiarate
  • Ensembles with spread and sensitivity attribution
  • Coupling contracts declaring units, time steps and grids
08Questioni centrali

Ciò che i modellisti si chiedono prima di fidarsi di un risultato.

  • Questa esecuzione può essere riprodotta esattamente, a partire dallo stesso estratto di dati, dalla stessa versione del codice e dalla stessa configurazione?
  • Il modello è stato validato rispetto alle osservazioni per le condizioni in cui viene ora utilizzato?
  • Quanta parte della dispersione dei risultati deriva da input, parametri e struttura del modello?
  • I modelli accoppiati scambiano variabili con unità, tempistiche e ipotesi coerenti?
09Meccanismi

Carichi di lavoro, ensemble e accoppiamento.

La maggior parte delle domande sul rischio richiede molte esecuzioni anziché una: ensemble su scenari climatici, campioni Monte Carlo su parametri incerti o analisi di sensibilità su opzioni di adattamento. Sono progettate per essere pianificate tramite NXS-COR (calcolo, nodi e ambienti di esecuzione) su cloud, infrastrutture private e nodi edge, con NXS-LAB (ricerca, esperimenti e simulazioni) che fornisce esperimenti governati e calcolo riproducibile, e NXS-DSS (casi decisionali e deliberazione) che traduce i risultati in compromessi tra opzioni per i decisori.

L'accoppiamento è il punto in cui si nascondono gli errori. Quando un modello di inondazione alimenta un modello di rete elettrica che a sua volta alimenta un modello di continuità ospedaliera, passi temporali, griglie spaziali o convenzioni sulle unità non allineati possono produrre cascate plausibili ma errate. Interfacce esplicite, ipotesi dichiarate a ogni passaggio e test di sensibilità sull'accoppiamento stesso sono le difese standard.

10Riproducibilità e limiti

Come si garantisce l'onestà dei risultati.

Versioni

Pinned inputs

Estrazioni di dati congelate, codice versionato e configurazioni registrate, in modo che un'esecuzione possa essere ripetuta.

Validazione

Against observations

Hindcasts and out-of-sample checks, with the conditions of validity stated.

Incertezza

Stated, not hidden

Results carry their spread and the main sources of uncertainty.

Limits: reproducibility proves a run can be repeated, not that the model is right. Models extrapolated beyond their validated range, or used for questions they were not built for, remain the most common source of misleading results. Independent review of model choice, separate from the team that built the model, is the standard safeguard.

11Metodi

Come viene studiato, e cosa i metodi non possono dire.

  1. Calcolo ad alte prestazioni, cloud ed edgePianificazione degli insiemi di simulazioni tra livelli · Esecuzione federata accanto ai datiApplicato qui
  2. Ingegneria dei sistemiInventario canonico dei sistemi · Interfacce definite dal contratto · Requisiti ricondotti alle evidenzeApplicato qui
  3. Intelligenza artificiale e apprendimento automaticoModelli di osservazione della Terra con convalida spaziale · Schede dei modelli e registri di promozioneApplicato qui
  4. Ingegneria, interoperabilità e gestione responsabile dei datiConvalida al confine di acquisizione · Estrazioni di dati congelate per prodotti riproducibiliApplicato qui
  5. Ingegneria del software e dei sistemi critici per la sicurezzaControlli delle politiche a sicurezza intrinseca · Provenienza delle build e distinte dei materiali · Casi di garanziaApplicato qui
12Where this page’s references

Where this page’s references lead.

Gli organismi e i documenti alla luce dei quali si legge questa pagina. Stato ed edizioni cambiano; ogni link porta all'organismo emittente.

13Domande

Domande e risposte.

Un risultato può essere riprodotto esattamente?
On the same hardware and software stack, often bit for bit. Across processors, compilers or parallel layouts, results can differ in the last digits, so reproduction is judged against a stated tolerance and any wider difference is investigated.
Why run ensembles instead of one best run?
Because inputs, parameters and model structure are uncertain. An ensemble shows the spread a decision must allow for; a single run hides it.
What is a coupling contract?
A declared agreement at each model hand-off on variables, units, time step, grid and assumptions. It is checked on every run, so a mismatch fails visibly instead of producing a plausible wrong cascade.
Posso eseguire il mio modello in Foundry?
Inside an authorised project, once a compute allocation and the data owners’ terms are in place. The model, its container and its configuration are recorded with every run.
I risultati dei modelli vengono pubblicati automaticamente?
No. Results stay in the project until a reviewer accepts them and, for public material, a public-safe release decision is recorded.
Does running a model in Labs validate it?
No. I risultati degli esperimenti non costituiscono certificazione. La validazione è una valutazione distinta e documentata.
RapportiContribuisci

Contribuisci con evidenze da questa pagina.

Reports è la pubblicazione trimestrale del consorzio. Ciò che sai su questo tema può diventare un'evidenza, un caso o una correzione nella prossima edizione, attribuita a te e pubblicata con licenza CC BY 4.0 se si tratta di un tuo lavoro.

GCRIFoundryFoundry Build and Readiness
Foundry

Porta un metodo, un set di dati o una domanda.

Informazioni e richieste sono aperte oggi. Una richiesta riceve un riferimento e indica il passo successivo; candidature, pagamenti, assegnazioni di calcolo e registrazioni si aprono solo quando esistono il team, le condizioni e la capacità di revisione.

The Global Centre for Risk and Innovation (GCRI Canada) is a Canadian not-for-profit organisation, not a registered charity, with its registered office in Ontario.