GCRI · Foundry
Modellazione e simulazione
Risk models range from hydrodynamic flood simulations and power-flow studies to agent-based evacuation models and statistical loss models. They share three engineering needs: enough compute to run ensembles, enough discipline to reproduce a run months later, and enough honesty to state what the model cannot represent. This page sets out how model error enters, compounds through coupling and reaches decisions, how reproducibility is engineered, and where the limits sit.
Modellizzazione e simulazione agli atti.
Modellazione e simulazione: come si sviluppa il rischio.
Workloads, reproducibility and limits. The dossier below sets out how the risk develops, what is measured, where the data come from, how it is modelled and who decides.
Structural and parameter error
Every model omits processes and fixes parameters from limited data. Calibration can fit the past for the wrong reasons, so a model that matches history may still fail in the conditions a decision is actually about.
L'accoppiamento amplifica l'errore
When a flood model feeds a power-network model that feeds a hospital-continuity model, mismatched time steps, grids, units or assumptions produce plausible but wrong cascades. Each hand-off needs a declared contract and a sensitivity test of its own.
Environment drift
A compiler flag, a library update, a different processor or an unrecorded random seed alters results. Without pinned containers, versioned code and recorded configuration, a run cannot be repeated and a change in output cannot be explained.
Extrapolation
I modelli sono validati per un intervallo di condizioni e poi usati oltre di esso: un clima nuovo, un evento più grande, una città diversa. Al di fuori dell'intervallo validato un modello è un'assunzione con un numero allegato, e la sua etichetta deve dirlo.
How modelling and simulation is modelled, measured and tested.
Il modello, le sue ipotesi, i suoi dati e la sua incertezza, nella forma in cui uno scienziato o un ingegnere li verificherebbe. Le strutture seguono metodi pubblicati. I valori rappresentati sono illustrativi, non risultati.
Modello, equazioni e ipotesi
The model structure used for modelling and simulation, the assumptions it makes and how each is tested.
Ri = f(Hi, Ei, Vi, Ci)pericolo, esposizione, vulnerabilità e capacità di rispostaEAL = ∑k pk · Lkover events k with annual probability pkxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error| Ipotesi | Perché è realizzato | Come viene testato |
|---|---|---|
| Pericolo ed esposizione sono indipendenti all'interno di un evento | Mantiene trattabile l'integrale delle perdite | Confrontare con un adattamento di copula su registrazioni congiunte |
| Gli accoppiamenti sono lineari vicino al punto di funzionamento | Consente agli shock di propagarsi attraverso A | Perturbare oltre l'intervallo lineare e confrontare |
| Le curve di vulnerabilità si trasferiscono da un luogo all'altro | Le curve locali sono raramente disponibili | Validare rispetto alle perdite osservate, dove esistono |
- Input
- set di dati versionati con provenienza
- Risultati
- distribuzioni, mai valori singoli
- Codice
- pubblicato con la scheda del modello e i test
- Riproduzione
- stessi dati, codice, ambiente e seed
I modelli in Foundry sono concepiti per accoppiare i domini.
- AcquaIn praticaIdrologia accoppiata all'energia elettrica.Che cosa può verificare un lettoreDocumentazione di accoppiamento
- CiboIn praticaColture legate ad acqua ed energia.Che cosa può verificare un lettorePropagazione dell'incertezza
- HealthIn practiceHealth continuity coupled to lifelines.What a reader can checkValidation
Models would carry NS-12 cards under the proposed Nexus Standards and be documented with the ODD protocol where agent-based. Results go to the Scenario and Stress-Test series.
- Model reviews.
- Validation data.
Cosa viene misurato e con quale accuratezza.
Ogni indicatore riporta la sua unità, la sua cadenza, il tipo di fonte su cui si basa e l'etichetta di evidenza che un valore riporterebbe. Non sono mostrati valori: un programma li fornisce sotto la propria autorità.
| Indicatore | Unità | Cadenza | Tipo di fonte | Etichetta |
|---|---|---|---|---|
| Runs reproduced from recorded inputs | proporzione di esecuzioni campionate | trimestrale | Audit di riesecuzione | OSSERVATO |
| Hindcast skill on a held-out period | punteggio di abilità specifico del modello | per versione del modello | Validazione rispetto alle osservazioni | MODELLATO |
| Dispersione dell'ensemble | units of the output variable | per insieme di esecuzioni | Statistiche d'insieme | MODELLATO |
| Varianza attribuita a ciascuna fonte di incertezza | proporzione per input, parametro e struttura | per studio | Globale analisi di sensibilità | MODELLATO |
| Controlli dell'interfaccia di accoppiamento superati | proportion of hand-offs | per esecuzione | Controlli di unità, griglia e tempistica | OSSERVATO |
| Conservation closure error | units of the conserved quantity | per esecuzione | Model diagnostics | OSSERVATO |
| Versioni dei modelli in uso con revisione indipendente | proporzione di versioni | per versione | Registri di revisione | OSSERVATO |
| Calcolare per ciascun membro dell'ensemble | ore di core o ore di GPU | per esecuzione | Contabilità dello scheduler | OSSERVATO |
Da dove provengono le evidenze.
Set di dati pubblici e registri istituzionali specifici, ciascuno con la sua classe di licenza. Le fonti soggette ad accordo sono utilizzate solo alle relative condizioni e mai ripubblicate.
| Fonte | Cosa fornisce | Classe di licenza |
|---|---|---|
| ERA5 reanalysis (Copernicus Climate Change Service) | Hourly atmospheric and land forcing for hindcasts and validation | Gratuito e aperto, attribuzione |
| CMIP6 through the Earth System Grid Federation | Proiezioni dei modelli climatici per il forzante degli scenari | CC BY 4.0 for most models |
| Output dei modelli di impatto ISIMIP | Simulazioni armonizzate dell'impatto settoriale per l'intercomparazione | CC BY 4.0 per la maggior parte dei risultati |
| NASA Earthdata | Osservazioni satellitari per la valutazione dei modelli | Free and open, NASA data policy |
| Zenodo | Archivi versionati e citabili di codice del modello, configurazione ed estratti di dati | Licenza per record |
| Archivio Software Heritage | Long-term preservation and persistent identifiers for source code | Accesso libero, licenza di ciascun repository |
Chi decide, e a cosa servono le evidenze.
Foundry prepara le evidenze. Le decisioni riportate di seguito sono prese dalle autorità indicate, secondo le rispettive norme, e mai dalla piattaforma.
| Chi decide | La domanda | Evidenze fornite da questa pagina |
|---|---|---|
| Responsabili di programma nei ministeri | Whether a model is fit to inform a policy or investment choice | Intervallo di validazione, sensibilità, revisione indipendente e limiti dichiarati |
| Responsabili della revisione dei modelli | Se una versione del modello può essere usata per una domanda e con quali avvertenze | Capacità di hindcast, verifica di estrapolazione, test di riproduzione |
| Gestori di infrastrutture | Whether model scenarios are credible enough to size precautions | Dispersione dell'ensemble, ipotesi di accoppiamento, confronto con eventi passati |
| Finanziatori della ricerca ed editori di riviste scientifiche | Se i risultati sono sufficientemente riproducibili da essere pubblicati o da ricevere ulteriori finanziamenti | Codice archiviato, estrazioni di dati e registro delle riesecuzioni |
Output prodotti da questo argomento
- Run records with data cut, code version, container digest and configuration
- Rapporti di validazione con le condizioni di validità dichiarate
- Ensembles with spread and sensitivity attribution
- Coupling contracts declaring units, time steps and grids
Ciò che i modellisti si chiedono prima di fidarsi di un risultato.
- Questa esecuzione può essere riprodotta esattamente, a partire dallo stesso estratto di dati, dalla stessa versione del codice e dalla stessa configurazione?
- Il modello è stato validato rispetto alle osservazioni per le condizioni in cui viene ora utilizzato?
- Quanta parte della dispersione dei risultati deriva da input, parametri e struttura del modello?
- I modelli accoppiati scambiano variabili con unità, tempistiche e ipotesi coerenti?
Carichi di lavoro, ensemble e accoppiamento.
La maggior parte delle domande sul rischio richiede molte esecuzioni anziché una: ensemble su scenari climatici, campioni Monte Carlo su parametri incerti o analisi di sensibilità su opzioni di adattamento. Sono progettate per essere pianificate tramite NXS-COR (calcolo, nodi e ambienti di esecuzione) su cloud, infrastrutture private e nodi edge, con NXS-LAB (ricerca, esperimenti e simulazioni) che fornisce esperimenti governati e calcolo riproducibile, e NXS-DSS (casi decisionali e deliberazione) che traduce i risultati in compromessi tra opzioni per i decisori.
L'accoppiamento è il punto in cui si nascondono gli errori. Quando un modello di inondazione alimenta un modello di rete elettrica che a sua volta alimenta un modello di continuità ospedaliera, passi temporali, griglie spaziali o convenzioni sulle unità non allineati possono produrre cascate plausibili ma errate. Interfacce esplicite, ipotesi dichiarate a ogni passaggio e test di sensibilità sull'accoppiamento stesso sono le difese standard.
Come si garantisce l'onestà dei risultati.
Pinned inputs
Estrazioni di dati congelate, codice versionato e configurazioni registrate, in modo che un'esecuzione possa essere ripetuta.
Against observations
Hindcasts and out-of-sample checks, with the conditions of validity stated.
Stated, not hidden
Results carry their spread and the main sources of uncertainty.
Limits: reproducibility proves a run can be repeated, not that the model is right. Models extrapolated beyond their validated range, or used for questions they were not built for, remain the most common source of misleading results. Independent review of model choice, separate from the team that built the model, is the standard safeguard.
Come viene studiato, e cosa i metodi non possono dire.
- 01Calcolo ad alte prestazioni, cloud ed edgePianificazione degli insiemi di simulazioni tra livelli · Esecuzione federata accanto ai datiApplicato qui
- 02Ingegneria dei sistemiInventario canonico dei sistemi · Interfacce definite dal contratto · Requisiti ricondotti alle evidenzeApplicato qui
- 03Intelligenza artificiale e apprendimento automaticoModelli di osservazione della Terra con convalida spaziale · Schede dei modelli e registri di promozioneApplicato qui
- 04Ingegneria, interoperabilità e gestione responsabile dei datiConvalida al confine di acquisizione · Estrazioni di dati congelate per prodotti riproducibiliApplicato qui
- 05Ingegneria del software e dei sistemi critici per la sicurezzaControlli delle politiche a sicurezza intrinseca · Provenienza delle build e distinte dei materiali · Casi di garanziaApplicato qui
Where this page’s references lead.
Gli organismi e i documenti alla luce dei quali si legge questa pagina. Stato ed edizioni cambiano; ogni link porta all'organismo emittente.
Domande e risposte.
Un risultato può essere riprodotto esattamente?
Why run ensembles instead of one best run?
What is a coupling contract?
Posso eseguire il mio modello in Foundry?
I risultati dei modelli vengono pubblicati automaticamente?
Does running a model in Labs validate it?
Contribuisci con evidenze da questa pagina.
Reports è la pubblicazione trimestrale del consorzio. Ciò che sai su questo tema può diventare un'evidenza, un caso o una correzione nella prossima edizione, attribuita a te e pubblicata con licenza CC BY 4.0 se si tratta di un tuo lavoro.
- E-mailPortale GW-GCRIInvialo da questa paginaUn'evidenza, una correzione, un caso, un metodo, una revisione, una traduzione o un contributo a un profilo. Arriva etichettata con questa pagina, così la riceve la persona redattrice che ne è responsabile.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- RapportiGCRIVedi tutti i modi per contribuireI tipi di contributo, come viene revisionato ciascuno, il riconoscimento che ricevi, la licenza e ciò che non è mai accettato.
Non inviare mai dati personali, dettagli su infrastrutture sensibili o qualsiasi cosa che tu non abbia il diritto di condividere. Un contributo viene sottoposto a revisione prima dell'uso; inviarlo non conferisce diritti di paternità né editoriali, e la sponsorizzazione non compra mai un risultato.
Porta un metodo, un set di dati o una domanda.
Informazioni e richieste sono aperte oggi. Una richiesta riceve un riferimento e indica il passo successivo; candidature, pagamenti, assegnazioni di calcolo e registrazioni si aprono solo quando esistono il team, le condizioni e la capacità di revisione.
Documenti legali.
Le mappe, i dati e le cifre di questo sito sono mostrati a titolo di contesto e di informazione generale. Non costituiscono consigli, previsioni né allerte; i limiti dell'informazione sono esposti nelle Dichiarazioni di esclusione di responsabilità e nelle Note sui dati.