GCRI · Foundry
Modélisation et simulation
Risk models range from hydrodynamic flood simulations and power-flow studies to agent-based evacuation models and statistical loss models. They share three engineering needs: enough compute to run ensembles, enough discipline to reproduce a run months later, and enough honesty to state what the model cannot represent. This page sets out how model error enters, compounds through coupling and reaches decisions, how reproducibility is engineered, and where the limits sit.
Modelling and simulation on the record.
Modélisation et simulation : comment le risque se développe.
Workloads, reproducibility and limits. The dossier below sets out how the risk develops, what is measured, where the data come from, how it is modelled and who decides.
Structural and parameter error
Every model omits processes and fixes parameters from limited data. Calibration can fit the past for the wrong reasons, so a model that matches history may still fail in the conditions a decision is actually about.
Le couplage amplifie l'erreur
When a flood model feeds a power-network model that feeds a hospital-continuity model, mismatched time steps, grids, units or assumptions produce plausible but wrong cascades. Each hand-off needs a declared contract and a sensitivity test of its own.
Environment drift
A compiler flag, a library update, a different processor or an unrecorded random seed alters results. Without pinned containers, versioned code and recorded configuration, a run cannot be repeated and a change in output cannot be explained.
Extrapolation
Les modèles sont validés pour une plage de conditions, puis utilisés au-delà : un nouveau climat, un événement plus important, une autre ville. En dehors de la plage validée, un modèle est une hypothèse assortie d'un chiffre, et son étiquette doit le dire.
How modelling and simulation is modelled, measured and tested.
Le modèle, ses hypothèses, ses données et son incertitude, sous la forme qu'un scientifique ou un ingénieur vérifierait. Les structures suivent des méthodes publiées. Les valeurs représentées sont illustratives, ce ne sont pas des résultats.
Modèle, équations et hypothèses
The model structure used for modelling and simulation, the assumptions it makes and how each is tested.
Ri = f(Hi, Ei, Vi, Ci)aléa, exposition, vulnérabilité et capacité à faire faceEAL = ∑k pk · Lkover events k with annual probability pkxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error| Hypothèse | Pourquoi il est réalisé | Comment il est testé |
|---|---|---|
| Aléa et exposition sont indépendants au sein d'un événement | Garde l'intégrale des pertes calculable | Comparer avec un ajustement de copule sur des relevés conjoints |
| Les couplages sont linéaires près du point de fonctionnement | Laisse les chocs se propager à travers A | Perturber au-delà de la plage linéaire et comparer |
| Les courbes de vulnérabilité se transposent d'un lieu à l'autre | Les courbes locales sont rarement disponibles | Valider par rapport aux pertes observées lorsqu'elles existent |
- Entrées
- jeux de données versionnés avec provenance
- Productions
- des distributions, jamais des nombres isolés
- Code
- publié avec la fiche de modèle et les tests
- Reproduction
- mêmes données, code, environnement et graine
Models in Foundry are designed to couple the domains.
Models would carry NS-12 cards under the proposed Nexus Standards and be documented with the ODD protocol where agent-based. Results go to the Scenario and Stress-Test series.
- Model reviews.
- Validation data.
Ce qui est mesuré, et avec quelle qualité.
Chaque indicateur porte son unité, sa périodicité, le type de source qui le sous-tend et l'étiquette de preuve que porterait une valeur. Aucune valeur n'est affichée : un programme les fournit sous sa propre autorité.
| Indicateur | Unité | Fréquence | Type de source | Étiquette |
|---|---|---|---|---|
| Exécutions reproduites à partir des entrées enregistrées | proportion of sampled runs | trimestriel | Re-execution audit | OBSERVÉ |
| Qualité de la rétroprévision sur une période de validation retenue | model-specific skill score | par version du modèle | Validation against observations | MODÉLISÉ |
| Dispersion de l'ensemble | units of the output variable | par ensemble d'exécutions | Statistiques d'ensemble | MODÉLISÉ |
| Variance attribuée à chaque source d'incertitude | proportion par donnée d'entrée, paramètre et structure | par étude | Mondial analyse de sensibilité | MODÉLISÉ |
| Contrôles d'interface de couplage réussis | proportion de transmissions | par exécution | Unit, grid and timing checks | OBSERVÉ |
| Conservation closure error | units of the conserved quantity | par exécution | Model diagnostics | OBSERVÉ |
| Model versions in use with independent review | proportion de versions | par version | Dossiers d'examen | OBSERVÉ |
| Calculer pour chaque membre de l'ensemble | heures-cœur ou heures-GPU | par exécution | Scheduler accounting | OBSERVÉ |
D'où proviennent les données probantes.
Jeux de données publics et registres institutionnels nommés, chacun avec sa catégorie de licence. Les sources fournies dans le cadre d'accords ne sont utilisées que selon leurs conditions et ne sont jamais republiées.
| Sources | Ce qu'elle apporte | Catégorie de licence |
|---|---|---|
| Réanalyse ERA5 (Service Copernicus sur le l'évolution du climat ) | Hourly atmospheric and land forcing for hindcasts and validation | Libre et ouvert, attribution |
| CMIP6 through the Earth System Grid Federation | Climate model projections for scenario forcing | CC BY 4.0 for most models |
| ISIMIP impact model outputs | Harmonised sectoral impact simulations for intercomparison | CC BY 4.0 pour la plupart des produits |
| NASA Earthdata | Satellite observations for model evaluation | Free and open, NASA data policy |
| Zenodo | Archives versionnées et citables du code des modèles, de la configuration et des extractions de données | Licence par enregistrement |
| Archive Software Heritage | Long-term preservation and persistent identifiers for source code | Free access, licence of each repository |
Qui décide, et à quoi servent les données probantes.
Foundry prépare les données probantes. Les décisions ci-dessous sont prises par les autorités nommées, selon leurs propres règles, et jamais par la plateforme.
| Qui décide | La question | Données probantes servies par cette page |
|---|---|---|
| Responsables de programme dans les ministères | Si un modèle est apte à éclairer un choix de politique publique ou d'investissement | Validation range, sensitivity, independent review and stated limits |
| Model review leads | Si une version de modèle peut être utilisée pour une question donnée, et avec quelles réserves | Performance en rétrospective, vérification de l'extrapolation, test de reproduction |
| Exploitants d'infrastructures | Si les scénarios de modèle sont assez crédibles pour dimensionner les précautions | Dispersion de l'ensemble, hypothèses de couplage, comparaison avec des événements passés |
| Bailleurs de fonds de la recherche et rédacteurs de revues | Si les résultats sont suffisamment reproductibles pour être publiés ou financés davantage | Code archivé, extractions de données et trace des réexécutions |
Résultats que produit ce thème
- Run records with data cut, code version, container digest and configuration
- Rapports de validation avec indication des conditions de validité
- Ensembles avec dispersion et attribution de la sensibilité
- Coupling contracts declaring units, time steps and grids
Ce que les modélisateurs demandent avant de se fier à un résultat.
- Can this run be reproduced exactly, from the same data cut, code version and configuration?
- Le modèle a-t-il été validé par rapport aux observations pour les conditions dans lesquelles il est désormais utilisé ?
- How much of the spread in results comes from inputs, parameters and model structure?
- Les modèles couplés échangent-ils des variables avec des unités, un calendrier et des hypothèses cohérents ?
Charges de calcul, ensembles et couplage.
La plupart des questions de risque exigent de nombreuses exécutions plutôt qu'une seule : ensembles de scénarios climatiques, échantillons Monte Carlo sur des paramètres incertains, ou balayages d'options d'adaptation. Elles sont conçues pour être planifiées via NXS-COR (calcul, nœuds et environnements d'exécution) sur des nœuds cloud, d'infrastructure privée et de périphérie, NXS-LAB (recherche, expériences et simulations) fournissant des expériences encadrées et un calcul reproductible, et NXS-DSS (dossiers de décision et délibération) transformant les résultats en arbitrages entre options pour les décideurs.
Le couplage est l'endroit où les erreurs se cachent. Lorsqu'un modèle d'inondation alimente un modèle de réseau électrique qui alimente un modèle de continuité hospitalière, des pas de temps, des grilles spatiales ou des conventions d'unités discordants peuvent produire des cascades plausibles mais fausses. Des interfaces explicites, des hypothèses déclarées à chaque transmission et des tests de sensibilité sur le couplage lui-même sont les parades usuelles.
Comment les résultats restent rigoureux.
Intrants figés
Des extractions de données figées, un code versionné et des configurations consignées, afin qu'une exécution puisse être reproduite.
Par rapport aux observations
Hindcasts and out-of-sample checks, with the conditions of validity stated.
Énoncé, non dissimulé
Results carry their spread and the main sources of uncertainty.
Limits: reproducibility proves a run can be repeated, not that the model is right. Models extrapolated beyond their validated range, or used for questions they were not built for, remain the most common source of misleading results. Independent review of model choice, separate from the team that built the model, is the standard safeguard.
Comment c'est étudié, et ce que les méthodes ne peuvent pas dire.
- 01Calcul haute performance, en nuage et en périphérieOrdonnancement des ensembles entre niveaux · Exécution fédérée au plus près des donnéesAppliqué ici
- 02Ingénierie des systèmesInventaire canonique des systèmes · Interfaces conçues d'abord par contrat · Exigences rattachées aux données probantesAppliqué ici
- 03Intelligence artificielle et apprentissage automatiqueModèles d'observation de la Terre avec validation spatiale · Fiches de modèle et registres de promotionAppliqué ici
- 04Ingénierie, interopérabilité et intendance des donnéesValidation à la frontière d'ingestion · Coupes de données figées pour des produits reproductiblesAppliqué ici
- 05Ingénierie des logiciels et des systèmes critiques pour la sécuritéContrôles de politique à sécurité intégrée · Provenance des builds et nomenclatures · Dossiers d'assuranceAppliqué ici
Where this page’s references lead.
Les organismes et documents à l'aune desquels cette page se lit. Les statuts et éditions changent ; chaque lien mène à l'organisme émetteur.
Questions et réponses.
Un résultat peut-il être reproduit à l'identique ?
Why run ensembles instead of one best run?
Qu'est-ce qu'un contrat de couplage ?
Puis-je exécuter mon propre modèle dans Foundry ?
Les résultats des modèles sont-ils publiés automatiquement ?
Does running a model in Labs validate it?
Apportez des éléments de preuve depuis cette page.
Reports est la publication trimestrielle du Consortium. Ce que vous savez de ce sujet peut devenir une donnée probante, un cas ou une correction dans la prochaine édition, avec mention de votre nom et publié sous licence CC BY 4.0 lorsqu'il s'agit de votre propre travail.
- E-mailPasserelle GW-GCRIL'envoyer depuis cette pageUne preuve, une correction, un cas, une méthode, un examen, une traduction ou un apport au profil. Elle arrive étiquetée avec cette page, afin que le rédacteur responsable la reçoive.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- RapportsGCRIVoir toutes les façons de contribuerLes types de contribution, la manière dont chacune est examinée, la reconnaissance accordée, la licence et ce qui n'est jamais accepté.
N'envoyez jamais de données personnelles, de détails sensibles sur des infrastructures ni rien que vous n'avez pas le droit de communiquer. Une contribution est examinée avant utilisation ; son envoi ne confère ni qualité d'auteur ni droits éditoriaux, et un parrainage n'achète jamais une conclusion.
Apportez une méthode, un jeu de données ou une question.
L'information et les demandes sont ouvertes dès aujourd'hui. Une demande reçoit une référence et indique l'étape suivante ; candidatures, paiements, allocations de calcul et inscriptions n'ouvrent que lorsque l'équipe, les conditions et la capacité d'examen existent.
Documents juridiques.
Les cartes, données et chiffres de ce site sont présentés à titre de contexte et d'information générale. Ils ne constituent ni des conseils, ni des prévisions, ni des alertes ; les limites de l'information sont exposées dans les Avertissements et les Notices sur les données.