GCRI · Foundry
Modellierung und Simulation
Risikomodelle reichen von hydrodynamischen Hochwassersimulationen und Lastflussstudien bis zu agentenbasierten Evakuierungsmodellen und statistischen Verlustmodellen. Sie teilen drei technische Anforderungen: genügend Rechenleistung für Ensembles, genügend Disziplin, um einen Lauf Monate später zu reproduzieren, und genügend Ehrlichkeit, um zu benennen, was das Modell nicht abbilden kann. Diese Seite legt dar, wie Modellfehler entstehen, sich durch Kopplung verstärken und Entscheidungen erreichen, wie Reproduzierbarkeit technisch gewährleistet wird und wo die Grenzen liegen.
Modellierung und Simulation im Protokoll.
Modellierung und Simulation: wie sich das Risiko entwickelt.
Workloads, reproducibility and limits. The dossier below sets out how the risk develops, what is measured, where the data come from, how it is modelled and who decides.
Structural and parameter error
Jedes Modell lässt Prozesse aus und legt Parameter anhand begrenzter Daten fest. Die Kalibrierung kann die Vergangenheit aus den falschen Gründen abbilden, sodass ein Modell, das die Historie trifft, unter den Bedingungen, um die es bei einer Entscheidung tatsächlich geht, dennoch versagen kann.
Kopplung verstärkt Fehler
Wenn ein Hochwassermodell ein Stromnetzmodell speist, das wiederum ein Modell zur Kontinuität von Krankenhäusern speist, erzeugen abweichende Zeitschritte, Raster, Einheiten oder Annahmen plausible, aber falsche Kaskaden. Jede Übergabe braucht einen erklärten Vertrag und einen eigenen Sensitivitätstest.
Environment drift
Ein Compiler-Flag, ein Bibliotheksupdate, ein anderer Prozessor oder ein nicht erfasster Zufallsstartwert verändert die Ergebnisse. Ohne fixierte Container, versionierten Code und erfasste Konfiguration lässt sich ein Lauf nicht wiederholen und eine Änderung der Ausgabe nicht erklären.
Extrapolation
Modelle werden für einen Bereich von Bedingungen validiert und dann darüber hinaus eingesetzt: ein neues Klima, ein größeres Ereignis, eine andere Stadt. Außerhalb des validierten Bereichs ist ein Modell eine Annahme mit angehängter Zahl, und seine Kennzeichnung muss das ausweisen.
Wie Modellierung und Simulation modelliert, gemessen und getestet werden.
Das Modell, seine Annahmen, seine Daten und seine Unsicherheit in der Form, in der eine Wissenschaftlerin oder ein Ingenieur sie prüfen würde. Die Strukturen folgen veröffentlichten Methoden. Die dargestellten Werte sind illustrativ, keine Befunde.
Modell, Gleichungen und Annahmen
Die für Modellierung und Simulation verwendete Modellstruktur, die zugrunde liegenden Annahmen und die Art, wie jede davon geprüft wird.
Ri = f(Hi, Ei, Vi, Ci)Gefahr, Exposition, Verwundbarkeit und BewältigungskapazitätEAL = ∑k pk · Lkover events k with annual probability pkxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error| Annahme | Warum es entsteht | Wie es geprüft wird |
|---|---|---|
| Gefahr und Exposition sind innerhalb eines Ereignisses unabhängig | Hält das Schadensintegral berechenbar | Mit einer Copula-Anpassung an gemeinsamen Aufzeichnungen vergleichen |
| Kopplungen sind nahe dem Arbeitspunkt linear | Lässt Schocks sich über A ausbreiten | Über den linearen Bereich hinaus stören und vergleichen |
| Vulnerabilitätskurven lassen sich zwischen Orten übertragen | Lokale Kurven sind selten verfügbar | Anhand beobachteter Schäden validieren, wo es sie gibt |
- Eingaben
- versionierte Datensätze mit Herkunftsnachweis
- Ergebnisse
- Verteilungen, nie einzelne Zahlen
- Code
- mit Modellkarte und Tests veröffentlicht
- Reproduktion
- gleiche Daten, Code, Umgebung und Seed
Modelle in Foundry sind darauf ausgelegt, die Domänen zu koppeln.
- WaterIn practiceHydrology coupled to power.What a reader can checkCoupling documentation
- ErnährungIn der PraxisKulturpflanzen, gekoppelt an Wasser und Energie.Was Lesende prüfen könnenFortpflanzung von Unsicherheit
- HealthIn practiceHealth continuity coupled to lifelines.What a reader can checkValidation
Models would carry NS-12 cards under the proposed Nexus Standards and be documented with the ODD protocol where agent-based. Results go to the Scenario and Stress-Test series.
- Model reviews.
- Validation data.
Was gemessen wird und wie gut.
Jeder Indikator trägt seine Einheit, seinen Rhythmus, die Art der zugrunde liegenden Quelle und die Evidenzkennzeichnung, die ein Wert tragen würde. Es werden keine Werte gezeigt: Ein Programm liefert sie unter seiner eigenen Autorität.
| Indikator | Einheit | Takt | Quellentyp | Kennzeichnung |
|---|---|---|---|---|
| Runs reproduced from recorded inputs | Anteil der Stichprobenläufe | vierteljährlich | Re-execution audit | BEOBACHTET |
| Hindcast-Güte für einen zurückgehaltenen Zeitraum | modellspezifischer Skill-Score | je Modellversion | Validation against observations | MODELLIERT |
| Ensemblestreuung | units of the output variable | je Durchlaufsatz | Ensemble-Statistiken | MODELLIERT |
| Jeder Unsicherheitsquelle zugeschriebene Varianz | Anteil nach Eingabe, Parameter und Struktur | je Studie | Global sensitivity analysis | MODELLIERT |
| Prüfungen der Kopplungsschnittstellen bestanden | proportion of hand-offs | pro Lauf | Prüfungen von Einheiten, Raster und Zeitangaben | BEOBACHTET |
| Conservation closure error | Einheiten der Erhaltungsgröße | pro Lauf | Model diagnostics | BEOBACHTET |
| Model versions in use with independent review | Anteil der Versionen | pro Version | Prüfunterlagen | BEOBACHTET |
| Pro Ensemblemitglied berechnen | Kernstunden oder GPU-Stunden | pro Lauf | Abrechnung des Schedulers | BEOBACHTET |
Woher die Evidenz stammt.
Benannte öffentliche Datensätze und institutionelle Aufzeichnungen, jeweils mit ihrer Lizenzklasse. Quellen auf Vereinbarungsbasis werden nur zu ihren Bedingungen genutzt und niemals weiterveröffentlicht.
| Quelle | Was es liefert | Lizenzklasse |
|---|---|---|
| ERA5 reanalysis (Copernicus Climate Change Service) | Hourly atmospheric and land forcing for hindcasts and validation | Kostenlos und offen, Namensnennung |
| CMIP6 through the Earth System Grid Federation | Klimamodellprojektionen für den Szenarioantrieb | CC BY 4.0 for most models |
| Ausgaben der ISIMIP-Wirkungsmodelle | Harmonisierte sektorale Wirkungssimulationen für den Intervergleich | CC BY 4.0 für die meisten Ergebnisse |
| NASA Earthdata | Satellitenbeobachtungen zur Modellbewertung | Frei und offen, Datenpolitik der NASA |
| Zenodo | Versionierte, zitierfähige Archive von Modellcode, Konfiguration und Datenausschnitten | Lizenz je Datensatz |
| Software-Heritage-Archiv | Langzeitarchivierung und persistente Identifikatoren für Quellcode | Free access, licence of each repository |
Wer entscheidet und wozu die Evidenz dient.
Foundry bereitet Evidenz auf. Die nachstehenden Entscheidungen treffen die genannten Behörden nach ihren eigenen Regeln, nie die Plattform.
| Wer entscheidet | Die Frage | Evidenz, der diese Seite dient |
|---|---|---|
| Programme owners in ministries | Ob ein Modell geeignet ist, eine Politik- oder Investitionsentscheidung zu stützen | Gültigkeitsbereich, Sensitivität, unabhängige Begutachtung und ausgewiesene Grenzen |
| Leitung der Modellprüfung | Ob eine Modellversion für eine Fragestellung verwendet werden darf und mit welchen Vorbehalten | Hindcast-Güte, Extrapolationsprüfung, Reproduktionstest |
| Infrastrukturbetreiber | Whether model scenarios are credible enough to size precautions | Ensemblestreuung, Kopplungsannahmen, Vergleich mit vergangenen Ereignissen |
| Forschungsförderer und Herausgeber von Fachzeitschriften | Ob Ergebnisse reproduzierbar genug sind, um sie zu veröffentlichen oder weiter zu fördern | Archivierter Code, Datenschnitte und das Protokoll der erneuten Ausführung |
Ergebnisse, die dieses Thema hervorbringt
- Laufprotokolle mit Datenstand, Codeversion, Container-Digest und Konfiguration
- Validierungsberichte mit Angabe der Gültigkeitsbedingungen
- Ensembles with spread and sensitivity attribution
- Coupling contracts declaring units, time steps and grids
Was Modellierende fragen, bevor sie einem Ergebnis vertrauen.
- Lässt sich dieser Lauf exakt reproduzieren, mit demselben Datenschnitt, derselben Code-Version und derselben Konfiguration?
- Wurde das Modell anhand von Beobachtungen für die Bedingungen validiert, in denen es nun eingesetzt wird?
- Wie viel der Streuung der Ergebnisse stammt aus Eingaben, Parametern und Modellstruktur?
- Tauschen gekoppelte Modelle Variablen mit konsistenten Einheiten, zeitlicher Abstimmung und Annahmen aus?
Workloads, ensembles and coupling.
Die meisten Risikofragen erfordern viele Durchläufe statt eines einzigen: Ensembles über Klimaszenarien, Monte-Carlo-Stichproben über unsichere Parameter oder Variationen über Anpassungsoptionen. Diese sind dafür ausgelegt, über NXS-COR (Rechenleistung, Knoten und Laufzeitumgebungen) auf Cloud, privater Infrastruktur und Edge-Knoten eingeplant zu werden. NXS-LAB (Forschung, Experimente und Simulationen) stellt gesteuerte Experimente und reproduzierbare Berechnungen bereit, und NXS-DSS (Entscheidungsfälle und Beratung) überführt die Ergebnisse in Abwägungen von Optionen für Entscheidungsträger.
Kopplung ist der Ort, an dem sich Fehler verbergen. Wenn ein Hochwassermodell ein Stromnetzmodell speist, das wiederum ein Modell zur Betriebskontinuität von Krankenhäusern speist, können nicht abgestimmte Zeitschritte, räumliche Raster oder Einheitenkonventionen plausible, aber falsche Kaskaden erzeugen. Explizite Schnittstellen, offengelegte Annahmen bei jeder Übergabe und Sensitivitätstests der Kopplung selbst sind die üblichen Schutzmaßnahmen.
Wie Ergebnisse korrekt gehalten werden.
Fixierte Eingaben
Eingefrorene Datenschnitte, versionierter Code und aufgezeichnete Konfigurationen, damit ein Lauf wiederholt werden kann.
Im Vergleich zu Beobachtungen
Hindcasts und Prüfungen außerhalb der Stichprobe, mit angegebenen Gültigkeitsbedingungen.
Benannt, nicht verborgen
Results carry their spread and the main sources of uncertainty.
Limits: reproducibility proves a run can be repeated, not that the model is right. Models extrapolated beyond their validated range, or used for questions they were not built for, remain the most common source of misleading results. Independent review of model choice, separate from the team that built the model, is the standard safeguard.
Wie es untersucht wird und was die Methoden nicht sagen können.
- 01Hochleistungs-, Cloud- und Edge-ComputingEnsemble-Planung über Stufen hinweg · Föderierte Ausführung direkt bei den DatenHier angewandt
- 02SystemtechnikKanonisches Systeminventar · Contract-first-Schnittstellen · Auf Evidenz rückführbare AnforderungenHier angewandt
- 03Künstliche Intelligenz und maschinelles LernenErdbeobachtungsmodelle mit räumlicher Validierung · Model Cards und FreigabeprotokolleHier angewandt
- 04Datentechnik, Interoperabilität und DatenverantwortungValidierung an der Einlesegrenze · Eingefrorene Datenstände für reproduzierbare ProdukteHier angewandt
- 05Software- und sicherheitskritische SystemtechnikFail-closed-Richtlinienschranken · Build-Herkunft und Stücklisten · Assurance CasesHier angewandt
Where this page’s references lead.
Die Gremien und Dokumente, vor deren Hintergrund diese Seite gelesen wird. Status und Ausgaben ändern sich; jeder Link führt zur herausgebenden Stelle.
Fragen und Antworten.
Can a result be reproduced exactly?
Why run ensembles instead of one best run?
Was ist ein Kopplungsvertrag?
Kann ich in Foundry mein eigenes Modell ausführen?
Are model results published automatically?
Does running a model in Labs validate it?
Evidenz von dieser Seite aus beitragen.
Reports ist die vierteljährliche Publikation des Konsortiums. Was Sie über dieses Thema wissen, kann in der nächsten Ausgabe zu Evidenz, einem Fall oder einer Korrektur werden, Ihnen zugeschrieben und unter CC BY 4.0 veröffentlicht, soweit es Ihr eigenes Werk ist.
- E-MailZugang GW-GCRIVon dieser Seite aus sendenEvidenz, eine Korrektur, ein Fall, eine Methode, eine Prüfung, eine Übersetzung oder ein Beitrag zu einem Profil. Sie kommt mit dieser Seite gekennzeichnet an, sodass die zuständige Redaktion sie erhält.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- BerichteGCRIAlle Wege zum Beitragen ansehenDie Beitragsarten, wie jede geprüft wird, welche Nennung Sie erhalten, die Lizenz und was nie angenommen wird.
Senden Sie nie personenbezogene Daten, sensible Infrastrukturdetails oder etwas, das Sie nicht weitergeben dürfen. Ein Beitrag wird vor der Nutzung geprüft; das Einsenden begründet weder Urheberschaft noch redaktionelle Rechte, und Sponsoring erkauft nie ein Ergebnis.
Bringen Sie eine Methode, einen Datensatz oder eine Frage mit.
Information und Anfragen sind heute offen. Eine Anfrage erhält ein Aktenzeichen und nennt den nächsten Schritt; Bewerbungen, Zahlungen, Rechenzuteilungen und Registrierungen öffnen erst, wenn Team, Bedingungen und Prüfkapazität bestehen.
Rechtliche Dokumente.
Karten, Daten und Zahlen auf dieser Website werden zu Kontext- und allgemeinen Informationszwecken gezeigt. Sie sind weder Beratung noch Prognosen oder Warnungen; die Grenzen der Information sind in den Haftungsausschlüssen und Datenhinweisen dargelegt.