Skip to content

GCRI · Labs

Unsicherheitsquantifizierung in Laboren

Die Unsicherheitsquantifizierung fragt, wie viel Vertrauen ein Ergebnis angesichts von Messfehlern, Modellstruktur, Parameterwahl und Testbedingungen verdient. In Laboren und Testumgebungen verbindet sie ein einzelnes Experiment mit einer Aussage über die Leistung im Einsatz und zeigt, wo eine Aussage zu Reifegrad oder Reproduzierbarkeit brüchig ist.

02Antrag

Was Unsicherheitsquantifizierung und Modellvalidierung hier leistet.

Uncertainty quantification and model validation characterise how uncertainty in inputs, parameters and model structure affects predictions. They establish how much confidence a model’s outputs deserve. In research and evidence, methods and modelling and innovation, uncertainty quantification shows where risk estimates are robust and where they are fragile. It guides where better data or models would change decisions. The canonical description is on the STEM Commons.

Measurement uncertainty budgets

Jede Fehlerquelle in einer Messkette wird nach dem Guide to the Expression of Uncertainty in Measurement geschätzt und kombiniert, sodass Ergebnisse verschiedener Labore auf gemeinsamer Grundlage verglichen werden können.

Sensitivitätsanalyse von Simulationsmodellen

Eingaben werden systematisch variiert, um herauszufinden, welche den Wertebereich der Ausgabe bestimmen, sodass Validierungsaufwand und weitere Tests dorthin fließen, wo sie eine Schlussfolgerung verändern würden.

Validierung anhand unabhängiger Experimente

Model predictions are compared with experiments not used in calibration, with agreement metrics and the domain of validity stated before the model is used for design.

03Monitoring

Unsicherheitsanalyse.

Die Ansicht, die ein Team nutzen würde, um diese Methode zu verfolgen: ihre Messgrößen, Zustände und Entscheidungen. Namen sind Beispiele, Werte sind illustrativ.

Unsicherheitsanalyse

Labs · Quantifizierung von Unsicherheit · Lauf R-1480

Sensitivity rankedGCRI · Labs

Sensitivität totaler Ordnung

Ausgabeverteilung

Eingaben

Registrierte ProtokolleEinheitlichProtokolle, angegebenExpertenbefragung
Studies with preregistrationLognormal der Studien, angegebenExpertenbefragung
Versuchte ReplikationenEinheitlichStudien, angegebenExpertenbefragung
Negative Ergebnisse veröffentlichtEinheitlichpapers, statedExpertenbefragung
Uncertainty analysis: the screen’s structure, terms and states for Labs.Example names and illustrative values; a design, not a record or a live system.
04Daten

Was die Methode verwendet.

Datensätze und Aufzeichnungen, die für die Unsicherheitsquantifizierung und Modellvalidierung auf dieser Plattform verwendet werden, mit der jeweiligen Rolle und der Kennzeichnung, die ihre Werte tragen. Die Quellen sind im dem Quellenregister.

DatenRolleKennzeichnung
Calibration certificatesInstrument uncertaintyVeröffentlichte Statistiken
Inter-laboratory comparison resultsReproducibility between laboratoriesBEOBACHTET
ModellensemblesStrukturelle und parametrische StreuungMODELLIERT
Strukturierte ExpertenbefragungBereiche ohne vorhandene DatenGESCHÄTZT
05Methoden und Evidenz

Wie die Quantifizierung von Unsicherheit in Laboren modelliert, gemessen und getestet wird.

Das Modell, seine Annahmen, seine Daten und seine Unsicherheit in der Form, in der eine Wissenschaftlerin oder ein Ingenieur sie prüfen würde. Die Strukturen folgen veröffentlichten Methoden. Die dargestellten Werte sind illustrativ, keine Befunde.

Modell, Gleichungen und Annahmen

The model structure used for uncertainty quantification in laboratories, the assumptions it makes and how each is tested.

Risiko des Elements iRi = f(Hi, Ei, Vi, Ci)Gefahr, Exposition, Verwundbarkeit und Bewältigungskapazität
Erwarteter jährlicher SchadenEAL = ∑k pk · Lkover events k with annual probability pk
Gekoppelte Systemext+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
AnnahmeWarum es entstehtWie es geprüft wird
Gefahr und Exposition sind innerhalb eines Ereignisses unabhängigHält das Schadensintegral berechenbarMit einer Copula-Anpassung an gemeinsamen Aufzeichnungen vergleichen
Kopplungen sind nahe dem Arbeitspunkt linearLässt Schocks sich über A ausbreitenÜber den linearen Bereich hinaus stören und vergleichen
Vulnerabilitätskurven lassen sich zwischen Orten übertragenLokale Kurven sind selten verfügbarAnhand beobachteter Schäden validieren, wo es sie gibt
Eingaben
versionierte Datensätze mit Herkunftsnachweis
Ergebnisse
Verteilungen, nie einzelne Zahlen
Code
mit Modellkarte und Tests veröffentlicht
Reproduktion
gleiche Daten, Code, Umgebung und Seed
Standardformulierungen für Risiko und Zustandsraum; die aufgeführten Annahmen sind für die Methode typisch und zur Prüfung benannt, keine Ergebnisse.
FAIR guiding principles · GO FAIR and FORCE11W3C PROV · World Wide Web ConsortiumGuidance on consistent treatment of uncertainties · IPCCCEOS Analysis Ready Data · Committee on Earth Observation Satellites
06Validierung

Wie Ergebnisse geprüft werden.

Prädiktive Verteilungen werden anhand zurückgehaltener Beobachtungen auf Kalibrierung und Schärfe geprüft. Die Verifikation bestätigt, dass der Code die vorgesehenen Gleichungen löst.

PrüfenWie es gemacht wird
Code verificationSolvers are tested against problems with known solutions before validation begins
Out-of-Sample-ValidierungPredictions are scored on data withheld from calibration
IntervallabdeckungAngegebene Intervalle werden daraufhin geprüft, ob sie Ergebnisse mit ihrer nominalen Rate enthalten
GültigkeitsbereichEine Verwendung außerhalb der getesteten Bedingungen wird gekennzeichnet und nicht stillschweigend extrapoliert

Strukturelle Unsicherheit und unbekannte Unbekannte lassen sich nur schwer abbilden. Der Rechenaufwand begrenzt die Erkundung hochdimensionaler Modelle.

07Verfahren

Wie der Prozess abläuft.

Process explorer · Process

Uncertainty quantification in laboratories: Hazard, exposure, vulnerability

10 steps4 stages

Verfahren

Uncertainty quantification in laboratories: Hazard, exposure, vulnerability

In IPCC AR6 Working Group II, climate risk results from interactions between hazards and a system’s exposure and vulnerability, and responses can add risk.

  1. 01 Treiber

    1. 01HazardDataset · Principal investigatorThe potential occurrence of a natural or human-induced physical event or trend that may harm people, property, services or ecosystems.
    2. 02ExposureDataset · Principal investigatorThe presence of people, livelihoods, species, ecosystems, infrastructure or assets in places and settings that could be adversely affected.
    3. 03SensitivityDataset · Principal investigatorThe degree to which a system or species is affected, either adversely or beneficially, by climate variability or change.
    4. 04Capacity to cope and adaptDataset · Principal investigatorThe ability of systems, institutions, humans and other organisms to adjust to damage, take opportunities or respond to consequences.
  2. 02 Bewertung

    1. 05Risiko durch ReaktionenKomponente · HauptforscherRisiken aus Klimareaktionen entstehen, wenn Reaktionen ihre Ziele verfehlen, oder aus Zielkonflikten oder negativen Nebenwirkungen.
    2. 06VerwundbarkeitKomponente · HauptforscherDie Neigung oder Veranlagung, beeinträchtigt zu werden. Sie umfasst die Empfindlichkeit gegenüber Schäden und den Mangel an Fähigkeit, diese zu bewältigen und sich anzupassen.
    3. 07RiskModel · LabsRisk results from dynamic interactions between hazards and the system’s exposure and vulnerability. Each may be uncertain and change.
  3. 03 Reaktion

    1. 08Risikomanagement und ReaktionSchritt · ProjektleitungRisikomanagement sind Pläne, Maßnahmen, Strategien oder Richtlinien, die die Wahrscheinlichkeit oder das Ausmaß nachteiliger Folgen verringern.
    2. 09Residual riskRecord · Principal investigatorThe climate impact risk that remains after adaptation and mitigation efforts. Adaptation can redistribute risk between areas and groups.
  4. 04 Entscheidung

    1. 10Entscheidung durch die verantwortliche ParteiEntscheidung · HauptprüferDie Rahmung nennt keine einzelne entscheidende Stelle. Entscheidungen über Reaktionen liegen bei der verantwortlichen Partei nach ihren eigenen Regeln.

Überblick über einen externen Standard oder eine externe Methode aus öffentlichen Quellen. Er beschreibt, was das Rahmenwerk sagt, keinen Nachweis eines Durchlaufs. Er zeigt nicht, dass Nexus oder ein Partner einen Schritt durchführt, zertifiziert oder genehmigt. Ein Gate ist ein Schritt der Methode, niemals eine Genehmigung durch Nexus.

09Treuhänderschaft

Wer die Methode pflegt.

Systemwissenschaft und Modellierung ist Sachwalter der Unsicherheitsquantifizierung und Modellvalidierung für das Konsortium und prüft, wie diese plattformübergreifend angewendet werden.

11Fragen

Fragen und Antworten.

Wo liegen in diesem Fachgebiet die Grenzen der Unsicherheitsquantifizierung und der Modellvalidierung?
Strukturelle Unsicherheit und unbekannte Unbekannte lassen sich nur schwer abbilden. Der Rechenaufwand begrenzt die Erkundung hochdimensionaler Modelle.
Wie werden Ergebnisse geprüft?
Prädiktive Verteilungen werden anhand zurückgehaltener Beobachtungen auf Kalibrierung und Schärfe geprüft. Die Verifikation bestätigt, dass der Code die vorgesehenen Gleichungen löst.
Sind die Werte auf dieser Seite echt?
The data names, roles and checks are real descriptions of practice. The canvas shows a design of the method’s use, not a run; no result is reported here.
Wo wird diese Methode sonst angewandt?
Das kanonische Methodenseite listet jede Plattform auf, die sie anwendet.
BerichteBeitragen

Evidenz von dieser Seite aus beitragen.

Reports ist die vierteljährliche Publikation des Konsortiums. Was Sie über dieses Thema wissen, kann in der nächsten Ausgabe zu Evidenz, einem Fall oder einer Korrektur werden, Ihnen zugeschrieben und unter CC BY 4.0 veröffentlicht, soweit es Ihr eigenes Werk ist.

GCRILaboreLabs-EvidenzMethoden und Technik
Labore

Bringen Sie eine Methode, einen Datensatz oder eine Frage mit.

Information und Anfragen sind heute offen. Eine Anfrage erhält ein Aktenzeichen und nennt den nächsten Schritt; Bewerbungen, Zahlungen, Rechenzuteilungen und Registrierungen öffnen erst, wenn Team, Bedingungen und Prüfkapazität bestehen.