Skip to content

GCRI · Sistem Bilimi ve Modelleme

Belirsizlik ve doğrulama

A model result is useful only when its uncertainty is stated and its fitness for a purpose has been tested. Verification checks that the code solves the equations intended; validation checks that the model represents the real system well enough for the decision at hand. This page sets out how uncertainty is quantified and models are verified and validated, and what evidence serves the decision makers who rely on model results.

01Tuval

İşin nasıl yürüdüğü.

Sistem · bu konunun çevresindeÖrnekleyici

Bağlı model çalıştırıcı

Uncertainty and validation · Coupled model A · Scenario set 3

Topluluk çalışıyorGCRI · Sistem Bilimi ve Modelleme

Model bağlantı grafiği

düğümler: modeller · kenarlar: değiştirilen değişkenler

Bağlı bileşenler

Hidroloji1 günakışEvet
Güç sistemi1 htalep, kesintilerEvet
Ekonomi1 çeyrekçıktı, fiyatlarKısmi
Nüfus1 yılmaruziyetEvet

Topluluk çıktısı

Coupled model runner: the screen’s structure, terms and states for Uncertainty and validation.Örnek adlar ve örnekleyici değerler; bir tasarımdır, kayıt veya canlı bir sistem değildir.

Şek.Coupled model runner: example names and illustrative values, not a record or a live system.

02Soru

Uncertainty and validation: how the risk develops.

Quantifying uncertainty, validation against observations and the limits of calibration. The dossier below sets out how the risk develops, what is measured, where the data come from, how it is modelled and who decides.

Mekanizma

Verification precedes validation

Before asking whether a model matches reality, modellers check that the code is correct, through tests, convergence studies and comparison with known solutions.

Mekanizma

Validation is purpose-specific

A model valid for one question may be invalid for another. Validation is judged against the accuracy a specific decision needs.

Mekanizma

Uncertainty has several sources

Input data, parameters, model structure, numerical error and natural variability each contribute, and each needs a different treatment.

Mekanizma

Calibration can hide error

Tuning parameters to match past data can make a model fit for the wrong reasons, so validation needs data not used in calibration.

03Coğrafya

Kuzey Amerika'da tehlikeler ve maruziyet.

Flood water, population density and night lights over North America, from NASA GIBS. Each layer carries its own date.

Etkileşimli harita JavaScript gerektirir. Katman listesi ve kaynaklar aşağıdadır.

Katmanlar 3

Bu sayfa için tehlikeler ve maruziyet

Bu katman hakkında
Kanıt
Gözlenen (bulutlar boşluk bırakır)
Kaynak
VIIRS Küresel Sel Ürünü (NASA LANCE)
Sağlayıcı
NASA LANCE
Lisans
NASA açık verisi
Veri yılı
günlük; uydu tespiti; bulutlar boşluk bırakır
Derleme anındaki en yeni
2026-10-14
Çözünürlük
yaklaşık 250 m'lik ızgara
Belirsizlik
Uydu tespiti; bulutlar boşluk bırakır. Sağlayıcının yayımladığı haliyle uydu veya model rasteri. Bulutlar, tarama şeridi boşlukları ve geri çatım hatası boşluklara ve gürültüye yol açar; değerler birer göstergedir, bir yerdeki ölçüm değildir.
Şuradan ulaşılır
gibs.earthdata.nasa.gov, yalnızca canlı haritaya izin verdikten sonra
Bu katman hakkında
Kanıt
Tahmini
Kaynak
Gridded Population of the World v4.11 (NASA SEDAC (CIESIN, Columbia Üniversitesi))
Sağlayıcı
NASA SEDAC (CIESIN, Columbia Üniversitesi)
Lisans
CC BY 4.0
Veri yılı
null; nüfus sayımına dayalı tahmin, statik (2020)
Çözünürlük
yaklaşık 1 km'lik ızgara
Belirsizlik
2020 yılında kilometrekare başına düşen kişi sayısının nüfus sayımına dayalı tahmini, maruziyet bağlamı olarak gösterilir; herhangi bir tehlikeden etkilenen kişilerin sayımı değildir.
Şuradan ulaşılır
gibs.earthdata.nasa.gov, yalnızca canlı haritaya izin verdikten sonra
Bu katman hakkında
Kanıt
Gözlenen
Kaynak
VIIRS Black Marble (VNP46A2) (NASA LAADS DAAC)
Sağlayıcı
NASA LAADS DAAC
Lisans
NASA açık verisi
Veri yılı
günlük; uydu radyansı, ay ışığı ve atmosfer için düzeltilmiş
Derleme anındaki en yeni
2026-10-12
Çözünürlük
yaklaşık 500 m'lik ızgara
Belirsizlik
Gösterilen tarih için uydunun gece ışıması; ışıklar elektrik kullanımının ve kesintilerin bir vekilidir, arz veya erişimin ölçüsü değildir.
Şuradan ulaşılır
gibs.earthdata.nasa.gov, yalnızca canlı haritaya izin verdikten sonra
Bu katman hakkında
Kanıt
Gözlenen
Kaynak
VIIRS NOAA-20 düzeltilmiş yansıtım (NASA LANCE)
Sağlayıcı
NASA LANCE
Lisans
NASA açık verisi
Veri yılı
günlük; uydu görüntüsü
Derleme anındaki en yeni
2026-10-14
Çözünürlük
yaklaşık 250 m'lik ızgara
Belirsizlik
Uydu görüntüsü. Sağlayıcının yayımladığı haliyle uydu veya model rasteri. Bulutlar, tarama şeridi boşlukları ve geri çatım hatası boşluklara ve gürültüye yol açar; değerler birer göstergedir, bir yerdeki ölçüm değildir.
Şuradan ulaşılır
gibs.earthdata.nasa.gov, yalnızca canlı haritaya izin verdikten sonra
Bu katman hakkında
Kanıt
Modellenmiş (GIBS'in yayımladığı en son yıl)
Kaynak
MODIS Terra and Aqua land cover (MCD12Q1) (NASA LP DAAC)
Sağlayıcı
NASA LP DAAC
Lisans
NASA açık verisi
Veri yılı
yıllık; uydu sınıflandırması; GIBS'in yayımladığı en son yıl
Derleme anındaki en yeni
2024-01-01
Çözünürlük
yaklaşık 500 m'lik ızgara
Belirsizlik
Gösterilen yıla ait uydu arazi örtüsü sınıfları, tarım arazileri dahil; bilinen hataları olan bir sınıflandırmadır, çiftlik kaydı değildir.
Şuradan ulaşılır
gibs.earthdata.nasa.gov, yalnızca canlı haritaya izin verdikten sonra
Bu katman hakkında
Kanıt
Gözlenen (bulutlar ve geçiş zamanlaması boşluk bırakır)
Kaynak
VIIRS NOAA-20 375 m (FIRMS) (NASA LANCE FIRMS)
Sağlayıcı
NASA LANCE FIRMS
Lisans
NASA açık verisi
Veri yılı
günlük; uydu tespiti; bulutlar ve geçiş zamanlaması boşluk bırakır
Derleme anındaki en yeni
2026-10-13
Çözünürlük
yaklaşık 500 m'lik ızgara
Belirsizlik
Gösterilen güne ait uydu sıcak nokta tespitleri; gaz flaring'i ve endüstriyel ısı dahildir; doğrulanmış bir yangın, bir olay raporu veya bir uyarı değildir.
Şuradan ulaşılır
gibs.earthdata.nasa.gov, yalnızca canlı haritaya izin verdikten sonra

Mevcut en son

NASA GIBS / EOSDIS · ASTER GDEM (METI, NASA) · Blue Marble (NASA) · © OpenStreetMap katkıda bulunanları (ODbL) · Natural Earth

En güncel NASA görüntüleri yükleniyor.

Taşımak için sürükleyin. Yakınlaştırmak için Ctrl veya ⌘ ile kaydırın, sıkıştırın ya da düğmeleri kullanın. İşaretçinin altındaki değerler için üzerine gelin. Sıfırlama bölgeye döner.

Tehlikeler ve maruziyet, Kuzey Amerika üzerinden ele alınır.NASA'nın yayımladığı hâliyle uydu ve model ürünleri, her biri kendi tarihiyle. Bunlar göstergedir, herhangi bir yerin değerlendirmesi değildir.

Veri: NASA GIBS · ASTER GDEM · Blue Marble · © OpenStreetMap katkıda bulunanları · Natural Earth · NASA EONET · U.S. Geological Survey · NASA JPL OPERA DIST-ALERTKaynaklar ve lisanslar

  • We acknowledge the use of imagery provided by services from NASA’s Global Imagery Browse Services (GIBS), part of NASA’s Earth Science Data and Information System (ESDIS). Colours redrawn from the published colour map; values averaged into hexagonal cells where shown (modified). NASA açık verisi
  • We acknowledge the use of imagery provided by services from NASA’s Global Imagery Browse Services (GIBS), part of NASA’s Earth Science Data and Information System (ESDIS). Colours redrawn from the published colour map; values averaged into hexagonal cells where shown (modified). NASA açık verisi
  • VIIRS neredeyse gerçek zamanlı ürünleri (taşkın, kara yüzeyi sıcaklığı, kar örtüsü, düzeltilmiş yansıma), NASA LANCE; görüntüler NASA GIBS aracılığıyla. Renkler yayımlanmış renk haritasından yeniden çizilmiştir; gösterildiği yerlerde değerlerin altıgen hücrelerde ortalaması alınmıştır (değiştirilmiş). NASA açık verisi
  • Center for International Earth Science Information Network (CIESIN), Columbia University. 2018. Gridded Population of the World, Version 4 (GPWv4): Population Density, Revision 11. NASA Socioeconomic Data and Applications Center (SEDAC). CC BY 4.0 lisansıyla. Renkler yayımlanmış renk haritasından yeniden çizilmiştir; gösterildiği yerlerde değerlerin altıgen hücrelerde ortalaması alınmıştır (değiştirilmiş). doi:10.7927/H49C6VHW. CC BY 4.0
  • VIIRS Black Marble gece ışıkları, NASA Goddard Uzay Uçuş Merkezi; NASA Seviye-1 ve Atmosfer Arşivi ve Dağıtım Sistemi (LAADS DAAC) tarafından dağıtılır; görüntüler NASA GIBS üzerinden. Renkler yayımlanan renk haritasından yeniden çizilmiştir; değerler gösterildiği yerde altıgen hücreler üzerinde ortalanmıştır (değiştirilmiş). NASA açık verisi
  • MODIS kara ürünleri (bitki örtüsü indeksleri, brüt birincil üretim, arazi örtüsü), NASA LP DAAC ve LANCE; görüntüler NASA GIBS aracılığıyla. Renkler yayımlanmış renk haritasından yeniden çizilmiştir; gösterildiği yerlerde değerlerin altıgen hücrelerde ortalaması alınmıştır (değiştirilmiş). NASA açık verisi
  • NASA Fire Information for Resource Management System (FIRMS), VIIRS 375 m aktif yangın ürünü, NASA LANCE; vektör karolar NASA GIBS aracılığıyla. Renkler yayımlanmış renk haritasından yeniden çizilmiştir; gösterildiği yerlerde değerlerin altıgen hücrelerde ortalaması alınmıştır (değiştirilmiş). NASA açık verisi
  • ASTER GDEM, METI ve NASA'nın bir ürünüdür (ASTER Global Digital Elevation Model V003, NASA LP DAAC); görüntüler NASA GIBS aracılığıyla. Renkler yayımlanmış renk haritasından yeniden çizilmiştir; gösterildiği yerlerde değerlerin altıgen hücrelerde ortalaması alınmıştır (değiştirilmiş). Atıf: NASA/METI/AIST/Japan Spacesystems and U.S./Japan ASTER Science Team (2019). ASTER Global Digital Elevation Model V003. doi:10.5067/ASTER/ASTGTM.003. NASA açık verisi
  • Natural Earth ile hazırlanmıştır. Ücretsiz vektör ve raster harita verileri @ naturalearthdata.com. Kamu malı
  • © OpenStreetMap katkıcıları (ODbL), NASA GIBS üzerinden (kıyı çizgileri, sınırlar, yollar ve yer adları). Renkler yayımlanmış renk haritasından yeniden çizildi; gösterilen yerlerde değerler altıgen hücrelere ortalandı (değiştirildi). ODbL
  • Blue Marble, NASA Earth Observatory; görüntüler NASA GIBS aracılığıyla. Renkler yayımlanmış renk haritasından yeniden çizilmiştir; gösterildiği yerlerde değerlerin altıgen hücrelerde ortalaması alınmıştır (değiştirilmiş). NASA açık verisi
  • Küre ve düz haritada bağlam: kıyı çizgileri, sınırlar, yollar ve yer adları NASA GIBS referans katmanlarından (OpenStreetMap verisi, ODbL, © OpenStreetMap katkıda bulunanları). İsteğe bağlı taban olarak Blue Marble görüntüsü. 3B arazi ve yükseklik okuması ASTER GDEM yükseklik renk dizininden (5 m ila 200 m sınıfları, okunabilirlik için abartılmıştır). Sınırlar yayımlandığı biçimde çizilmiştir ve hiçbir toprak parçası hakkında bir tutum ima etmez.
  • Canlı olaylar: NASA Earth Observatory Natural Event Tracker (EONET). Olaylar gösterge niteliğindedir ve özgün kaynak bağlantılarını korur.
  • Canlı: NASA EONET. Olaylar gösterge niteliğindedir, yetkili makam uyarısı değildir.
  • Canlı: U.S. Geological Survey. Olaylar gösterge niteliğindedir, yetkili makam uyarısı değildir.
  • Observed (EO): NASA JPL OPERA DIST-ALERT (contains modified Copernicus Sentinel data 2026). We acknowledge the use of imagery provided by services from NASA’s Global Imagery Browse Services (GIBS), part of NASA’s Earth Science Data and Information System (ESDIS).
  • NASA GIBS: We acknowledge the use of imagery provided by services from NASA’s Global Imagery Browse Services (GIBS), part of NASA’s Earth Science Data and Information System (ESDIS).
  • Nehir debisi tahmini, aralıklı 30 gün (Open-Meteo üzerinden GloFAS): 2026 tarihli değiştirilmiş Copernicus Acil Durum Yönetimi Servisi bilgilerini içerir. Sel uyarısı değildir.
  • Hava durumu verileri: Open-Meteo.com (https://open-meteo.com/), CC BY 4.0 lisansıyla (https://creativecommons.org/licenses/by/4.0/).
  • İsteğe bağlı katmanlar (katman listesinde 11 kaynak: canlı, tahmin, gözlem ve bağlam) açıldığında sağlayıcı bilgisini haritada ve burada gösterir; tahminler model çıktısıdır ve türetilmiş endeksler kestirimdir.

Katmanlar ve tarihler

  • Sel suyu, 3 günlük bileşik: VIIRS Küresel Sel Ürünü, NASA LANCE · 14 Eki 2026
  • Nüfus yoğunluğu, 2020: Nüfus: CIESIN, Columbia University, Gridded Population of the World v4.11 (2018), NASA SEDAC, CC BY 4.0 · statik
  • Gece ışıkları, günlük: VIIRS Black Marble (VNP46A2), NASA LAADS DAAC · 12 Eki 2026
  • Gerçek renk: VIIRS NOAA-20 düzeltilmiş yansıtma, NASA LANCE · 13 Eki 2026
  • Arazi örtüsü türü (IGBP), yıllık: MODIS Terra ve Aqua arazi örtüsü (MCD12Q1), NASA LP DAAC · 2024
  • Aktif yangınlar ve termal anomaliler: VIIRS NOAA-20 375 m (FIRMS), NASA LANCE FIRMS · 13 Eki 2026

04Alanlar genelinde

Validation must match the decision each domain faces.

Validation studies are designed for the Yöntemler ve Teknik serisi. ASME V&V 40, NASA-STD-7009 and Bayesian calibration (Kennedy and O’Hagan, 2001) set practice; duyarlılık analizi is one of the five rules of Saltelli and colleagues (2020).

  • Validation datasets.
  • Documented model failures.
05İkiz ve zincirleme etki simülatörü

Model uncertainty and validation as a system. Run the cascade.

Assembled from the Nexus Standards alan profili Bileşik ve zincirleme tehlike standartlarıtemelinde derlenmiştir: adlandırdığı tehlikeler, kaybı taşıyan sistemleri ve sektörler, onu sönümleyen kontroller ve onu gözlemleyen veriler. Bileşenleri seçin, başlatıcı bir tehlike belirleyin ve kademeli etkiyi adım adım izleyin. Harita görünümü, çalıştırmayı açık verilerle örnek bir coğrafyaya yerleştirir. Her bağlantı ağırlığı, değiştirebileceğiniz belirtilmiş bir varsayımdır. Bir öğretim modelidir; tahmin, değerlendirme veya belgelendirme değildir. Kendi seçtiğiniz bir yeri modellemek için tam Sistem Oluşturucu.

Tehlikeler

Kontroller

  • NS-0 Tüzük ve ilkeler
  • NS-3 Risk kaydı UNI'leri (dilbilgisi, eski sistemle eşleştirme, tahsis yetkisi)
  • NS-9 Bağlamsal UNI'ler (dağıtımlar, örnekler, program örnekleri)
  • NS-11 Doğrulama ve izleme (kanıt, beyanlar, sıfır güven uygunluk gözlemi)
  • NRS-H61 Tehlike ailesi: Zincirleme arıza (NHS-1 sys.cascade)
  • NRS-H62 Tehlike ailesi: Bileşik ve çoklu tehlike olayları (NHS-1 sys.compound)
  • NRS-H60 Tehlike ailesi: Tedarik zinciri ve akış kesintisi (NHS-1 sys.supply-chain)
  • NRS-H94 Tehlike ailesi: Sistemik siber olaylar (NHS-1 cyber.systemic-cyber)
  • NRS-H107 Tehlike ailesi: Dijital altyapı yoğunlaşması ve monokültür (NHS-1 tech.digital-concentration)
  • NRS-H7 Tehlike ailesi: Büyük ölçekli dolaşım anomalileri (NHS-1 atmo.climate-mode)

Gözlem

  • Copernicus EMS hızlı haritalama etkinleştirmeleri (başvuru için listelenmiştir)
  • OpenStreetMap planet ve çoğaltma (başvuru için listelenmiştir)
  • ERA5 yeniden analizi (Copernicus Climate Data Store) (referans için listelenmiştir)
  • Afetlere bağlı doğrudan ekonomik kaybın küresel GSYH'ye oranı
  • Afetlere bağlanan temel hizmet kesintilerinin sayısı

Örnek coğrafya

  • Bangladeş: 134 altıgen hücre
  • Bu geceki gece ışıkları, kesintiler (VIIRS Day/Night Band), NASA GIBS
  • Karbon monoksit, duman taşınımı (AIRS), NASA GIBS
  • Bitki örtüsü bozulma uyarıları, 30 m (OPERA DIST-ALERT), NASA GIBS
06Göstergeler

Neyin ve ne kadar iyi ölçüldüğü.

Her gösterge birimini, sıklığını, ardındaki kaynak türünü ve bir değerin taşıyacağı kanıt etiketini taşır. Hiçbir değer gösterilmez: değerleri bir program kendi yetkisi altında sağlar.

GöstergeBirimSıklıkKaynak türüEtiket
Verification tests passedpercent of test suitesürüm başınaModel test recordsGÖZLENEN
Validation error against independent dataerror metricper validationValidation studiesTAHMİNİ
Prediction interval coveragepercent of observations inside stated intervalsper evaluationOut-of-sample evaluationGÖZLENEN
Sensitivity indicesshare of output variance by inputper analysisKüresel duyarlılık analiziMODELLENMİŞ
Models with documented credibility assessmentsayıdeğerlendirme başınaModel documentationBEYAN EDİLDİ
Independent reviews completedsayıper modelReview recordsBİLDİRİLMİŞ
07Yöntemler ve kanıt

How uncertainty and validation is modelled, measured and tested.

Model, varsayımları, verileri ve belirsizliği, bir bilim insanının veya mühendisin kontrol edeceği biçimde. Yapılar yayımlanmış yöntemleri izler. Çizilen değerler bulgu değil, açıklayıcıdır.

Model, denklemler ve varsayımlar

The model structure used for uncertainty and validation, the assumptions it makes and how each is tested.

i öğesinin riskiRi = f(Hi, Ei, Vi, Ci)tehlike, maruziyet, kırılganlık ve başa çıkma kapasitesi
Beklenen yıllık kayıpEAL = ∑k pk · Lkyıllık olasılığı pk
Bağlı sistemlerxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
VarsayımNeden yapıldığıNasıl sınanır
Bir olay içinde tehlike ve maruziyet bağımsızdırKayıp integralini çözülebilir tutarOrtak kayıtlara uydurulmuş bir kopula ile karşılaştırın
Bağlantılar çalışma noktası yakınında doğrusaldırŞokların A üzerinden yayılmasına izin verirDoğrusal aralığın ötesine itin ve karşılaştırın
Kırılganlık eğrileri yerler arasında aktarılabilirYerel eğriler nadiren mevcutturMevcut olduğunda gözlemlenen kayıplarla doğrulayın
Girdiler
kaynağı belgelenmiş, sürümlü veri setleri
Çıktılar
dağılımlar, asla tek sayılar değil
Kod
model kartı ve testlerle birlikte yayımlanır
Yeniden üretim
aynı veri, kod, ortam ve tohum değeri
Standart risk ve durum uzayı formülasyonları; listelenen varsayımlar yöntemin tipik varsayımlarıdır, inceleme için belirtilmiştir, sonuç değildir.
FAIR yol gösterici ilkeleri · GO FAIR ve FORCE11W3C PROV · World Wide Web ConsortiumBelirsizliklerin tutarlı ele alınmasına ilişkin kılavuz · IPCCCEOS Analysis Ready Data · Yer Gözlem Uyduları Komitesi
08Kaynaklar

Kanıtın nereden geldiği.

Her biri lisans sınıfıyla birlikte, adı belirtilmiş kamuya açık veri kümeleri ve kurumsal kayıtlar. Anlaşmaya dayalı kaynaklar yalnızca koşullarına göre kullanılır ve asla yeniden yayımlanmaz.

KaynakSağladıklarıLisans sınıfı
ASME V&V 10, V&V 20 and V&V 40Verification, validation and credibility standardsLicensed standards, purchase required
NASA-STD-7009Credibility assessment of models and simulationsPublic domain, US government
IPCC uncertainty guidance noteKalibre edilmiş belirsizlik diliPublic, IPCC terms
SALib and other open duyarlılık analizi librariesImplementations of global sensitivity methodsOpen source, MIT licence
Published validation studies in each fieldEvidence on model performanceLicence per publication
09Kararlar

Kim karar verir ve kanıt neye hizmet eder.

Sistem Science and Modelling prepares evidence. The decisions below are taken by the authorities named, under their own rules, and never by the platform.

Kim karar verirSoruBu sayfanın hizmet ettiği kanıt
Model ownersWhether a model is fit for a stated purposeCredibility assessments; validation reports
Decision makersHow much weight to give model resultsUncertainty statements
Reviewers and auditorsWhether verification and validation were adequateProtocols and review records

Bu konunun ürettiği çıktılar

  • Verification and validation protocols for network models
  • Uncertainty statements in calibrated language
  • Credibility assessments for models used in decisions
  • Validation reports against independent data
10Temel sorular

What experts ask about uncertainty and validation.

  • Which sources of uncertainty matter most for the decision at hand?
  • How does uncertainty in inputs and parameters propagate to outputs?
  • What observations can test the model, and are they independent of calibration data?
  • How far beyond the calibration conditions can the model be trusted?
  • How should uncertainty be communicated to people who must act on it?
11Mekanizmalar ve etkenler

Kinds of uncertainty and why calibration is not validation.

Modellers distinguish aleatory uncertainty, the inherent variability of a system, from epistemic uncertainty, which comes from incomplete knowledge and can in principle be reduced. Structural uncertainty, about whether the model’s equations are right, is often the largest and hardest to quantify. Derin belirsizlik arises when experts cannot agree even on probability distributions.

Calibration adjusts parameters so that a model matches observations. A well-calibrated model may still be wrong: many parameter combinations can fit the same data, a problem called equifinality, and a model tuned to past conditions may fail under new ones. Validation therefore requires tests against data not used in calibration, and ideally under different conditions.

Validation is purpose-specific. A model may be adequate for estimating averages but not extremes, or for one region but not another.

12Yöntemler ve veriler

Yöntemler ve sınırları.

  1. 01

    Duyarlılık analizi

    Identifying which inputs drive output variation. Global methods are computationally demanding.

  2. 02

    Probabilistic propagation

    Monte Carlo and related methods, using olasılık ve istatistiği. Results depend on assumed input distributions.

  3. 03

    Bayesian calibration

    Updating parameter beliefs with data and representing model discrepancy. Priors and discrepancy models involve judgement.

  4. 04

    Out-of-sample validation

    Testing against independent data, held-out periods or different locations. Suitable data are often scarce for extremes.

No validation proves a model correct. It establishes confidence for a purpose, within stated conditions.

15Sorular

Sorular ve yanıtlar.

What is the difference between verification and validation?
Verification asks whether the model is solved correctly, that the code does what it is meant to. Validation asks whether it is the right model for the purpose, by comparing it with reality.
Can a model be validated for the future?
Not directly. Models can be tested on past conditions and processes; confidence for new conditions rests on whether the model represents the underlying processes.
What is global sensitivity analysis?
A method that varies all uncertain inputs together to find which ones drive most of the variation in model outputs.
Can uncertainty always be quantified?
Not always. Under deep uncertainty, experts may not agree on probabilities, and other approaches such as scenario analysis are used. See belirsizlik altında optimizasyon.
What is equifinality?
The situation in which different parameter sets produce equally good fits to observations, so calibration cannot identify the true values.
Does GCRI validate models for regulators?
No. GCRI does not certify. Its method notes describe how validation can be done.
Why is calibration not enough?
Because matching past data does not show that a model will perform under new conditions or for different outputs.
RaporlarKatkıda bulunun

Bu sayfadan kanıt katkısında bulunun.

Raporlar is the Consortium’s quarterly publication. What you know about this subject can become evidence, a case or a correction in the next edition, credited to you and published under CC BY 4.0 where it is your own work.

GCRISistem Bilimi ve ModellemeYöntemler ve TeknikSenaryo ve Stres Testi
Sistem Bilimi ve Modelleme

Bir yöntem, bir veri seti ya da bir soru getirin.

Bilgi ve başvurular bugün açıktır. Bir başvuru bir referans numarası alır ve bir sonraki adımı belirtir; başvurular, ödemeler, işlem kapasitesi tahsisleri ve kayıtlar yalnızca ekipleri, koşulları ve inceleme kapasiteleri mevcut olduğunda açılır.