Skip to content

GCRI · Foundry

モデリングとシミュレーション

Risk models range from hydrodynamic flood simulations and power-flow studies to agent-based evacuation models and statistical loss models. They share three engineering needs: enough compute to run ensembles, enough discipline to reproduce a run months later, and enough honesty to state what the model cannot represent. This page sets out how model error enters, compounds through coupling and reaches decisions, how reproducibility is engineered, and where the limits sit.

02質問

モデリングとシミュレーション: リスクがどのように展開するか。

Workloads, reproducibility and limits. The dossier below sets out how the risk develops, what is measured, where the data come from, how it is modelled and who decides.

メカニズム

Structural and parameter error

Every model omits processes and fixes parameters from limited data. Calibration can fit the past for the wrong reasons, so a model that matches history may still fail in the conditions a decision is actually about.

メカニズム

結合は誤差を増幅する

洪水モデルが送電網モデルに入力され、さらに病院の事業継続モデルに入力される場合、時間ステップ、グリッド、単位、前提の不整合により、もっともらしいが誤ったカスケードが生じる。各受け渡しには、明示された契約と、それ自体の感度検証が必要である。

メカニズム

Environment drift

A compiler flag, a library update, a different processor or an unrecorded random seed alters results. Without pinned containers, versioned code and recorded configuration, a run cannot be repeated and a change in output cannot be explained.

メカニズム

Extrapolation

Models are validated for a range of conditions and then used beyond it: a new climate, a larger event, a different city. Outside the validated range a model is an assumption with a number attached, and its label must say so.

03手法とエビデンス

モデリングとシミュレーションがどのようにモデル化、測定、検証されるか。

モデル、その仮定、データ、不確実性を、科学者やエンジニアが確認する形で示します。構造は公表された手法に従っています。描かれた値は例示であり、知見ではありません。

モデル、方程式、仮定

The model structure used for modelling and simulation, the assumptions it makes and how each is tested.

要素 i のリスクRi = f(Hi, Ei, Vi, Ci)ハザード、エクスポージャー、脆弱性、対処能力
年間期待損失EAL = ∑k pk · Lkover events k with annual probability pk
結合システムxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
仮定作られる理由検証の方法
一つの事象の中では、ハザードとエクスポージャーは独立している損失の積分を扱いやすく保つ同時記録に当てはめたコピュラと比較
結合は動作点の近くで線形であるショックを A を通じて伝播させる線形範囲を超えて摂動を与えて比較する
脆弱性曲線は場所を越えて適用できる地域固有の曲線はめったに得られない観測された損失がある場合はそれに照らして検証
入力
来歴付きのバージョン管理されたデータセット
成果物
分布であり、単一の数値ではない
コード
モデルカードと試験とともに公開
再現
同じデータ、コード、環境、シード
標準的なリスクおよび状態空間の定式化です。挙げた前提はこの手法に典型的なもので、審査のために示しており、結果ではありません。
FAIR 原則・GO FAIR と FORCE11W3C PROV・World Wide Web Consortium不確実性の一貫した扱いに関するガイダンス・IPCCCEOS 解析即応データ・地球観測衛星委員会
045 つの分野において

Foundry のモデルは、各分野を連動させるよう設計されています。

05指標

何を、どの程度うまく測定しているか。

各指標には、その単位、更新頻度、背後にある出典の種類、値が持つことになるエビデンスのラベルが付いています。値は表示しません:プログラムが自らの権限のもとで値を提供します。

指標単位周期出典の種類ラベル
記録された入力から再現された実行サンプリングした実行の割合四半期ごと再実行監査観測
Hindcast skill on a held-out periodmodel-specific skill scoreモデルのバージョンごとValidation against observationsモデル化
アンサンブルのばらつき出力変数の単位実行セットあたりアンサンブル統計モデル化
Variance attributed to each uncertainty sourceproportion by input, parameter and structure研究ごとグローバル 感度分析モデル化
Coupling interface checks passed引き継ぎの割合実行あたりUnit, grid and timing checks観測
Conservation closure errorunits of the conserved quantity実行あたりModel diagnostics観測
Model versions in use with independent reviewバージョンの割合バージョンごと審査記録観測
Compute per ensemble memberコア時間または GPU 時間実行あたりScheduler accounting観測
06出典

エビデンスの出所。

名前の明示された公開データセットと機関の記録。それぞれにライセンス区分があります。合意に基づく出典は、その条件のもとでのみ使用し、再公開することはありません。

出典提供するものライセンス区分
ERA5 再解析(Copernicus 気候変動 サービス)Hourly atmospheric and land forcing for hindcasts and validation無料かつオープン、帰属表示
CMIP6 through the Earth System Grid FederationClimate model projections for scenario forcingCC BY 4.0 for most models
ISIMIP 影響モデルの出力相互比較のための調和されたセクター別影響シミュレーション大半の成果物は CC BY 4.0
NASA EarthdataSatellite observations for model evaluationFree and open, NASA data policy
Zenodoモデルコード、設定、データ抽出の、バージョン管理された引用可能なアーカイブレコードごとのライセンス
Software Heritage アーカイブソースコードの長期保存と永続的識別子Free access, licence of each repository
07決定

誰が決め、エビデンスが何に役立つか。

Foundry はエビデンスを準備します。以下の決定は、記載された当局がそれぞれの規則に基づいて行うものであり、プラットフォームが行うことは決してありません。

誰が決定するか質問このページが提供するエビデンス
省庁のプログラム責任者モデルが政策判断や投資判断に情報を提供するのに適しているかどうか妥当性の範囲、感度、独立したレビュー、明示された限界
モデル審査責任者あるモデルのバージョンを特定の問いに使ってよいか、使う場合はどのような留意点が付くかヒンドキャスト精度、外挿チェック、再現テスト
インフラ事業者モデルシナリオが、予防措置の規模を決めるのに十分な信頼性を持つかどうかアンサンブルの広がり、結合の仮定、過去の事象との比較
研究資金提供者と学術誌編集者結果が、公表またはさらなる資金提供に足る再現性を備えているかどうかArchived code, data cuts and the re-execution record

このトピックが生み出す成果物

  • Run records with data cut, code version, container digest and configuration
  • 有効性の条件を明記した検証報告書
  • Ensembles with spread and sensitivity attribution
  • Coupling contracts declaring units, time steps and grids
08中核となる問い

モデル作成者が結果を信頼する前に問うこと。

  • 同じデータ断面、コードのバージョン、設定から、この実行を正確に再現できるか。
  • そのモデルは、現在使用されている条件について、観測データと照らして検証されていますか。
  • 結果のばらつきのうち、入力、パラメータ、モデル構造に起因するのはどの程度か。
  • Are coupled models exchanging variables with consistent units, timing and assumptions?
09メカニズム

ワークロード、アンサンブル、カップリング。

リスクに関するほとんどの問いには、1 回ではなく多数回の実行が必要です。気候シナリオにわたるアンサンブル、不確実なパラメータにわたるモンテカルロ・サンプル、適応策の選択肢にわたるスイープなどです。これらは、クラウド、民間インフラ、エッジノードにまたがって NXS-COR(計算資源、ノード、ランタイム) を通じてスケジュールされるよう設計されています。 NXS-LAB(研究、実験、シミュレーション) が管理された実験と再現可能な計算を提供し、 NXS-DSS(決定ケースと審議) が結果を意思決定者向けの選択肢間のトレードオフに変換します。

結合部分は、誤りが潜む場所です。洪水モデルが電力網モデルに入力を与え、さらにそれが病院の事業継続モデルに入力を与える場合、時間ステップ、空間格子、単位の慣行が一致していないと、もっともらしいが誤った連鎖的影響が生じることがあります。明示的なインターフェース、各受け渡しにおける前提の明示、結合部そのものに対する感度テストが、標準的な防御策です。

10再現性と限界

How results are kept honest.

版

Pinned inputs

Frozen data cuts, versioned code and recorded configurations, so a run can be repeated.

検証

観測との比較

ハインドキャストとサンプル外検証を行い、妥当性の条件を明示します。

不確実性

明示され、隠されない

Results carry their spread and the main sources of uncertainty.

Limits: reproducibility proves a run can be repeated, not that the model is right. Models extrapolated beyond their validated range, or used for questions they were not built for, remain the most common source of misleading results. Independent review of model choice, separate from the team that built the model, is the standard safeguard.

11手法

どのように研究され、手法が言えないことは何か。

  1. 高性能・クラウド・エッジ・コンピューティング階層をまたぐアンサンブルのスケジューリング · データに隣接した連合型実行ここでの適用
  2. システム工学正規のシステム目録 · 契約先行のインターフェース · エビデンスにたどれる要件ここでの適用
  3. 人工知能と機械学習空間的検証を伴う地球観測モデル · モデル・カードと昇格の記録ここでの適用
  4. データエンジニアリング、相互運用性、データ・スチュワードシップ取り込みの境界での検証 · 再現可能なプロダクトのための固定データ・カットここでの適用
  5. ソフトウェアとセーフティクリティカル・システム工学フェイルクローズのポリシー・ゲート · ビルドの来歴と部品表 · 保証ケースここでの適用
12Where this page’s references

Where this page’s references lead.

このページの読解の基準となる機関と文書。状態と版は変わります。各リンクは発行機関へ移動します。

13質問

質問と回答。

結果を正確に再現できるか。
同じハードウェアとソフトウェアの構成であれば、多くの場合ビット単位で一致します。プロセッサ、コンパイラ、並列構成が異なると、結果が末尾の桁で異なることがあるため、再現は定められた許容範囲に照らして判断し、それを超える差は調査します。
Why run ensembles instead of one best run?
Because inputs, parameters and model structure are uncertain. An ensemble shows the spread a decision must allow for; a single run hides it.
結合契約とは何ですか。
モデル間の各受け渡しで、変数、単位、時間ステップ、グリッド、前提について宣言された取り決めです。実行のたびに検査されるため、不一致があれば、もっともらしいが誤った連鎖が生じる代わりに、明示的に失敗します。
Foundry で自分のモデルを実行できますか。
Inside an authorised project, once a compute allocation and the data owners’ terms are in place. The model, its container and its configuration are recorded with every run.
Are model results published automatically?
No. Results stay in the project until a reviewer accepts them and, for public material, a public-safe release decision is recorded.
Does running a model in Labs validate it?
No. Experiment results are not certification. Validation is a separate, documented assessment.
報告書貢献する

このページからエビデンスを提供する。

Reports はコンソーシアムの季刊刊行物です。このテーマについてあなたが知っていることは、次号でエビデンス、事例、または訂正となり得ます。あなたの名前を記し、あなた自身の著作物である場合は CC BY 4.0 で公表されます。

GCRI地域ミッションで最も多く使われる Foundry のFoundry の構築と準備度
地域ミッションで最も多く使われる Foundry の

手法、データセット、または問いを持ち込んでください。

情報提供と問い合わせは本日から受け付けています。問い合わせには参照番号が付き、次の手順が示されます。申請、支払い、計算資源の割り当て、登録は、担当チーム、規約、審査体制が整ってから開始します。

The Global Centre for Risk and Innovation (GCRI Canada) is a Canadian not-for-profit organisation, not a registered charity, with its registered office in Ontario.