GCRI · Foundry
モデリングとシミュレーション
Risk models range from hydrodynamic flood simulations and power-flow studies to agent-based evacuation models and statistical loss models. They share three engineering needs: enough compute to run ensembles, enough discipline to reproduce a run months later, and enough honesty to state what the model cannot represent. This page sets out how model error enters, compounds through coupling and reaches decisions, how reproducibility is engineered, and where the limits sit.
Modelling and simulation on the record.
モデリングとシミュレーション: リスクがどのように展開するか。
Workloads, reproducibility and limits. The dossier below sets out how the risk develops, what is measured, where the data come from, how it is modelled and who decides.
Structural and parameter error
Every model omits processes and fixes parameters from limited data. Calibration can fit the past for the wrong reasons, so a model that matches history may still fail in the conditions a decision is actually about.
結合は誤差を増幅する
洪水モデルが送電網モデルに入力され、さらに病院の事業継続モデルに入力される場合、時間ステップ、グリッド、単位、前提の不整合により、もっともらしいが誤ったカスケードが生じる。各受け渡しには、明示された契約と、それ自体の感度検証が必要である。
Environment drift
A compiler flag, a library update, a different processor or an unrecorded random seed alters results. Without pinned containers, versioned code and recorded configuration, a run cannot be repeated and a change in output cannot be explained.
Extrapolation
Models are validated for a range of conditions and then used beyond it: a new climate, a larger event, a different city. Outside the validated range a model is an assumption with a number attached, and its label must say so.
モデリングとシミュレーションがどのようにモデル化、測定、検証されるか。
モデル、その仮定、データ、不確実性を、科学者やエンジニアが確認する形で示します。構造は公表された手法に従っています。描かれた値は例示であり、知見ではありません。
モデル、方程式、仮定
The model structure used for modelling and simulation, the assumptions it makes and how each is tested.
Ri = f(Hi, Ei, Vi, Ci)ハザード、エクスポージャー、脆弱性、対処能力EAL = ∑k pk · Lkover events k with annual probability pkxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error| 仮定 | 作られる理由 | 検証の方法 |
|---|---|---|
| 一つの事象の中では、ハザードとエクスポージャーは独立している | 損失の積分を扱いやすく保つ | 同時記録に当てはめたコピュラと比較 |
| 結合は動作点の近くで線形である | ショックを A を通じて伝播させる | 線形範囲を超えて摂動を与えて比較する |
| 脆弱性曲線は場所を越えて適用できる | 地域固有の曲線はめったに得られない | 観測された損失がある場合はそれに照らして検証 |
- 入力
- 来歴付きのバージョン管理されたデータセット
- 成果物
- 分布であり、単一の数値ではない
- コード
- モデルカードと試験とともに公開
- 再現
- 同じデータ、コード、環境、シード
Foundry のモデルは、各分野を連動させるよう設計されています。
Models would carry NS-12 cards under the proposed Nexus Standards and be documented with the ODD protocol where agent-based. Results go to the Scenario and Stress-Test series.
- モデルのレビュー。
- Validation data.
何を、どの程度うまく測定しているか。
各指標には、その単位、更新頻度、背後にある出典の種類、値が持つことになるエビデンスのラベルが付いています。値は表示しません:プログラムが自らの権限のもとで値を提供します。
| 指標 | 単位 | 周期 | 出典の種類 | ラベル |
|---|---|---|---|---|
| 記録された入力から再現された実行 | サンプリングした実行の割合 | 四半期ごと | 再実行監査 | 観測 |
| Hindcast skill on a held-out period | model-specific skill score | モデルのバージョンごと | Validation against observations | モデル化 |
| アンサンブルのばらつき | 出力変数の単位 | 実行セットあたり | アンサンブル統計 | モデル化 |
| Variance attributed to each uncertainty source | proportion by input, parameter and structure | 研究ごと | グローバル 感度分析 | モデル化 |
| Coupling interface checks passed | 引き継ぎの割合 | 実行あたり | Unit, grid and timing checks | 観測 |
| Conservation closure error | units of the conserved quantity | 実行あたり | Model diagnostics | 観測 |
| Model versions in use with independent review | バージョンの割合 | バージョンごと | 審査記録 | 観測 |
| Compute per ensemble member | コア時間または GPU 時間 | 実行あたり | Scheduler accounting | 観測 |
エビデンスの出所。
名前の明示された公開データセットと機関の記録。それぞれにライセンス区分があります。合意に基づく出典は、その条件のもとでのみ使用し、再公開することはありません。
| 出典 | 提供するもの | ライセンス区分 |
|---|---|---|
| ERA5 再解析(Copernicus 気候変動 サービス) | Hourly atmospheric and land forcing for hindcasts and validation | 無料かつオープン、帰属表示 |
| CMIP6 through the Earth System Grid Federation | Climate model projections for scenario forcing | CC BY 4.0 for most models |
| ISIMIP 影響モデルの出力 | 相互比較のための調和されたセクター別影響シミュレーション | 大半の成果物は CC BY 4.0 |
| NASA Earthdata | Satellite observations for model evaluation | Free and open, NASA data policy |
| Zenodo | モデルコード、設定、データ抽出の、バージョン管理された引用可能なアーカイブ | レコードごとのライセンス |
| Software Heritage アーカイブ | ソースコードの長期保存と永続的識別子 | Free access, licence of each repository |
誰が決め、エビデンスが何に役立つか。
Foundry はエビデンスを準備します。以下の決定は、記載された当局がそれぞれの規則に基づいて行うものであり、プラットフォームが行うことは決してありません。
| 誰が決定するか | 質問 | このページが提供するエビデンス |
|---|---|---|
| 省庁のプログラム責任者 | モデルが政策判断や投資判断に情報を提供するのに適しているかどうか | 妥当性の範囲、感度、独立したレビュー、明示された限界 |
| モデル審査責任者 | あるモデルのバージョンを特定の問いに使ってよいか、使う場合はどのような留意点が付くか | ヒンドキャスト精度、外挿チェック、再現テスト |
| インフラ事業者 | モデルシナリオが、予防措置の規模を決めるのに十分な信頼性を持つかどうか | アンサンブルの広がり、結合の仮定、過去の事象との比較 |
| 研究資金提供者と学術誌編集者 | 結果が、公表またはさらなる資金提供に足る再現性を備えているかどうか | Archived code, data cuts and the re-execution record |
このトピックが生み出す成果物
- Run records with data cut, code version, container digest and configuration
- 有効性の条件を明記した検証報告書
- Ensembles with spread and sensitivity attribution
- Coupling contracts declaring units, time steps and grids
モデル作成者が結果を信頼する前に問うこと。
- 同じデータ断面、コードのバージョン、設定から、この実行を正確に再現できるか。
- そのモデルは、現在使用されている条件について、観測データと照らして検証されていますか。
- 結果のばらつきのうち、入力、パラメータ、モデル構造に起因するのはどの程度か。
- Are coupled models exchanging variables with consistent units, timing and assumptions?
ワークロード、アンサンブル、カップリング。
リスクに関するほとんどの問いには、1 回ではなく多数回の実行が必要です。気候シナリオにわたるアンサンブル、不確実なパラメータにわたるモンテカルロ・サンプル、適応策の選択肢にわたるスイープなどです。これらは、クラウド、民間インフラ、エッジノードにまたがって NXS-COR(計算資源、ノード、ランタイム) を通じてスケジュールされるよう設計されています。 NXS-LAB(研究、実験、シミュレーション) が管理された実験と再現可能な計算を提供し、 NXS-DSS(決定ケースと審議) が結果を意思決定者向けの選択肢間のトレードオフに変換します。
結合部分は、誤りが潜む場所です。洪水モデルが電力網モデルに入力を与え、さらにそれが病院の事業継続モデルに入力を与える場合、時間ステップ、空間格子、単位の慣行が一致していないと、もっともらしいが誤った連鎖的影響が生じることがあります。明示的なインターフェース、各受け渡しにおける前提の明示、結合部そのものに対する感度テストが、標準的な防御策です。
How results are kept honest.
Pinned inputs
Frozen data cuts, versioned code and recorded configurations, so a run can be repeated.
観測との比較
ハインドキャストとサンプル外検証を行い、妥当性の条件を明示します。
明示され、隠されない
Results carry their spread and the main sources of uncertainty.
Limits: reproducibility proves a run can be repeated, not that the model is right. Models extrapolated beyond their validated range, or used for questions they were not built for, remain the most common source of misleading results. Independent review of model choice, separate from the team that built the model, is the standard safeguard.
どのように研究され、手法が言えないことは何か。
- 01高性能・クラウド・エッジ・コンピューティング階層をまたぐアンサンブルのスケジューリング · データに隣接した連合型実行ここでの適用
- 02システム工学正規のシステム目録 · 契約先行のインターフェース · エビデンスにたどれる要件ここでの適用
- 03人工知能と機械学習空間的検証を伴う地球観測モデル · モデル・カードと昇格の記録ここでの適用
- 04データエンジニアリング、相互運用性、データ・スチュワードシップ取り込みの境界での検証 · 再現可能なプロダクトのための固定データ・カットここでの適用
- 05ソフトウェアとセーフティクリティカル・システム工学フェイルクローズのポリシー・ゲート · ビルドの来歴と部品表 · 保証ケースここでの適用
Where this page’s references lead.
このページの読解の基準となる機関と文書。状態と版は変わります。各リンクは発行機関へ移動します。
質問と回答。
結果を正確に再現できるか。
Why run ensembles instead of one best run?
結合契約とは何ですか。
Foundry で自分のモデルを実行できますか。
Are model results published automatically?
Does running a model in Labs validate it?
このページからエビデンスを提供する。
Reports はコンソーシアムの季刊刊行物です。このテーマについてあなたが知っていることは、次号でエビデンス、事例、または訂正となり得ます。あなたの名前を記し、あなた自身の著作物である場合は CC BY 4.0 で公表されます。
- メールゲートウェイ GW-GCRIこのページから送信するエビデンス、訂正、事例、手法、レビュー、翻訳、プロファイルへの入力。このページのタグが付いて届くため、担当の編集者が受け取ります。
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- 報告書GCRI貢献のすべての方法を見る貢献の種類、それぞれの審査方法、受け取るクレジット、ライセンス、決して受け付けないもの。
個人データ、重要インフラの機微な詳細、共有する権利のないものは決して送らないでください。寄稿は利用前にレビューされます。送付によって著作者としての権利や編集上の権利が生じることはなく、スポンサーシップで調査結果を買うことは決してできません。
手法、データセット、または問いを持ち込んでください。
情報提供と問い合わせは本日から受け付けています。問い合わせには参照番号が付き、次の手順が示されます。申請、支払い、計算資源の割り当て、登録は、担当チーム、規約、審査体制が整ってから開始します。
法的文書。
このサイトの地図、データ、図表は、背景と一般的な情報として示すものです。助言、予報、警報ではありません。情報の限界は免責事項とデータに関する注意事項に記載しています。