GCRI · Foundry
建模与模拟
Risk models range from hydrodynamic flood simulations and power-flow studies to agent-based evacuation models and statistical loss models. They share three engineering needs: enough compute to run ensembles, enough discipline to reproduce a run months later, and enough honesty to state what the model cannot represent. This page sets out how model error enters, compounds through coupling and reaches decisions, how reproducibility is engineered, and where the limits sit.
建模与模拟:风险如何发展。
工作负载、可复现性与局限。下文说明风险如何演变、衡量什么、数据来自何处、如何建模以及由谁决定。
结构误差和参数误差
Every model omits processes and fixes parameters from limited data. Calibration can fit the past for the wrong reasons, so a model that matches history may still fail in the conditions a decision is actually about.
耦合会放大误差
When a flood model feeds a power-network model that feeds a hospital-continuity model, mismatched time steps, grids, units or assumptions produce plausible but wrong cascades. Each hand-off needs a declared contract and a sensitivity test of its own.
Environment drift
编译器标志、库更新、不同的处理器或未记录的随机种子都会改变结果。如果没有固定的容器、带版本的代码和记录在案的配置,运行就无法重复,输出的变化也无法解释。
Extrapolation
Models are validated for a range of conditions and then used beyond it: a new climate, a larger event, a different city. Outside the validated range a model is an assumption with a number attached, and its label must say so.
建模与仿真如何建模、度量和检验。
模型、其假设、数据和不确定性,以科学家或工程师会核查的形式呈现。结构遵循已发表的方法。所取数值仅为示意,不是研究发现。
模型、方程与假设
The model structure used for modelling and simulation, the assumptions it makes and how each is tested.
Ri = f(Hi, Ei, Vi, Ci)危害、风险暴露、脆弱性和应对能力EAL = ∑k pk · Lkover events k with annual probability pkxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error| 假设 | 为何制作 | 如何检验 |
|---|---|---|
| 在一次事件中,危害与暴露相互独立 | 使损失积分保持可计算 | 与基于联合记录拟合的 copula 进行比较 |
| 耦合在工作点附近是线性的 | 让冲击通过 A 传播 | 在线性范围之外施加扰动并比较 |
| 脆弱性曲线可以在不同地点之间迁移使用 | 很少有本地曲线可用 | 在有观测损失的地方据此进行验证 |
- 输入
- 带溯源信息的版本化数据集
- 成果
- 分布,绝不是单一数字
- 代码
- 连同模型卡和测试一起发布
- 复现
- 相同的数据、代码、环境和随机种子
Foundry 中的模型旨在耦合各个领域。
Models would carry NS-12 cards under the proposed Nexus Standards and be documented with the ODD protocol where agent-based. Results go to the Scenario and Stress-Test series.
- Model reviews.
- Validation data.
衡量什么,以及衡量得如何。
每个指标都注明其单位、频率、背后的来源类型以及数值将附带的证据标签。此处不显示数值:数值由计划依据其自身权限提供。
| 指标 | 单位 | 节奏 | 来源类型 | 标签 |
|---|---|---|---|---|
| Runs reproduced from recorded inputs | 抽样运行所占比例 | 每季度 | 重新执行审计 | 观测 |
| Hindcast skill on a held-out period | model-specific skill score | per model version | 对照观测的验证 | 模型生成 |
| 集合离散度 | units of the output variable | 每个运行集 | 集合统计 | 模型生成 |
| Variance attributed to each uncertainty source | 按输入、参数和结构划分的比例 | 每项研究 | 全球 敏感性分析 | 模型生成 |
| 耦合接口检查已通过 | 交接比例 | 每次运行 | 单位、网格和时间检查 | 观测 |
| Conservation closure error | units of the conserved quantity | 每次运行 | Model diagnostics | 观测 |
| Model versions in use with independent review | 版本占比 | 每个版本 | 评审记录 | 观测 |
| Compute per ensemble member | 核时或 GPU 时 | 每次运行 | Scheduler accounting | 观测 |
证据来自何处。
具名公共数据集与机构记录,各自注明许可类别。依协议获得的来源仅按其条款使用,绝不再次发布。
| 来源 | 它提供什么 | 许可类别 |
|---|---|---|
| ERA5 再分析资料(Copernicus 气候变化 服务) | Hourly atmospheric and land forcing for hindcasts and validation | 免费开放,须署名 |
| 通过 地球系统 网格联盟获取的 CMIP6 档案 | 用于情景强迫的气候模型预测 | CC BY 4.0 for most models |
| ISIMIP 影响模型输出 | 用于相互比较的统一部门影响模拟 | 大多数成果采用 CC BY 4.0 |
| NASA Earthdata | 用于模型评估的卫星观测 | Free and open, NASA data policy |
| Zenodo | 模型代码、配置和数据切片的版本化、可引用归档 | 每条记录的许可 |
| Software Heritage 档案库 | 源代码的长期保存和持久标识符 | 免费访问,各存储库各自的许可 |
由谁决定,以及证据服务于什么。
Foundry 负责准备证据。以下决定由所列机构依其自身规则作出,绝不由平台作出。
| 谁来决定 | 问题 | 本页面服务的证据 |
|---|---|---|
| 各部委的项目负责人 | Whether a model is fit to inform a policy or investment choice | Validation range, sensitivity, independent review and stated limits |
| 模型审查负责人 | 某一模型版本能否用于某个问题,以及附带哪些注意事项 | 回溯预测技能、外推检验、复现测试 |
| 基础设施运营方 | 模型情景是否足够可信,可据以确定预防措施的规模 | 集合离散度、耦合假设、与历史事件的比较 |
| 科研资助方和期刊编辑 | 结果是否具备足够的可重复性,可供发表或进一步资助 | Archived code, data cuts and the re-execution record |
该主题产生的产出
- Run records with data cut, code version, container digest and configuration
- Validation reports with the conditions of validity stated
- 含离散度和敏感性归因的集合
- Coupling contracts declaring units, time steps and grids
建模人员在信任结果之前会提出的问题。
- Can this run be reproduced exactly, from the same data cut, code version and configuration?
- 该模型是否已针对其当前使用条件下的观测数据进行过验证?
- 结果的差异有多少来自输入、参数和模型结构?
- Are coupled models exchanging variables with consistent units, timing and assumptions?
Workloads, ensembles and coupling.
大多数风险问题需要多次运行而非一次:跨气候情景的集合、针对不确定参数的蒙特卡洛抽样,或跨适应方案的扫描。这些运行被设计为通过 NXS-COR(算力、节点与运行时) 在云、私有基础设施和边缘节点之间调度,由 NXS-LAB(研究、实验与模拟) 提供受治理的实验和可复现计算,并由 NXS-DSS(决策案例与审议) 将结果转化为面向决策者的方案权衡。
耦合是错误藏身之处。当洪水模型为电网模型提供输入,而电网模型又为医院连续性模型提供输入时,时间步长、空间网格或单位约定不一致,可能产生看似合理但错误的级联结果。明确的接口、在每次交接处声明假设,以及对耦合本身进行敏感性测试,是标准的防范措施。
如何确保结果诚实可信。
Pinned inputs
冻结的数据切片、带版本的代码和已记录的配置,使一次运行可以重复。
Against observations
Hindcasts and out-of-sample checks, with the conditions of validity stated.
Stated, not hidden
Results carry their spread and the main sources of uncertainty.
Limits: reproducibility proves a run can be repeated, not that the model is right. Models extrapolated beyond their validated range, or used for questions they were not built for, remain the most common source of misleading results. Independent review of model choice, separate from the team that built the model, is the standard safeguard.
如何研究,以及方法无法说明的内容。
Where this page’s references lead.
阅读本页时所对照的机构和文件。状态和版本会变化;每个链接都指向发布机构。
问题与解答。
结果能否完全复现?
为什么运行集合而不是单次最佳运行?
What is a coupling contract?
我可以在 Foundry 中运行自己的模型吗?
模型结果会自动发布吗?
Does running a model in Labs validate it?
从本页贡献证据。
Reports 是联合体的季刊。您对该主题的了解可以成为下一期中的证据、案例或更正,署名归您,并在属于您本人作品时以 CC BY 4.0 发布。
- 电子邮件网关 GW-GCRI从本页发送证据、更正、案例、方法、审查、翻译或概况投稿。它会带上本页标签送达,由负责的编辑接收。
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- 报告GCRI查看所有贡献方式贡献类型、各自的评审方式、您获得的署名、许可协议,以及绝不接受的内容。
切勿发送个人数据、敏感基础设施细节或您无权分享的任何内容。贡献在使用前会经过审查;发送贡献不赋予署名权或编辑权,赞助也绝不能换取研究结论。
法律文件。
本网站上的地图、数据和图表仅作为背景和一般信息展示。它们不是建议、预测或预警;信息的局限见免责声明和数据说明。