GCRI · Foundry
Modelação e simulação
Risk models range from hydrodynamic flood simulations and power-flow studies to agent-based evacuation models and statistical loss models. They share three engineering needs: enough compute to run ensembles, enough discipline to reproduce a run months later, and enough honesty to state what the model cannot represent. This page sets out how model error enters, compounds through coupling and reaches decisions, how reproducibility is engineered, and where the limits sit.
Modelling and simulation on the record.
Modelagem e simulação: como o risco se desenvolve.
Workloads, reproducibility and limits. The dossier below sets out how the risk develops, what is measured, where the data come from, how it is modelled and who decides.
Structural and parameter error
Every model omits processes and fixes parameters from limited data. Calibration can fit the past for the wrong reasons, so a model that matches history may still fail in the conditions a decision is actually about.
O acoplamento agrava o erro
When a flood model feeds a power-network model that feeds a hospital-continuity model, mismatched time steps, grids, units or assumptions produce plausible but wrong cascades. Each hand-off needs a declared contract and a sensitivity test of its own.
Environment drift
A compiler flag, a library update, a different processor or an unrecorded random seed alters results. Without pinned containers, versioned code and recorded configuration, a run cannot be repeated and a change in output cannot be explained.
Extrapolação
Models are validated for a range of conditions and then used beyond it: a new climate, a larger event, a different city. Outside the validated range a model is an assumption with a number attached, and its label must say so.
How modelling and simulation is modelled, measured and tested.
O modelo, os seus pressupostos, os seus dados e a sua incerteza, na forma que um cientista ou engenheiro verificaria. As estruturas seguem métodos publicados. Os valores representados são ilustrativos, não conclusões.
Modelo, equações e pressupostos
A estrutura do modelo usada na modelagem e na simulação, as premissas que ela adota e como cada uma é testada.
Ri = f(Hi, Ei, Vi, Ci)ameaça, exposição, vulnerabilidade e capacidade de enfrentamentoEAL = ∑k pk · Lkover events k with annual probability pkxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error| Pressuposto | Porque é feito | Como é testado |
|---|---|---|
| A ameaça e a exposição são independentes dentro de um evento | Mantém tratável o integral de perdas | Comparar com um ajuste de cópula sobre registros conjuntos |
| Os acoplamentos são lineares perto do ponto de funcionamento | Permite que os choques se propaguem através de A | Perturbar para além do intervalo linear e comparar |
| As curvas de vulnerabilidade transferem-se entre lugares | As curvas locais raramente estão disponíveis | Validar face às perdas observadas quando existam |
- Entradas
- conjuntos de dados versionados com proveniência
- Resultados
- distribuições, nunca números isolados
- Código
- publicado com a ficha de modelo e os testes
- Reprodução
- mesmos dados, código, ambiente e semente
Os modelos no Foundry são concebidos para acoplar os domínios.
Models would carry NS-12 cards under the proposed Nexus Standards and be documented with the ODD protocol where agent-based. Results go to the Scenario and Stress-Test series.
- Model reviews.
- Validation data.
O que é medido e com que qualidade.
Cada indicador leva sua unidade, sua periodicidade, o tipo de fonte por trás dele e a etiqueta de evidência que um valor levaria. Nenhum valor é mostrado: um programa os fornece sob sua própria autoridade.
| Indicador | Unidade | Cadência | Tipo de fonte | Rótulo |
|---|---|---|---|---|
| Runs reproduced from recorded inputs | proporção das execuções amostradas | trimestral | Auditoria de reexecução | OBSERVADO |
| Hindcast skill on a held-out period | model-specific skill score | por versão do modelo | Validação com observações | MODELADO |
| Dispersão do conjunto | units of the output variable | por conjunto de execuções | Estatísticas de ensemble | MODELADO |
| Variance attributed to each uncertainty source | proporção por insumo, parâmetro e estrutura | por estudo | Global sensitivity analysis | MODELADO |
| Verificações da interface de acoplamento aprovadas | proporção de transferências | por execução | Unit, grid and timing checks | OBSERVADO |
| Conservation closure error | units of the conserved quantity | por execução | Diagnósticos de modelos | OBSERVADO |
| Versões de modelos em uso com revisão independente | proporção de versões | por versão | Registros de revisão | OBSERVADO |
| Calcular por membro do conjunto | horas de núcleo ou horas de GPU | por execução | Contabilização do agendador | OBSERVADO |
De onde vêm as evidências.
Conjuntos de dados públicos nomeados e registros institucionais, cada um com sua classe de licença. As fontes obtidas por acordo só são usadas nos seus termos e nunca são republicadas.
| Fonte | O que oferece | Classe de licença |
|---|---|---|
| Reanálise ERA5 (Serviço de Alterações Climáticas do Copernicus) | Hourly atmospheric and land forcing for hindcasts and validation | Livre e aberto, atribuição |
| CMIP6 through the Earth System Grid Federation | Projeções de modelos climáticos para forçamento de cenários | CC BY 4.0 for most models |
| ISIMIP impact model outputs | Harmonised sectoral impact simulations for intercomparison | CC BY 4.0 para a maioria dos resultados |
| NASA Earthdata | Observações por satélite para avaliação de modelos | Free and open, NASA data policy |
| Zenodo | Arquivos versionados e citáveis de código de modelos, configuração e recortes de dados | Licence per record |
| Arquivo do Software Heritage | Long-term preservation and persistent identifiers for source code | Acesso gratuito, licença de cada repositório |
Quem decide, e a que servem as evidências.
O Foundry prepara evidências. As decisões abaixo são tomadas pelas autoridades indicadas, sob suas próprias regras, e nunca pela plataforma.
| Quem decide | A pergunta | Evidências a que esta página serve |
|---|---|---|
| Responsáveis por programas em ministérios | Whether a model is fit to inform a policy or investment choice | Validation range, sensitivity, independent review and stated limits |
| Model review leads | Se uma versão do modelo pode ser usada para uma questão e com quais ressalvas | Hindcast skill, extrapolation check, reproduction test |
| Operadores de infraestrutura | Whether model scenarios are credible enough to size precautions | Ensemble spread, coupling assumptions, comparison with past events |
| Financiadores de pesquisa e editores de periódicos | Se os resultados são reprodutíveis o bastante para publicar ou financiar novos trabalhos | Archived code, data cuts and the re-execution record |
Produtos que este tema gera
- Run records with data cut, code version, container digest and configuration
- Validation reports with the conditions of validity stated
- Ensembles com dispersão e atribuição de sensibilidade
- Coupling contracts declaring units, time steps and grids
O que os modeladores perguntam antes de confiar em um resultado.
- Esta execução pode ser reproduzida exatamente, a partir do mesmo recorte de dados, da mesma versão do código e da mesma configuração?
- O modelo foi validado com observações para as condições em que agora é utilizado?
- How much of the spread in results comes from inputs, parameters and model structure?
- Os modelos acoplados trocam variáveis com unidades, tempos e premissas consistentes?
Workloads, ensembles and coupling.
A maioria das questões de risco exige muitas execuções, e não uma só: conjuntos em diferentes cenários climáticos, amostras de Monte Carlo sobre parâmetros incertos ou varreduras sobre opções de adaptação. Elas foram concebidas para ser agendadas por meio do NXS-COR (computação, nós e ambientes de execução) em nuvem, infraestrutura privada e nós de borda, com o NXS-LAB (pesquisa, experimentos e simulações) fornecendo experimentos governados e computação reprodutível, e o NXS-DSS (casos de decisão e deliberação) transformando os resultados em escolhas de compromisso entre opções para os tomadores de decisão.
O acoplamento é onde os erros se escondem. Quando um modelo de inundação alimenta um modelo de rede elétrica que, por sua vez, alimenta um modelo de continuidade hospitalar, passos de tempo, grades espaciais ou convenções de unidades incompatíveis podem produzir cascatas plausíveis, porém erradas. Interfaces explícitas, premissas declaradas em cada transferência e testes de sensibilidade sobre o próprio acoplamento são as defesas padrão.
Como os resultados são mantidos honestos.
Entradas fixadas
Cortes de dados congelados, código versionado e configurações registradas, de modo que uma execução possa ser repetida.
Em comparação com as observações
Hindcasts and out-of-sample checks, with the conditions of validity stated.
Declarado, não oculto
Results carry their spread and the main sources of uncertainty.
Limits: reproducibility proves a run can be repeated, not that the model is right. Models extrapolated beyond their validated range, or used for questions they were not built for, remain the most common source of misleading results. Independent review of model choice, separate from the team that built the model, is the standard safeguard.
Como é estudado e o que os métodos não podem dizer.
- 01Computação de alto desempenho, em nuvem e de bordaAgendamento de conjuntos de simulações entre níveis · Execução federada junto aos dadosAplicado aqui
- 02Engenharia de sistemasInventário canônico de sistemas · Interfaces com contrato em primeiro lugar · Requisitos rastreados até as evidênciasAplicado aqui
- 03Inteligência artificial e aprendizado de máquinaModelos de observação da Terra com validação espacial · Fichas de modelos e registros de promoçãoAplicado aqui
- 04Engenharia, interoperabilidade e gestão responsável de dadosValidação na fronteira de ingestão · Recortes de dados congelados para produtos reproduzíveisAplicado aqui
- 05Engenharia de software e de sistemas críticos para a segurançaEtapas de controle de políticas com falha segura · Proveniência de builds e listas de materiais · Casos de garantiaAplicado aqui
Where this page’s references lead.
Os organismos e documentos à luz dos quais esta página é lida. O estado e as edições mudam; cada ligação leva ao organismo emissor.
Perguntas e respostas.
Um resultado pode ser reproduzido exatamente?
Por que executar ensembles em vez de uma única melhor simulação?
What is a coupling contract?
Posso executar meu próprio modelo no Foundry?
Os resultados dos modelos são publicados automaticamente?
Does running a model in Labs validate it?
Contribua com evidências a partir desta página.
Reports é a publicação trimestral do Consortium. O que você sabe sobre este tema pode se tornar evidência, um caso ou uma correção na próxima edição, com crédito a você e publicado sob CC BY 4.0 quando for obra sua.
- E-mailPortal GW-GCRIEnvie desta páginaEvidência, uma correção, um caso, um método, uma revisão, uma tradução ou uma contribuição ao perfil. Chega marcada com esta página, de modo que o editor responsável a receba.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- RelatóriosGCRIVer todas as formas de contribuirOs tipos de contribuição, como cada um é revisado, o crédito que você recebe, a licença e o que nunca é aceito.
Nunca envie dados pessoais, detalhes sensíveis de infraestrutura nem nada que você não tenha o direito de compartilhar. Uma contribuição é revisada antes do uso. Enviá-la não confere autoria nem direitos editoriais, e o patrocínio nunca compra uma constatação.
Traga um método, um conjunto de dados ou uma pergunta.
A informação e os pedidos estão abertos hoje. Um pedido recebe uma referência e indica o próximo passo; candidaturas, pagamentos, alocações de computação e registros só abrem quando existem a equipa, os termos e a capacidade de revisão.
Documentos jurídicos.
Os mapas, dados e números deste site são apresentados como contexto e informação geral. Não são aconselhamento, previsões nem avisos; os limites da informação estão expostos nos Avisos legais e nos Avisos sobre dados.