Skip to content

GCRI · Foundry

Modelação e simulação

Risk models range from hydrodynamic flood simulations and power-flow studies to agent-based evacuation models and statistical loss models. They share three engineering needs: enough compute to run ensembles, enough discipline to reproduce a run months later, and enough honesty to state what the model cannot represent. This page sets out how model error enters, compounds through coupling and reaches decisions, how reproducibility is engineered, and where the limits sit.

02A pergunta

Modelagem e simulação: como o risco se desenvolve.

Workloads, reproducibility and limits. The dossier below sets out how the risk develops, what is measured, where the data come from, how it is modelled and who decides.

Mecanismo

Structural and parameter error

Every model omits processes and fixes parameters from limited data. Calibration can fit the past for the wrong reasons, so a model that matches history may still fail in the conditions a decision is actually about.

Mecanismo

O acoplamento agrava o erro

When a flood model feeds a power-network model that feeds a hospital-continuity model, mismatched time steps, grids, units or assumptions produce plausible but wrong cascades. Each hand-off needs a declared contract and a sensitivity test of its own.

Mecanismo

Environment drift

A compiler flag, a library update, a different processor or an unrecorded random seed alters results. Without pinned containers, versioned code and recorded configuration, a run cannot be repeated and a change in output cannot be explained.

Mecanismo

Extrapolação

Models are validated for a range of conditions and then used beyond it: a new climate, a larger event, a different city. Outside the validated range a model is an assumption with a number attached, and its label must say so.

03Métodos e evidência

How modelling and simulation is modelled, measured and tested.

O modelo, os seus pressupostos, os seus dados e a sua incerteza, na forma que um cientista ou engenheiro verificaria. As estruturas seguem métodos publicados. Os valores representados são ilustrativos, não conclusões.

Modelo, equações e pressupostos

A estrutura do modelo usada na modelagem e na simulação, as premissas que ela adota e como cada uma é testada.

Risco do elemento iRi = f(Hi, Ei, Vi, Ci)ameaça, exposição, vulnerabilidade e capacidade de enfrentamento
Perda anual esperadaEAL = ∑k pk · Lkover events k with annual probability pk
Sistemas acopladosxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
PressupostoPorque é feitoComo é testado
A ameaça e a exposição são independentes dentro de um eventoMantém tratável o integral de perdasComparar com um ajuste de cópula sobre registros conjuntos
Os acoplamentos são lineares perto do ponto de funcionamentoPermite que os choques se propaguem através de APerturbar para além do intervalo linear e comparar
As curvas de vulnerabilidade transferem-se entre lugaresAs curvas locais raramente estão disponíveisValidar face às perdas observadas quando existam
Entradas
conjuntos de dados versionados com proveniência
Resultados
distribuições, nunca números isolados
Código
publicado com a ficha de modelo e os testes
Reprodução
mesmos dados, código, ambiente e semente
Formulações padrão de risco e de espaço de estados; os pressupostos listados são típicos do método, indicados para revisão, não resultados.
FAIR guiding principles · GO FAIR and FORCE11W3C PROV · World Wide Web ConsortiumGuidance on consistent treatment of uncertainties · IPCCCEOS Analysis Ready Data · Committee on Earth Observation Satellites
04Nos cinco domínios

Os modelos no Foundry são concebidos para acoplar os domínios.

05Indicadores

O que é medido e com que qualidade.

Cada indicador leva sua unidade, sua periodicidade, o tipo de fonte por trás dele e a etiqueta de evidência que um valor levaria. Nenhum valor é mostrado: um programa os fornece sob sua própria autoridade.

IndicadorUnidadeCadênciaTipo de fonteRótulo
Runs reproduced from recorded inputsproporção das execuções amostradastrimestralAuditoria de reexecuçãoOBSERVADO
Hindcast skill on a held-out periodmodel-specific skill scorepor versão do modeloValidação com observaçõesMODELADO
Dispersão do conjuntounits of the output variablepor conjunto de execuçõesEstatísticas de ensembleMODELADO
Variance attributed to each uncertainty sourceproporção por insumo, parâmetro e estruturapor estudoGlobal sensitivity analysisMODELADO
Verificações da interface de acoplamento aprovadasproporção de transferênciaspor execuçãoUnit, grid and timing checksOBSERVADO
Conservation closure errorunits of the conserved quantitypor execuçãoDiagnósticos de modelosOBSERVADO
Versões de modelos em uso com revisão independenteproporção de versõespor versãoRegistros de revisãoOBSERVADO
Calcular por membro do conjuntohoras de núcleo ou horas de GPUpor execuçãoContabilização do agendadorOBSERVADO
06Fontes

De onde vêm as evidências.

Conjuntos de dados públicos nomeados e registros institucionais, cada um com sua classe de licença. As fontes obtidas por acordo só são usadas nos seus termos e nunca são republicadas.

FonteO que ofereceClasse de licença
Reanálise ERA5 (Serviço de Alterações Climáticas do Copernicus)Hourly atmospheric and land forcing for hindcasts and validationLivre e aberto, atribuição
CMIP6 through the Earth System Grid FederationProjeções de modelos climáticos para forçamento de cenáriosCC BY 4.0 for most models
ISIMIP impact model outputsHarmonised sectoral impact simulations for intercomparisonCC BY 4.0 para a maioria dos resultados
NASA EarthdataObservações por satélite para avaliação de modelosFree and open, NASA data policy
ZenodoArquivos versionados e citáveis de código de modelos, configuração e recortes de dadosLicence per record
Arquivo do Software HeritageLong-term preservation and persistent identifiers for source codeAcesso gratuito, licença de cada repositório
07Decisões

Quem decide, e a que servem as evidências.

O Foundry prepara evidências. As decisões abaixo são tomadas pelas autoridades indicadas, sob suas próprias regras, e nunca pela plataforma.

Quem decideA perguntaEvidências a que esta página serve
Responsáveis por programas em ministériosWhether a model is fit to inform a policy or investment choiceValidation range, sensitivity, independent review and stated limits
Model review leadsSe uma versão do modelo pode ser usada para uma questão e com quais ressalvasHindcast skill, extrapolation check, reproduction test
Operadores de infraestruturaWhether model scenarios are credible enough to size precautionsEnsemble spread, coupling assumptions, comparison with past events
Financiadores de pesquisa e editores de periódicosSe os resultados são reprodutíveis o bastante para publicar ou financiar novos trabalhosArchived code, data cuts and the re-execution record

Produtos que este tema gera

  • Run records with data cut, code version, container digest and configuration
  • Validation reports with the conditions of validity stated
  • Ensembles com dispersão e atribuição de sensibilidade
  • Coupling contracts declaring units, time steps and grids
08Questões centrais

O que os modeladores perguntam antes de confiar em um resultado.

  • Esta execução pode ser reproduzida exatamente, a partir do mesmo recorte de dados, da mesma versão do código e da mesma configuração?
  • O modelo foi validado com observações para as condições em que agora é utilizado?
  • How much of the spread in results comes from inputs, parameters and model structure?
  • Os modelos acoplados trocam variáveis com unidades, tempos e premissas consistentes?
09Mecanismos

Workloads, ensembles and coupling.

A maioria das questões de risco exige muitas execuções, e não uma só: conjuntos em diferentes cenários climáticos, amostras de Monte Carlo sobre parâmetros incertos ou varreduras sobre opções de adaptação. Elas foram concebidas para ser agendadas por meio do NXS-COR (computação, nós e ambientes de execução) em nuvem, infraestrutura privada e nós de borda, com o NXS-LAB (pesquisa, experimentos e simulações) fornecendo experimentos governados e computação reprodutível, e o NXS-DSS (casos de decisão e deliberação) transformando os resultados em escolhas de compromisso entre opções para os tomadores de decisão.

O acoplamento é onde os erros se escondem. Quando um modelo de inundação alimenta um modelo de rede elétrica que, por sua vez, alimenta um modelo de continuidade hospitalar, passos de tempo, grades espaciais ou convenções de unidades incompatíveis podem produzir cascatas plausíveis, porém erradas. Interfaces explícitas, premissas declaradas em cada transferência e testes de sensibilidade sobre o próprio acoplamento são as defesas padrão.

10Reprodutibilidade e limites

Como os resultados são mantidos honestos.

Versões

Entradas fixadas

Cortes de dados congelados, código versionado e configurações registradas, de modo que uma execução possa ser repetida.

Validação

Em comparação com as observações

Hindcasts and out-of-sample checks, with the conditions of validity stated.

Incerteza

Declarado, não oculto

Results carry their spread and the main sources of uncertainty.

Limits: reproducibility proves a run can be repeated, not that the model is right. Models extrapolated beyond their validated range, or used for questions they were not built for, remain the most common source of misleading results. Independent review of model choice, separate from the team that built the model, is the standard safeguard.

11Métodos

Como é estudado e o que os métodos não podem dizer.

  1. Computação de alto desempenho, em nuvem e de bordaAgendamento de conjuntos de simulações entre níveis · Execução federada junto aos dadosAplicado aqui
  2. Engenharia de sistemasInventário canônico de sistemas · Interfaces com contrato em primeiro lugar · Requisitos rastreados até as evidênciasAplicado aqui
  3. Inteligência artificial e aprendizado de máquinaModelos de observação da Terra com validação espacial · Fichas de modelos e registros de promoçãoAplicado aqui
  4. Engenharia, interoperabilidade e gestão responsável de dadosValidação na fronteira de ingestão · Recortes de dados congelados para produtos reproduzíveisAplicado aqui
  5. Engenharia de software e de sistemas críticos para a segurançaEtapas de controle de políticas com falha segura · Proveniência de builds e listas de materiais · Casos de garantiaAplicado aqui
12Where this page’s references

Where this page’s references lead.

Os organismos e documentos à luz dos quais esta página é lida. O estado e as edições mudam; cada ligação leva ao organismo emissor.

13Perguntas

Perguntas e respostas.

Um resultado pode ser reproduzido exatamente?
On the same hardware and software stack, often bit for bit. Across processors, compilers or parallel layouts, results can differ in the last digits, so reproduction is judged against a stated tolerance and any wider difference is investigated.
Por que executar ensembles em vez de uma única melhor simulação?
Because inputs, parameters and model structure are uncertain. An ensemble shows the spread a decision must allow for; a single run hides it.
What is a coupling contract?
A declared agreement at each model hand-off on variables, units, time step, grid and assumptions. It is checked on every run, so a mismatch fails visibly instead of producing a plausible wrong cascade.
Posso executar meu próprio modelo no Foundry?
Inside an authorised project, once a compute allocation and the data owners’ terms are in place. The model, its container and its configuration are recorded with every run.
Os resultados dos modelos são publicados automaticamente?
No. Results stay in the project until a reviewer accepts them and, for public material, a public-safe release decision is recorded.
Does running a model in Labs validate it?
Não. Os resultados de experimentos não são certificação. A validação é uma avaliação distinta e documentada.
RelatóriosContribuir

Contribua com evidências a partir desta página.

Reports é a publicação trimestral do Consortium. O que você sabe sobre este tema pode se tornar evidência, um caso ou uma correção na próxima edição, com crédito a você e publicado sob CC BY 4.0 quando for obra sua.

GCRIFoundryFoundry Build and Readiness
Foundry

Traga um método, um conjunto de dados ou uma pergunta.

A informação e os pedidos estão abertos hoje. Um pedido recebe uma referência e indica o próximo passo; candidaturas, pagamentos, alocações de computação e registros só abrem quando existem a equipa, os termos e a capacidade de revisão.

The Global Centre for Risk and Innovation (GCRI Canada) is a Canadian not-for-profit organisation, not a registered charity, with its registered office in Ontario.