Skip to content

GCRI · Tecnologia

Engenharia, interoperabilidade e gestão responsável de dados

Engenharia de dados, interoperabilidade e guarda de dados abrangem os fluxos, as normas e a governança que tornam os dados utilizáveis e confiáveis. Eles determinam se informações de diferentes setores podem ser combinadas para uma avaliação de riscosconjunta. Dados e Computação é o guardião desta página para o Nexus Consortium.

02O método

O que abrangem a engenharia de dados, a interoperabilidade e a guarda de dados.

  1. 01

    Métodos centrais

    data pipeline design; schema and metadata standards; data quality assessment; provenance tracking; master data management; access control and licensing.

  2. 02

    Dados e instrumentos

    data catalogues; application programming interfaces; metadata registries; data lakes and warehouses; open data portals.

  3. 03

    Validação

    Os pipelines são testados com verificações automatizadas de qualidade, validação de esquema e auditorias de linhagem. A reconciliação com os sistemas de origem confirma a completude.

  4. 04

    Limites

    Padrões incompatíveis, metadados ausentes e licenças restritivas bloqueiam a integração. Sistemas legados e transformações não documentadas introduzem erros silenciosos.

  5. 05

    Uso em decisões de risco

    Uma engenharia de dados sólida permite vincular de forma consistente dados de ameaça, exposição e finanças. Ela apoia uma análise transparente e reproduzível do risco interconectado.

03Prática de referência

Data engineering follows stewardship, provenance and catalogue standards.

ReferênciaO que estabelece
Princípios FAIRFindable, accessible, interoperable, reusable data
W3C PROVProvenance model
W3C DCATData catalogue vocabulary
GSBPMStatistical production process model
04Processo

Como decorre o processo.

Process explorer · Process

Data engineering, interoperability and stewardship: Catastrophe model pipeline

10 steps5 stages

Processo

Data engineering, interoperability and stewardship: Catastrophe model pipeline

Os modelos de catástrofe têm normalmente módulos de ameaças, de vulnerabilidade, de exposição e financeiro, e produzem tabelas de perdas, a perda anual média, curvas de excedência, a PML e o TVaR.

  1. 01 Ameaça

    1. 01Catálogo de eventosConjunto de dados · Desenvolvedor do modeloO módulo de ameaças contém um grande catálogo de eventos simulados que representa uma ampla gama de cenários plausíveis.
    2. 03Módulo de ameaçasModelo · Desenvolvedor do modeloPara cada evento, o módulo de ameaças dá a intensidade da ameaça local que o módulo de vulnerabilidade lê.
  2. 02 Exposição e danos

    1. 02ExposiçãoConjunto de dados · Responsável pelo programaO módulo de exposição contém os dados da carteira, como as informações específicas de cada localização.
    2. 04Módulo de vulnerabilidadeModelo · Desenvolvedor do modeloO módulo de vulnerabilidade quantifica o dano esperado às exposições a partir de um evento.
  3. 03 Financeiro

    1. 05Módulo financeiroModelo · Responsável pelo programaO módulo financeiro calcula as perdas de todos os cenários de eventos. As perdas brutas na origem, brutas e líquidas diferem como se mostra abaixo.
    2. 06Tabela de perdas por eventoConjunto de dados · Responsável pelo programaUma tabela de perdas por evento lista cada evento com sua probabilidade anual de ocorrência e sua perda para a carteira.
    3. 07Tabela de perdas anuaisConjunto de dados · Responsável pelo programaAlguns modelos também amostram anos simulados a partir das perdas dos eventos. Este esboço não descreve seu formato.
  4. 04 Métricas

    1. 08Exceedance probability curvesModel · Programme ownerThe occurrence curve gives the chance that the largest loss in a year exceeds an amount. The aggregate curve does so for the sum of losses.
    2. 09AAL, PML e TVaRModelo · Responsável pelo programaA perda média anual soma a probabilidade de cada evento multiplicada pela perda. A PML é um ponto na curva de ocorrência.
  5. 05 Uso dos resultados

    1. 10Use of resultsDecision · Programme ownerThe tail metrics are used when considering a portfolio’s exposure and the level of catastrophe reinsurance an insurer requires.

Esboço de uma norma ou de um método externo, a partir de suas fontes públicas. Descreve o que o quadro diz, não um registro de qualquer execução. Não mostra que o Nexus ou qualquer parceiro executa, certifica ou aprova uma etapa. Uma etapa de controle é uma etapa do método, nunca uma aprovação Nexus.

05No trabalho sobre risco sistêmico

O pipeline faz parte das evidências.

Every transformation between a source and a published figure (cleaning, joining, imputing, aggregating) is a place where errors and assumptions enter. In cross-system analysis pipelines are long and shared, so provenance records are what make a figure traceable and a correction possible.

  • Registre a proveniência em cada transformação.
  • Make imputation visible in outputs.
  • Version datasets so a figure can be regenerated.
  • Aplicações em Registro e Relatórios.
07Gestão responsável

Quem mantém esta página.

Data and Compute stewards data engineering, interoperability and stewardship: it keeps this description current and reviews how the method is applied across the platforms.

08Fontes

Where this page’s references lead.

Os organismos e documentos à luz dos quais esta página é lida. O estado e as edições mudam; cada ligação leva ao organismo emissor.

09Perguntas

Perguntas e respostas.

Por que uma só instituição hospeda todas as páginas de métodos?
O GCRI hospeda o CTEM Commons para que cada método tenha uma descrição canônica. As plataformas remetem a ela em vez de repeti-la, o que mantém as definições consistentes.
Como posso sugerir uma correção a uma página de método?
Escrever para o formulário de preocupações de integridade com o trecho e o motivo.
RelatóriosContribuir

Contribua com evidências a partir desta página.

Reports é a publicação trimestral do Consortium. O que você sabe sobre este tema pode se tornar evidência, um caso ou uma correção na próxima edição, com crédito a você e publicado sob CC BY 4.0 quando for obra sua.

GCRI
O Global Centre for Risk and Innovation

Traga um método, um conjunto de dados ou uma pergunta.

A informação e os pedidos estão abertos hoje. Um pedido recebe uma referência e indica o próximo passo; candidaturas, pagamentos, alocações de computação e registros só abrem quando existem a equipa, os termos e a capacidade de revisão.