GCRI · Tecnologia
Engenharia, interoperabilidade e gestão responsável de dados
Engenharia de dados, interoperabilidade e guarda de dados abrangem os fluxos, as normas e a governança que tornam os dados utilizáveis e confiáveis. Eles determinam se informações de diferentes setores podem ser combinadas para uma avaliação de riscosconjunta. Dados e Computação é o guardião desta página para o Nexus Consortium.
Engenharia de dados, interoperabilidade e guarda de dados, com registro.
- 01InstitutionThe Global Centre for Risk and Innovation (GCRI)
- 02The methodWhat data engineering, interoperability and stewardship covers
- 03Prática de referênciaA engenharia de dados segue padrões de guarda de dados, proveniência e catálogo
- 04In systemic risk workThe pipeline is part of the evidence
- 05Aplicado emPlataformas que aplicam este método
- 06Gestão responsávelQuem mantém esta página
- 07SourcesWhere this page’s references lead
O que abrangem a engenharia de dados, a interoperabilidade e a guarda de dados.
- 01
Métodos centrais
data pipeline design; schema and metadata standards; data quality assessment; provenance tracking; master data management; access control and licensing.
- 02
Dados e instrumentos
data catalogues; application programming interfaces; metadata registries; data lakes and warehouses; open data portals.
- 03
Validação
Os pipelines são testados com verificações automatizadas de qualidade, validação de esquema e auditorias de linhagem. A reconciliação com os sistemas de origem confirma a completude.
- 04
Limites
Padrões incompatíveis, metadados ausentes e licenças restritivas bloqueiam a integração. Sistemas legados e transformações não documentadas introduzem erros silenciosos.
- 05
Uso em decisões de risco
Uma engenharia de dados sólida permite vincular de forma consistente dados de ameaça, exposição e finanças. Ela apoia uma análise transparente e reproduzível do risco interconectado.
Data engineering follows stewardship, provenance and catalogue standards.
| Referência | O que estabelece |
|---|---|
| Princípios FAIR | Findable, accessible, interoperable, reusable data |
| W3C PROV | Provenance model |
| W3C DCAT | Data catalogue vocabulary |
| GSBPM | Statistical production process model |
Como decorre o processo.
Process explorer · Process
Data engineering, interoperability and stewardship: Catastrophe model pipeline
10 steps·5 stages
Processo
Data engineering, interoperability and stewardship: Catastrophe model pipeline
Os modelos de catástrofe têm normalmente módulos de ameaças, de vulnerabilidade, de exposição e financeiro, e produzem tabelas de perdas, a perda anual média, curvas de excedência, a PML e o TVaR.
01 Ameaça
- 01Catálogo de eventosConjunto de dados · Desenvolvedor do modeloO módulo de ameaças contém um grande catálogo de eventos simulados que representa uma ampla gama de cenários plausíveis.
- 03Módulo de ameaçasModelo · Desenvolvedor do modeloPara cada evento, o módulo de ameaças dá a intensidade da ameaça local que o módulo de vulnerabilidade lê.
02 Exposição e danos
- 02ExposiçãoConjunto de dados · Responsável pelo programaO módulo de exposição contém os dados da carteira, como as informações específicas de cada localização.
- 04Módulo de vulnerabilidadeModelo · Desenvolvedor do modeloO módulo de vulnerabilidade quantifica o dano esperado às exposições a partir de um evento.
03 Financeiro
- 05Módulo financeiroModelo · Responsável pelo programaO módulo financeiro calcula as perdas de todos os cenários de eventos. As perdas brutas na origem, brutas e líquidas diferem como se mostra abaixo.
- 06Tabela de perdas por eventoConjunto de dados · Responsável pelo programaUma tabela de perdas por evento lista cada evento com sua probabilidade anual de ocorrência e sua perda para a carteira.
- 07Tabela de perdas anuaisConjunto de dados · Responsável pelo programaAlguns modelos também amostram anos simulados a partir das perdas dos eventos. Este esboço não descreve seu formato.
04 Métricas
- 08Exceedance probability curvesModel · Programme ownerThe occurrence curve gives the chance that the largest loss in a year exceeds an amount. The aggregate curve does so for the sum of losses.
- 09AAL, PML e TVaRModelo · Responsável pelo programaA perda média anual soma a probabilidade de cada evento multiplicada pela perda. A PML é um ponto na curva de ocorrência.
05 Uso dos resultados
- 10Use of resultsDecision · Programme ownerThe tail metrics are used when considering a portfolio’s exposure and the level of catastrophe reinsurance an insurer requires.
Esboço de uma norma ou de um método externo, a partir de suas fontes públicas. Descreve o que o quadro diz, não um registro de qualquer execução. Não mostra que o Nexus ou qualquer parceiro executa, certifica ou aprova uma etapa. Uma etapa de controle é uma etapa do método, nunca uma aprovação Nexus.
O pipeline faz parte das evidências.
Every transformation between a source and a published figure (cleaning, joining, imputing, aggregating) is a place where errors and assumptions enter. In cross-system analysis pipelines are long and shared, so provenance records are what make a figure traceable and a correction possible.
- Registre a proveniência em cada transformação.
- Make imputation visible in outputs.
- Version datasets so a figure can be regenerated.
- Aplicações em Registro e Relatórios.
Plataformas que aplicam este método.
Quem mantém esta página.
Data and Compute stewards data engineering, interoperability and stewardship: it keeps this description current and reviews how the method is applied across the platforms.
Where this page’s references lead.
Os organismos e documentos à luz dos quais esta página é lida. O estado e as edições mudam; cada ligação leva ao organismo emissor.
Perguntas e respostas.
Por que uma só instituição hospeda todas as páginas de métodos?
Como posso sugerir uma correção a uma página de método?
Contribua com evidências a partir desta página.
Reports é a publicação trimestral do Consortium. O que você sabe sobre este tema pode se tornar evidência, um caso ou uma correção na próxima edição, com crédito a você e publicado sob CC BY 4.0 quando for obra sua.
- E-mailPortal GW-GCRIEnvie desta páginaEvidência, uma correção, um caso, um método, uma revisão, uma tradução ou uma contribuição ao perfil. Chega marcada com esta página, de modo que o editor responsável a receba.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- RelatóriosGCRIVer todas as formas de contribuirOs tipos de contribuição, como cada um é revisado, o crédito que você recebe, a licença e o que nunca é aceito.
Nunca envie dados pessoais, detalhes sensíveis de infraestrutura nem nada que você não tenha o direito de compartilhar. Uma contribuição é revisada antes do uso. Enviá-la não confere autoria nem direitos editoriais, e o patrocínio nunca compra uma constatação.
Traga um método, um conjunto de dados ou uma pergunta.
A informação e os pedidos estão abertos hoje. Um pedido recebe uma referência e indica o próximo passo; candidaturas, pagamentos, alocações de computação e registros só abrem quando existem a equipa, os termos e a capacidade de revisão.
Documentos jurídicos.
Os mapas, dados e números deste site são apresentados como contexto e informação geral. Não são aconselhamento, previsões nem avisos; os limites da informação estão expostos nos Avisos legais e nos Avisos sobre dados.