Skip to content

GCRI · Technologie

Ingénierie, interopérabilité et intendance des données

L'ingénierie des données, l'interopérabilité et la gestion des données couvrent les chaînes de traitement, les normes et la gouvernance qui rendent les données utilisables et dignes de confiance. Elles déterminent si les informations issues de différents secteurs peuvent être combinées pour une évaluation des risques. Données et calcul assure la gestion de cette page pour le Nexus Consortium.

02La méthode

Ce que couvrent l'ingénierie des données, l'interopérabilité et la gestion responsable des données.

  1. 01

    Méthodes de base

    conception de chaînes de traitement des données ; normes de schémas et de métadonnées ; évaluation de la qualité des données ; suivi de la provenance ; gestion des données de référence ; contrôle d'accès et octroi de licences.

  2. 02

    Données et instruments

    data catalogues; application programming interfaces; metadata registries; data lakes and warehouses; open data portals.

  3. 03

    Validation

    Les pipelines sont testés par des contrôles qualité automatisés, la validation des schémas et des audits de traçabilité. Le rapprochement avec les systèmes sources confirme l'exhaustivité.

  4. 04

    Limites

    Des normes incompatibles, des métadonnées manquantes et des licences restrictives bloquent l'intégration. Les systèmes hérités et les transformations non documentées introduisent des erreurs silencieuses.

  5. 05

    Utilisation dans les décisions relatives aux risques

    Une ingénierie des données rigoureuse permet de relier de manière cohérente les données sur les aléas, l'exposition et les données financières. Elle soutient une analyse transparente et reproductible des risques interconnectés.

03Pratiques de référencement

Data engineering follows stewardship, provenance and catalogue standards.

RéférenceCe qu'il fixe
Principes FAIRFindable, accessible, interoperable, reusable data
W3C PROVModèle de provenance
W3C DCATData catalogue vocabulary
GSBPMStatistical production process model
04Processus

Comment le processus se déroule.

Process explorer · Process

Data engineering, interoperability and stewardship: Catastrophe model pipeline

10 steps5 stages

Processus

Data engineering, interoperability and stewardship: Catastrophe model pipeline

Les modèles de catastrophe comportent généralement des modules d'aléa, de vulnérabilité, d'exposition et financier, et produisent des tables de pertes, la perte annuelle moyenne, des courbes de dépassement, la PML et la TVaR.

  1. 01 Aléa

    1. 01Catalogue d'événementsJeu de données · Développeur du modèleLe module d'aléa contient un vaste catalogue d'événements simulés qui représente un large éventail de scénarios plausibles.
    2. 03Module d'aléaModèle · Développeur du modèlePour chaque événement, le module d'aléa fournit l' intensité de l'aléa locale que lit le module de vulnérabilité.
  2. 02 Exposition et dommages

    1. 02ExpositionJeu de données · Responsable du programmeLe module d'exposition contient les données du portefeuille, telles que les informations propres à chaque emplacement.
    2. 04Module de vulnérabilitéModèle · Développeur du modèleLe module de vulnérabilité quantifie les dommages attendus sur les éléments exposés lors d'un événement.
  3. 03 Financier

    1. 05Module financierModèle · Responsable du programmeLe module financier calcule les pertes de tous les scénarios d'événements. Les pertes économiques totales, brutes et nettes diffèrent comme indiqué ci-dessous.
    2. 06Table des pertes par événementJeu de données · Responsable du programmeUne table des pertes par événement liste chaque événement avec sa probabilité de survenue annuelle et sa perte pour le portefeuille.
    3. 07Table des pertes annuellesJeu de données · Responsable du programmeCertains modèles échantillonnent aussi des années simulées à partir des pertes par événement. Cette présentation n'en décrit pas le format.
  4. 04 Indicateurs

    1. 08Exceedance probability curvesModel · Programme ownerThe occurrence curve gives the chance that the largest loss in a year exceeds an amount. The aggregate curve does so for the sum of losses.
    2. 09AAL, PML et TVaRModèle · Responsable du programmeLa perte annuelle moyenne additionne, pour chaque événement, la probabilité multipliée par la perte. La PML est un point de la courbe d'occurrence.
  5. 05 Utilisation des résultats

    1. 10Use of resultsDecision · Programme ownerThe tail metrics are used when considering a portfolio’s exposure and the level of catastrophe reinsurance an insurer requires.

Présentation d'une norme ou d'une méthode externe, d'après ses sources publiques. Elle décrit ce que dit le cadre, et non le compte rendu d'une exécution. Elle ne montre pas que Nexus ou un partenaire exécute, certifie ou approuve une étape. Une porte est une étape de la méthode, jamais une approbation de Nexus.

05Dans les travaux sur le risque systémique

La chaîne de traitement fait partie des données probantes.

Chaque transformation entre une source et un chiffre publié (nettoyage, jointure, imputation, agrégation) est un point d'entrée pour des erreurs et des hypothèses. Dans l'analyse intersystèmes, les chaînes de traitement sont longues et partagées ; ce sont donc les enregistrements de provenance qui rendent un chiffre traçable et une correction possible.

  • Consigner la provenance à chaque transformation.
  • Make imputation visible in outputs.
  • Versionner les jeux de données afin qu'un chiffre puisse être régénéré.
  • Applications sur Registre et Rapports.
07Intendance

Responsable de la mise à jour de cette page.

Data and Compute stewards data engineering, interoperability and stewardship: it keeps this description current and reviews how the method is applied across the platforms.

08Sources

Where this page’s references lead.

Les organismes et documents à l'aune desquels cette page se lit. Les statuts et éditions changent ; chaque lien mène à l'organisme émetteur.

09Questions

Questions et réponses.

Pourquoi une seule institution héberge-t-elle toutes les pages de méthode ?
Le GCRI héberge les Communs STIM afin que chaque méthode dispose d'une description canonique unique. Les plateformes y renvoient au lieu de la répéter, ce qui préserve la cohérence des définitions.
Comment proposer une correction à une page de méthode ?
Écrire à le formulaire de signalement d'intégrité en indiquant le passage et le motif.
RapportsContribuer

Apportez des éléments de preuve depuis cette page.

Reports est la publication trimestrielle du Consortium. Ce que vous savez de ce sujet peut devenir une donnée probante, un cas ou une correction dans la prochaine édition, avec mention de votre nom et publié sous licence CC BY 4.0 lorsqu'il s'agit de votre propre travail.

GCRI
Le Global Centre for Risk and Innovation

Apportez une méthode, un jeu de données ou une question.

L'information et les demandes sont ouvertes dès aujourd'hui. Une demande reçoit une référence et indique l'étape suivante ; candidatures, paiements, allocations de calcul et inscriptions n'ouvrent que lorsque l'équipe, les conditions et la capacité d'examen existent.