Skip to content

GCRI · Forschungsbibliothek

Methoden und technische Papiere

Beiträge, die die quantitativen und qualitativen Methoden des Global Centre for Risk and Innovation (GCRI) beschreiben, so offen, dass ein anderes Team sie anwenden, testen oder kritisieren kann. Jeder nennt die Methode, ihre Annahmen, ihre Validierung, ihre Grenzen sowie die benötigte Software oder Daten. Die Methoden verweisen auf ihre Seiten im MINT-Commons . Teil der Forschungsbibliothek.

01Arbeitsbereich

Der Arbeitsbereich für Methoden und Fachbeiträge.

Evidenzbewertung

Methods and technical papers · Review wave 2 · Example interface, not a record

Two sources downgradedGCRI · GCRI

Gewissheit je Kriterium

0 niedrig bis 100 hoch

Höher heißt sicherer. Die Werte sind Beispiele.

Prüfwarteschlange

  1. R-1Country programmes activesecond reviewer3 d
  2. R-2Evidence records with labelssecond reviewer2 d
  3. R-3Methods appliedsecond reviewer4 d
Evidenzbewertung.Beispielhafte Oberfläche; keine Live-Daten.

GCRI · Evidenzbewertung. Evidenzbewertung: Beispielnamen und illustrative Werte, kein Nachweis.

02Two traditions

Quantitative and qualitative, held to one standard.

Beide Arten von Methoden müssen so gut beschrieben sein, dass sie überprüft werden können.

Quantitative

Modelle und Statistiken

Statistische, netzwerkbasierte, Simulations- und Optimierungsmethoden, etwa zur Unsicherheitsquantifizierung.

Qualitative

Strukturierte Beurteilung

Interviews, expert elicitation, scenario workshops and case analysis, with policy and decision science.

Gemischt

Kombinierte Konzepte

Studien, die beides verbinden und angeben, wie Evidenz beider Art gewichtet wird.

03Berichtsleitfäden

Die Berichtsleitlinien, denen ein Methodenaufsatz folgt, nach Art der Methode.

Art der MethodeLeitfadenReferenz
Vorhersagemodelle, einschließlich maschinellen LernensTRIPOD+AICollins und andere, BMJ, 2024
Agentenbasierte und andere SimulationsmodelleODD-Protokoll, zweite AktualisierungGrimm und andere, 2020
Computer model calibrationKalibrierung mit expliziter ModelldiskrepanzKennedy and O’Hagan, 2001
Im Einsatz befindliche Modelle des maschinellen LernensModellkartenMitchell und andere, 2019
Landnutzungsänderung aus der FernerkundungFlächenschätzung anhand einer ReferenzstichprobeOlofsson and others, 2014
Strukturierte ExpertenbeurteilungDokumentiertes Elicitation-Protokoll mit KalibrierungsfragenIn jedem Papier angegeben

Reviewed methods are designed for the Methods and Technical series, with each model described under NS-12 of the proposed Nexus Standards. Methods researchers can contribute replications and documented failures; both are published.

04Verfahren

Wie der Prozess abläuft.

Process explorer · Process

Methods and technical papers: Source to evidence record

10 steps4 stages2 gates

Verfahren

Methods and technical papers: Source to evidence record

Eine Quelle wird registriert und bewertet, ihr Datensatz gekennzeichnet und klassifiziert, und ein Digital Evidence Passport trägt die Herkunft; eine Korrektur erreicht jeden abhängigen Datensatz.

  1. 01 Aufnahme

    1. 01Die Quelle identifizierenQuelle · Der Sachwalter der QuelleEntdeckung ist keine Aufnahme. Die Quellenidentifikation hält Quellenklasse, Sachwalter, institutionelle Rolle und Rechtsordnung fest.
    2. 03Die Quelle registrierenSchrittDie Registrierung macht eine entdeckte Quelle zu einem gesteuerten Teilnehmer im Lebenszyklus der Evidenz. Sie bedeutet keine Billigung oder Zertifizierung.
  2. 02 Bewertung

    1. 04Klassifizierung nach Rechtsordnung und RechtenMeilensteinDie Rechteklassifizierung bestimmt Lizenz, Zustimmung, Vertraulichkeit und Grenzen der Weiterverwendung. Das Ergebnis bestimmt Zugang und Weiterleitung.
    2. 05Bewertung der EvidenzqualitätSchrittDie Qualitätsbewertung entscheidet, ob eine Aufzeichnung für eine bestimmte Nutzung geeignet ist. Qualität ist mehrdimensional und nie ein einzelner Wert.
    3. 06EvidenzkennzeichenSchrittJeder Befund trägt eines von neun Evidenzkennzeichen. Fehlende Daten werden als fehlend angezeigt, nie als null.
  3. 03 Protokoll

    1. 07EvidenzklassifizierungEintragDie Klassifizierung gibt Aufzeichnungen Lebenszykluszustände, etwa quellengeprüft, öffentlich unbedenklich oder eingeschränkt. Zustände können nebeneinander bestehen und bestimmen die Nutzung als Evidenz.
    2. 08Quellenveröffentlichung und KennungEintrag · NXS-GRX (kanonische Daten, Herkunft und Risiko)Eine Quellenveröffentlichung hält Rechte, zeitliche Abdeckung und Herkunftslinie der Quelle fest. Eine UNI wird über einen Katalog zugeteilt und nie von Hand eingegeben.
    3. 09Digital Evidence PassportRecordThe passport records provenance, quality, rights, jurisdiction, permitted use and history, so evidence keeps its context when it travels.
  4. 04 Nutzung und Korrektur

    1. 02Korrektur erreicht abhängige AufzeichnungenSchritt · NXS-GRX (kanonische Daten, Herkunft und Risiko)Eine Quellenkorrektur pflanzt sich auf abhängige Auszüge und Produkte fort, ohne alte Ergebnisse umzuschreiben.
    2. 10Öffentlich unbedenkliche PrüfungMeilensteinDie Prüfung auf öffentliche Unbedenklichkeit entscheidet, ob eine Aufzeichnung öffentlich geteilt werden kann. Sie ist eine eigene Stufe und keine Validierung.

Data protocols: evidence lifecycle · Data protocols: core data objects and evidence records · The Global Risks Index (NXS-GRX)Designed programme process, not a record of operation. No cycle has run and every programme is at service level R0. A gate is a programme decision, never a public-authority approval, certification or deployment authorisation. The data-protocol pages describe a design, not a running system.

05Was ein Methodenpapier enthält

Sechs Elemente in jedem Beitrag.

  1. 01

    Zweck

    Die Frage, die die Methode beantwortet, und wo sie nicht verwendet werden sollte.

  2. 02

    Annahmen

    Was zutreffen muss, damit Ergebnisse Bestand haben.

  3. 03

    Validierung

    Wie die Methode getestet wurde, mit welchen Daten und mit welchem Ergebnis.

  4. 04

    Ausfallmodi

    Bekannte Situationen, in denen die Methode irreführende Ergebnisse liefert.

  5. 05

    Umsetzung

    Software, Versionen und Parameter, veröffentlicht, soweit die Lizenzen dies erlauben.

  6. 06

    Prüfung

    Who reviewed the paper and its review state.

06Warum Offenheit wichtig ist

Eine Methode, die niemand prüfen kann, ist keine Evidenz.

Risikoentscheidungen beruhen häufig auf Modellen und Einschätzungen, die schwer nachzuvollziehen sind. Offene Methoden ermöglichen es unabhängigen Forschenden, Quellbehörden und betroffenen Gemeinschaften, sie zu prüfen, Schwächen zu finden und Verbesserungen vorzuschlagen. Wo Lizenzierung oder Sicherheit die Freigabe von Code oder Daten verhindern, weist das Papier darauf hin und beschreibt die Methode so ausführlich, dass sie sich beurteilen lässt.

09Fragen

Fragen und Antworten.

Why publish methods separately from results?
Damit die Methode für sich geprüft und wiederverwendet werden kann und damit Ergebnisse in vielen Publikationen auf eine geprüfte Beschreibung verweisen können.
Are qualitative methods treated as less rigorous?
Nein. Sie beantworten unterschiedliche Fragen. Beide müssen ihren Aufbau, ihre Annahmen und Grenzen darlegen, und beide werden geprüft.
Kann ich eine GCRI-Methode wiederverwenden?
Ja, unter der Lizenz des Papiers und der veröffentlichten Software. Bitte zitieren Sie das Methodenpapier und die Version.
Wie werden Methoden im Laufe der Zeit verbessert?
Durch Überprüfung, Widerspruch und neue Evidenz. Eine überarbeitete Methode wird als neue Version veröffentlicht, und davon abhängige Ergebnisse weisen auf die Änderung hin.
Kann ich eine Verbesserung an einer Methode vorschlagen?
Yes. Write to the research collaboration form with the method, the proposed change and your evidence. Proposals receive a reference and are reviewed on their merits.
BerichteBeitragen

Evidenz von dieser Seite aus beitragen.

Reports ist die vierteljährliche Publikation des Konsortiums. Was Sie über dieses Thema wissen, kann in der nächsten Ausgabe zu Evidenz, einem Fall oder einer Korrektur werden, Ihnen zugeschrieben und unter CC BY 4.0 veröffentlicht, soweit es Ihr eigenes Werk ist.

GCRI
Das Global Centre for Risk and Innovation

Bringen Sie eine Methode, einen Datensatz oder eine Frage mit.

Information und Anfragen sind heute offen. Eine Anfrage erhält ein Aktenzeichen und nennt den nächsten Schritt; Bewerbungen, Zahlungen, Rechenzuteilungen und Registrierungen öffnen erst, wenn Team, Bedingungen und Prüfkapazität bestehen.