GCRI · Forschungsbibliothek
Methoden und technische Papiere
Beiträge, die die quantitativen und qualitativen Methoden des Global Centre for Risk and Innovation (GCRI) beschreiben, so offen, dass ein anderes Team sie anwenden, testen oder kritisieren kann. Jeder nennt die Methode, ihre Annahmen, ihre Validierung, ihre Grenzen sowie die benötigte Software oder Daten. Die Methoden verweisen auf ihre Seiten im MINT-Commons . Teil der Forschungsbibliothek.
Der Arbeitsbereich für Methoden und Fachbeiträge.
Evidenzbewertung
Methods and technical papers · Review wave 2 · Example interface, not a record
Gewissheit je Kriterium
0 niedrig bis 100 hoch
Höher heißt sicherer. Die Werte sind Beispiele.
Prüfwarteschlange
- R-1Country programmes activesecond reviewer3 d
- R-2Evidence records with labelssecond reviewer2 d
- R-3Methods appliedsecond reviewer4 d
GCRI · Evidenzbewertung. Evidenzbewertung: Beispielnamen und illustrative Werte, kein Nachweis.
Quantitative and qualitative, held to one standard.
Beide Arten von Methoden müssen so gut beschrieben sein, dass sie überprüft werden können.
Modelle und Statistiken
Statistische, netzwerkbasierte, Simulations- und Optimierungsmethoden, etwa zur Unsicherheitsquantifizierung.
Strukturierte Beurteilung
Interviews, expert elicitation, scenario workshops and case analysis, with policy and decision science.
Kombinierte Konzepte
Studien, die beides verbinden und angeben, wie Evidenz beider Art gewichtet wird.
Die Berichtsleitlinien, denen ein Methodenaufsatz folgt, nach Art der Methode.
| Art der Methode | Leitfaden | Referenz |
|---|---|---|
| Vorhersagemodelle, einschließlich maschinellen Lernens | TRIPOD+AI | Collins und andere, BMJ, 2024 |
| Agentenbasierte und andere Simulationsmodelle | ODD-Protokoll, zweite Aktualisierung | Grimm und andere, 2020 |
| Computer model calibration | Kalibrierung mit expliziter Modelldiskrepanz | Kennedy and O’Hagan, 2001 |
| Im Einsatz befindliche Modelle des maschinellen Lernens | Modellkarten | Mitchell und andere, 2019 |
| Landnutzungsänderung aus der Fernerkundung | Flächenschätzung anhand einer Referenzstichprobe | Olofsson and others, 2014 |
| Strukturierte Expertenbeurteilung | Dokumentiertes Elicitation-Protokoll mit Kalibrierungsfragen | In jedem Papier angegeben |
Reviewed methods are designed for the Methods and Technical series, with each model described under NS-12 of the proposed Nexus Standards. Methods researchers can contribute replications and documented failures; both are published.
Wie der Prozess abläuft.
Process explorer · Process
Methods and technical papers: Source to evidence record
10 steps·4 stages·2 gates
Verfahren
Methods and technical papers: Source to evidence record
Eine Quelle wird registriert und bewertet, ihr Datensatz gekennzeichnet und klassifiziert, und ein Digital Evidence Passport trägt die Herkunft; eine Korrektur erreicht jeden abhängigen Datensatz.
01 Aufnahme
- 01Die Quelle identifizierenQuelle · Der Sachwalter der QuelleEntdeckung ist keine Aufnahme. Die Quellenidentifikation hält Quellenklasse, Sachwalter, institutionelle Rolle und Rechtsordnung fest.
- 03Die Quelle registrierenSchrittDie Registrierung macht eine entdeckte Quelle zu einem gesteuerten Teilnehmer im Lebenszyklus der Evidenz. Sie bedeutet keine Billigung oder Zertifizierung.
02 Bewertung
- 04Klassifizierung nach Rechtsordnung und RechtenMeilensteinDie Rechteklassifizierung bestimmt Lizenz, Zustimmung, Vertraulichkeit und Grenzen der Weiterverwendung. Das Ergebnis bestimmt Zugang und Weiterleitung.
- 05Bewertung der EvidenzqualitätSchrittDie Qualitätsbewertung entscheidet, ob eine Aufzeichnung für eine bestimmte Nutzung geeignet ist. Qualität ist mehrdimensional und nie ein einzelner Wert.
- 06EvidenzkennzeichenSchrittJeder Befund trägt eines von neun Evidenzkennzeichen. Fehlende Daten werden als fehlend angezeigt, nie als null.
03 Protokoll
- 07EvidenzklassifizierungEintragDie Klassifizierung gibt Aufzeichnungen Lebenszykluszustände, etwa quellengeprüft, öffentlich unbedenklich oder eingeschränkt. Zustände können nebeneinander bestehen und bestimmen die Nutzung als Evidenz.
- 08Quellenveröffentlichung und KennungEintrag · NXS-GRX (kanonische Daten, Herkunft und Risiko)Eine Quellenveröffentlichung hält Rechte, zeitliche Abdeckung und Herkunftslinie der Quelle fest. Eine UNI wird über einen Katalog zugeteilt und nie von Hand eingegeben.
- 09Digital Evidence PassportRecordThe passport records provenance, quality, rights, jurisdiction, permitted use and history, so evidence keeps its context when it travels.
04 Nutzung und Korrektur
- 02Korrektur erreicht abhängige AufzeichnungenSchritt · NXS-GRX (kanonische Daten, Herkunft und Risiko)Eine Quellenkorrektur pflanzt sich auf abhängige Auszüge und Produkte fort, ohne alte Ergebnisse umzuschreiben.
- 10Öffentlich unbedenkliche PrüfungMeilensteinDie Prüfung auf öffentliche Unbedenklichkeit entscheidet, ob eine Aufzeichnung öffentlich geteilt werden kann. Sie ist eine eigene Stufe und keine Validierung.
Data protocols: evidence lifecycle · Data protocols: core data objects and evidence records · The Global Risks Index (NXS-GRX)Designed programme process, not a record of operation. No cycle has run and every programme is at service level R0. A gate is a programme decision, never a public-authority approval, certification or deployment authorisation. The data-protocol pages describe a design, not a running system.
Sechs Elemente in jedem Beitrag.
- 01
Zweck
Die Frage, die die Methode beantwortet, und wo sie nicht verwendet werden sollte.
- 02
Annahmen
Was zutreffen muss, damit Ergebnisse Bestand haben.
- 03
Validierung
Wie die Methode getestet wurde, mit welchen Daten und mit welchem Ergebnis.
- 04
Ausfallmodi
Bekannte Situationen, in denen die Methode irreführende Ergebnisse liefert.
- 05
Umsetzung
Software, Versionen und Parameter, veröffentlicht, soweit die Lizenzen dies erlauben.
- 06
Prüfung
Who reviewed the paper and its review state.
Eine Methode, die niemand prüfen kann, ist keine Evidenz.
Risikoentscheidungen beruhen häufig auf Modellen und Einschätzungen, die schwer nachzuvollziehen sind. Offene Methoden ermöglichen es unabhängigen Forschenden, Quellbehörden und betroffenen Gemeinschaften, sie zu prüfen, Schwächen zu finden und Verbesserungen vorzuschlagen. Wo Lizenzierung oder Sicherheit die Freigabe von Code oder Daten verhindern, weist das Papier darauf hin und beschreibt die Methode so ausführlich, dass sie sich beurteilen lässt.
Wo Methoden angewendet werden.
Modelling practice: models and scenarios. Reviewed methods may appear in the Methods and Technical series. Experimental protocols: Labs protocols and research design. Quantitative methods for finance: The Global Risks Alliance (GRA), models and professional methods.
Where this page’s references lead.
Die Gremien und Dokumente, vor deren Hintergrund diese Seite gelesen wird. Status und Ausgaben ändern sich; jeder Link führt zur herausgebenden Stelle.
- Collins et al., TRIPOD+AI statement, BMJ 385 (2024)
- Grimm und andere, The ODD protocol for describing agent-based and other simulation models: a second update, Journal of Artificial Societies and Social Simulation 23 (2020)
- Kennedy and O’Hagan, Bayesian calibration of computer models, Journal of the Royal Statistical Society Series B 63 (2001)
- Mitchell und andere, Model cards for model reporting, Proceedings of FAT* 2019
- Olofsson und andere, Good practices for estimating area and assessing accuracy of land change, Remote Sensing of Environment 148 (2014)
- NS-12, Software-, Modell- und KI/ML-Artefakte, ein vorgeschlagener Standard
Fragen und Antworten.
Why publish methods separately from results?
Are qualitative methods treated as less rigorous?
Kann ich eine GCRI-Methode wiederverwenden?
Wie werden Methoden im Laufe der Zeit verbessert?
Kann ich eine Verbesserung an einer Methode vorschlagen?
Evidenz von dieser Seite aus beitragen.
Reports ist die vierteljährliche Publikation des Konsortiums. Was Sie über dieses Thema wissen, kann in der nächsten Ausgabe zu Evidenz, einem Fall oder einer Korrektur werden, Ihnen zugeschrieben und unter CC BY 4.0 veröffentlicht, soweit es Ihr eigenes Werk ist.
- E-MailZugang GW-GCRIVon dieser Seite aus sendenEvidenz, eine Korrektur, ein Fall, eine Methode, eine Prüfung, eine Übersetzung oder ein Beitrag zu einem Profil. Sie kommt mit dieser Seite gekennzeichnet an, sodass die zuständige Redaktion sie erhält.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- BerichteGCRIAlle Wege zum Beitragen ansehenDie Beitragsarten, wie jede geprüft wird, welche Nennung Sie erhalten, die Lizenz und was nie angenommen wird.
Senden Sie nie personenbezogene Daten, sensible Infrastrukturdetails oder etwas, das Sie nicht weitergeben dürfen. Ein Beitrag wird vor der Nutzung geprüft; das Einsenden begründet weder Urheberschaft noch redaktionelle Rechte, und Sponsoring erkauft nie ein Ergebnis.
Bringen Sie eine Methode, einen Datensatz oder eine Frage mit.
Information und Anfragen sind heute offen. Eine Anfrage erhält ein Aktenzeichen und nennt den nächsten Schritt; Bewerbungen, Zahlungen, Rechenzuteilungen und Registrierungen öffnen erst, wenn Team, Bedingungen und Prüfkapazität bestehen.
Rechtliche Dokumente.
Karten, Daten und Zahlen auf dieser Website werden zu Kontext- und allgemeinen Informationszwecken gezeigt. Sie sind weder Beratung noch Prognosen oder Warnungen; die Grenzen der Information sind in den Haftungsausschlüssen und Datenhinweisen dargelegt.