GCRI · 研究ライブラリ
方法論と技術論文
Papers describing the quantitative and qualitative methods of The Global Centre for Risk and Innovation (GCRI), open enough for another team to apply, test or criticise them. Each states the method, its assumptions, its validation, where it fails and the software or data it needs. Methods link to their STEM Commons pages. Part of the research library.
方法論および技術論文のためのワークスペース。
エビデンスの格付け
Methods and technical papers · Review wave 2 · Example interface, not a record
基準ごとの確実性
0 低〜100 高
高いほど確実性が高い。値は例です。
レビュー待ち
- R-1実施中の国別プログラム第 2 レビュー担当者3 日
- R-2ラベル付きのエビデンス記録第 2 レビュー担当者2 日
- R-3適用した手法第 2 レビュー担当者4 日
GCRI · エビデンスの格付け。 エビデンスの格付け:例示の名前とイメージの値であり、記録ではありません。
定量的なものも定性的なものも、一つの基準で扱います。
Both kinds of method must be described well enough to be checked.
手法の論文が従うべき報告ガイドライン(手法の種類別)。
| Kind of method | Guide | 参照番号 |
|---|---|---|
| Prediction models, including machine learning | TRIPOD+AI | Collins and others, BMJ, 2024 |
| エージェントベースその他のシミュレーションモデル | ODD プロトコル、第 2 次更新 | Grimm and others, 2020 |
| Computer model calibration | Calibration with explicit model discrepancy | Kennedy and O’Hagan, 2001 |
| Machine-learning models in deployment | Model cards | Mitchell ほか、2019 年 |
| Land change from remote sensing | Area estimation from a reference sample | Olofsson and others, 2014 |
| 構造化された専門家判断 | キャリブレーション質問を含む、文書化されたエリシテーション・プロトコル | Stated in each paper |
Reviewed methods are designed for the Methods and Technical series, with each model described under NS-12 of the proposed Nexus Standards. Methods researchers can contribute replications and documented failures; both are published.
プロセスの進め方。
Process explorer · Process
Methods and technical papers: Source to evidence record
10 steps·4 stages·2 gates
プロセス
Methods and technical papers: Source to evidence record
情報源は登録・評価され、その記録はラベル付けと分類がなされ、デジタル証拠パスポートが来歴を担います。訂正は依存するすべての記録に届きます。
01 受付
- 01情報源を特定する情報源 · 情報源のスチュワード発見は取り込みではありません。情報源の特定では、情報源の区分、スチュワード、機関としての役割、管轄を記録します。
- 03情報源を登録するステップ登録によって、発見された情報源はエビデンスのライフサイクルにおける統治された参加者となります。推薦や認証を意味するものではありません。
02 評価
- 04管轄と権利の分類ゲート権利の分類では、ライセンス、同意、機密性、再利用の制限を特定します。その結果がアクセスと振り分けを決めます。
- 05エビデンスの質の評価ステップ品質評価では、記録が定められた用途に適しているかどうかを決めます。品質は多次元的であり、単一のスコアでは決してありません。
- 06エビデンス・ラベルステップすべての知見には 9 つのエビデンス・ラベルのいずれかが付きます。欠けているデータは欠損として示され、ゼロとして示されることはありません。
03 記録
04 利用と訂正
- 02訂正が依存する記録に届く段階 · NXS-GRX(正規データ、来歴、リスク)情報源の訂正は、過去の結果を書き換えることなく、依存する抽出データや成果物に波及します。
- 10公開安全性レビューゲート公開可否の審査では、記録を公に共有できるかどうかを決めます。これは独立した段階であり、妥当性確認ではありません。
Data protocols: evidence lifecycle · Data protocols: core data objects and evidence records · The Global Risks Index (NXS-GRX)Designed programme process, not a record of operation. No cycle has run and every programme is at service level R0. A gate is a programme decision, never a public-authority approval, certification or deployment authorisation. The data-protocol pages describe a design, not a running system.
すべての論文に含まれる 6 つの要素。
- 01
目的
The question the method answers and where it should not be used.
- 02
前提
結果が成り立つために満たされるべき条件。
- 03
検証
How the method was tested, on which data and with what result.
- 04
故障モード
この手法が誤解を招く結果を出すことが知られている状況。
- 05
実装
ソフトウェア、バージョン、パラメータ。ライセンスが許す範囲で公開します。
- 06
審査
誰が論文をレビューしたか、およびそのレビュー状況。
誰も検証できない手法は、エビデンスではありません。
リスクに関する意思決定は、見えにくいモデルや判断に依拠していることが多くあります。オープンな手法により、独立した研究者、情報源となる機関、影響を受けるコミュニティがそれらを検証し、弱点を見つけ、改善を提案できます。ライセンスやセキュリティ上の理由でコードやデータを公開できない場合、本論文はその旨を明記し、評価に足る程度に詳細に手法を記述しています。
Where methods are applied.
Modelling practice: models and scenarios. Reviewed methods may appear in the Methods and Technical series. Experimental protocols: Labs protocols and research design. Quantitative methods for finance: The Global Risks Alliance (GRA), models and professional methods.
Where this page’s references lead.
このページの読解の基準となる機関と文書。状態と版は変わります。各リンクは発行機関へ移動します。
- Collins ほか、TRIPOD+AI 声明、BMJ 385(2024年)
- Grimm and others, The ODD protocol for describing agent-based and other simulation models: a second update, Journal of Artificial Societies and Social Simulation 23 (2020)
- Kennedy and O’Hagan, Bayesian calibration of computer models, Journal of the Royal Statistical Society Series B 63 (2001)
- Mitchell ほか、Model cards for model reporting、Proceedings of FAT* 2019
- Olofsson and others, Good practices for estimating area and assessing accuracy of land change, Remote Sensing of Environment 148 (2014)
- NS-12、ソフトウェア、モデル、AI/ML 成果物、提案中の標準
質問と回答。
Why publish methods separately from results?
Are qualitative methods treated as less rigorous?
GCRI の手法を再利用できますか。
How are methods improved over time?
手法の改善を提案することはできますか。
このページからエビデンスを提供する。
Reports はコンソーシアムの季刊刊行物です。このテーマについてあなたが知っていることは、次号でエビデンス、事例、または訂正となり得ます。あなたの名前を記し、あなた自身の著作物である場合は CC BY 4.0 で公表されます。
- メールゲートウェイ GW-GCRIこのページから送信するエビデンス、訂正、事例、手法、レビュー、翻訳、プロファイルへの入力。このページのタグが付いて届くため、担当の編集者が受け取ります。
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- 報告書GCRI貢献のすべての方法を見る貢献の種類、それぞれの審査方法、受け取るクレジット、ライセンス、決して受け付けないもの。
個人データ、重要インフラの機微な詳細、共有する権利のないものは決して送らないでください。寄稿は利用前にレビューされます。送付によって著作者としての権利や編集上の権利が生じることはなく、スポンサーシップで調査結果を買うことは決してできません。
手法、データセット、または問いを持ち込んでください。
情報提供と問い合わせは本日から受け付けています。問い合わせには参照番号が付き、次の手順が示されます。申請、支払い、計算資源の割り当て、登録は、担当チーム、規約、審査体制が整ってから開始します。
法的文書。
このサイトの地図、データ、図表は、背景と一般的な情報として示すものです。助言、予報、警報ではありません。情報の限界は免責事項とデータに関する注意事項に記載しています。