GCRI · Biblioteca de pesquisa
Métodos e documentos técnicos
Papers describing the quantitative and qualitative methods of The Global Centre for Risk and Innovation (GCRI), open enough for another team to apply, test or criticise them. Each states the method, its assumptions, its validation, where it fails and the software or data it needs. Methods link to their STEM Commons pages. Part of the research library.
The workspace for methods and technical papers.
Graduação da evidência
Methods and technical papers · Review wave 2 · Example interface, not a record
Certeza por critério
0 baixo a 100 alto
Mais alto é mais certo. Os valores são exemplos.
Fila de revisão
- R-1Country programmes activesecond reviewer3 d
- R-2Evidence records with labelssecond reviewer2 d
- R-3Methods appliedsecond reviewer4 d
GCRI · Evidence grading. Evidence grading: example names and illustrative values, not a record.
Quantitativo e qualitativo, sob um único padrão.
Os dois tipos de método devem ser descritos com detalhe suficiente para serem verificados.
Modelos e estatísticas
Métodos estatísticos, de redes, de simulação e de otimização, como a quantificação da incerteza.
Structured judgement
Entrevistas, elicitação de especialistas, oficinas de cenários e análise de casos, com ciência de políticas e de decisão.
Arranjos combinados
Studies that combine both, stating how evidence of each kind is weighed.
Os guias de relato que um artigo de métodos segue, por tipo de método.
| Tipo de método | Guide | Referência |
|---|---|---|
| Modelos de previsão, incluindo aprendizado de máquina | TRIPOD+AI | Collins e outros, BMJ, 2024 |
| Modelos baseados em agentes e outros modelos de simulação | ODD protocol, second update | Grimm e outros, 2020 |
| Computer model calibration | Calibration with explicit model discrepancy | Kennedy and O’Hagan, 2001 |
| Modelos de aprendizado de máquina em operação | Model cards | Mitchell and others, 2019 |
| Mudança no uso da terra a partir de sensoriamento remoto | Area estimation from a reference sample | Olofsson and others, 2014 |
| Julgamento estruturado de especialistas | Protocolo de elicitação documentado com perguntas de calibração | Stated in each paper |
Reviewed methods are designed for the Methods and Technical series, with each model described under NS-12 of the proposed Nexus Standards. Methods researchers can contribute replications and documented failures; both are published.
Como decorre o processo.
Process explorer · Process
Methods and technical papers: Source to evidence record
10 steps·4 stages·2 gates
Processo
Methods and technical papers: Source to evidence record
Uma fonte é registrada e avaliada, seu registro é rotulado e classificado, e um Passaporte Digital de Evidências leva a proveniência; uma correção chega a todos os registros dependentes.
01 Admissão
- 01Identificar a fonteFonte · O guardião da fonteDescoberta não é ingestão. A identificação da fonte registra a classe da fonte, o guardião, o papel institucional e a jurisdição.
- 03Registrar a fontePassoO registro faz de uma fonte descoberta um participante governado do ciclo de vida das evidências. Não implica aval nem certificação.
02 Avaliação
- 04Classificação de jurisdição e de direitosMarcoA classificação de direitos identifica licença, consentimento, confidencialidade e limites de reutilização. O resultado determina o acesso e o encaminhamento.
- 05Avaliação da qualidade das evidênciasPassoA avaliação de qualidade decide se um registro é adequado para um uso definido. A qualidade é multidimensional e nunca uma pontuação única.
- 06Rótulo de evidênciaPassoCada constatação traz um de nove rótulos de evidência. Dados ausentes aparecem como ausentes, nunca como zero.
03 Registro
- 07Classificação das evidênciasRegistroA classificação atribui aos registros estados de ciclo de vida, como verificado na fonte, seguro para o público ou restrito. Os estados podem coexistir e determinam o uso das evidências.
- 08Versão da fonte e identificadorRegistro · NXS-GRX (dados canônicos, proveniência e risco)Uma versão de fonte registra direitos, cobertura temporal e linhagem da fonte. Um UNI é atribuído por meio de um catálogo e nunca digitado à mão.
- 09Passaporte Digital de EvidênciasRegistroO passaporte registra proveniência, qualidade, direitos, jurisdição, uso permitido e histórico, para que as evidências conservem seu contexto quando circulam.
04 Uso e correção
- 02A correção chega aos registros dependentesEtapa · NXS-GRX (dados canônicos, proveniência e risco)Uma correção na fonte se propaga aos recortes e produtos dependentes sem reescrever resultados anteriores.
- 10Revisão segura para o públicoMarcoA revisão de segurança para o público decide se um registro pode ser compartilhado publicamente. É uma etapa distinta e não constitui validação.
Data protocols: evidence lifecycle · Data protocols: core data objects and evidence records · The Global Risks Index (NXS-GRX)Designed programme process, not a record of operation. No cycle has run and every programme is at service level R0. A gate is a programme decision, never a public-authority approval, certification or deployment authorisation. The data-protocol pages describe a design, not a running system.
Seis elementos em cada artigo.
- 01
Finalidade
The question the method answers and where it should not be used.
- 02
Premissas
O que deve ser verdadeiro para que os resultados se sustentem.
- 03
Validação
How the method was tested, on which data and with what result.
- 04
Modos de falha
Situações conhecidas em que o método produz resultados enganosos.
- 05
Implementação
Software, versões e parâmetros, divulgados quando as licenças permitem.
- 06
Análise
Who reviewed the paper and its review state.
A method no one can check is not evidence.
As decisões de risco frequentemente se apoiam em modelos e julgamentos difíceis de enxergar. Métodos abertos permitem que pesquisadores independentes, agências de origem e comunidades afetadas os testem, encontrem fragilidades e proponham melhorias. Quando o licenciamento ou a segurança impedem a divulgação de código ou dados, o artigo informa isso e descreve o método com detalhe suficiente para que possa ser avaliado.
Onde os métodos são aplicados.
Modelling practice: models and scenarios. Reviewed methods may appear in the Methods and Technical series. Experimental protocols: Labs protocols and research design. Quantitative methods for finance: The Global Risks Alliance (GRA), models and professional methods.
Where this page’s references lead.
Os organismos e documentos à luz dos quais esta página é lida. O estado e as edições mudam; cada ligação leva ao organismo emissor.
- Collins e outros, declaração TRIPOD+AI, BMJ 385 (2024)
- Grimm and others, The ODD protocol for describing agent-based and other simulation models: a second update, Journal of Artificial Societies and Social Simulation 23 (2020)
- Kennedy and O’Hagan, Bayesian calibration of computer models, Journal of the Royal Statistical Society Series B 63 (2001)
- Mitchell e outros, Model cards for model reporting, Proceedings of FAT* 2019
- Olofsson and others, Good practices for estimating area and assessing accuracy of land change, Remote Sensing of Environment 148 (2014)
- NS-12, artefatos de software, de modelos e de IA/ML, um padrão proposto
Perguntas e respostas.
Why publish methods separately from results?
Are qualitative methods treated as less rigorous?
Can I reuse a GCRI method?
Como os métodos são aprimorados ao longo do tempo?
Posso propor uma melhoria a um método?
Contribua com evidências a partir desta página.
Reports é a publicação trimestral do Consortium. O que você sabe sobre este tema pode se tornar evidência, um caso ou uma correção na próxima edição, com crédito a você e publicado sob CC BY 4.0 quando for obra sua.
- E-mailPortal GW-GCRIEnvie desta páginaEvidência, uma correção, um caso, um método, uma revisão, uma tradução ou uma contribuição ao perfil. Chega marcada com esta página, de modo que o editor responsável a receba.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- RelatóriosGCRIVer todas as formas de contribuirOs tipos de contribuição, como cada um é revisado, o crédito que você recebe, a licença e o que nunca é aceito.
Nunca envie dados pessoais, detalhes sensíveis de infraestrutura nem nada que você não tenha o direito de compartilhar. Uma contribuição é revisada antes do uso. Enviá-la não confere autoria nem direitos editoriais, e o patrocínio nunca compra uma constatação.
Traga um método, um conjunto de dados ou uma pergunta.
A informação e os pedidos estão abertos hoje. Um pedido recebe uma referência e indica o próximo passo; candidaturas, pagamentos, alocações de computação e registros só abrem quando existem a equipa, os termos e a capacidade de revisão.
Documentos jurídicos.
Os mapas, dados e números deste site são apresentados como contexto e informação geral. Não são aconselhamento, previsões nem avisos; os limites da informação estão expostos nos Avisos legais e nos Avisos sobre dados.