Skip to content

GCRI · Reports

Series de laboratorios y Foundry

Laboratorios y de foundry registran pruebas técnicas: prototipos, software, sensores, canalizaciones de datos y procedimientos ejercitados en condiciones declaradas. La evidencia de las pruebas es fácil de sobrestimar, porque una prueba superada en condiciones controladas se interpreta como disposición para el uso. Esta página expone cómo se estructuran, revisan y archivan los informes de prueba, cómo los niveles de madurez se acreditan con evidencia en lugar de declararse, y qué puede respaldar dicha evidencia para quienes deciden si adoptar o financiar una tecnología.

02La pregunta

Series de Labs y Foundry: cómo se desarrolla el riesgo.

Technical test and readiness evidence. The dossier below sets out how the risk develops, what is measured, where the data come from, how it is modelled and who decides.

Mecanismo

Test conditions narrow the claim

A test establishes behaviour under the conditions tested, with the inputs, environment and version used. Reports that omit those conditions invite readers to generalise beyond them.

Mecanismo

Preparación declarada, no demostrada

Los niveles de madurez tecnológica a menudo se asignan por cuenta propia. Sin la evidencia que exige cada nivel, una afirmación de madurez pasa del informe de pruebas a la decisión de adquisición sin verificarse.

Mecanismo

Los resultados negativos desaparecen

Failed and inconclusive tests are seldom written up, so the published record overstates success rates and others repeat tests that have already failed.

Mecanismo

Las versiones cambian por debajo

Software and hardware change after testing. A result cited without the version tested is attached to a system that may no longer exist in that form.

03Seguimiento

Mesa de producción de la serie.

La pantalla que utilizaría un equipo para seguir esta materia: sus mediciones, estados y decisiones. Los nombres son ejemplos y los valores son ilustrativos.

Mesa de producción de series

Labs and foundry series · Annual synthesis · Edition 7

Data check behind planGCRI · Reports

Ediciones en producción

Síntesis anualMundialVerificación de datos81W10
Perfil de país 7PaísRevisión por pares97W16
Perspectivas hídricasSectorialEn redacción32W38
Nota metodológica 4MétodosPublicado100hecho

Verificación de datos, síntesis anual

Valores trazados, %79 de 100 requeridosEtiquetas asignadas, %95 de 100 requeridosIncertidumbre declarada, %73 de 100 requeridos

Canal de producción de la edición

  1. Esquemaórgano
  2. Borradorautores
  3. Verificación de datoscada valor
  4. Revisión por paresdos rondas
  5. Editorialdecision
  6. VersiónDOI
  7. Correccionesversionado
Series production desk: the screen’s structure, terms and states for Labs and foundry series.Example names and illustrative values; a design, not a record or a live system.
04En los cinco dominios

Labs and Foundry editions report what was tested and built for each domain.

05Métodos y evidencia

How labs and foundry series is modelled, measured and tested.

El modelo, sus supuestos, sus datos y su incertidumbre, en la forma en que un científico o un ingeniero los comprobaría. Las estructuras siguen métodos publicados. Los valores representados son ilustrativos, no hallazgos.

Modelo, ecuaciones y supuestos

The model structure used for labs and foundry series, the assumptions it makes and how each is tested.

Riesgo del elemento iRi = f(Hi, Ei, Vi, Ci)amenaza, exposición, vulnerabilidad y capacidad de afrontamiento
Pérdida anual esperadaEAL = ∑k pk · Lkover events k with annual probability pk
Sistemas acopladosxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
SupuestoPor qué se haceCómo se prueba
La amenaza y la exposición son independientes dentro de un eventoMantiene manejable la integral de pérdidasComparar con un ajuste de cópula sobre registros conjuntos
Los acoplamientos son lineales cerca del punto de operaciónPermite que las perturbaciones se propaguen a través de APerturbar más allá del rango lineal y comparar
Las curvas de vulnerabilidad se transfieren entre lugaresLas curvas locales rara vez están disponiblesValidar frente a las pérdidas observadas cuando existan
Entradas
conjuntos de datos versionados con procedencia
Resultados
distribuciones, nunca cifras únicas
Código
publicado con la ficha de modelo y las pruebas
Reproducción
mismos datos, código, entorno y semilla
Formulaciones estándar de riesgo y de espacio de estados; los supuestos enumerados son los típicos del método, expuestos para su revisión, no resultados.
FAIR guiding principles · GO FAIR and FORCE11W3C PROV · World Wide Web ConsortiumGuidance on consistent treatment of uncertainties · IPCCCEOS Analysis Ready Data · Committee on Earth Observation Satellites
06Indicadores

Qué se mide y con qué calidad.

Cada indicador lleva su unidad, su periodicidad, el tipo de fuente que lo respalda y la etiqueta de evidencia que llevaría un valor. No se muestran valores: un programa los aporta bajo su propia autoridad.

IndicadorUnidadCadenciaTipo de fuenteEtiqueta
Test protocols registered before testingporcentaje de informespor informeRegistros del RegistryOBSERVADO
Test reports with archived code, data and configurationporcentaje de informespor informeRepository deposit recordsOBSERVADO
Nivel de preparación declarado y evidencia adjuntanivel declarado; sí o no para la evidenciapor informeInforme y anexo de evidenciaDECLARADO
Se publican los resultados negativos y no concluyentesrecuento por periodoanualCatálogo de seriesNOTIFICADO
Versión del sistema sometido a prueba identificadaporcentaje de informespor informeMetadatos del informeOBSERVADO
Independent technical review completedsí o no, con el rol del revisorpor informeRegistro de revisiónDECLARADO
07Fuentes

De dónde procede la evidencia.

Conjuntos de datos públicos y registros institucionales identificados, cada uno con su tipo de licencia. Las fuentes obtenidas por acuerdo solo se utilizan conforme a sus condiciones y nunca se republican.

FuenteLo que aportaTipo de licencia
ZenodoDatos de prueba archivados, configuraciones y versiones de software con DOIMetadatos CC0, licencia según el registro
Software HeritagePreserved source code at the exact revision testedCode under its own licence
OSF RegistriesProtocolos de prueba y planes de análisis preregistradosMetadata CC0, licence per registration
protocols.ioMétodos paso a paso publicados, con versiones y DOILicence per protocol, mostly CC BY
Base de datos nacional de vulnerabilidades del NISTKnown vulnerabilities for software components under testDominio público
08Decisiones

Quién decide y a qué sirve la evidencia.

Reports prepara evidencia. Las decisiones que figuran a continuación las toman las autoridades indicadas, con arreglo a sus propias normas, y nunca la plataforma.

Quién decideLa preguntaEvidencia a la que sirve esta página
Procurement and adoption boardsWhether a tested technology is ready for a pilot or operational useAnexos de evidencia de preparación, condiciones de prueba y limitaciones conocidas
Financiadores de la innovación y gestores de programasSi se financia la siguiente etapa de desarrolloNivel de preparación con su evidencia, resultados negativos y riesgos abiertos
Paneles de revisión técnicaSi un informe de ensayo está completo y sus conclusiones se desprenden de la evidenciaRegistered protocols, archived data and version identifiers
Standards and conformity assessment bodiesSi los métodos de ensayo son adecuados para un futuro estándarProcedimientos de prueba documentados y su reproducibilidad

Productos que genera este tema

  • Informes de pruebas que indican condiciones, versiones y criterios de aceptación
  • Anexos de evidencia de preparación que asignan a cada nivel su evidencia
  • Configuraciones y datos archivados de cada prueba
  • A register of negative and inconclusive results
09Cuestiones centrales

Qué se pregunta la serie.

Technical claims about tools and systems need evidence that others can inspect. A system that is said to work under stress should show the test that proved it, the conditions of the test and what failed. Publishing that evidence, including negative results, guards against overstated readiness and helps institutions judge what a tool can and cannot do.

  • What exactly was tested, under which protocol, with which data and in which environment?
  • What passed, what failed and what was not tested?
  • ¿Respalda la evidencia el siguiente paso indicado, y solo ese paso?
  • Which observations or signals warrant further analysis, and how reliable are they?
10Alcance

Qué abarca la serie.

Three series report evidence from building, testing and observing.

Laboratorios

Experimentos y bancos de pruebas

Resultados de protocolos completados, incluidos los resultados nulos y negativos.

Foundry

Build and readiness

Evidencia sobre los sistemas de Foundry frente a criterios de preparación declarados, nunca como certificación.

Signals

Observación

Signals from monitoring, labelled by source and confidence, prompting analysis rather than action.

La serie sigue la lógica de las prácticas de ensayo y evaluación en ingeniería: una afirmación vale lo que vale el protocolo que la sometió a prueba, y la preparación es siempre preparación para algo concreto. Una herramienta que ha superado una prueba de laboratorio no está lista para su uso en campo, y un sistema que funcionó en un ejercicio no ha demostrado que vaya a funcionar en todos los entornos. Las ediciones indican estos límites junto a cada resultado.

11Cómo se elaboran las ediciones

Cómo se elaboran las ediciones y cuáles son sus límites.

  1. 01

    Protocolos

    Each result cites a protocol registered before the test, so outcomes cannot be selected after the fact.

  2. 02

    Environments

    Se describen las condiciones de prueba; los resultados obtenidos en un banco de pruebas pueden no ser trasladables a la operación en entorno real.

  3. 03

    Criterios de preparación

    Readiness is assessed against criteria for a stated next step. It is not approval, bankability or certification.

  4. 04

    Signal quality

    Observatory signals state their source, coverage and false-alarm characteristics where known.

12Métodos

Cómo se estudia y lo que los métodos no pueden decir.

  1. Ingeniería, interoperabilidad y custodia de datosPublicación estructurada en JATS XML · Identificadores persistentes en todo el registroAplicado aquí
  2. Cuantificación de la incertidumbre y validación de modelosLenguaje calibrado en las evaluaciones · Calificaciones de la certeza de la evidenciaAplicado aquí
  3. Probabilidad y estadísticaMetaanálisis con heterogeneidad declarada · Sesgo de estudios pequeños y de publicaciónAplicado aquí
13Where this page’s references

Where this page’s references lead.

Los organismos y documentos con los que se lee esta página. El estado y las ediciones cambian; cada enlace lleva al organismo emisor.

14Preguntas

Preguntas y respuestas.

¿Qué es un nivel de madurez tecnológica?
A scale describing how far a technology has progressed from basic principles to demonstrated operation. Each level requires specific evidence; a level stated without that evidence is a declaration, not a demonstration.
Why publish failed tests?
Porque un registro solo de éxitos induce a error. Los resultados negativos e no concluyentes muestran dónde una tecnología no funciona y evitan que otros repitan la misma prueba.
Does a passed test mean a system is safe?
No. Significa que el sistema cumplió los criterios establecidos en las condiciones indicadas. La seguridad depende del uso, del contexto y de condiciones que la prueba puede no haber cubierto.
¿Un informe de preparación significa que un sistema está aprobado?
No. Readiness is fitness for a stated next step within a stated scope. It is not approval, certification or a statement that a service operates.
¿Se publican las pruebas fallidas?
Sí. Los resultados negativos y nulos forman parte de la evidencia, y omitirlos exageraría el grado de preparación.
Can vendors publish results in the series?
Results appear only from protocols run under the programme’s review. Vendor claims are labelled Institution-reported if cited at all.
Are observatory signals warnings?
No. Dan pie a un análisis. Las alertas siguen en manos de las autoridades competentes.
serie ReportsContribuir

Aporte evidencia desde esta página.

Reports es la publicación trimestral del Consortium. Lo que usted sabe sobre este tema puede convertirse en evidencia, un caso o una corrección en la próxima edición, con su crédito y publicado bajo licencia CC BY 4.0 cuando se trate de obra propia.

GCRIserie ReportsRiesgo y resiliencia de los sistemas globalesRiesgo y Resiliencia de los Sistemas NacionalesTrimestral de país
serie Reports

Aporte un método, un conjunto de datos o una pregunta.

La información y las consultas están abiertas hoy. Una consulta recibe una referencia e indica el siguiente paso; las solicitudes, pagos, asignaciones de cómputo y registros solo se abren cuando existen su equipo, sus condiciones y la capacidad de revisión.