Skip to content

GCRI · Reports

Labs와 Foundry 시리즈

Labs and foundry reports record technical tests: prototypes, software, sensors, data pipelines and procedures exercised under stated conditions. Test evidence is easy to overstate, because a passed test under controlled conditions is read as readiness for use. This page sets out how test reports are structured, reviewed and archived, how readiness levels are evidenced rather than declared, and what such evidence can support for those deciding whether to adopt or fund a technology.

01등록

기록에 남은 Labs 및 Foundry 시리즈.

02질문

Labs와 Foundry 시리즈: 리스크가 어떻게 전개되는가.

기술 시험 및 준비 상태 근거. 아래 자료집은 리스크가 어떻게 전개되는지, 무엇을 측정하는지, 데이터가 어디서 오는지, 어떻게 모델링되는지, 누가 결정하는지를 설명합니다.

메커니즘

Test conditions narrow the claim

A test establishes behaviour under the conditions tested, with the inputs, environment and version used. Reports that omit those conditions invite readers to generalise beyond them.

메커니즘

Readiness declared not shown

기술 준비 수준은 자체 부여되는 경우가 많습니다. 각 수준이 요구하는 근거가 없으면, 준비 수준 주장이 검증 없이 시험 보고서에서 조달 결정으로 넘어갑니다.

메커니즘

Negative results go missing

Failed and inconclusive tests are seldom written up, so the published record overstates success rates and others repeat tests that have already failed.

메커니즘

하위 계층의 버전이 바뀝니다

Software and hardware change after testing. A result cited without the version tested is attached to a system that may no longer exist in that form.

03모니터링

시리즈 제작 데스크.

팀이 이 주제를 따라가는 데 사용할 화면으로, 그 지표, 상태, 결정을 보여 줍니다. 이름은 예시이며 값은 설명용입니다.

시리즈 제작 데스크

Labs and foundry series · Annual synthesis · Edition 7

Data check behind planGCRI · Reports

제작 중인 판

연간 종합글로벌데이터 점검81W10
국가 프로파일 7국가동료 검토97W16
수자원 전망부문별초안 작성32W38
방법론 노트 4방법공개됨100완료

데이터 점검, 연간 종합

추적된 값, %필요 100 중 79부착된 라벨, %100 중 95 필요명시된 불확실성, %필요 100 중 73

판 제작 파이프라인

  1. 개요위원회
  2. 초안저자
  3. 데이터 점검모든 값
  4. 동료 검토두 차례
  5. 편집결정
  6. 릴리스DOI
  7. 정정버전 관리
Series production desk: the screen’s structure, terms and states for Labs and foundry series.Example names and illustrative values; a design, not a record or a live system.
04다섯 도메인에서

Labs and Foundry editions report what was tested and built for each domain.

05방법과 근거

Labs와 Foundry 시리즈를 모델링하고 측정하고 검증하는 방법입니다.

모형, 그 가정, 데이터, 불확실성을 과학자나 엔지니어가 확인할 형태로 제시합니다. 구조는 발행된 방법을 따릅니다. 제시된 값은 예시이며 결과가 아닙니다.

모형, 방정식 및 가정

The model structure used for labs and foundry series, the assumptions it makes and how each is tested.

요소 i의 리스크Ri = f(Hi, Ei, Vi, Ci)재해, 노출, 취약성, 대처 역량
연간 기대 손실EAL = ∑k pk · Lkover events k with annual probability pk
결합 시스템xt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
가정만드는 이유시험 방법
한 사건 안에서 재해와 노출은 서로 독립적임손실 적분을 다루기 쉽게 유지함결합 기록에 적합한 코퓰러와 비교
결합은 운전점 근처에서 선형이다충격이 A를 통해 전파되게 함선형 범위를 넘어 섭동을 주고 비교하십시오
취약성 곡선은 장소 간에 옮겨 쓸 수 있다지역 곡선은 거의 없다관측된 손실이 있는 곳에서는 이에 대해 검증
투입 자료
출처 정보가 있는 버전 관리 데이터세트
산출물
분포이며 결코 단일 숫자가 아님
코드
모델 카드 및 시험과 함께 공개
재현
같은 데이터, 코드, 환경과 시드
표준 리스크 및 상태공간 정식화로, 나열된 가정은 해당 방법에 일반적인 것이며 검토를 위해 명시한 것으로 결과가 아닙니다.
FAIR 지침 원칙 · GO FAIR와 FORCE11W3C PROV · 월드 와이드 웹 컨소시엄불확실성의 일관된 처리에 관한 지침 · IPCCCEOS 분석 준비 데이터(Analysis Ready Data) · 지구관측위성위원회
06지표

측정되는 것과 그 정확도.

각 지표에는 단위, 주기, 그 뒤의 출처 종류, 값에 붙을 근거 표시가 있습니다. 값은 표시하지 않습니다. 값은 프로그램이 자체 권한으로 제공합니다.

지표단위주기출처 유형라벨
Test protocols registered before testing보고서 비율(%)보고서당Registry 기록관측
Test reports with archived code, data and configuration보고서 비율(%)보고서당Repository deposit records관측
Readiness level claimed and evidence attachedlevel claimed; yes or no for evidence보고서당보고서 및 근거 부속서신고됨
Negative and inconclusive results published기간별 건수연간Series catalogue보고됨
시험 대상 시스템의 버전 식별됨보고서 비율(%)보고서당보고서 메타데이터관측
Independent technical review completed예 또는 아니요, 검토자 역할 포함보고서당검토 기록신고됨
07출처

근거의 출처.

이름이 명시된 공개 데이터셋과 기관 기록으로, 각각 라이선스 등급이 있습니다. 협약에 따른 출처는 그 조건에 따라서만 사용하며 결코 재게시하지 않습니다.

출처제공하는 것라이선스 등급
ZenodoArchived test data, configurations and software releases with DOIs메타데이터 CC0, 기록별 라이선스
Software HeritagePreserved source code at the exact revision testedCode under its own licence
OSF RegistriesPre-registered test protocols and analysis plansMetadata CC0, licence per registration
protocols.ioPublished step-by-step methods with versions and DOIsLicence per protocol, mostly CC BY
NIST 국가 취약점 데이터베이스Known vulnerabilities for software components under test퍼블릭 도메인
08결정

누가 결정하며 근거는 무엇에 쓰이는지.

Reports는 증거를 준비합니다. 아래의 결정은 명시된 당국이 자체 규칙에 따라 내리며, 결코 플랫폼이 내리지 않습니다.

결정 주체질문이 페이지가 제공하는 근거
Procurement and adoption boardsWhether a tested technology is ready for a pilot or operational useReadiness evidence annexes, test conditions and known limitations
Innovation funders and programme managersWhether to fund the next stage of development근거, 부정적 결과 및 미해결 리스크를 포함한 준비 수준
기술 검토 패널Whether a test report is complete and its conclusions follow from the evidenceRegistered protocols, archived data and version identifiers
Standards and conformity assessment bodies시험 방법이 향후 표준에 적합한지 여부문서화된 시험 절차와 그 재현성

이 주제가 생산하는 산출물

  • Test reports stating conditions, versions and acceptance criteria
  • 각 수준을 해당 근거에 대응시키는 준비도 근거 부속서
  • 각 시험의 보관된 구성 및 데이터
  • A register of negative and inconclusive results
09핵심 질문

시리즈가 묻는 것.

Technical claims about tools and systems need evidence that others can inspect. A system that is said to work under stress should show the test that proved it, the conditions of the test and what failed. Publishing that evidence, including negative results, guards against overstated readiness and helps institutions judge what a tool can and cannot do.

  • What exactly was tested, under which protocol, with which data and in which environment?
  • What passed, what failed and what was not tested?
  • 근거가 제시된 다음 단계를, 그리고 그 단계만을 뒷받침하는가?
  • Which observations or signals warrant further analysis, and how reliable are they?
10범위

시리즈가 다루는 내용.

세 개의 시리즈가 구축, 시험, 관측에서 얻은 근거를 보고합니다.

랩

Experiments and testbeds

Results from completed protocols, including null and negative results.

지역 임무에서 가장 많이 사용하는 Foundry

Build and readiness

Evidence about Foundry systems against stated readiness criteria, never as certification.

Signals

관측

Signals from monitoring, labelled by source and confidence, prompting analysis rather than action.

The series follows the logic of test and evaluation practice in engineering: a claim is only as good as the protocol that tested it, and readiness is always readiness for something specific. A tool that has passed a laboratory test is not ready for field use, and a system that worked in one exercise has not shown that it will work in every setting. Editions state these limits next to each result.

11판이 구성되는 방식

판이 구성되는 방식과 그 한계.

  1. 01

    프로토콜

    Each result cites a protocol registered before the test, so outcomes cannot be selected after the fact.

  2. 02

    환경

    시험 조건은 기술되어 있으나, 테스트베드에서 얻은 결과가 실제 운영에 그대로 적용되지 않을 수 있습니다.

  3. 03

    준비도 기준

    Readiness is assessed against criteria for a stated next step. It is not approval, bankability or certification.

  4. 04

    신호 품질

    Observatory signals state their source, coverage and false-alarm characteristics where known.

12방법

연구되는 방식과 방법이 말할 수 없는 것.

  1. 데이터 엔지니어링, 상호운용성 및 데이터 관리JATS XML 구조화 출판 · 기록 전반의 영구 식별자이곳에서의 적용
  2. 불확실성 정량화와 모델 검증평가에서의 보정된 표현 · 근거 확실성 등급이곳에서의 적용
  3. 확률과 통계이질성을 밝힌 메타분석 · 소규모 연구 효과와 출판 편향이곳에서의 적용
13Where this page’s references

Where this page’s references lead.

이 페이지를 읽을 때 기준이 되는 기구와 문서. 상태와 판은 바뀌며, 각 링크는 발행 기구로 연결됩니다.

14질문

질문과 답변.

기술 성숙도 수준이란 무엇입니까?
A scale describing how far a technology has progressed from basic principles to demonstrated operation. Each level requires specific evidence; a level stated without that evidence is a declaration, not a demonstration.
Why publish failed tests?
Because a record of successes alone misleads. Negative and inconclusive results show where a technology does not work and stop others repeating the same test.
Does a passed test mean a system is safe?
No. It means the system met the stated criteria under the stated conditions. Safety depends on use, context and conditions the test may not have covered.
Does a readiness report mean a system is approved?
No. Readiness is fitness for a stated next step within a stated scope. It is not approval, certification or a statement that a service operates.
Are failed tests published?
예. 부정적 결과와 결과 없음도 근거의 일부이며, 이를 생략하면 준비 수준이 과대평가됩니다.
Can vendors publish results in the series?
Results appear only from protocols run under the programme’s review. Vendor claims are labelled Institution-reported if cited at all.
Are observatory signals warnings?
아니요. 분석을 촉진할 뿐입니다. 경보는 관할 당국의 소관으로 남습니다.
보고서기여하기

이 페이지에서 증거를 기여하십시오.

Reports는 컨소시엄의 분기별 간행물입니다. 이 주제에 관해 귀하가 아는 것은 다음 호에서 근거, 사례 또는 정정이 될 수 있으며, 귀하의 이름으로 표시되고, 귀하 자신의 저작인 경우 CC BY 4.0으로 발행됩니다.

GCRI보고서글로벌 시스템 리스크와 회복력국가 시스템 리스크와 회복력국가 분기 보고서
보고서

방법, 데이터세트 또는 질문을 가져오십시오.

정보와 문의는 오늘부터 열려 있습니다. 문의에는 참조 번호가 부여되고 다음 단계가 안내됩니다. 신청, 결제, 컴퓨팅 할당, 등록은 해당 팀, 약관, 심사 역량이 갖추어졌을 때만 열립니다.