GCRI · Reports
Labs와 Foundry 시리즈
Labs and foundry reports record technical tests: prototypes, software, sensors, data pipelines and procedures exercised under stated conditions. Test evidence is easy to overstate, because a passed test under controlled conditions is read as readiness for use. This page sets out how test reports are structured, reviewed and archived, how readiness levels are evidenced rather than declared, and what such evidence can support for those deciding whether to adopt or fund a technology.
기록에 남은 Labs 및 Foundry 시리즈.
Labs와 Foundry 시리즈: 리스크가 어떻게 전개되는가.
기술 시험 및 준비 상태 근거. 아래 자료집은 리스크가 어떻게 전개되는지, 무엇을 측정하는지, 데이터가 어디서 오는지, 어떻게 모델링되는지, 누가 결정하는지를 설명합니다.
Test conditions narrow the claim
A test establishes behaviour under the conditions tested, with the inputs, environment and version used. Reports that omit those conditions invite readers to generalise beyond them.
Readiness declared not shown
기술 준비 수준은 자체 부여되는 경우가 많습니다. 각 수준이 요구하는 근거가 없으면, 준비 수준 주장이 검증 없이 시험 보고서에서 조달 결정으로 넘어갑니다.
Negative results go missing
Failed and inconclusive tests are seldom written up, so the published record overstates success rates and others repeat tests that have already failed.
하위 계층의 버전이 바뀝니다
Software and hardware change after testing. A result cited without the version tested is attached to a system that may no longer exist in that form.
시리즈 제작 데스크.
팀이 이 주제를 따라가는 데 사용할 화면으로, 그 지표, 상태, 결정을 보여 줍니다. 이름은 예시이며 값은 설명용입니다.
시리즈 제작 데스크
Labs and foundry series · Annual synthesis · Edition 7
제작 중인 판
| 연간 종합 | 글로벌 | 데이터 점검 | 81 | W10 |
| 국가 프로파일 7 | 국가 | 동료 검토 | 97 | W16 |
| 수자원 전망 | 부문별 | 초안 작성 | 32 | W38 |
| 방법론 노트 4 | 방법 | 공개됨 | 100 | 완료 |
데이터 점검, 연간 종합
판 제작 파이프라인
- 개요위원회
- 초안저자
- 데이터 점검모든 값
- 동료 검토두 차례
- 편집결정
- 릴리스DOI
- 정정버전 관리
Labs and Foundry editions report what was tested and built for each domain.
Editions carry verification evidence under NS-11 of the proposed Nexus Standards. A test result is not an approval.
- 부정적 결과.
- Replications.
Labs와 Foundry 시리즈를 모델링하고 측정하고 검증하는 방법입니다.
모형, 그 가정, 데이터, 불확실성을 과학자나 엔지니어가 확인할 형태로 제시합니다. 구조는 발행된 방법을 따릅니다. 제시된 값은 예시이며 결과가 아닙니다.
모형, 방정식 및 가정
The model structure used for labs and foundry series, the assumptions it makes and how each is tested.
Ri = f(Hi, Ei, Vi, Ci)재해, 노출, 취약성, 대처 역량EAL = ∑k pk · Lkover events k with annual probability pkxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error| 가정 | 만드는 이유 | 시험 방법 |
|---|---|---|
| 한 사건 안에서 재해와 노출은 서로 독립적임 | 손실 적분을 다루기 쉽게 유지함 | 결합 기록에 적합한 코퓰러와 비교 |
| 결합은 운전점 근처에서 선형이다 | 충격이 A를 통해 전파되게 함 | 선형 범위를 넘어 섭동을 주고 비교하십시오 |
| 취약성 곡선은 장소 간에 옮겨 쓸 수 있다 | 지역 곡선은 거의 없다 | 관측된 손실이 있는 곳에서는 이에 대해 검증 |
- 투입 자료
- 출처 정보가 있는 버전 관리 데이터세트
- 산출물
- 분포이며 결코 단일 숫자가 아님
- 코드
- 모델 카드 및 시험과 함께 공개
- 재현
- 같은 데이터, 코드, 환경과 시드
측정되는 것과 그 정확도.
각 지표에는 단위, 주기, 그 뒤의 출처 종류, 값에 붙을 근거 표시가 있습니다. 값은 표시하지 않습니다. 값은 프로그램이 자체 권한으로 제공합니다.
| 지표 | 단위 | 주기 | 출처 유형 | 라벨 |
|---|---|---|---|---|
| Test protocols registered before testing | 보고서 비율(%) | 보고서당 | Registry 기록 | 관측 |
| Test reports with archived code, data and configuration | 보고서 비율(%) | 보고서당 | Repository deposit records | 관측 |
| Readiness level claimed and evidence attached | level claimed; yes or no for evidence | 보고서당 | 보고서 및 근거 부속서 | 신고됨 |
| Negative and inconclusive results published | 기간별 건수 | 연간 | Series catalogue | 보고됨 |
| 시험 대상 시스템의 버전 식별됨 | 보고서 비율(%) | 보고서당 | 보고서 메타데이터 | 관측 |
| Independent technical review completed | 예 또는 아니요, 검토자 역할 포함 | 보고서당 | 검토 기록 | 신고됨 |
근거의 출처.
이름이 명시된 공개 데이터셋과 기관 기록으로, 각각 라이선스 등급이 있습니다. 협약에 따른 출처는 그 조건에 따라서만 사용하며 결코 재게시하지 않습니다.
| 출처 | 제공하는 것 | 라이선스 등급 |
|---|---|---|
| Zenodo | Archived test data, configurations and software releases with DOIs | 메타데이터 CC0, 기록별 라이선스 |
| Software Heritage | Preserved source code at the exact revision tested | Code under its own licence |
| OSF Registries | Pre-registered test protocols and analysis plans | Metadata CC0, licence per registration |
| protocols.io | Published step-by-step methods with versions and DOIs | Licence per protocol, mostly CC BY |
| NIST 국가 취약점 데이터베이스 | Known vulnerabilities for software components under test | 퍼블릭 도메인 |
누가 결정하며 근거는 무엇에 쓰이는지.
Reports는 증거를 준비합니다. 아래의 결정은 명시된 당국이 자체 규칙에 따라 내리며, 결코 플랫폼이 내리지 않습니다.
| 결정 주체 | 질문 | 이 페이지가 제공하는 근거 |
|---|---|---|
| Procurement and adoption boards | Whether a tested technology is ready for a pilot or operational use | Readiness evidence annexes, test conditions and known limitations |
| Innovation funders and programme managers | Whether to fund the next stage of development | 근거, 부정적 결과 및 미해결 리스크를 포함한 준비 수준 |
| 기술 검토 패널 | Whether a test report is complete and its conclusions follow from the evidence | Registered protocols, archived data and version identifiers |
| Standards and conformity assessment bodies | 시험 방법이 향후 표준에 적합한지 여부 | 문서화된 시험 절차와 그 재현성 |
이 주제가 생산하는 산출물
- Test reports stating conditions, versions and acceptance criteria
- 각 수준을 해당 근거에 대응시키는 준비도 근거 부속서
- 각 시험의 보관된 구성 및 데이터
- A register of negative and inconclusive results
시리즈가 묻는 것.
Technical claims about tools and systems need evidence that others can inspect. A system that is said to work under stress should show the test that proved it, the conditions of the test and what failed. Publishing that evidence, including negative results, guards against overstated readiness and helps institutions judge what a tool can and cannot do.
- What exactly was tested, under which protocol, with which data and in which environment?
- What passed, what failed and what was not tested?
- 근거가 제시된 다음 단계를, 그리고 그 단계만을 뒷받침하는가?
- Which observations or signals warrant further analysis, and how reliable are they?
시리즈가 다루는 내용.
세 개의 시리즈가 구축, 시험, 관측에서 얻은 근거를 보고합니다.
Experiments and testbeds
Results from completed protocols, including null and negative results.
Build and readiness
Evidence about Foundry systems against stated readiness criteria, never as certification.
관측
Signals from monitoring, labelled by source and confidence, prompting analysis rather than action.
The series follows the logic of test and evaluation practice in engineering: a claim is only as good as the protocol that tested it, and readiness is always readiness for something specific. A tool that has passed a laboratory test is not ready for field use, and a system that worked in one exercise has not shown that it will work in every setting. Editions state these limits next to each result.
판이 구성되는 방식과 그 한계.
- 01
프로토콜
Each result cites a protocol registered before the test, so outcomes cannot be selected after the fact.
- 02
환경
시험 조건은 기술되어 있으나, 테스트베드에서 얻은 결과가 실제 운영에 그대로 적용되지 않을 수 있습니다.
- 03
준비도 기준
Readiness is assessed against criteria for a stated next step. It is not approval, bankability or certification.
- 04
신호 품질
Observatory signals state their source, coverage and false-alarm characteristics where known.
Where this page’s references lead.
이 페이지를 읽을 때 기준이 되는 기구와 문서. 상태와 판은 바뀌며, 각 링크는 발행 기구로 연결됩니다.
질문과 답변.
기술 성숙도 수준이란 무엇입니까?
Why publish failed tests?
Does a passed test mean a system is safe?
Does a readiness report mean a system is approved?
Are failed tests published?
Can vendors publish results in the series?
Are observatory signals warnings?
이 페이지에서 증거를 기여하십시오.
Reports는 컨소시엄의 분기별 간행물입니다. 이 주제에 관해 귀하가 아는 것은 다음 호에서 근거, 사례 또는 정정이 될 수 있으며, 귀하의 이름으로 표시되고, 귀하 자신의 저작인 경우 CC BY 4.0으로 발행됩니다.
- 이메일게이트웨이 GW-GCRI이 페이지에서 보내기증거, 정정, 사례, 방법, 검토, 번역 또는 프로필 입력 자료. 이 페이지의 태그가 붙어 도착하므로, 이를 담당하는 편집자가 받게 됩니다.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- 보고서GCRI모든 기여 방법 보기기여 유형, 각각의 검토 방식, 받게 되는 크레디트, 라이선스, 그리고 절대 받지 않는 것.
개인정보, 민감한 인프라 세부 정보, 공유할 권리가 없는 자료는 절대 보내지 마십시오. 기여물은 사용 전에 검토됩니다. 기여물을 보낸다고 해서 저작자 지위나 편집 권한이 부여되지 않으며, 후원으로 조사 결과를 얻을 수 없습니다.
방법, 데이터세트 또는 질문을 가져오십시오.
정보와 문의는 오늘부터 열려 있습니다. 문의에는 참조 번호가 부여되고 다음 단계가 안내됩니다. 신청, 결제, 컴퓨팅 할당, 등록은 해당 팀, 약관, 심사 역량이 갖추어졌을 때만 열립니다.
법률 문서.
이 사이트의 지도, 데이터와 그림은 맥락과 일반 정보로 제시됩니다. 조언, 예보 또는 경보가 아니며, 정보의 한계는 면책 고지와 데이터 고지에 나와 있습니다.