GCRI · 인공지능과 자율 시스템
방법과 불확실성
The methods Artificial Intelligence and Autonomous 시스템 relies on: their equations and assumptions, the data they need, how they are validated and the limits of what they can show.
일이 일어나는 순서.
- 01초안출처 인용, 표시 부착
- 02근거 점검모든 값의 출처 추적
- 03독립 검토신고된 이해충돌
- 04판한계와 함께 공표됨
- 05정정조용한 수정이 아닌 새 버전
사용 중인 방법.
- 01인공지능과 머신러닝분포 변화 분석 · 특정 용도를 위한 미세 조정 · 해석 가능성 방법이곳에서의 적용
- 02AI 평가 및 보증 공학AI 시스템을 위한 보증 사례 · 구조화된 레드 티밍 · 배치 후 모니터링이곳에서의 적용
- 03고성능, 클라우드 및 엣지 컴퓨팅공공 연구를 위한 컴퓨팅 접근 · 작업 부하의 에너지 측정이곳에서의 적용
- 04확률과 통계벤치마크 점수의 불확실성 · 보정 평가 · 감사 표본 추출이곳에서의 적용
- 05사이버보안 및 암호학AI 응용 프로그램의 위협 모델링 · 모델 공급망 무결성 · 주입 공격 방어 테스트이곳에서의 적용
- 06사회 및 행동과학인간 감독 연구 · 영향받는 지역사회 연구 · 직장 도입 연구이곳에서의 적용
- 07로봇공학과 자동화시나리오 기반 테스트 · 협동 로봇 안전 · 운영 영역 모니터링이곳에서의 적용
Each method, its role in this field and how it is checked.
- Ai MLRole hereArtificial intelligence and machine learning is the technology this platform stewards for the network.Checks appliedHeld-out evaluation; Dataset documentation; Drift monitoring
- Ai assuranceRole hereAI evaluation and assurance engineering is the second method this platform stewards.Checks appliedIndependent review; Evidence currency; Coverage reporting
- ComputingRole hereHigh-performance and cloud computing supply the capacity AI needs.Checks appliedMeasurement boundaries; Reproducible configuration; Provider data verification
- Probability statisticsRole hereProbability and statistics make AI evaluation trustworthy: confidence intervals on scores, significance of differences between models, calibration of predicted probabilities and sampling designs for audits.Checks appliedInterval reporting; Multiple comparisons; Sample size planning
- 사이버보안Role hereCybersecurity and cryptography protect AI systems and the data they use.Checks appliedThreat model review; Provenance verification; Regression testing
- 사회과학Role hereSocial and behavioural science studies how people use, trust and are affected by AI.Checks appliedEthics review; Pre-registration; Representative sampling
- 로봇공학Role hereRobotics and automation bring AI into physical systems.Checks appliedScenario coverage; Simulation validity; Standards conformity
프로세스가 진행되는 방식.
Process explorer · Process
Methods and uncertainty: PRISMA 2020 review reporting
10 steps·4단계
절차
Methods and uncertainty: PRISMA 2020 review reporting
PRISMA 2020은 체계적 문헌고찰을 위한 보고 지침입니다. 단계는 의무적 순서가 아니라 그 체크리스트를 따르며, 이를 채택한 Nexus 문서는 없습니다.
01 Plan
- 01등록과 프로토콜기록 · 검토 팀이 지침은 등록 정보, 프로토콜 접근 방법, 모든 수정 사항을 요구합니다.
- 02적격성 기준기록 · 검토 팀이 지침은 포함 및 제외 기준과 연구를 어떻게 묶었는지 요구합니다.
02 검색과 선정
- 03검색: 출처와 전략단계 · 검토 팀이 지침은 정보원과 전체 검색 전략을 요구합니다. 어떤 정보원을 사용할지는 정하지 않습니다.
- 04연구 선정단계 · 검토 팀이 지침은 연구의 적격성을 어떻게 판단했는지, 몇 명의 검토자가 선별했는지를 포함하여 요구합니다. 검토자 수를 정하지는 않습니다.
- 05흐름도기록흐름도는 검색된 기록 수, 포함된 연구 수, 제외 사유를 보여 줍니다.
03 분석
- 06데이터 수집단계 · 검토 팀이 지침은 보고서에서 데이터를 어떻게 수집했고 어떤 데이터 항목을 찾았는지 요구합니다.
- 07비뚤림 위험단계 · 검토 팀이 지침은 비뚤림 위험 평가에 사용한 방법과 도구를 요구합니다.
- 08종합모형 · 검토 팀이 지침은 효과 척도와 종합 방법을 요구합니다. 메타분석을 규정하지는 않습니다.
- 09근거의 확실성단계 · 검토 팀이 지침은 확실성 평가에 사용한 방법을 요구하며 결과별로 그 결과를 보고합니다. 등급 척도를 지정하지는 않습니다.
04 보고
- 10검토 보고서기록이 지침은 저자가 문헌고찰을 수행한 이유, 수행한 내용, 발견한 내용을 보고하도록 돕습니다.
보고서Outline of an externally published reporting guideline, not a Nexus process and not a record of operation. PRISMA 2020 mainly covers reviews of intervention effects. No Nexus page names it. Every programme is at service level R0.
Where uncertainty in AI analysis comes from, and how it is shown.
| 출처 | Why it matters here | How it is reported |
|---|---|---|
| Benchmark validity | Benchmarks saturate and leak into training data | Several evaluations, held-out tests, dates stated |
| Capability elicitation | Measured capability depends on prompting and tools | Elicitation effort described |
| Deployment context | Risk depends on use, not only the model | Use-specific assessment |
| Incident data | Reporting is voluntary and uneven | Incident sources and coverage stated |
Evaluation results carry the model version, date and setup; AI capability changes quickly and old results expire.
불확실성을 보고하는 방식.
- 01
가정 명시
각 분석은 가정과 의존하는 데이터를 나열합니다.
- 02
가능한 경우 정량화
범위와 신뢰도는 중심 추정치와 함께 보고합니다.
- 03
검증과 비교
모형은 관측과, 가능한 경우 다른 모형과 대조하여 점검됩니다.
- 04
발행 한도
분석이 보여 줄 수 없는 것을 보여 줄 수 있는 것과 나란히 명시합니다.
Where this page’s references lead.
이 페이지를 읽을 때 기준이 되는 기구와 문서. 상태와 판은 바뀌며, 각 링크는 발행 기구로 연결됩니다.
질문과 답변.
방법은 공개되어 있습니까?
이 페이지에서 증거를 기여하십시오.
Reports is the Consortium’s quarterly publication. What you know about this subject can become evidence, a case or a correction in the next edition, credited to you and published under CC BY 4.0 where it is your own work.
- 이메일게이트웨이 GW-GCRI이 페이지에서 보내기증거, 정정, 사례, 방법, 검토, 번역 또는 프로필 입력 자료. 이 페이지의 태그가 붙어 도착하므로, 이를 담당하는 편집자가 받게 됩니다.
- Zenodo개방형 예치기탁하고 커뮤니티에 제출하기ORCID iD로 Zenodo에 직접 기록을 게시한 뒤, 그곳의 Reports 커뮤니티에 제출하십시오. 큐레이터가 검토하며, DOI는 귀하의 것으로 남습니다.
- 보고서GCRI모든 기여 방법 보기기여 유형, 각각의 검토 방식, 받게 되는 크레디트, 라이선스, 그리고 절대 받지 않는 것.
개인정보, 민감한 인프라 세부 정보, 공유할 권리가 없는 자료는 절대 보내지 마십시오. 기여물은 사용 전에 검토됩니다. 기여물을 보낸다고 해서 저작자 지위나 편집 권한이 부여되지 않으며, 후원으로 조사 결과를 얻을 수 없습니다.
방법, 데이터세트 또는 질문을 가져오십시오.
정보와 문의는 오늘부터 열려 있습니다. 문의에는 참조 번호가 부여되고 다음 단계가 안내됩니다. 신청, 결제, 컴퓨팅 할당, 등록은 해당 팀, 약관, 심사 역량이 갖추어졌을 때만 열립니다.
법률 문서.
이 사이트의 지도, 데이터와 그림은 맥락과 일반 정보로 제시됩니다. 조언, 예보 또는 경보가 아니며, 정보의 한계는 면책 고지와 데이터 고지에 나와 있습니다.