GCRI · Innovation und technologischer Wandel
Technikfolgenabschätzung
Behauptungen über Technologie sind leicht aufgestellt und schwer zu überprüfen. Die Technologiebewertung am Global Centre for Risk and Innovation (GCRI) fragt, was eine Technologie tatsächlich leistet, unter welchen Bedingungen, auf welcher Evidenzgrundlage und mit welchen Grenzen. So können Institutionen eine Demonstration von einer verlässlichen Fähigkeit unterscheiden, bevor sie eine Technologie einführen, beschaffen oder regulieren. Teil von Innovation und technologischem Wandel.
The workspace for technology assessment.
Innovationspipeline
GCRI · Phasentore · Beispieloberfläche, kein Datensatz
Nach Reifegrad
Reifekriterien
Pilot gegenüber Phasentor
Pilotprobleme
- I-1Data licence for pilot siteTo check9 d
- I-2Observer protocol signedDone8 d
GCRI · Innovationspipeline. Innovationspipeline: Beispielnamen und beispielhafte Werte, kein Eintrag.
Four questions behind every assessment.
Eine vierte Frage zieht sich durch alle drei: Was würde die Technologie scheitern lassen, und wurde danach gesucht?
Wie ausgereift ist es?
Evidenz zur Reife im vorgesehenen Einsatzumfeld, nicht im günstigsten.
Wurde es getestet?
Unabhängige Tests anhand erklärter Ziele, wobei die Testbedingungen berichtet werden.
What exactly is claimed?
Fähigkeitsangaben, getrennt nach gemessen, geschätzt und behauptet.
Readiness levels, what they measure and what they leave out.
Technologiereifegrade reichen von eins, grundlegende Prinzipien beobachtet, bis neun, ein im operativen Umfeld bewährtes System. Die NASA hat sie eingeführt; ISO 16290:2013 definiert sie für Raumfahrt- Systeme, und viele Behörden verwenden angepasste Fassungen. Ein Reifegrad beschreibt die Reife in einem bestimmten Umfeld. Er sagt nichts über Kosten, Sicherheit in einem anderen Umfeld, gesellschaftliche Akzeptanz oder darüber aus, ob eine Organisation die Technologie betreiben kann.
| Frage | Evidenz, die sie beantwortet | Common gap |
|---|---|---|
| Funktioniert es wie behauptet? | Independent tests against a pre-registered plan, on held-out data or in a representative environment | Anbieter-Benchmarks auf Daten, an die das System angepasst wurde |
| Does it work here? | Erprobungen im Zielkontext, mit lokalen Nutzerinnen und Nutzern und unter lokalen Bedingungen | Übertragung aus einem anderen Klima, einer anderen Sprache oder einer anderen Infrastruktur |
| What does it depend on? | Bills of materials, supply and energy needs, skills required | Verdeckte Abhängigkeit von einem einzelnen Lieferanten oder Dienst |
| Wie versagt es? | Adversarial and stress tests; incident records | Nur die erwarteten Fälle testen |
Reporting capability honestly.
- Leistung mit Konfidenzintervallen und für die Population angeben, der sie dienen soll, nicht nur anhand aggregierter Testdatensätze.
- Auf Kontamination prüfen: Testdaten, die ins Training gelangt sind, blähen die Ergebnisse auf, ein bekanntes Problem bei KI-Benchmarks.
- For prediction models in health and similar settings, follow reporting guides such as TRIPOD+AI (2024).
- Eine Demonstration, ein Pilotbetrieb und ein dauerhafter Betrieb sind zu unterscheiden; jeder stellt eine eigene Behauptung dar.
The OECD’s Framework for Anticipatory Governance of Emerging Technologies of 2024 and parliamentary technology assessment offices, networked through EPTA, provide models of assessment that look beyond performance to values and institutions.
Bewertungsberichte, keine Genehmigungen.
An assessment records what was tested, how and with what result. It confers no status and is never a condition of procurement. Assessments are designed for the Labs Evidence series and, when they concern readiness for national deployment, the Foundry Build and Readiness series; evidence would follow NS-11 of the proposed Nexus Standards. Providers can submit test plans; independent researchers can submit replications.
Wie die Leistungsfähigkeit berichtet wird.
- Measured capability is published with workload, data size, hardware, configuration, software version and interval
- Spitzen-, Dauer-, verfügbare und zugewiesene Kapazität werden getrennt ausgewiesen
- Gerätezahlen und Spezifikationen sind Beschreibungen, keine Anwendungsergebnisse
- Energie-, Kühlungs- und Wasserverbrauch werden erfasst, wobei Messwerte von Schätzungen getrennt gehalten werden
- Bei Tests festgestellte Fehler und Einschränkungen werden berichtet, nicht entfernt
From evaluation plan to recorded result.
- 01
Evaluierungsplan
Objectives, metrics, conditions and stop rules agreed before testing.
- 02
Kontrollierter Test
Experimente in den Testumgebungen von Labs oder im jährlichen Programm Universum , mit unabhängiger Beobachtung.
- 03
Erfasstes Ergebnis
Ergebnisse mit ihrer Methode, ihren Grenzen und ihrem Evidenzvermerk, veröffentlicht, soweit die Rechte dies erlauben.
Testen ist keine Zertifizierung.
An assessment describes what was tested and found. It is not accreditation, certification, endorsement or approval for use. Evaluation never depends on a provider’s contribution. Providers start at technology and infrastructure providers. See also responsible technology and the Labs Evidence report series.
Where this page’s references lead.
Die Gremien und Dokumente, vor deren Hintergrund diese Seite gelesen wird. Status und Ausgaben ändern sich; jeder Link führt zur herausgebenden Stelle.
- Technologie-Reifegrade (NASA)
- ISO 16290:2013 Raumfahrtsysteme, Definition der Technologie-Reifegrade und ihrer Bewertungskriterien (ISO)
- Collins et al., TRIPOD+AI statement, BMJ 385 (2024)
- OECD-Rahmenwerk für vorausschauende Governance neu entstehender Technologien (OECD, 2024)
- European Parliamentary Technology Assessment network (EPTA)
- NIST AI Risk Management Framework 1.0 (NIST AI 100-1, 2023) und das Generative AI Profile (NIST AI 600-1, 2024)
- NS-11, Verifizierung und Überwachung, ein vorgeschlagener Standard
Fragen und Antworten.
Darf ein Anbieter eine GCRI-Bewertung im Marketing zitieren?
Wer bezahlt eine Bewertung?
Are negative results published?
Verwendet GCRI Reifegrade?
Kann eine Bewertung angefochten werden?
Evidenz von dieser Seite aus beitragen.
Reports ist die vierteljährliche Publikation des Konsortiums. Was Sie über dieses Thema wissen, kann in der nächsten Ausgabe zu Evidenz, einem Fall oder einer Korrektur werden, Ihnen zugeschrieben und unter CC BY 4.0 veröffentlicht, soweit es Ihr eigenes Werk ist.
- E-MailZugang GW-GCRIVon dieser Seite aus sendenEvidenz, eine Korrektur, ein Fall, eine Methode, eine Prüfung, eine Übersetzung oder ein Beitrag zu einem Profil. Sie kommt mit dieser Seite gekennzeichnet an, sodass die zuständige Redaktion sie erhält.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- BerichteGCRIAlle Wege zum Beitragen ansehenDie Beitragsarten, wie jede geprüft wird, welche Nennung Sie erhalten, die Lizenz und was nie angenommen wird.
Senden Sie nie personenbezogene Daten, sensible Infrastrukturdetails oder etwas, das Sie nicht weitergeben dürfen. Ein Beitrag wird vor der Nutzung geprüft; das Einsenden begründet weder Urheberschaft noch redaktionelle Rechte, und Sponsoring erkauft nie ein Ergebnis.
Bringen Sie eine Methode, einen Datensatz oder eine Frage mit.
Information und Anfragen sind heute offen. Eine Anfrage erhält ein Aktenzeichen und nennt den nächsten Schritt; Bewerbungen, Zahlungen, Rechenzuteilungen und Registrierungen öffnen erst, wenn Team, Bedingungen und Prüfkapazität bestehen.
Rechtliche Dokumente.
Karten, Daten und Zahlen auf dieser Website werden zu Kontext- und allgemeinen Informationszwecken gezeigt. Sie sind weder Beratung noch Prognosen oder Warnungen; die Grenzen der Information sind in den Haftungsausschlüssen und Datenhinweisen dargelegt.