Skip to content

GCRI · Innovation und technologischer Wandel

Technikfolgenabschätzung

Behauptungen über Technologie sind leicht aufgestellt und schwer zu überprüfen. Die Technologiebewertung am Global Centre for Risk and Innovation (GCRI) fragt, was eine Technologie tatsächlich leistet, unter welchen Bedingungen, auf welcher Evidenzgrundlage und mit welchen Grenzen. So können Institutionen eine Demonstration von einer verlässlichen Fähigkeit unterscheiden, bevor sie eine Technologie einführen, beschaffen oder regulieren. Teil von Innovation und technologischem Wandel.

01Arbeitsbereich

The workspace for technology assessment.

Innovationspipeline

GCRI · Phasentore · Beispieloberfläche, kein Datensatz

Gate review in 8 dGCRI · GCRI

Nach Reifegrad

TRL 2 bis 301
Überprüfungszyklus der MethodenKonzept getestet
TRL 4 bis 502
Prüfung der EvidenzkennzeichnungLaborvalidierung
Aufbau des Nationalen ModellsLaborvalidierung
TRL 6 bis 701
Planung der BerichtsausgabePilot mit Eigentümer
Prüfung der Einführung01
Jährliche MissionsplanungEigentümer entscheidet

Reifekriterien

Pilot gegenüber Phasentor

Wirkungsnachweis85 von 70 erforderlichenSchutzvorkehrungen60 von 80 erforderlichBetriebskosten bekannt40 von 60 erforderlichVerpflichtung des Verantwortlichen43 von 75 erforderlich

Pilotprobleme

  1. I-1Data licence for pilot siteTo check9 d
  2. I-2Observer protocol signedDone8 d
Innovationspipeline.Beispielhafte Oberfläche; keine Live-Daten.

GCRI · Innovationspipeline. Innovationspipeline: Beispielnamen und beispielhafte Werte, kein Eintrag.

02Was untersucht wird

Four questions behind every assessment.

Eine vierte Frage zieht sich durch alle drei: Was würde die Technologie scheitern lassen, und wurde danach gesucht?

Bereitschaft

Wie ausgereift ist es?

Evidenz zur Reife im vorgesehenen Einsatzumfeld, nicht im günstigsten.

Validierung

Wurde es getestet?

Unabhängige Tests anhand erklärter Ziele, wobei die Testbedingungen berichtet werden.

Claims

What exactly is claimed?

Fähigkeitsangaben, getrennt nach gemessen, geschätzt und behauptet.

03Reifegradskalen

Readiness levels, what they measure and what they leave out.

Technologiereifegrade reichen von eins, grundlegende Prinzipien beobachtet, bis neun, ein im operativen Umfeld bewährtes System. Die NASA hat sie eingeführt; ISO 16290:2013 definiert sie für Raumfahrt- Systeme, und viele Behörden verwenden angepasste Fassungen. Ein Reifegrad beschreibt die Reife in einem bestimmten Umfeld. Er sagt nichts über Kosten, Sicherheit in einem anderen Umfeld, gesellschaftliche Akzeptanz oder darüber aus, ob eine Organisation die Technologie betreiben kann.

FrageEvidenz, die sie beantwortetCommon gap
Funktioniert es wie behauptet?Independent tests against a pre-registered plan, on held-out data or in a representative environmentAnbieter-Benchmarks auf Daten, an die das System angepasst wurde
Does it work here?Erprobungen im Zielkontext, mit lokalen Nutzerinnen und Nutzern und unter lokalen BedingungenÜbertragung aus einem anderen Klima, einer anderen Sprache oder einer anderen Infrastruktur
What does it depend on?Bills of materials, supply and energy needs, skills requiredVerdeckte Abhängigkeit von einem einzelnen Lieferanten oder Dienst
Wie versagt es?Adversarial and stress tests; incident recordsNur die erwarteten Fälle testen
04Messpraxis

Reporting capability honestly.

  • Leistung mit Konfidenzintervallen und für die Population angeben, der sie dienen soll, nicht nur anhand aggregierter Testdatensätze.
  • Auf Kontamination prüfen: Testdaten, die ins Training gelangt sind, blähen die Ergebnisse auf, ein bekanntes Problem bei KI-Benchmarks.
  • For prediction models in health and similar settings, follow reporting guides such as TRIPOD+AI (2024).
  • Eine Demonstration, ein Pilotbetrieb und ein dauerhafter Betrieb sind zu unterscheiden; jeder stellt eine eigene Behauptung dar.

The OECD’s Framework for Anticipatory Governance of Emerging Technologies of 2024 and parliamentary technology assessment offices, networked through EPTA, provide models of assessment that look beyond performance to values and institutions.

05GCRI’s part

Bewertungsberichte, keine Genehmigungen.

An assessment records what was tested, how and with what result. It confers no status and is never a condition of procurement. Assessments are designed for the Labs Evidence series and, when they concern readiness for national deployment, the Foundry Build and Readiness series; evidence would follow NS-11 of the proposed Nexus Standards. Providers can submit test plans; independent researchers can submit replications.

06Messregeln

Wie die Leistungsfähigkeit berichtet wird.

  • Measured capability is published with workload, data size, hardware, configuration, software version and interval
  • Spitzen-, Dauer-, verfügbare und zugewiesene Kapazität werden getrennt ausgewiesen
  • Gerätezahlen und Spezifikationen sind Beschreibungen, keine Anwendungsergebnisse
  • Energie-, Kühlungs- und Wasserverbrauch werden erfasst, wobei Messwerte von Schätzungen getrennt gehalten werden
  • Bei Tests festgestellte Fehler und Einschränkungen werden berichtet, nicht entfernt
07Wie Tests ablaufen

From evaluation plan to recorded result.

  1. 01

    Evaluierungsplan

    Objectives, metrics, conditions and stop rules agreed before testing.

  2. 02

    Kontrollierter Test

    Experimente in den Testumgebungen von Labs oder im jährlichen Programm Universum , mit unabhängiger Beobachtung.

  3. 03

    Erfasstes Ergebnis

    Ergebnisse mit ihrer Methode, ihren Grenzen und ihrem Evidenzvermerk, veröffentlicht, soweit die Rechte dies erlauben.

08Grenzen

Testen ist keine Zertifizierung.

An assessment describes what was tested and found. It is not accreditation, certification, endorsement or approval for use. Evaluation never depends on a provider’s contribution. Providers start at technology and infrastructure providers. See also responsible technology and the Labs Evidence report series.

10Fragen

Fragen und Antworten.

Darf ein Anbieter eine GCRI-Bewertung im Marketing zitieren?
Nur als sachliche Angabe des veröffentlichten Ergebnisses mit seinem Geltungsbereich und seinen Grenzen, niemals als Zertifizierung oder Billigung. Falschdarstellungen können an die Integritätsadresse gemeldet werden.
Wer bezahlt eine Bewertung?
Die Bedingungen werden für jede Testbed-Ausschreibung oder -Vereinbarung festgelegt. Zahlung erkauft nie ein Ergebnis, und die Bewertung hängt nie von einem hohen Beitrag ab.
Are negative results published?
Yes, where rights allow. A technology that fails a test produces a result as valid as one that passes.
Verwendet GCRI Reifegrade?
Readiness is described with evidence for the specific setting. Where a recognised readiness scale is referenced, it is named and the evidence for the level is shown.
Kann eine Bewertung angefochten werden?
Ja. Anbieter, Forschende und die Öffentlichkeit können eine veröffentlichte Bewertung über den Integritätsweg anfechten. Eine akzeptierte Korrektur erzeugt eine neue protokollierte Version mit ihrem Verlauf.
BerichteBeitragen

Evidenz von dieser Seite aus beitragen.

Reports ist die vierteljährliche Publikation des Konsortiums. Was Sie über dieses Thema wissen, kann in der nächsten Ausgabe zu Evidenz, einem Fall oder einer Korrektur werden, Ihnen zugeschrieben und unter CC BY 4.0 veröffentlicht, soweit es Ihr eigenes Werk ist.

GCRI
Das Global Centre for Risk and Innovation

Bringen Sie eine Methode, einen Datensatz oder eine Frage mit.

Information und Anfragen sind heute offen. Eine Anfrage erhält ein Aktenzeichen und nennt den nächsten Schritt; Bewerbungen, Zahlungen, Rechenzuteilungen und Registrierungen öffnen erst, wenn Team, Bedingungen und Prüfkapazität bestehen.