Skip to content

GCRI · Künstliche Intelligenz und autonome Systeme

Überblick über das Feld

KI und autonome Systeme als Risikofeld untersuchen, wie sich gelernte Modelle, Software-Agenten und Roboter in der realen Welt verhalten, wie sich ihr Verhalten messen lässt und wie sich ihre Ausfälle auf die Institutionen, Infrastrukturen und Leben auswirken, die von ihnen abhängen. Diese Seite definiert das Fachgebiet, erklärt, warum es für die Gesellschaft wichtig ist, legt dar, was Fachleute untersuchen, und zeigt, wie es mit anderen Risiken zusammenhängt.

MINT-Methoden
7
Kanonische Methoden, die dieses Feld anwendet
Themen
8
Themenseiten im Fachgebiet
Partner
3
Plattformen in gemeinsamen Feldern im gesamten Netz
Berichtsreihen
2
Reports-Reihen, zu denen es beiträgt
01Definition

Von Algorithmen zu eingesetzten Systemen.

Lernen

Modelle und Daten

Wie Trainingsdaten, Zielfunktionen und Architekturen das Verhalten prägen, einschließlich der Fehlermodi.

Absicherung

Evaluierung und Aufsicht

Wie Systeme getestet, überwacht und unter wirksamer menschlicher Kontrolle gehalten werden.

Embodiment

Autonomie in der Welt

Wie Wahrnehmung, Planung und Steuerung in Robotern und Fahrzeugen zusammenwirken.

Das Fachgebiet verbindet künstliche Intelligenz und maschinelles Lernen, die Methoden, mit denen Systeme aus Daten lernen, mit KI-Evaluierung und KI-Prüftechnik, der Ingenieursdisziplin ihres Testens und ihrer Absicherung. Es erstreckt sich auf Robotik und Automatisierung, wo KI physische Maschinen steuert, sowie auf Hochleistungs-, Cloud- und Edge-Computing, die Infrastruktur, die Modelle trainiert und betreibt.

Als Risikofeld definiert es sich über Folgen: was geschieht, wenn ein Modell schlecht generalisiert, wenn ein Agent ein Werkzeug missbraucht, wenn ein Roboter seine Umgebung falsch deutet oder wenn viele Systeme denselben Fehler teilen. Sozial- und Verhaltenswissenschaften gehört zum Fachgebiet, weil die Wirkungen von KI davon abhängen, wie Menschen sie nutzen, ihr vertrauen und sie anfechten.

02Monitoring

Überblick über das Fachgebiet.

Die Ansicht, die ein Team nutzen würde, um dieses Thema zu verfolgen: seine Messgrößen, Zustände und Entscheidungen. Namen sind Beispiele, Werte sind illustrativ.

Field overview: the screen’s structure, terms and states for AI and autonomous systems.Beispielnamen und beispielhafte Werte; ein Entwurf, kein Eintrag und kein Live-System.
03Warum das wichtig ist

KI wird zur Infrastruktur.

  • KI entwickelt sich von beratenden Werkzeugen zu Systeme , die handeln, durch Software-Agenten und physische Autonomie.
  • Public services increasingly use automated systems in decisions about people’s rights and access.
  • Eine kleine Zahl von Modellanbietern, Cloud-Plattformen und Chip-Lieferketten trägt viele Anwendungen.
  • Die Evaluierungswissenschaft hinkt den Fähigkeiten hinterher, sodass Aussagen über Sicherheit und Leistung oft schwer zu prüfen sind.
04Was Fachleute untersuchen

Die zentralen Fragen.

  1. 01

    Messung

    Messen Evaluierungen, was sie zu messen beanspruchen, und lassen sich Ergebnisse verallgemeinern? Siehe Modellevaluierung.

  2. 02

    Maßnahme

    Wie sollten Befugnisse an Systeme delegiert werden, die handeln? Siehe Agentische Systeme und Autonome physische Systeme.

  3. 03

    Sicherheit

    Wie können Modelle angegriffen werden, und wie kann KI Cyberangriff und -abwehr verändern? Siehe KI und Cybersicherheit.

  4. 04

    Nutzen

    Wie verändert KI Wissenschaft und öffentliche Dienste? Siehe KI in der Wissenschaft sowie KI und öffentliche Dienste.

  5. 05

    Grundlagen und Wirkungen

    Wovon hängt KI ab, und wen betrifft sie? Siehe Rechenleistung und Energie sowie Auswirkungen auf Arbeit und Gesellschaft.

05Verbindungen

Wie KI andere Risiken berührt.

KI ist mit Cybersicherheit, Energie, Arbeitsmärkten, Finanzen und öffentlichem Vertrauen verbunden. Abhängigkeiten und Folgen erläutert diese Verbindungen. Die Governance wird über KI und digitale Governance beim Global Risks Forum (GRF) zusammengeführt, und das Modellrisiko im Finanzsektor wird über AI and Financial Model Risk bei der Global Risks Alliance (GRA) untersucht.

06Seiten

Seiten in Feldüberblick.

07Fragen

Fragen und Antworten.

Ist dieses Fachgebiet dasselbe wie KI-Ethik?
Es gibt Überschneidungen, aber der Fokus liegt auf messbarem Verhalten und Versagen: Validität, Robustheit, Sicherheit, Zuverlässigkeit und Wirkungen, untersucht mit wissenschaftlichen Methoden.
Auf welche Methoden stützt sich das Fachgebiet?
Maschinelles Lernen, KI-Prüftechnik, Informatik, Wahrscheinlichkeit und Statistik, Cybersicherheit, Sozialwissenschaft und Robotik. Jede ist auf der STEM-Grundlagenseite.
Umfasst das Fachgebiet militärische KI?
The platform’s scope is civilian systems and their public effects. It does not work on weapons development.
BerichteBeitragen

Evidenz von dieser Seite aus beitragen.

Berichte is the Consortium’s quarterly publication. What you know about this subject can become evidence, a case or a correction in the next edition, credited to you and published under CC BY 4.0 where it is your own work.

GCRIKünstliche Intelligenz und autonome SystemeExponentielle TechnologieLabs-Evidenz
Künstliche Intelligenz und autonome Systeme

Bringen Sie eine Methode, einen Datensatz oder eine Frage mit.

Information und Anfragen sind heute offen. Eine Anfrage erhält ein Aktenzeichen und nennt den nächsten Schritt; Bewerbungen, Zahlungen, Rechenzuteilungen und Registrierungen öffnen erst, wenn Team, Bedingungen und Prüfkapazität bestehen.