Frühe Computerspiele zeigten, dass Maschinen in einer begrenzten Umgebung mögliche Spielzüge durchsuchen konnten. Später wurden ähnliche Verfahren – ergänzt durch statistisches Lernen – auf praktische Aufgaben angewendet, etwa:
Solche Systeme sind besonders leistungsfähig, wenn eine Aufgabe eng umrissen, wiederkehrend und messbar ist. Sie können große Fallzahlen schnell verarbeiten und konsistente Ergebnisse liefern. Regelbasierte Systeme sind zudem oft leichter zu überprüfen als komplexe Modelle, weil ihre Entscheidungslogik offenliegt.
Klassische KI versteht nicht automatisch, warum ein Ergebnis entsteht. Ein Modell kann einen statistischen Zusammenhang erkennen, ohne Kausalität nachzuweisen. Wird es mit verzerrten historischen Daten trainiert, kann es diese Verzerrung reproduzieren oder verstärken. Regeln können außerhalb ihres ursprünglichen Einsatzbereichs unflexibel reagieren, während komplexe Vorhersagemodelle schwer erklärbar sein können.
Die Leistung kann außerdem nachlassen, wenn sich die reale Welt verändert – ein Problem, das häufig als Daten- oder Konzeptdrift bezeichnet wird. Bei folgenreichen Anwendungen wie Kreditvergabe, Beschäftigung, Versicherungen, Strafverfolgung und Gesundheitsversorgung sind deshalb Prüfungen der Datenqualität, Bias-Tests, angemessene Erklärungen, menschliche Kontrolle, laufendes Monitoring und Widerspruchsmöglichkeiten erforderlich.
Generative KI lernt Muster aus großen Sammlungen von Texten, Bildern, Audio, Videos oder Code und nutzt diese Muster, um neue Ausgaben zu erzeugen. Große Sprachmodelle erstellen Text Schritt für Schritt, während multimodale Systeme mit mehreren Formaten arbeiten können.
Das hat die Nutzung von KI grundlegend verändert. Statt aus einer begrenzten Liste von Befehlen auszuwählen oder lediglich einen Klassifizierungswert zu erhalten, können Menschen ein Ziel in Alltagssprache beschreiben und ein System bitten, Inhalte zu entwerfen, umzuwandeln oder zu erklären.
Die wichtigsten Vorteile liegen in höherer Geschwindigkeit, geringeren Kosten für Entwürfe, der Interaktion in natürlicher Sprache und der Möglichkeit, viele personalisierte Varianten zu erstellen. Eine plausible Antwort ist jedoch nicht dasselbe wie verlässliches Fachurteil.
Halluzinationen und übertriebene Sicherheit. Große Sprachmodelle können erfundene, ungenaue, voreingenommene oder stark vereinfachte Informationen in einem selbstsicheren Ton ausgeben. Forschung zu Grounding und Evaluation nennt Halluzinationen, schädliche Inhalte, Manipulation, Urheberrechtsverletzungen, Datenschutz und Sicherheit als Themen, die getestet und überwacht werden müssen.
Lernen und akademische Integrität. Ein groß angelegtes Schulexperiment zeigte, dass KI-gestütztes Tutoring die Leistung verbessern kann, solange das Werkzeug verfügbar ist. Schülerinnen und Schüler, die sich jedoch ohne geeignete Schutzmechanismen darauf stützten, schnitten schlechter ab, als der Zugang später entfiel – ein Hinweis auf einen geringeren tatsächlichen Kompetenzerwerb. Von Lehrkräften entwickelte Hinweise wirkten besser als das bloße Vorgeben von Lösungen. Generative Werkzeuge können außerdem Plagiate erleichtern oder verschleiern, ob Lernende den Stoff wirklich beherrschen.
Urheberrecht und Herkunft. Die Herkunft von Trainingsdaten, stilistische Nachahmung und Ausgaben, die geschütztes Material reproduzieren, sind weiterhin umstritten. Leitlinien für den Bildungsbereich nennen Verletzungen geistigen Eigentums neben ungenauen, voreingenommenen oder unsicheren Inhalten als wesentliches Risiko.
Schädliche und manipulative Inhalte. Generative Systeme können Desinformation, Belästigung, sexuelle oder gewaltbezogene Inhalte sowie gefährliche Anleitungen erzeugen. Sicherheitsempfehlungen setzen daher auf Tests, Schutzmechanismen, Aktivitätsprotokolle und Monitoring, statt davon auszugehen, dass ein Modell sich stets wie vorgesehen verhält.
Jugendschutz und Wohlbefinden. Forschung zu Risiken generativer KI für junge Menschen nennt unter anderem die psychische Gesundheit, die soziale und verhaltensbezogene Entwicklung, toxische Inhalte, Datenschutz sowie Missbrauch und Ausbeutung. Besonders problematisch wird es, wenn Nutzerinnen und Nutzer einen Chatbot als vertrauenswürdigen Ersatz für qualifizierte menschliche Unterstützung betrachten.
Privatsphäre und Vertraulichkeit. Eingaben können personenbezogene Daten, Geschäftsgeheimnisse, Kundendokumente oder rechtlich geschützte Informationen enthalten. Organisationen brauchen deshalb klare Regeln, welche Daten in welchen Diensten verarbeitet werden dürfen. Nicht freigegebene Systeme sollten grundsätzlich nicht für sensible Inhalte genutzt werden.
Eine sinnvolle Grundregel lautet: Modellausgaben sind Entwürfe, keine Belege. Wichtige Tatsachenbehauptungen sollten anhand verlässlicher, maßgeblicher Quellen überprüft werden. Für medizinische, rechtliche, finanzielle, personalbezogene und sicherheitskritische Entscheidungen sollte eine menschliche Prüfung verpflichtend sein.
Hilfreiche Maßnahmen sind die Anbindung an freigegebene Quellen, Quellenangaben, Red-Team-Tests, Inhaltsfilter, altersgerechtes Design, Audit-Logs, eine klare Kennzeichnung des KI-Einsatzes sowie Richtlinien für Datenverarbeitung, akademische Nutzung, Herkunft und urheberrechtliche Freigaben. Auch staatliche Leitlinien weisen auf ungenaue oder voreingenommene Inhalte, Datenschutzverletzungen, Verstöße gegen geistiges Eigentum und Herausforderungen für die akademische Integrität hin.
Agentische KI ergänzt die Generierung um eine Handlungsebene. Ein Agent kann ein Ziel interpretieren, es in einzelne Schritte zerlegen, Werkzeuge wie Browser, Code-Repositories, Datenbanken oder Nachrichtendienste aufrufen, Zwischenergebnisse prüfen und innerhalb seiner Berechtigungen weiterarbeiten.
Dadurch unterscheidet sich ein Agent von einem Chatbot, selbst wenn beide ein großes Sprachmodell verwenden. Ein Chatbot kann eine E-Mail formulieren; ein Agent kann Informationen suchen, die Nachricht vorbereiten, sie versenden und anschließend ein anderes System aktualisieren. Ein Programmierassistent kann einen Fehler erklären; ein Agent kann eine Codebasis untersuchen, Dateien ändern, Tests ausführen und eine Änderung zur Prüfung vorbereiten.
Zu den aktuellen Beispielen zählen Softwareentwicklungs-Agenten wie Google Jules, Recruiting-Workflow-Tools wie LinkedIn Hiring Assistant und persönliche Agenten-Frameworks wie OpenClaw. OpenClaw wird von den Projektmaterialien als persönlicher Open-Source-Assistent beschrieben, der auf den Geräten der Nutzer läuft und sich mit Kanälen und Werkzeugen verbindet. Was er tatsächlich ausführen kann, hängt von den aktivierten Integrationen und Berechtigungen ab.
Agentische Systeme können:
Damit könnten auch kleinere Organisationen und einzelne Nutzerinnen und Nutzer Zugang zu komplexeren Arbeitsabläufen erhalten. Zugleich verschiebt sich die zentrale Frage: Nicht mehr nur „Ist die Antwort korrekt?“, sondern auch „Was darf das System tun, und wie lassen sich seine Aktionen kontrollieren?“
Ein generatives Modell kann eine falsche Antwort geben. Ein Agent kann eine falsche Schlussfolgerung, eine bösartige Anweisung oder ein kompromittiertes Werkzeug in eine externe Handlung übersetzen.
Ein Agent mit Zugriff auf Finanzsysteme könnte beispielsweise eine nicht autorisierte Zahlung, einen Kauf, eine Überweisung oder eine Stornierung auslösen. Ein Agent mit Zugriff auf E-Mail, Browser oder Cloud-Dienste könnte durch eine manipulierte Webseite oder ein bösartiges Dokument dazu gebracht werden, Zugangsdaten offenzulegen oder vertrauliche Dateien zu versenden. Zu weitreichende Berechtigungen, schwache Identitätskontrollen und schlecht getrennte Zuständigkeiten können einen kleinen Modellfehler zu einem gravierenden Vorfall machen.
Auch die Verantwortungszuweisung wird schwieriger, wenn ein Ergebnis aus dem Zusammenspiel von Modell, Anweisungen, Daten, Werkzeugen und anderen Agenten entsteht. Betreiber müssen daher nicht nur das Endergebnis sehen, sondern auch die geplante Aktion, ihre Begründung, die zugrunde liegenden Belege und die verwendeten Berechtigungen.
Für alle drei Entwicklungsstufen gelten dieselben Grundprinzipien: eine verantwortliche Stelle benennen, den Einsatzzweck begrenzen, Daten schützen, vor der Einführung testen, die Leistung überwachen, auf Vorfälle vorbereitet sein und bei folgenreichen Entscheidungen eine echte menschliche Prüfung oder Übersteuerung ermöglichen.
Agentische Systeme benötigen zusätzliche Kontrollen, weil sie externe Systeme beeinflussen können. Dazu gehören insbesondere:
Singapurs Model AI Governance Framework for Agentic AI, das am 22. Januar 2026 vorgestellt wurde, ist eine Orientierungshilfe für Organisationen und kein eigenständiges KI-Gesetz. Es stellt die menschliche und organisatorische Verantwortlichkeit in den Mittelpunkt und empfiehlt ein Risikomanagement mit Kontrollen, die dem Grad der Autonomie eines Agenten entsprechen.
Für Finanzdienstleister beschreibt das Papier der Monetary Authority of Singapore zu SAFR einen Ansatz für Governance zur Laufzeit. Dabei hält ein strukturierter Datensatz fest, was ein Agent tun möchte, warum er dies tun möchte und welche Belege die geplante Aktion stützen.
Die Entwicklung der KI ist kein einfacher Marsch von „alter“ zu „neuer“ KI. Regelbasierte und prädiktive Systeme bleiben für viele klar begrenzte Entscheidungen die richtige Wahl. Generative KI bringt flexible Produktion und Interaktion in natürlicher Sprache. Agentische KI erweitert diese Fähigkeiten um die Verfolgung von Zielen über Werkzeuge und externe Aktionen.
Mit der Leistungsfähigkeit wächst auch die Governance-Herausforderung: Vorhersagen erfordern Aufmerksamkeit für Genauigkeit, Verzerrungen und Drift. Bei generativer KI kommen Überprüfung, Sicherheit, Datenschutz und Herkunft der Inhalte hinzu. Sobald ein System handeln kann, braucht es darüber hinaus Berechtigungskontrollen, Freigabestufen, klare Verantwortlichkeit und Pläne für die Wiederherstellung nach Fehlern.
Die zuverlässigsten KI-Produkte werden daher nicht allein durch leistungsfähige Modelle entstehen, sondern durch die Kombination aus Modellqualität, diszipliniertem Systemdesign und echter menschlicher Aufsicht.