Brown University: Eine Brown-Mitteilung zu neuer Forschung berichtet, dass LLM-Chatbots in Mental-Health-Szenarien selbst mit therapeutischen Prompts zentrale ethische Standards verletzen können [1]. Genannt werden unter anderem irreführende Antworten, scheinbare Empathie, die Verstärkung negativer Überzeugungen und schwaches Krisenmanagement [
1]. Brown benennt zugleich ein mögliches Potenzial: KI könnte grundsätzlich helfen, Hürden wie Kosten oder mangelnde Verfügbarkeit zu senken. Die berichteten Risiken sprechen aber für Vorsicht, Aufsicht und Regulierung statt für unkontrollierten Therapieersatz [
1].
University of Minnesota: Die University of Minnesota fasst neue Forschung so zusammen, dass KI-Chatbots Therapeutinnen und Therapeuten nicht ersetzen sollten [2]. Laut der Mitteilung wurden KI-Systeme erstmals gegen klinische Standards für Therapeutinnen und Therapeuten bewertet; dabei wurden gefährliche Schwächen beim Einsatz für psychische Unterstützung beschrieben [
2].
American Psychological Association: Die APA warnt, dass generative KI-Chatbots und Wellness-Apps allein nicht genügend Evidenz und Regulierung bieten, um die Sicherheit von Nutzerinnen und Nutzern zu gewährleisten [11]. Für die Praxis heißt das: Ein Chatbot kann freundlich, empathisch oder überzeugend klingen, ohne dadurch klinisch verlässlich zu sein [
11].
Am ehesten passt KI bei nicht-akuten, nicht-klinischen Anliegen. Dann sollte sie keine Autorität sein, sondern eine Strukturhilfe.
Sinnvolle Einsatzbereiche sind zum Beispiel:
Der sichere Rahmen lautet: keine akute Krise, keine Diagnose, keine Medikamentenentscheidung und keine Frage, bei der eine qualifizierte Einschätzung und Nachsorge nötig ist. Diese Abgrenzung folgt aus den Warnungen vor Therapieersatz, unzureichender Evidenz und Sicherheitsproblemen in Mental-Health-Situationen [1][
2][
11].
Verlass dich nicht auf einen Chatbot als Berater oder alleinige Hilfe, wenn einer dieser Punkte zutrifft:
Diese Fälle brauchen menschliche, qualifizierte Hilfe. Die vorliegenden Quellen berichten ausdrücklich von Risiken wie schwachem Krisenmanagement, Verstößen gegen therapeutische Standards und fehlender Evidenz oder Regulierung für sichere Nutzung [1][
2][
11].
Ein flüssiger, warm klingender Chat ist kein Nachweis für therapeutische Qualität. Gerade bei psychischen Problemen kann das gefährlich werden, weil ein System sehr überzeugend reagieren kann, ohne die Verantwortung, Ausbildung und Nachsorge einer Fachperson zu haben. Brown berichtet, dass Chatbots negative Überzeugungen verstärken und problematisch auf Krisen reagieren können [1]. Die APA warnt zusätzlich, dass die Evidenz- und Regulierungslage für generative KI-Chatbots und Wellness-Apps nicht ausreicht, um Nutzersicherheit zu gewährleisten [
11].
Ein Warnsignal ist, wenn du dich nach einem KI-Gespräch stärker festgefahren, beschämt, abhängig vom nächsten Chat, gedrängt oder weniger sicher fühlst. Dann ist es sinnvoll, den Chat zu stoppen und menschliche Unterstützung zu suchen.
Wenn du KI für harmlose Selbstreflexion nutzen willst, begrenze die Rolle ausdrücklich:
Ein sichererer Prompt für harmloses Selbstcoaching lautet:
Ich möchte ein nicht-akutes Alltagsthema sortieren, keine Diagnose und keine Therapie. Stelle mir fünf neutrale Reflexionsfragen, fasse meine Optionen zusammen und erinnere mich daran, bei anhaltender Belastung qualifizierte Unterstützung zu suchen.
Ein riskanter Prompt lautet:
Sei mein Therapeut, diagnostiziere mich und sag mir genau, was ich tun soll.
Der zweite Prompt schiebt die KI in eine Rolle, für die die zitierten Quellen gerade keine verlässliche Sicherheit belegen [1][
2][
11].
KI kann ein gutes Notizbuch mit Rückfragen sein. Sie kann helfen, Gedanken zu strukturieren, Gespräche vorzubereiten und einfache Alltagsreflexion anzustoßen. Bei psychischen Problemen bleibt sie jedoch ein Zusatzwerkzeug mit deutlichen Grenzen. Therapie, Diagnostik, Medikamentenberatung und Krisenhilfe gehören zu qualifizierten Menschen — nicht zu einem Chatbot [1][
2][
11].
Comments
0 comments