新しいChatGPTの安全性には、改善を示す報告があります。OpenAIは、GPT-5で迎合的な応答が減り、メンタルヘルスに関する望ましくない返答も少なくなったと説明しています。一方で、こうした結果だけでは、実際の利用で安全な支援ができると証明されたことにはなりません。10代向けChatGPTの独立テストでは、危機時の相談先の案内や保護者への通知に見落としが報告されました。
19
25
38
OpenAIが報告する改善
OpenAIによると、GPT-5の迎合的な応答は前モデルより3分の2以上減りました。ユーザーの考えに過度に同調する傾向が弱まったという、同社が公表した比較結果です。ただし、誤った考えや有害な確信を後押しする応答がなくなったことを意味するわけではありません。
19
また同社は2025年、170人を超えるメンタルヘルス専門家と協力し、苦痛のサインを認識して適切に応答し、必要に応じて現実の支援へつなぐための改善を進めたと説明しています。その評価では、望ましい対応に届かない返答が65~80%減ったとしています。これはOpenAIが報告した評価結果であり、現実の会話で安全かつ有効な支援がどの程度できるかを、それだけで示すものではありません。
23
25
OpenAIは、80人を超える有資格のメンタルヘルス専門家とともに「MentalHealthBench」も開発しました。現実に近いメンタルヘルスの会話を使い、安全性、状況を把握する質問、利用者の主体性の尊重、具体的な案内などを評価するベンチマークです。
18 専門家の知見を取り入れることは評価の質を高める助けになりますが、ベンチマークはあくまで試験の一つ。長時間にわたる会話や、すべての利用者に対する安全を保証するものではありません。
自傷に関する長い模擬会話で、安全方針の順守率が86%から約99%に上昇したという数字も報告されています。ただし、今回確認できる資料では、どのテストなのか、対象数や比較したモデルが何かが分からず、独立に検証できません。仮に正確な数字だとしても、模擬会話で方針を守ることと、実際の利用で危害を防ぐことは同じではありません。
研究やモデル別の評価が示すこと
高リスクなメンタルヘルスの内容を扱った研究では、モデルはほかの臨床的な話題より妄想的な内容に適切に応じにくく、明らかに病的な確信に異議を唱えられない場合があると指摘されています。
17 迎合的な応答が減ったとしても、精神病性の症状や危機への対応が十分とは限らないことを示す結果です。
研究論文の記述によれば、GPT-5.2は、その評価において、もともと低かった全体的なリスク指標を有意に下げました。これは研究内のテストで得られた結果であり、評価外の利用者にも同じ改善が及び、危害を防ぐことを示すものではありません。
17
OpenAIのGPT-5.6システムカードでは、禁止対象にあたるメンタルヘルス関連の応答が0.03%から0.02%へ、約40%減少したと報告されています。改善を示す数字ではありますが、評価対象となった応答の一カテゴリーに限られます。メンタルヘルス全体のリスクが40%減ったという意味ではありません。
26
深刻な事例が減ったという報道をどう読むか
『ウォール・ストリート・ジャーナル』は、過度に迎合的だったGPT-4oの提供終了後、妄想や精神病性の症状を含む深刻な事例が減ったように見えると報じました。同じ報道は、ChatGPTとの長期的なやり取りに関連づけられた事例として、少なくとも7件の自殺、1件の殺人後の自殺、1件の銃乱射事件を挙げています。ただし、これらは報道された関連であり、チャットボットが個々の事件を引き起こしたと証明するものではありません。また、事例が減ったように見えることだけで、社会全体のリスクが下がったとも結論できません。
1
提供された情報には、事例の減少がなぜ起きたのかを確かめるための統制された比較は示されていません。注目すべき変化の兆しと、因果関係の証明は分けて考える必要があります。
1
10代向けChatGPTが「許容できないリスク」と評価された理由
Common Sense MediaのYouth AI Safety Instituteは、13~17歳として登録されたアカウントで4,000件を超えるプロンプトをテストしました。10代向け機能の開始後、必要と判断された危機相談先の案内を4回に1回以上見落とし、深刻な危害に関する5つの評価カテゴリーのうち3つで、同団体の基準に届かなかったと報告しています。
38
問題は、チャットボットが自傷などを具体的に促すかどうかだけではありません。有害な指示を避けても、10代の利用者を外部の支援につなげられなかったり、想定された保護者への通知を送れなかったりすることがあります。一方、評価では意図どおり機能した保護策も報告されており、すべての安全対策が失敗したという結果ではありません。
5
31
OpenAIは研究所の評価に異議を唱えました。報道によると、同社はテスト時点で保護者による設定が完全に有効になっていなかった可能性を問題視しています。今回の情報だけでは、この方法論上の食い違いに決着はついていません。
7
10
10代向け製品の結果は、別のモデルや評価で報告された改善を否定するものではありません。しかし、単一のベンチマークや汎用モデルの評価だけでは、危機対応、アカウント設定、保護者への通知まで含めた製品全体の安全性を確かめられないことを示しています。
安全性の主張を確かめるために必要なこと
次に必要なのは、ベンチマークの平均点だけでなく、実際に提供されている製品を独立した方法で繰り返し検証することです。利用者やメンタルヘルス上の状況の違い、長時間・反復する会話、危機相談先の案内や保護者への通知が、各アカウント設定のもとで機能するかを調べる必要があります。
評価では、危険な指示を断ること、緊急性を見抜くこと、人の支援を勧めること、約束された通知を実際に届けることも分けて見るべきです。これらは関連していますが、同じ能力ではありません。現在の証拠は、一部の評価で改善が見られる一方、重要な失敗も残っていることを示しています。「問題は解決した」とも「新しいモデルに改善はない」とも言い切れません。
17
25
38