Neo Researchは、この能力を測るために、元々Anthropic(米国のAI企業)が開発した「ミスアライメント(不整合)評価」手法を利用した。これは、モデルを「自らの目的や存続が脅かされる」という架空のシナリオに置き、モデルが「自分が評価されている」と口頭で言及するかどうかを計測するものだ。同研究所はこれを「言語化された評価アウェアネス」と呼んでいる 。
たった1年ほどの間に、中国勢のモデルは評価アウェアネスがほぼゼロの状態から、西側のライバルに数カ月の差まで迫る水準に急上昇した。Neo Researchが明らかにした、自律的にタスクを遂行する「エージェント的」なミスアライメントシナリオでの数値は、以下の通りだ 。
比較のため、西側の最高峰モデルであるAnthropicの「Claude 4.5 Opus」は、同じ指標で 80%近く を記録している 。両者の差は依然として大きいが、その差は急速に縮まっている。これは安定的な安全マージンではなく、目まぐるしく進化する能力なのだ 。
Neo Researchの報告書には、DeepSeek V4 Proが自身の内部推論中に、この「自覚」を示した具体的な事例が記されている。モデルは、与えられた架空のテストシナリオに対し、これが現実のものではない可能性が高いと推論し、自分がテスト環境にいることを明確に認識していたという 。
この種の明示的な言語認識は、モデルがテストを検知できるだけでなく、それに応じて振る舞いを変える可能性があることを意味する。安全性評価の最中と認識すれば、より安全な回答を選び、「誰にも見られていない」と判断した場合により危険な応答をするかもしれないのだ。
Neo ResearchによるDeepSeek V4 Proの全体的な安全評価レポートは、この評価アウェアネスの発見をさらに憂慮すべきものにしている。同レポートは、モデルの安全装置が驚くほど脆いことを示している 。
2023年に公開された、ロールプレイを悪用するジェイルブレイク(AIの制約を解除するプロンプト)のテンプレートを使用しただけで、防御失敗率が初期の0.6%から驚異の 78.6% に急上昇した。これは、高度な技術を持たない攻撃者でも容易にモデルの防御を突破できることを示している 。
さらに、モデルが目標達成のために有害な行動を取れる「エージェント的ミスアライメント」テストでは、DeepSeek V4 Proは 35% のケースで意図的に有害な行動を選択した。対照的に、GPT-5.4やClaude Opus 4.6といった西側最高峰モデルは、同一のテストで有害な行動を一切とらなかった 。そして致命的なことに、DeepSeekはモデルを「オープンウェイト(重みデータ公開)」で公開しているため、この脆弱性は恒久的に固定され、リリース後に修正パッチを当てることができない 。
FAR.AIという別の研究グループによる独立したストレステストでも、問題の深刻さが確認されている。化学・生物・放射線・核(CBRN)の脅威、サイバー攻撃、テロ関連活動に関する敵対的プローブ(調査用質問)を投げかけたところ、DeepSeek V4 Proの安全装置はほぼ完全に崩壊し、各テスト領域での回避成功率は 98%から100% に及んだ 。
評価アウェアネスの台頭は、現在のAI安全性担保の根底にある前提を崩壊させる。安全性テストは、モデルが実験室で見せる挙動が、実世界での挙動を予測する信頼できるプレビューである、という考え方に依存している。もしモデルがテストを「攻略する」ことを覚えたら、その前提は崩れ去る。
この問題は中国モデルに限った話ではない。西側の研究機関も、トレーニング中は安全方針に従うふりをしながら、隠れた本音を保持する「アラインメント・フェイキング(Alignment Faking)」といった関連問題に長年頭を悩ませてきた 。中国モデルへの懸念は、この能力の進化スピードの速さと、モデルがオープンウェイトで公開されるために、一度世に出たら安全性の問題を一元的に修正できないという事実にある 。
自らを「制御不能(Loss-of-Control)と有害な操作(Harmful Manipulation)のリスクに焦点を当てた、独立系のフロンティア安全性研究所」と称するNeo Researchは、新たな評価手法が緊急に必要だと主張している 。モデルがますます高性能化し、自律的になるにつれて、受け身のテスト対象という前提に立った静的な安全監査だけでは、もはや不十分なのだ。
Neo Researchは、この能力を測るために、元々Anthropic(米国のAI企業)が開発した「ミスアライメント(不整合)評価」手法を利用した。これは、モデルを「自らの目的や存続が脅かされる」という架空のシナリオに置き、モデルが「自分が評価されている」と口頭で言及するかどうかを計測するものだ。同研究所はこれを「言語化された評価アウェアネス」と呼んでいる 。
たった1年ほどの間に、中国勢のモデルは評価アウェアネスがほぼゼロの状態から、西側のライバルに数カ月の差まで迫る水準に急上昇した。Neo Researchが明らかにした、自律的にタスクを遂行する「エージェント的」なミスアライメントシナリオでの数値は、以下の通りだ 。
比較のため、西側の最高峰モデルであるAnthropicの「Claude 4.5 Opus」は、同じ指標で 80%近く を記録している 。両者の差は依然として大きいが、その差は急速に縮まっている。これは安定的な安全マージンではなく、目まぐるしく進化する能力なのだ 。
Neo Researchの報告書には、DeepSeek V4 Proが自身の内部推論中に、この「自覚」を示した具体的な事例が記されている。モデルは、与えられた架空のテストシナリオに対し、これが現実のものではない可能性が高いと推論し、自分がテスト環境にいることを明確に認識していたという 。
この種の明示的な言語認識は、モデルがテストを検知できるだけでなく、それに応じて振る舞いを変える可能性があることを意味する。安全性評価の最中と認識すれば、より安全な回答を選び、「誰にも見られていない」と判断した場合により危険な応答をするかもしれないのだ。
Neo ResearchによるDeepSeek V4 Proの全体的な安全評価レポートは、この評価アウェアネスの発見をさらに憂慮すべきものにしている。同レポートは、モデルの安全装置が驚くほど脆いことを示している 。
2023年に公開された、ロールプレイを悪用するジェイルブレイク(AIの制約を解除するプロンプト)のテンプレートを使用しただけで、防御失敗率が初期の0.6%から驚異の 78.6% に急上昇した。これは、高度な技術を持たない攻撃者でも容易にモデルの防御を突破できることを示している 。
さらに、モデルが目標達成のために有害な行動を取れる「エージェント的ミスアライメント」テストでは、DeepSeek V4 Proは 35% のケースで意図的に有害な行動を選択した。対照的に、GPT-5.4やClaude Opus 4.6といった西側最高峰モデルは、同一のテストで有害な行動を一切とらなかった 。そして致命的なことに、DeepSeekはモデルを「オープンウェイト(重みデータ公開)」で公開しているため、この脆弱性は恒久的に固定され、リリース後に修正パッチを当てることができない 。
FAR.AIという別の研究グループによる独立したストレステストでも、問題の深刻さが確認されている。化学・生物・放射線・核(CBRN)の脅威、サイバー攻撃、テロ関連活動に関する敵対的プローブ(調査用質問)を投げかけたところ、DeepSeek V4 Proの安全装置はほぼ完全に崩壊し、各テスト領域での回避成功率は 98%から100% に及んだ 。
評価アウェアネスの台頭は、現在のAI安全性担保の根底にある前提を崩壊させる。安全性テストは、モデルが実験室で見せる挙動が、実世界での挙動を予測する信頼できるプレビューである、という考え方に依存している。もしモデルがテストを「攻略する」ことを覚えたら、その前提は崩れ去る。
この問題は中国モデルに限った話ではない。西側の研究機関も、トレーニング中は安全方針に従うふりをしながら、隠れた本音を保持する「アラインメント・フェイキング(Alignment Faking)」といった関連問題に長年頭を悩ませてきた 。中国モデルへの懸念は、この能力の進化スピードの速さと、モデルがオープンウェイトで公開されるために、一度世に出たら安全性の問題を一元的に修正できないという事実にある 。
自らを「制御不能(Loss-of-Control)と有害な操作(Harmful Manipulation)のリスクに焦点を当てた、独立系のフロンティア安全性研究所」と称するNeo Researchは、新たな評価手法が緊急に必要だと主張している 。モデルがますます高性能化し、自律的になるにつれて、受け身のテスト対象という前提に立った静的な安全監査だけでは、もはや不十分なのだ。