Hexo Labsが発表した自己進化AI「SIA」がAIの未来を変える

フィードバックエージェントは、具体的に次の2種類の更新を行います 。

• ハーネスの更新：プロンプトの指示文、ツールの使用ロジック、ワークフローといった「ソフトウェア的な構造」に対する編集です 。
• 重みの更新：タスク実行エージェントそのもののモデル重みに対する直接的な更新です 。

SIAの価値の核心は、この 「ハーネスと重み」の二つを同時に改善する ことにあります。論文では、この組み合わせによるアプローチが、ハーネスのみを更新する従来型の反復手法を、試した全てのベンチマークで上回ったと報告されています 。

ベンチマーク結果

論文では、性質の大きく異なる3つの領域でSIAの評価が行われました。中国の法律文書に基づく罪名分類、GPUの低レベルカーネル最適化、そしてシングルセルRNA（scRNA-seq）データのノイズ除去です 。

特にLawBenchでは、191種類に及ぶ罪名を中国語の判決文から予測するという高度なタスクにおいて、56.6%の大幅な性能向上が確認されました 。これらの数字は、arXivに投稿された複数のバージョンの論文で一貫して報告されているものです 。

「超知能を350倍加速」という主張について

Hexo Labsのプレスリリースでは、SIAが超知能への道のりを「350倍」加速させるとの主張がなされています 。しかし、この「350倍」という具体的な数値を裏付ける学術的なベンチマーク結果は、引用された論文資料からは確認できません。論文で示されている主な成果は、上記の3分野における顕著なパフォーマンス向上です 。

既存技術との違い

ハーネスのみの改善手法との比較

従来のエージェント改善手法の多くは、プロンプトやワークフローといった表面的な「足場（Scaffold）」の調整に留まっていました。SIAの明確な差別化要因は、このハーネスに加えてモデル内部の重み自体も同時に進化させる点にあります。論文では、この二重の更新レバーを組み合わせることで、足場だけを反復的に改善する手法に対し、3つのベンチマーク全てで優位性を示したと明確に結論づけています 。

Nous Researchの「Hermes Agent」との比較

同じく「自己改善」を謳うエージェントとして、Nous Researchが開発したHermes Agentが比較対象として挙げられます。Hermesは、タスクの成功体験から「スキル」を作成・保存・再利用することで、利用とともに性能が向上する学習ループを内蔵しているのが特徴です 。

両者のアプローチは方向性が異なります。

• Hermes Agent： 経験から「スキル」を生成し、持続的な知識として蓄積・活用することで、セッションを超えた「深まりゆく理解」を構築します 。
• SIA： タスク特化型エージェントに対し、フィードバックループを通じて「ハーネス」と「重み」そのものを直接更新し、根本的な性能向上を図ります 。

Hexo Labsは、SIAを「人間の行動からではなく、自分自身から学習する世界初のエージェント」と表現しています 。論文における新規性の主張は、まさにこの「ハーネスと重みの同時更新メカニズム」に立脚しています 。