反論研究の核心：何が間違っていたのか

反論論文「Dataset artefacts can partially drive the measured decline in disruption」（Holst et al.）は、2026年8月に『Nature』誌に掲載されました。研究チームが特定した問題は主に以下の2点です。

1. 可視化ソフトウェアのバグ

原著者らが使用した可視化用ソフトウェア（プロッティングライブラリ）にバグがあり、破壊的革新性のスコアが最大値（=1.0）だった論文が、公表されたヒストグラムから自動的に除外されていました。このバグは、オープンソースコミュニティによって数カ月のうちに修正されましたが、論文の公表時には気づかれないままでした。

2. 不完全な参考文献メタデータ——最大の誤差要因

それよりもはるかに深刻だったのは、Web of Scienceデータベースにおける古い論文の参考文献メタデータの不完全さです。1945年から2010年までの長期間を対象としたこの研究では、データベース化が進んでいない初期の論文ほど、参考文献リストが空欄（ゼロ参考文献）であるケースが頻繁に見られました。

問題は、原著論文が使用した「CD指標（Consolidated Disruption Index）」が、参考文献がゼロの論文を「最大限に破壊的」と自動的に分類する仕様だったことです。これは、先行研究を一切引用しないという意味で、既存のパラダイムから完全に独立した革新的な研究だとみなされたからです。

しかし実際には、これは「データベースの記録漏れ」というアーティファクトに過ぎませんでした。データベースの品質が年々向上するにつれて、こうした「偽の最大破壊的スコア」は減少し、その結果として「破壊的革新性が低下した」という見かけ上の傾向が生まれたのです。

その影響の大きさ

研究チームがデータベースの誤りを除外したところ、報告されていた減少傾向は大部分が消失しました。最大のデータセットでは、「1945年から2010年の間に報告された減少の93%がデータベース・アーティファクトによるもの」であることが判明しました。

原著者側の反論

同じ日に『Nature』誌に掲載された原著者（Park、Leahey、Funk）の反論では、反論チームが推奨する除外基準を適用しても、統計的かつ実質的に有意な減少が依然として見られると主張しています。原著者らは、「その減少幅は、平均的な論文とノーベル賞受賞者の研究との差に相当する」と述べています。

しかし、反論チームは「少なくとも10の参考文献がある論文に限定すると、破壊的革新性はむしろわずかに増加している」と指摘し、「CD指標は時系列トレンドについて決定的な主張をするには不十分である」と結論づけています。

32カ月に及ぶ掲載遅延——科学の自己修正の構造的問題

この反論研究の最大の注目点の一つは、掲載までに要した時間です。

研究チームは2023年10月に批判論文を『Nature』誌に投稿しましたが、受理されて出版されるまでに実に32カ月もの歳月を要しました。この間、『Nature』誌は原著論文の結論に依拠した社説やニュース記事を引き続き掲載し、原著論文はさらに1,000回以上追加で引用され、少なくとも16の政策文書で参照されました。

主任研究者のVincent Ginis氏は次のように述べています。「ソフトウェアのバグはオープンソースコミュニティによって数カ月で修正されましたが、科学的な修正が公表されるまでに数年かかりました。その間、査読中という理由で私たちはマスコミに対し何も発言することが禁じられていました」。

科学政策への含意

反論論文中で、研究チームは明確に警告しています。「2023年の方法論と結論は、科学政策のための確かな基盤を提供するものではない」。

この事例は、以下の重要な教訓を科学界に突きつけています。

• 書誌計量学的指標（bibliometric indicators）から科学の進歩に関する大掛かりな結論を導き出す際には、データベースの品質に関する問題を厳格に検証する必要があること
• ソフトウェアのバグが数カ月で修正されても、正式な科学論文による修正には3年近くかかるという、科学の自己修正プロセスにおける構造的な非対称性
• その間に誤った結論が公共の議論や政策形成に影響を与え続けるリスク

結論

科学の「破壊的革新の減少」というセンセーショナルな主張は、少なくともその大部分が、データベース・アーティファクトという技術的な問題に由来するものでした。この反論研究は、科学の自己修正の仕組みが時に非常に遅いこと、そして一度メディアで大きく報じられた「魅力的な結論」が、後に誤りと判明してもその影響が長く続く危険性を改めて浮き彫りにしています。

反論研究の核心：何が間違っていたのか

反論論文「Dataset artefacts can partially drive the measured decline in disruption」（Holst et al.）は、2026年8月に『Nature』誌に掲載されました。研究チームが特定した問題は主に以下の2点です。

1. 可視化ソフトウェアのバグ

原著者らが使用した可視化用ソフトウェア（プロッティングライブラリ）にバグがあり、破壊的革新性のスコアが最大値（=1.0）だった論文が、公表されたヒストグラムから自動的に除外されていました。このバグは、オープンソースコミュニティによって数カ月のうちに修正されましたが、論文の公表時には気づかれないままでした。

2. 不完全な参考文献メタデータ——最大の誤差要因

それよりもはるかに深刻だったのは、Web of Scienceデータベースにおける古い論文の参考文献メタデータの不完全さです。1945年から2010年までの長期間を対象としたこの研究では、データベース化が進んでいない初期の論文ほど、参考文献リストが空欄（ゼロ参考文献）であるケースが頻繁に見られました。

問題は、原著論文が使用した「CD指標（Consolidated Disruption Index）」が、参考文献がゼロの論文を「最大限に破壊的」と自動的に分類する仕様だったことです。これは、先行研究を一切引用しないという意味で、既存のパラダイムから完全に独立した革新的な研究だとみなされたからです。

しかし実際には、これは「データベースの記録漏れ」というアーティファクトに過ぎませんでした。データベースの品質が年々向上するにつれて、こうした「偽の最大破壊的スコア」は減少し、その結果として「破壊的革新性が低下した」という見かけ上の傾向が生まれたのです。

その影響の大きさ

研究チームがデータベースの誤りを除外したところ、報告されていた減少傾向は大部分が消失しました。最大のデータセットでは、「1945年から2010年の間に報告された減少の93%がデータベース・アーティファクトによるもの」であることが判明しました。

原著者側の反論

同じ日に『Nature』誌に掲載された原著者（Park、Leahey、Funk）の反論では、反論チームが推奨する除外基準を適用しても、統計的かつ実質的に有意な減少が依然として見られると主張しています。原著者らは、「その減少幅は、平均的な論文とノーベル賞受賞者の研究との差に相当する」と述べています。

しかし、反論チームは「少なくとも10の参考文献がある論文に限定すると、破壊的革新性はむしろわずかに増加している」と指摘し、「CD指標は時系列トレンドについて決定的な主張をするには不十分である」と結論づけています。

32カ月に及ぶ掲載遅延——科学の自己修正の構造的問題

この反論研究の最大の注目点の一つは、掲載までに要した時間です。

研究チームは2023年10月に批判論文を『Nature』誌に投稿しましたが、受理されて出版されるまでに実に32カ月もの歳月を要しました。この間、『Nature』誌は原著論文の結論に依拠した社説やニュース記事を引き続き掲載し、原著論文はさらに1,000回以上追加で引用され、少なくとも16の政策文書で参照されました。

主任研究者のVincent Ginis氏は次のように述べています。「ソフトウェアのバグはオープンソースコミュニティによって数カ月で修正されましたが、科学的な修正が公表されるまでに数年かかりました。その間、査読中という理由で私たちはマスコミに対し何も発言することが禁じられていました」。

科学政策への含意

反論論文中で、研究チームは明確に警告しています。「2023年の方法論と結論は、科学政策のための確かな基盤を提供するものではない」。

この事例は、以下の重要な教訓を科学界に突きつけています。

• 書誌計量学的指標（bibliometric indicators）から科学の進歩に関する大掛かりな結論を導き出す際には、データベースの品質に関する問題を厳格に検証する必要があること
• ソフトウェアのバグが数カ月で修正されても、正式な科学論文による修正には3年近くかかるという、科学の自己修正プロセスにおける構造的な非対称性
• その間に誤った結論が公共の議論や政策形成に影響を与え続けるリスク

結論

科学の「破壊的革新の減少」というセンセーショナルな主張は、少なくともその大部分が、データベース・アーティファクトという技術的な問題に由来するものでした。この反論研究は、科学の自己修正の仕組みが時に非常に遅いこと、そして一度メディアで大きく報じられた「魅力的な結論」が、後に誤りと判明してもその影響が長く続く危険性を改めて浮き彫りにしています。