خطأ برمجي في مكتبة التصور. تسبب خطأ في البرنامج المستخدم من قبل المؤلفين الأصليين في إخفاء الأوراق البحثية ذات درجة الإبداع القصوى من الرسوم البيانية المنشورة. هذه الأوراق كانت لا تزال مشمولة في التحليل الإحصائي الرئيسي، لكن التمثيل البصري - والتركيز غير المعتاد للدرجات القصوى - كان غير مرئي للقراء والمراجعين. اكتشف الفريق البلجيكي هذا عندما حاولوا إعادة إنتاج الدراسة باستخدام البيانات المفتوحة .
بيانات إحالات مفقودة في المنشورات الأقدم. كانت قواعد البيانات الببليوغرافية المستخدمة في دراسة 2023 تحتوي على قوائم مراجع أكثر اكتمالاً للأوراق البحثية الأحدث مقارنة بالأقدم. المنشورات الأقدم، التي تفتقر إلى سجلات المراجع الكاملة، تم تصنيفها بشكل خاطئ بواسطة مؤشر CD كما لو لم يكن لديها أي استشهادات سابقة. ثم منح مؤشر CD هذه الأوراق أعلى درجة إبداع ممكنة. مع تحسن جودة قاعدة البيانات بمرور الوقت، تلقت أوراق أحدث عدداً أقل من هذا الدعم الاصطناعي، مما خلق انطباعاً خاطئاً باتجاه تنازلي .
عندما قام الباحثون البلجيكيون بتصفية الأوراق البحثية ذات بيانات الإحالات المفقودة - وهي خطوة قياسية لضمان الجودة - اختفى 93% من الانخفاض المُبلغ عنه بين عامي 1945 و 2010 في أكبر مجموعة بيانات من دراسة 2023 .
قدم هولست وزملاؤه نقدهم إلى Nature في أكتوبر 2023، بعد شهور فقط من ظهور الورقة الأصلية. لم يُنشر حتى أغسطس 2026 - أي تأخير دام 32 شهراً .
خلال تلك الفترة، تراكم على الدراسة الأصلية أكثر من 1,000 استشهاد إضافي . Nature نفسها نشرت افتتاحية ومقالة إخبارية تعاملتا مع الانخفاض كحقيقة مثبتة
. سياسة المجلة أيضاً منعت النقاد من التحدث إلى الصحافة أثناء مراجعة نقدهم، مما أدى بشكل فعال إلى إسكات جهود التصحيح خلال الفترة التي كانت فيها النتيجة المعيبة الأكثر تأثيراً
.
يسلط هذا التأخير الضوء على ما يسميه الباحثون مشكلة نظامية في النشر العلمي: الحوافز تفضل النتائج الجذابة على التحقق، وتصحيح الأخطاء يحدث ببطء شديد لمواكبة انتشار النتائج المشكوك فيها .
الفريق البلجيكي دقيق في تحديد ما يثبته تحليلهم الجديد. استنتجوا أنه "لا يوجد حالياً دليل مقنع على أن البحث العلمي أقل إبداعاً مما كان عليه في الماضي" بناءً على مقياس مؤشر CD المستخدم في دراسة 2023 . يجادلون بأن منهجية واستنتاجات الورقة الأصلية لا توفر أساساً سليماً لسياسات العلوم
.
كما يحذر الباحثون من أنه حتى الأخطاء الصغيرة في قواعد البيانات الضخمة يمكن أن تقود استنتاجات تؤثر على النقاش العالمي. يكتبون: "نتائجنا بمثابة قصة تحذيرية حول الاعتماد على التحليلات الببليوغرافية واسعة النطاق دون مراقبة دقيقة للجودة" .
المؤلفون الأصليون، بارك، ليهي، وفانك، نشروا رداً مُحكماً في نفس العدد من Nature. يجادلون بأن الانخفاض لا يزال ذا دلالة إحصائية في ظل مواصفات بديلة، بما في ذلك عند استخدام مجموعة البيانات ومعايير الاستبعاد الخاصة بهولست وآخرين. يشيرون إلى نموذج الانحدار الخاص بهم، والذي يقولون إنه ينتج انخفاضات كبيرة وواضحة لكل من الأوراق البحثية وبراءات الاختراع .
من جانبهم، يلاحظ الفريق البلجيكي أنه عند استخدام عامل تصفية أكثر صرامة (الأوراق البحثية التي تحتوي على 10 مراجع على الأقل)، وجدوا في الواقع زيادة طفيفة في الإبداع بمرور الوقت. ومع ذلك، يحذرون من أن مؤشر CD نفسه قد لا يكون قوياً بما يكفي لدعم استنتاجات قاطعة في أي من الاتجاهين .
هذا الجدل ليس أكاديمياً فقط. الادعاء بأن العلم أصبح أقل إبداعاً تم استخدامه لتبرير تغييرات في تمويل الأبحاث، وأنظمة التقييم، وحتى السرد حول ما إذا كنا نعيش في عصر ركود . إذا كانت هذه الادعاءات نتيجة إلى حد كبير لأخطاء في البيانات، فإن السياسات المبنية عليها قد تعالج مشكلة غير موجودة.
على نطاق أوسع، تؤكد هذه القضية هشاشة علوم البيانات الضخمة. دراسة 2023 حللت عشرات الملايين من السجلات بأدوات آلية، لكن خطأ واحداً في مكتبة تصور وعدم اكتمال روتيني في قاعدة البيانات كانا كافيين لإنتاج نتيجة مثيرة للعناوين الرئيسية استغرق تصحيحها ثلاث سنوات - وما زال بعض الباحثين يدافعون عنها.
في الوقت الحالي، يبقى السؤال حول ما إذا كان الإبداع العلمي في تراجع حقيقي دون إجابة. الواضح هو أن الثقة الموضوعة في نتائج 2023 كانت غير مبررة بالأدلة التي احتوتها في الواقع.