مشروع قابلية التكرار: علم النفس – تعاون العلم المفتوح

تمثل المعرفة العلمية في جوهرها الإبستمولوجي صرحاً تراكمياً يستند إلى مبدأ أساسي مفاده أن الحقيقة التجريبية لا تكتسب شرعيتها وموثوقيتها إلا من خلال قابليتها للتحقق المنهجي المستقل. لعقود طويلة، استقرت العلوم الإنسانية والسلوكية، وفي مقدمتها علم النفس التجريبي، على افتراض ضمني بأن الأبحاث المنشورة في الدوريات الأكاديمية المحكمة قد خضعت لتمحيص كافٍ يضمن متانة نتائجها وسلامة استدلالاتها الإحصائية. ومع ذلك، كان هذا الافتراض يخفي وراءه تصدعات هيكلية في الممارسات البحثية، حيث تضافرت عوامل انحياز النشر، والضغوط المؤسسية الرامية إلى تحقيق متطلبات البقاء الأكاديمي، والممارسات الإحصائية المشكوك فيها، لتخلق فجوة متسعة بين ما يُنشر بوصفه كشوفاً رائدة وبين ما يمكن إعادة إنتاجه في ظروف تجريبية مماثلة.

في هذا السياق التاريخي الحرج، برز “مشروع قابلية التكرار: علم النفس” (The Reproducibility Project: Psychology) بوصفه واحداً من أجرأ وأشمل المشاريع التعاونية في تاريخ العلوم السلوكية الحديثة. لم يكن المشروع مجرد محاولة عابرة للتحقق من دراسات متفرقة، بل كان فحصاً نقدياً بنيوياً واسع النطاق قاده مركز العلوم المفتوحة (Center for Open Science) بمشاركة مئات الباحثين حول العالم لإعادة اختبار مائة دراسة تجريبية نُشرت في أرقى المجلات العلمية المتخصصة. شكّلت النتائج التي أسفر عنها المشروع في عام 2015 صدمة معرفية مدوية تجاوزت حدود علم النفس لتطال البنية التحتية للمنهجية التجريبية برمتها، ممهدة الطريق لثورة “العلم المفتوح” التي تعيد اليوم صياغة معايير النزاهة والشفافية والتكرار عبر مختلف فروع المعرفة البشرية.

يتناول هذا المقال التحليلي الشامل بالبحث والاستقصاء مسار هذا المشروع الاستثنائي من جذوره الفلسفية والتاريخية إلى تداعياته المنهجية المعاصرة. نستعرض هنا تفاصيل التصميم الإجرائي الدقيق، والبروتوكولات الإحصائية المستخدمة، والنتائج الإمبيريقية الصادمة، والجدل الأكاديمي العنيف الذي دار حول تفسيرها، وصولاً إلى التحولات الهيكلية التي فرضتها حركة العلم المفتوح على المجلات والجامعات والمناهج التعليمية. إن قراءة تجربة مشروع قابلية التكرار تمثل درساً بليغاً في كيفية ممارسة النقد الذاتي المؤسسي بوصفه فضيلة علمية ترتقي بموثوقية العلم وتصون هيبته المعرفية أمام المجتمع الإنساني.

1. المدخل التأسيسي لمشروع قابلية التكرار في علم النفس

1.1 السياق التاريخي ونشأة أزمة التكرار

تعود الجذور العميقة لأزمة التكرار في علم النفس إلى عقود من التراكم التدريجي للمؤشرات المقلقة التي رصدها نقاد المنهج التجريبي دون أن تلقى استجابة حاسمة من التيار الأكاديمي السائد. منذ ستينيات وسبعينيات القرن العشرين، حذر علماء مثل بول ميل وجاكوب كوهين من الضعف البنيوي في القوة الإحصائية لأغلب التجارب النفسية، مشيرين إلى أن اعتماد المجتمع البحثي المفرط على اختبار الفرضية الصفرية وقيم الدلالة الاسمية دون النظر إلى حجم الأثر يمهد لفيض من النتائج الإيجابية الزائفة. ومع مطلع الألفية الجديدة، بدأت تظهر دراسات استقصائية ومسوح منهجية تشير بوضوح إلى عدم اتساق النتائج عند محاولة تطبيق التجارب الكلاسيكية في مختبرات أخرى، مما دفع بعض المنظرين إلى التساؤل عما إذا كانت الأدبيات السلوكية تعبر عن حقائق واقعية أم أنها تعكس إلى حد كبير تشوهات منهجية تراكمت بفعل الزمن.

بلغ التوتر ذروته في عام 2011، وهو العام الذي يعتبره مؤرخو العلم نقطة التحول المفصلية نحو انفجار الأزمة؛ ففي ذلك العام، نشر عالم النفس البارز داريل بيم ورقة بحثية في مجلة الشخصية وعلم النفس الاجتماعي (Journal of Personality and Social Psychology) وهي الدورية الرائدة في التخصص، ادعى فيها وجود أدلة تجريبية قاطعة تدعم ظاهرة “الإدراك المسبق” أو الاستبصار الخارق للطبيعة، معتمداً على أدوات إحصائية ومنهجية تقليدية مقبولة تماماً في التحكيم الأكاديمي. أحدثت هذه الورقة صدمة وجودية في الوسط العلمي: فإما أن تكون الظواهر الخارقة حقيقة علمية مثبتة، أو أن المنهجيات المعيارية المتبعة في بحوث علم النفس التجريبي معيبة بنيوياً وتسمح بإثبات المستحيل عبر التلاعب الإحصائي غير المقصود. تزامن ذلك مع تفجر فضيحة التزوير الأكاديمي الشهيرة لعالم النفس ديدريك ستابل، ونشر ورقة سيمونز ونيلسون وسيمونسون الشهيرة حول “مرونة الباحث الإحصائية”، مما ولّد حاجة ملحة إلى إجراء اختبار تجريبي واسع النطاق لقياس مدى صلابة النتائج المنشورة وفصل الظواهر الحقيقية عن الضجيج المنهجي.

1.2 تأسيس مركز العلوم المفتوحة ومبادرة المشروع

في خضم هذا القلق المعرفي المتصاعد، برز دور عالم النفس الاجتماعي برايان نوسيك من جامعة فرجينيا، الذي كان يرى أن معالجة الأزمة لا تتم عبر التلاوم الفردي أو الجدل النظري العقيم، بل من خلال بناء بنية تحتية جديدة تمكن الباحثين من التعاون وتجعل الشفافية الممارسة الافتراضية للبحث العلمي. في عام 2011، أطلق نوسيك مع جيف سبيز مبادرة تجريبية طموحة، تطورت في مطلع عام 2013 إلى تأسيس رسمي لـ مركز العلوم المفتوحة (Center for Open Science – COS) بوصفه مؤسسة غير ربحية تهدف إلى تحسين موثوقية ونزاهة الأبحاث العلمية عبر دعم ممارسات الشفافية المفتوحة.

شكل إطلاق “مشروع قابلية التكرار: علم النفس” التجربة التأسيسية للمركز؛ إذ صاغ الفريق نموذجاً تعاونياً غير مسبوق تجاوز الحواجز المؤسسية والمنافسات الأكاديمية الضيقة، ليوحد جهود أكثر من 270 باحثاً ومساعد باحث حول العالم عملوا بشكل تطوعي منسق. تمثل الهدف في إرساء أطر ما أطلق عليه “الشفافية الراديكالية” بوصفها حجر الزاوية للمشروع؛ بحيث لا تقتصر الشفافية على نشر النتائج فحسب، بل تمتد لتشمل الإفصاح المسبق عن الفرضيات، وفتح المواد والبرمجيات التجريبية، وتوفير مجموعات البيانات الخام كاملة، وإتاحة سجلات التعديلات الزمنية. كان هذا التحالف الواسع بمثابة إعلان تاريخي عن ولادة حركة يقودها الباحثون أنفسهم لإصلاح منظومتهم المعرفية من الداخل دون انتظار تدخل البيروقراطيات الأكاديمية التقليدية.

1.3 الأهداف الجوهرية والرسالة العلمية للتعاون

تحددت الرسالة الجوهرية لمشروع قابلية التكرار في نقل النقاش الدائر حول أزمة التكرار من مرحلة التخمينات النظرية والاتهامات المتبادلة إلى مرحلة التقييم الكمي التجريبي الدقيق والمبني على أدلة رصينة. لم يكن الهدف تصيد أخطاء الباحثين أو التشكيك في نزاهة الأفراد أو الطعن في موثوقية علم النفس بوصفه حقلاً معرفياً مشروعاً، بل كان السعي منصباً على تقديم تقدير إمبيريقي موضوعي لمعدل قابلية تكرار الأبحاث المنشورة في المجلات النفسية الرائدة ذات التأثير العالي. كان المجتمع العلمي بحاجة ماسة إلى إجابة رقمية موثوقة عن سؤال محدد: إذا أخذنا عينة ممثلة من الدراسات المنشورة وأعدنا تطبيقها بدقة متناهية وبقوة إحصائية كافية، فما هي النسبة المئوية للنتائج التي ستصمد وتظهر مجدداً؟

بالإضافة إلى قياس معدل التكرار، استهدف المشروع تأسيس معيار منهجي مفتوح المصدر لدراسات التكرار المستقبلية، بحيث يُرسي بروتوكولات تفصيلية لكيفية التواصل بين الفرق المكررة والمؤلفين الأصليين، وكيفية توثيق مسارات التحليل الإحصائي، وتحديد المعايير المتعددة للحكم على نجاح التكرار من عدمه. لقد أراد القائمون على المشروع إثبات أن التعاون المفتوح عابر للحدود وقادر على إنجاز دراسات ضخمة تتجاوز طاقة المختبرات الفردية، وتؤسس لثقافة علمية جديدة تحتفي بتصحيح الأخطاء الذاتية بوصفه المؤشر الأسمى على نضج التخصص العلمي وتطوره نحو مزيد من الرصانة واليقين النسبي.

2. منهجية اختيار الدراسات والعينات التجريبية

2.1 معايير حصر المجلات والمقالات المستهدفة

لضمان تمثيل منهجي منضبط والحد من تحيزات الانتقاء الذاتي التي قد تشوب اختيار دراسات دون غيرها، وضع فريق مشروع قابلية التكرار استراتيجية صارمة لحصر مجتمع الدراسة الإحصائي. تم حصر نطاق المعاينة في المقالات المنشورة في عام 2008 داخل ثلاث من أبرز الدوريات العلمية المرموقة في حقل علم النفس والتي تتمتع بأعلى معاملات التأثير وتحظى بثقة واسعة بين الباحثين، وهي: مجلة علم النفس التجريبي: التعلم والذاكرة والإدراك (Journal of Experimental Psychology: Learning, Memory, and Cognition – JEP:LMC) التي تمثل علم النفس المعرفي، ومجلة الشخصية وعلم النفس الاجتماعي (Journal of Personality and Social Psychology – JPSP) التي تمثل علم النفس الاجتماعي، ومجلة العلوم النفسية (Psychological Science – PSCI) بوصفها الدورية العامة الأكثر انتشاراً وتأثيراً في المجال والتي تنشر بحوثاً سريعة وموجزة من كلا التخصصين.

طُبقت استراتيجية انتقاء شبه عشوائية تبدأ من الأعداد الأولى لعام 2008 وتتقدم زمنياً بصورة منظمة؛ بحيث تم فحص المقالات تتابعاً حتى استيفاء القدرة الاستيعابية للفرق البحثية المتطوعة. كما فرض الفريق معايير استبعاد موضوعية ومحددة سلفاً لمنع التحيز التأكيدي، حيث تم استبعاد الدراسات التي تتطلب تقنيات استثنائية يتعذر توفيرها أو تكاليف مادية باهظة كبعض فحوصات الرنين المغناطيسي الوظيفي المتقدمة، والدراسات الطولية التي تمتد لسنوات عديدة، والأبحاث التي تعتمد على نماذج حيوانية معقدة أو عينات إكلينيكية نادرة يتعذر الوصول إليها. فيما عدا ذلك، كانت كل دراسة تجريبية مؤهلة للاختيار طالما خضعت لمعيار التسلسل الزمني في دوريات عام 2008، مما أتاح الحصول على عينة بحثية متنوعة غير خاضعة لانتقاء الباحثين المتحيز لفرضيات مسبقة.

2.2 آليات توزيع الدراسات على الفرق البحثية المستقلة

اعتمد المشروع آلية لوجستية دقيقة لتوزيع الدراسات المختارة على الفرق البحثية المستقلة بما يضمن النزاهة العلمية والكفاءة الإجرائية. فبمجرد تحديد الدراسات المؤهلة، طُلب من الفرق البحثية المنضمة للمشروع اختيار الدراسات التي تتطابق مع خبراتهم المنهجية والمعرفية الدقيقة، حيث أُسندت دراسات الإدراك المعرفي المعقدة إلى مختبرات تمتلك البنية التحتية البرمجية والمعرفية في علم النفس المعرفي، بينما أُسندت تجارب التفاعل البشري والديناميات الجماعية إلى مختبرات متخصصة في علم النفس الاجتماعي والسلوكي، مع اشتراط عدم وجود أي علاقة شخصية أو تضارب مصالح أكاديمي مباشر بين الفريق المكرر ومؤلفي الدراسة الأصلية.

لضمان تجنب أي انحياز مسبق تجاه تأكيد النتائج أو نقضها، التزمت كافة الفرق ببروتوكول موحد يقتضي تقديم “خطة عمل تجريبية” مفصلة تخضع لمراجعة نظراء داخلية صارمة داخل شبكة المشروع قبل البدء الفعلي في جمع أي بيانات من المفحوصين. قامت اللجان المنهجية المركزية للمشروع بمراجعة تفاصيل العينات وحسابات القوة الإحصائية والترجمات اللغوية للاختبارات والمقاييس، للتأكد من مطابقتها للمعايير العلمية الصارمة. لم يكن يُسمح لأي فريق بالشروع في العمل الميداني أو المختبري إلا بعد اعتماد خطة البحث المسبقة وتوثيقها رسمياً، وهو ما وفر حاجزاً وقائياً متيناً ضد الرغبات الذاتية والضغوط غير المعلنة.

2.3 بروتوكولات التواصل مع المؤلفين الأصليين والتصميم التجريبي

شكل التعاون الوثيق مع المؤلفين الأصليين للدراسات ركيزة أساسية في فلسفة مشروع قابلية التكرار، وذلك لدرء الانتقادات الشائعة التي توجه عادة لمحاولات التكرار المستقلة بكونها تفتقر إلى الفهم العميق لبروتوكول التجربة الأصلية. وضع المشروع بروتوكولاً رسمياً يلزم الفرق المكررة بالتواصل المباشر مع المؤلفين الأصليين لطلب المواد التجريبية المستخدمة، وبرمجيات عرض المثيرات، والتعليمات اللفظية الدقيقة المقدمة للمشاركين، وحتى التفاصيل الدقيقة المتعلقة بالبيئة المختبرية وترتيب الأجهزة والإضاءة.

حرصت الفرق على محاكاة السياق التجريبي الأصلي بأعلى قدر ممكن من التطابق الحرفي، متتبعة الخطوات الإجرائية ذاتها، ومستخدمة الاستبيانات والمحفزات الأصلية ذاتها ما لم تكن هناك ضرورة ملحة للتعديل (مثل ترجمة النصوص إلى لغة محلية لمجتمع العينة الجديد). وفي الحالات التي اضطر فيها الباحثون لإجراء أي تعديلات طفيفة لتناسب البيئة المعاصرة أو سياق المختبر الجديد، كانت تلك التعديلات تُعرض مسبقاً على المؤلفين الأصليين للحصول على ملاحظاتهم وموافقتهم المنهجية. تم توثيق جميع هذه المراسلات والملاحظات التوضيحية وإضافتها إلى الملف الأرشيفي المفتوح لكل دراسة، لضمان أعلى مستويات الشفافية وتوثيق مسار العمل المشترك بوضوح تام.

3. البنية المؤسسية وشبكة الباحثين في تعاون العلم المفتوح

3.1 هيكلية الإدارة اللامركزية وتنسيق الحشود العلمية

اعتمد مشروع قابلية التكرار في علم النفس نموذجاً إدارياً مبتكراً جمع بين التنسيق المركزي المرن والإدارة التنفيذية اللامركزية، وهو ما يمثل تطبيقاً فريداً لمفهوم “تعهيد الحشود العلمية” (Scientific Crowdsourcing). تكونت القيادة المركزية من نوسيك ومجموعة صغيرة من المنسقين الإحصائيين واللوجستيين في مركز العلوم المفتوحة، الذين تولوا مهمة وضع المبادئ التوجيهية وتصميم البروتوكولات المعيارية وتطوير استمارات جمع البيانات الموحدة، بينما تركت الحرية التشغيلية للفرق المستقلة لإجراء التجارب داخل بيئاتها المختبرية الخاصة وفق تلك المعايير المتفق عليها سلفاً.

لضمان تجانس المعالجة الإحصائية النهائية وتفادي الأخطاء التنسيقية الناتجة عن تباين البرمجيات، وُحدت المصطلحات وآليات إدخال البيانات والمتغيرات في مصفوفات موحدة أتاحت للفريق الإحصائي المركزي فحص جودة البيانات أولاً بأول. ولعل أهم ما ميز هذا النموذج هو فلسفة الاعتراف الجماعي بالمؤلفين؛ حيث أُلغيت التراتبية الأكاديمية التقليدية وتم تبني نظام تأليف مشترك وُضعت فيه جميع الأسماء المشاركة (أكثر من 270 باحثاً) تحت مظلة اسم موحد هو “تعاون العلم المفتوح” (Open Science Collaboration) مع إدراج قائمة المساهمين وأدوارهم المحددة بالتفصيل، مما ساهم في كسر احتكار الأسماء الفردية الكبرى وعزز روح المسؤولية المشتركة نحو الحقيقة العلمية المجردة.

3.2 التنوع الجغرافي والأكاديمي للفرق المشاركة

عكس النسيج البشري لشبكة الباحثين في المشروع تنوعاً جغرافياً وأكاديمياً لافتاً، أسهم بصورة مباشرة في تقليل التحيزات الثقافية والمؤسسية التي طالما عابت البحوث النفسية التقليدية. ضمت الشبكة باحثين ينتمون إلى عشرات الجامعات والمراكز البحثية المنتشرة عبر عدة قارات، بما في ذلك أمريكا الشمالية، وأوروبا، وآسيا، وأستراليا، مما أتاح اختبار قابلية تكرار الظواهر السلوكية في بيئات ثقافية متنوعة وعدم حصرها في السياق الغربي النمطي الذي نشأت فيه معظم الدراسات الأصلية.

كذلك تميز المشروع بدمجه باحثين ينتمون إلى مراحل مهنية متباينة؛ حيث جلس كبار الأساتذة المخضرمين جنباً إلى جنب مع باحثي ما بعد الدكتوراه وطلبة الدراسات العليا في حلقات نقاشية موحدة لمراجعة الخطط المنهجية وتحليل البيانات. هذا التنوع الهيكلي أضفى حيوية نقدية استثنائية على المشروع؛ إذ تميز الباحثون الشباب بالحماس لممارسات الشفافية المفتوحة والتدقيق البرمجي، بينما قدم الأكاديميون المتمرسون خبراتهم العميقة في إدارة التجارب المعملية المعقدة والتعامل مع الإشكاليات الميدانية، مما حد من الهيمنة الفكرية لأي مدرسة تقليدية محددة على تفسيرات النتائج وتأويلاتها النظرية.

3.3 التوثيق ومشاركة الموارد عبر منصة Open Science Framework

شكلت منصة إطار العمل للعلوم المفتوحة (Open Science Framework – OSF)، التي طورها مركز العلوم المفتوحة، الركيزة التكنولوجية والبنية التحتية الأساسية التي جعلت إدارة هذا المشروع العملاق أمراً ممكناً. تم إنشاء مساحة عمل سحابية مخصصة لكل تجربة من التجارب المائة المستهدفة، حيث أُلزمت الفرق برفع كافة المواد المرتبطة بالدراسة بصورة دورية، بدءاً من بروتوكولات البحث الأولية، ومروراً بالموافقات الأخلاقية، ورموز البرمجة النصية الخاصة بتشغيل التجارب، ووصولاً إلى مجموعات البيانات الخام بمجرد اكتمال جمعها وقبل إخضاعها لأي تنقية إحصائية.

وفرت المنصة خاصية تقنية حاسمة تمثلت في التتبع الزمني الدقيق غير القابل للتلاعب (Version Control) لكافة الملفات والتعديلات؛ فكل تعديل يطرأ على فرضية، أو متغير، أو خطة تحليلية كان يُسجل تلقائياً بطابع زمني مشفر ودائم، مما أتاح للمجتمع العلمي مراجعة المسار الكامل للبحث وفحص التطور الفعلي للتفكير التجريبي لكل فريق. وفور اكتمال المشروع ونشر الورقة الختامية، تحولت كافة هذه المستودعات إلى أرشيف رقمي عام ومجاني ومفتوح بالكامل، مما وفر معياراً تاريخياً غير مسبوق في إتاحة التحقق الخارجي المستقل لكل باحث وطالب علم في العالم يرغب في تدقيق الأرقام أو إعادة تحليل البيانات الخام.

4. البروتوكولات الإحصائية ومعايير تقييم نجاح التكرار

4.1 المعايير المعتمدة لتعريف نجاح إعادة الإنتاج

أدرك القائمون على المشروع منذ البداية أن تقييم “نجاح” التكرار ليس مسألة بسيطة ذات حدين (نعم أو لا)، بل هو مسألة إحصائية ومفاهيمية معقدة تتطلب تبني معايير متعددة ومتكاملة لتجنب الاختزال المضلل. بناءً على ذلك، تم تبني أربعة معايير رئيسية ومتكاملة للحكم على نتائج التكرار مقارنة بالأصل، كان أولها وأكثرها تقليدية هو معيار الدلالة الإحصائية، والذي يقضي بالتحقق مما إذا كانت دراسة التكرار قد حققت قيمة احتمالية ذات دلالة إحصائية عند المستوى المعياري المقبول علمياً ($p < 0.05$) في نفس الاتجاه التجريبي المفترض في الدراسة الأصلية.

ولأن الاعتماد الحصري على القيمة الاحتمالية يعاني من قيود منهجية جوهرية، تبنى المشروع معايير إضافية ركزت على أحجام التأثير (Effect Sizes)؛ حيث تمت مقارنة حجم الأثر الملاحظ في دراسة التكرار بحجم الأثر المسجل في الورقة الأصلية عبر مقاييس معيارية موحدة مثل معامل الارتباط ($r$) أو معامل كوهين ($d$). كما شملت المعايير فحص ما إذا كان حجم الأثر الأصلي يقع ضمن فترة الثقة (Confidence Interval) بنسبة 95% المحسوبة في دراسة التكرار، بالإضافة إلى إجراء تحليلات تلوية مصغرة (Mini Meta-analyses) تدمج رياضياً بين التأثير الأصلي والتأثير المستنسخ لتقدير حجم الأثر المجمع بدقة إحصائية أكبر. أتاح هذا التنوع في المعايير تقديم صورة بانورامية متعددة الأبعاد حول مدى نجاح التكرار دون الوقوع في أسر التقييم الأحادي الجانب.

4.2 حساب القوة الإحصائية وحجم العينة التعويضية

من بين أبرز الانتقادات التاريخية التي طالما واجهت محاولات التكرار الفاشلة هو اتهامها بـ “ضعف القوة الإحصائية” (Statistical Underpowering)، أي استخدام عينات صغيرة الحجم تعجز رياضياً عن رصد التأثير الحقيقي حتى لو كان موجوداً في الواقع. لحسم هذه المعضلة بصورة قاطعة، فرض مشروع قابلية التكرار بروتوكولاً إحصائياً صارماً يلزم كافة الفرق المكررة بإجراء تحليل قوة قبلي (A priori Power Analysis) لتحديد حجم العينة المطلوب بدقة قبل البدء في جمع البيانات.

حُدد المعيار المنهجي للمشروع بضرورة تصميم كل تجربة تكرار بقوة إحصائية لا تقل عن 80%، مع استهداف قوة تصل إلى 90% أو أكثر كلما أمكن ذلك عملياً، لاكتشاف حجم الأثر المبلغ عنه في الدراسة الأصلية عند مستوى دلالة $\alpha = 0.05$. ونتيجة لهذا الالتزام الرياضي، تضاعفت أحجام العينات في دراسات التكرار بشكل منهجي مقارنة بالدراسات الأصلية؛ حيث بلغ متوسط حجم العينة في محاولات التكرار أكثر من ضعف متوسط حجم العينة الأصلي (متوسط العينة الأصلية كان 73 مشاركاً مقابل 178 مشاركاً في دراسات التكرار). ضمن هذا التوسع المنهجي الحاسم أن الفشل في الوصول إلى الدلالة الإحصائية لا يمكن عزوه ببساطة إلى صغر حجم العينة أو نقص القوة الاختبارية للدراسة الجديدة، مما أضفى موثوقية رياضية هائلة على النتائج المستخلصة.

4.3 التقييم الذاتي والموضوعي لنجاح التكرار

حرص التصميم المنهجي للمشروع على الجمع بين المقاييس الإحصائية الموضوعية الصارمة والتقييمات النوعية التفسيرية للباحثين، بهدف فهم السياقات الأعمق للتجارب وما إذا كانت الأرقام المجردة تعكس الحقيقة الميدانية بدقة. بعد الانتهاء من جمع البيانات وإتمام الحسابات الرياضية، طُلب من أعضاء الفرق المكررة تقديم تقييم ذاتي نوعي يجيب عن سؤال صريح: “هل نجحت دراسة التكرار في إعادة إنتاج النتيجة الأصلية في تقديرك المهني المستقل؟”، مع تقديم مبررات تفصيلية لهذا التقييم تدعمها المشاهدات المختبرية والسياقية.

أظهرت النتائج تطابقاً كبيراً في المجمل بين المقاييس الموضوعية الجافة والتقييمات الذاتية للباحثين، غير أنها كشفت أيضاً عن فجوة إدراكية بالغة الأهمية في الحالات الحدية؛ فقد تبين أن الباحثين كانوا في بعض الأحيان أكثر ميلاً لاعتبار التكرار “ناجحاً جزئياً” إذا كان اتجاه التأثير متسقاً حتى وإن لم يصل إلى عتبة الدلالة الإحصائية ($p < 0.05$)، بينما عبر آخرون عن شكوكهم في نجاح التكرار حتى مع ظهور دلالة إحصائية ضعيفة إذا كان حجم الأثر قد انكمش إلى مستويات تقترب من الصفر عملياً. ساعد هذا التمايز بين المستويين الموضوعي والذاتي في تفكيك التعقيد الكامن وراء تفسير البيانات التجريبية وعدم تحويل العلم إلى مجرد تطبيق ميكانيكي أصم للعتبات الرقمية.

5. النتائج الإمبيريقية المنشورة في تقرير ساينس 2015

5.1 الانخفاض الحاد في معدلات الدلالة الإحصائية

في الثامن والعشرين من أغسطس عام 2015، نشرت مجلة ساينس (Science) التقرير الختامي لمشروع قابلية التكرار تحت عنوان: “تقدير قابلية تكرار العلوم النفسية” (Estimating the Reproducibility of Psychological Science). كانت النتائج الإمبيريقية المنشورة بمثابة زلزال معرفي هز الأوساط الأكاديمية العالمية؛ فبينما كانت 97% من الدراسات الأصلية المائة المختارة قد أبلغت عن نتائج إيجابية دالة إحصائياً ($p < 0.05$) عند نشرها في عام 2008، نجحت 36% فقط من محاولات التكرار (35 من أصل 97 دراسة خضعت للاختبار الإحصائي المباشر للدلالة) في تحقيق دلالة إحصائية متطابقة في نفس الاتجاه المتوقع.

وحتى عند الأخذ بمعايير تقييم ذاتية ونوعية أكثر تسامحاً من قبل الباحثين المكررين، لم تتجاوز نسبة التكرار الناجح 39% من إجمالي التجارب. أحدث هذا الفشل في إعادة إنتاج أكثر من 60% من الدراسات المنشورة في أرقى دوريات التخصص صدمة عارمة امتدت إلى وسائل الإعلام العالمية والدوائر السياسية الممولة للبحوث. لقد كشفت الأرقام بوضوح لا لبس فيه أن جزءاً كبيراً من المعرفة النفسية التي كانت تُدرس في الجامعات وتُعتبر حقائق علمية مثبتة لا يمكن الاعتماد عليها عند إخضاعها لاختبار تجريبي صارم ومستقل، مما نقل نقاش “أزمة التكرار” من مجرد شكوك منهجية متفرقة إلى حقيقة إمبيريقية دامغة وموثقة رقمياً.

5.2 انكماش أحجام التأثير والتباين الرياضي

لم تتوقف الصدمة عند حدود فقدان الدلالة الإحصائية، بل امتدت لتشمل التراجع الحاد وغير المتوقع في أحجام التأثير (Effect Sizes) الملاحظة في التجارب المستنسخة. أظهرت الحسابات الرياضية الدقيقة أن متوسط حجم الأثر في دراسات التكرار قد انخفض إلى نصف ما كان عليه في الدراسات الأصلية تقريباً؛ فبينما كان متوسط حجم الأثر المقاس بمعامل الارتباط في الدراسات الأصلية يبلغ ($r = 0.403$)، انكمش هذا المتوسط بصورة حادة في دراسات التكرار ليصل إلى ($r = 0.197$).

كشف هذا الانكماش المنهجي الواسع عن ظاهرة لافتة في فيزياء المعرفة السلوكية؛ حيث تبين أن التأثيرات النفسية الكبرى التي احتفت بها الأدبيات الأصلية بوصفها تغيرات جذرية في السلوك البشري أو الاستجابات العاطفية إما تلاشت تماماً مقتربة من الصفر الرياضي، أو تضاءلت لتصبح تأثيرات بالغة الصغر يصعب رصدها إلا بعينات ضخمة للغاية. أثبتت هذه المعطيات الرقمية وجود تضخيم منهجي للتأثيرات في المنشورات الأكاديمية السابقة، ناتج عن تحيزات اصطفائية وممارسات تجريبية كانت تعمل كمرشحات لا تسمح بظهور إلا القيم القصوى المشوهة، تاركة الوسط الأكاديمي يبني نظرياته على تقديرات مبالغ فيها بشكل جوهري لحقيقة الظواهر في الواقع.

5.3 الفروق النوعية بين التخصصات الفرعية في علم النفس

كشفت التحليلات التفصيلية للبيانات عن تباين نوعي حاد ومثير للاهتمام بين التخصصات الفرعية المختلفة داخل علم النفس؛ حيث أظهرت مجالات الدراسة تمايزاً واضحاً في مدى صمود نتائجها أمام اختبار التكرار. حققت الأبحاث المنشورة في مجال علم النفس المعرفي (Cognitive Psychology) المأخوذة من مجلة JEP:LMC معدل نجاح أعلى بصورة ملحوظة؛ حيث نجحت نحو 50% من محاولات التكرار في تحقيق دلالة إحصائية متطابقة، وبلغ متوسط حجم الأثر المستنسخ مستويات معقولة مقارنة بالأصل، وإن كان قد شهد انخفاضاً بدوره.

في المقابل، شهدت أبحاث علم النفس الاجتماعي (Social Psychology) المأخوذة من مجلة JPSP انهياراً أكثر حدة وقسوة؛ حيث لم تتجاوز نسبة الدراسات التي نجحت في التكرار بدلالة إحصائية 25% فقط، وشهدت أحجام التأثير انكماشاً هائلاً قارب التلاشي في أغلب التجارب. عزا المحللون هذا التباين إلى الطبيعة المنهجية لكل تخصص؛ فالأبحاث المعرفية غالباً ما تدرس عمليات إدراكية وحسية أولية وثابتة نسبياً عبر البشر (مثل الذاكرة الفورية، والانتباه البصري، وزمن الرجع) وتعتمد على تصميمات القياسات المتكررة داخل الأفراد (Within-subjects designs)، في حين تعتمد دراسات علم النفس الاجتماعي على تصميمات بين المجموعات (Between-subjects designs) وتدرس ظواهر شديدة الحساسية للسياقات الثقافية والاجتماعية والتغيرات البيئية الدقيقة، مما جعلها أكثر عرضة للانهيار التجريبي عند محاولة استنساخها خارج مختبرها الأصلي.

6. التشريح المنهجي لأسباب الفشل في إعادة الإنتاج

6.1 الممارسات البحثية المشكوك فيها وانحياز النشر

أفضى التشريح المنهجي لنتائج التقرير إلى وضع اليد على المتهم الأول وراء هذا الانخفاض الدراماتيكي: الممارسات البحثية المشكوك فيها (Questionable Research Practices – QRPs) المقترنة بانحياز النشر البنيوي. لعقود طويلة، عملت المجلات العلمية الرائدة بحسب قاعدة غير معلنة ترفض نشر “النتائج الصفرية” (التي تفشل في إثبات الفرضية)، ولا تحتفي إلا بالنتائج الإيجابية البراقة والجديدة التي تقدم قفزات مفاهيمية غير مألوفة. خلق هذا الضغط المؤسسي المستمر (تحت شعار “انشر أو اندثر”) حوافز مشوهة دفعت الباحثين، بوعي أو بغير وعي، إلى الانخراط في ألاعيب منهجية لتحقيق عتبة الدلالة الإحصائية المنشودة ($p < 0.05$).

برزت ظاهرة “التنقيب في البيانات” أو ما يُعرف بـ (p-hacking) بوصفها ممارسة شائعة تتضمن استبعاد مشاركين بأثر رجعي، أو إسقاط ظروف تجريبية لم تثبت المطلوب، أو إضافة عينات جديدة تباعاً وفحص النتائج بشكل متكرر حتى تظهر الدلالة فيتم إيقاف التجربة، أو استبدال المتغيرات التابعة بمتغيرات بديلة دون توثيق ذلك. كما انتشرت ظاهرة صياغة الفرضيات بعد معرفة النتائج (HARKing: Hypothesizing After Results are Known)، حيث يُعاد كتابة مقدمة البحث ليبدو الاكتشاف العشوائي أو الناتج بالصدفة كأنه نبوءة نظرية كانت متوقعة منذ البداية. أدت هذه الممارسات مجتمعة، إلى جانب “تأثير درج الملفات” (File Drawer Effect) الذي حُبست فيه آلاف الدراسات الصفرية الفاشلة، إلى إغراق الأدبيات بركام من النتائج الإيجابية الزائفة التي بدت متينة ظاهرياً ولكنها تهاوت عند أول اختبار منهجي صارم ومستقل.

6.2 حساسية السياق والتباين الديموغرافي للعينات

إلى جانب التشوهات الإحصائية، أشار علماء النفس الاجتماعي إلى عامل بنيوي بالغ الأهمية يتعلق بـ “حساسية السياق” (Context Sensitivity) والتباين الطبيعي في العينات البشرية؛ فالإنسان ليس جزيئاً كيميائياً ثابتاً في تفاعلاته المعملية، بل هو كائن تاريخي وثقافي شديد التأثر بالمتغيرات المحيطة. أُجريت الدراسات الأصلية المستهدفة في عام 2008، بينما نُفذت دراسات التكرار بين عامي 2012 و2015؛ وخلال هذه السنوات، شهدت المجتمعات الغربية تحولات سياسية واقتصادية وتكنولوجية كبرى (مثل انتشار الهواتف الذكية وتغير المشهد الإعلامي والحركات الاجتماعية)، مما قد يجعل استجابة المفحوصين للمثيرات النفسية مختلفة جوهرياً عما كانت عليه قبل ثماني سنوات.

علاوة على ذلك، برزت معضلة التباين الديموغرافي للعينات الطلابية؛ فرغم أن الدراسات الأصلية والتكرارية اعتمدت على طلاب الجامعات كمشاركين (وهي عينات تعاني أصلاً من مشكلة حصرها في مجتمعات WEIRD: الغربية، المتعلمة، الصناعية، الثرية، والديمقراطية)، إلا أن ثقافة الطلاب في جامعة حكومية أمريكية كبرى قد تختلف عن ثقافة نظرائهم في جامعة أوروبية أو خاصة. يفتح هذا الواقع نقاشاً فلسفياً معقداً حول الحدود الفاصلة بين “فشل التكرار” بوصفه خطأً منهجياً، وبين “محدودية التعميم” بوصفها خاصية متأصلة في الظاهرة النفسية؛ فالتأثير قد يكون حقيقياً وصحيحاً في سياقه البيئي والتاريخي المحدد، ولكنه هش وغير قابل للنقل والتعميم عبر الزمان والمكان، مما يفرض على الباحثين التواضع في صياغة القوانين السلوكية العامة وتحديد شروط انطباقها بدقة بالغة.

6.3 الخبرة الميدانية والمعارف الضمنية في التنفيذ

ثمة بعد إجرائي دقيق آخر كشف عنه التحليل المنهجي يتعلق بما يُعرف في فلسفة العلم بـ “المعرفة الضمنية” (Tacit Knowledge) والمهارات الميدانية غير الموثقة في تقارير البحوث المكتوبة. فالتجربة النفسية ليست مجرد معادلة رياضية يمكن تنفيذها عبر الضغط على أزرار محددة، بل هي في كثير من الأحيان تفاعل بشري وفني شديد الحساسية، يعتمد على نبرة صوت الفاحص، ولغة جسده، وكيفية توجيه المفحوص، وتوقيت التعليمات بدقة أجزاء من الثانية، وطريقة إدارة البيئة المختبرية لتوليد الحالة الانفعالية المستهدفة دون إثارة ارتياب المشاركين.

غالباً ما تفتقر الأوراق البحثية المنشورة إلى المساحة الكافية لتوثيق هذه المهارات الدقيقة والحركات التفاعلية التي قد يمتلكها المجرب الأصلي دون وعي كامل بتأثيرها الحاسم على مسار التجربة. وعندما يأتي فريق مكرر مستقل، مهما بلغت كفاءته العلمية، فقد يفشل في استحضار تلك الديناميكية النفسية غير المكتوبة بدقة، مما يولد فروقاً إجرائية دقيقة بين الأصل والتكرار تكفي لإفساد التأثير أو محوه بالكامل. يسلط هذا العامل الضوء على معضلة جوهرية في كتابة التقارير العلمية؛ إذ أثبت مشروع التكرار أن الأسلوب التقليدي في كتابة قسم “المنهجية” (Method) في الدوريات العلمية يعاني من نقص فاضح في الشرح الكافي، مما يستوجب توثيقاً بالفيديو والبرمجيات التفاعلية الكاملة لتمكين الباحثين المستقلين من محاكاة التجارب بصورة صادقة وموثوقة.

7. الجدل الأكاديمي والردود النقدية المتبادلة

7.1 انتقادات الباحثين الأصليين لبروتوكولات المشروع

أثار تقرير ساينس لعام 2015 عاصفة هوجاء من ردود الفعل الدفاعية والانتقادات المنهجية اللاذعة من قبل كبار علماء النفس الذين تهاوت دراساتهم أمام اختبار التكرار. قاد هذه الحملة المضادة فريق من العلماء البارزين، كان على رأسهم أستاذ علم النفس بجامعة هارفارد دانيال جيلبرت مع زملائه غاري كينغ وستيفن كولير، الذين نشروا تعليقاً نقدياً موسعاً في مجلة ساينس عام 2016 يشكك في الصلاحية الإحصائية والمنهجية لمشروع قابلية التكرار ذاته.

تركزت حجج جيلبرت وفريقه على نقطتين رئيسيتين: أولاهما الادعاء بوجود أخطاء فادحة في تصميم ومضاهاة بعض دراسات التكرار للظروف البيئية الأصلية؛ ومثلوا لذلك بمحاولات تكرار تجارب تطلبت استحضار مشاعر سياقية محددة لدى المشاركين ولكنها طُبقت في بيئات ثقافية ومادية مختلفة تماماً أفسدت المعنى النفسي للتجربة (مثل تطبيق استبيان حول السياسة الأمريكية على طلاب أوروبيين). والنقطة الثانية والأهم كانت حجة إحصائية تفيد بأن تباين الأخطاء العشوائية الطبيعية (Random Measurement Error) واختلاف العينات كفيل بإنتاج معدل فشل تكرار يقارب ما رصده المشروع حتى لو كانت جميع الدراسات الأصلية صحيحة بنسبة 100%؛ وبناءً على نماذجهم الرياضية البديلة، زعم جيلبرت وفريقه أن معدل التكرار الحقيقي لا يمثل أزمة على الإطلاق، بل يقع ضمن الحدود الطبيعية المتوقعة لأي علم تجريبي يتعامل مع ظواهر معقدة.

7.2 ردود مجتمع العلم المفتوح ودفاع نوسيك المنهجي

لم يتأخر رد مجتمع العلم المفتوح؛ حيث قاد برايان نوسيك وفريق الإحصائيين المركزي في المشروع رداً علمياً مفصلاً فنّدوا فيه مزاعم فريق جيلبرت نقطة بنقطة، ونُشر في نفس العدد من مجلة ساينس. أثبت نوسيك وزملاؤه أن النموذج الإحصائي البديل الذي اقترحه جيلبرت استند إلى افتراضات رياضية مفرطة في التفاؤل وغير واقعية، تتجاهل التحيز التراكمي وتتعامل مع التباينات كما لو كانت موزعة بصورة مثالية مستقلة عن ضغوط النشر السابقة.

أكد فريق المشروع عبر تحليلات إعادة فحص شاملة أن الخطأ العشوائي وتباين العينات لا يمكنهما رياضياً تفسير التراجع النصفي الهائل في أحجام التأثير (من $r = 0.40$ إلى $r = 0.20$)، ولا الهبوط الحاد في معدلات الدلالة من 97% إلى 36%؛ إذ لو كان التباين عشوائياً بحتاً، لرأينا دراسات تكرار تظهر أحجام تأثير أكبر من الأصلية بنسب مساوية لتلك التي تظهر تأثيراً أصغر، وهو ما لم يحدث قط؛ فالانخفاض كان شاملاً وأحادي الاتجاه بصورة تشهد على وجود تضخيم قبلي لا يقبل الشك. كما دافع نوسيك عن النزاهة الإجرائية للمشروع، مذكراً بأن المؤلفين الأصليين، بمن فيهم المنتقدون أنفسهم، كانوا قد وافقوا مسبقاً على بروتوكولات التكرار قبل جمع البيانات، مؤكداً أن التكرار يمثل ممارسة تصحيحية موضوعية تهدف لتنقية المعرفة وليست هجوماً شخصياً أو محاكمة أخلاقية للأفراد، وأن التستر خلف الأعذار السياقية غير الموثقة يضر بمصداقية علم النفس أكثر مما ينفعه.

7.3 إعادة تقييم معنى قابلية التكرار في الفلسفة العلمية

أعاد الجدل المنهجي المستعر حول المشروع فتح ملفات كبرى في فلسفة العلم وإبستمولوجيا المعرفة التجريبية، ولا سيما ما يتعلق بإعادة تعريف مفهوم “قابلية التكرار” نفسه. أدرك المجتمع العلمي ضرورة التمييز الصارم بين مفهومين أساسيين كانا يخلطان في الأدبيات: “التكرار المباشر أو الدقيق” (Direct / Exact Replication)، والذي يعني إعادة تنفيذ التجربة بنفس الإجراءات والمواد والمقاييس المستقلة والتابعة حرفياً للتأكد من موثوقية الرصد؛ وبين “التكرار المفاهيمي” (Conceptual Replication)، والذي يتضمن اختبار الفرضية النظرية ذاتها ولكن باستخدام وسائل ومقاييس وسياقات تجريبية مختلفة كلياً لاختبار مدى عمومية المفهوم.

أظهرت المناقشات أن علم النفس قد أفرط طوال عقود في الاعتماد على التكرار المفاهيمي على حساب التكرار المباشر، مما خلق صروحاً نظرية هشة مبنية على أوهام؛ فإذا نجح التكرار المفاهيمي اعتبر دليلاً على صحة النظرية، وإذا فشل نُحي جانباً واعتبر خللاً في القياس الجديد دون المساس بالفرضية الأصلية. قادت هذه الرؤية الفلسفية إلى إعادة إحياء مبدأ “قابلية التكذيب” (Falsifiability) لكارل بوبر، مع التأكيد على أن العلم لا يمكن أن يتقدم في بيئة تجريبية لا تسمح لنظرياتها بأن تُهدم أو تخضع للمساءلة الراديكالية عبر التكرار المباشر. تحولت النظرة إلى التكرار من كونه عملاً بيروقراطياً مملاً أو استثنائياً إلى اعتباره الممارسة المعيارية اليومية التي لا يمكن بدونها تمييز الحقيقة الموضوعية عن مجرد الصدف الإحصائية والانطباعات الشخصية للباحثين.

8. التحولات المؤسسية في سياسات النشر والمجلات العلمية

8.1 اعتماد التقارير المسجلة مسبقاً لمكافحة التحيز

كان من أعظم الثمار العملية لمشروع قابلية التكرار هو الإدراك الجذري بأن الوعظ الأخلاقي للباحثين لن يجدي نفعاً ما لم يتم إصلاح منظومة الحوافز في المجلات العلمية؛ ومن هنا ولدت حركة واسعة لتبني نموذج نشر ثوري عُرف بـ “التقارير المسجلة مسبقاً” (Registered Reports). في هذا النموذج المبتكر، تنقسم عملية مراجعة الأقران والتحكيم الأكاديمي إلى مرحلتين منفصلتين زمنياً بطريقة تقضي تماماً على انحياز النشر والتلاعب الإحصائي.

في المرحلة الأولى، يرسل الباحثون إلى المجلة خطة البحث المكتملة المتضمنة للمقدمة النظرية، والفرضيات المحددة، والمنهجية التجريبية التفصيلية، وخطة التحليل الإحصائي الرقمي الدقيق، وحسابات القوة القبلية، وذلك قبل جمع أي بيانات ميدانية. تخضع هذه الخطة لتحكيم نقدي يركز على أهمية السؤال العلمي ورصانة المنهجية المقترحة؛ وفي حال قبولها، تمنح المجلة الباحثين “قبولاً مبدئياً ملزماً” (In-principle Acceptance) بنشر الورقة بغض النظر عما ستسفر عنه النتائج النهائية من تأكيد للفرضية أو إثبات للعدم الإحصائي. وفي المرحلة الثانية، بعد جمع البيانات وتحليلها بدقة وفق الخطة المعتمدة، تركز المراجعة فقط على التأكد من الالتزام الحرفي بالبروتوكول المسجل مسبقاً. أحدث هذا الابتكار تحولاً إبستمولوجياً هائلاً فصل تقييم جودة البحث العلمي عن إثارة النتائج، وأعاد للنتائج الصفرية قيمتها المعرفية الكاملة في الأدبيات السلوكية.

8.2 معايير الشفافية وفتح البيانات والمواد التجريبية

قادت نتائج التقرير إلى تحول دراماتيكي في سياسات المجلات الأكاديمية العالمية الكبرى نحو فرض معايير صارمة وواضحة للشفافية والانفتاح المنهجي. تعاونت المجلات والجمعيات العلمية برعاية مركز العلوم المفتوحة لصياغة وتطبيق إرشادات موحدة عُرفت بـ “إرشادات تعزيز الشفافية والانفتاح” (Transparency and Openness Promotion – TOP Guidelines)، والتي تبنتها آلاف المجلات عبر تخصصات علم النفس والعلوم السلوكية والطبية.

بموجب هذه المعايير الحديثة، تخلت الدوريات المرموقة عن النموذج القديم الذي كان يسمح للباحثين باحتكار بياناتهم أو الاكتفاء بعبارة “البيانات متاحة عند الطلب المعقول” (وهي العبارة التي أثبتت الدراسات أنها كانت تعني عملياً حجب البيانات في أكثر من 70% من الحالات). أصبحت المجلات تُلزم المؤلفين بإيداع ملفات البيانات الخام المشفرة، وأكواد التحليل الإحصائي الكاملة (مثل سكريبتات R أو Python أو SPSS)، والمواد والمثيرات التجريبية الأصلية في مستودعات عامة مفتوحة ومفهرسة بمعرفات كائنات رقمية دائمة (DOIs) تضمن وصول الجميع إليها مجاناً. أتاح هذا التدفق المفتوح للموارد للمحكمين والباحثين المستقلين التحقق المباشر من الحسابات الإحصائية، وإعادة إنتاج الجداول والرسوم البيانية بدقة قبل الطباعة، مما شكل حصناً منيعاً ضد الأخطاء الحسابية وتدليس النتائج.

8.3 شارات العلم المفتوح كحوافز رمزية وتأثيرها

في إطار سعي حركة العلم المفتوح لإعادة هندسة الحوافز الرمزية والنفسية للمجتمع البحثي، ابتكر مركز العلوم المفتوحة بالتعاون مع كبرى المجلات النفسية مبادرة ذكية عُرفت بنظام “شارات العلم المفتوح” (Open Science Badges). تُمنح هذه الشارات البصرية الرقمية لتوضع بوضوح على الصفحة الأولى للأبحاث المنشورة في حال استيفائها لواحد أو أكثر من معايير الشفافية الثلاثة المعترف بها: شارة “البيانات المفتوحة” (Open Data)، وشارة “المواد المفتوحة” (Open Materials)، وشارة “التسجيل المسبق للفرضيات والتحليلات” (Preregistered).

رغم بساطة الفكرة ومظهرها الرمزي المجرد، أثبتت الدراسات التقييمية اللاحقة أن هذه الشارات أحدثت تأثيراً سلوكياً مذهلاً فاق كل التوقعات؛ ففي مجلة العلوم النفسية (Psychological Science)، وهي من أوائل الدوريات التي طبقت النظام في عام 2014، قفزت نسبة الأبحاث المنشورة التي تشارك بياناتها الخام طواعية من أقل من 3% إلى أكثر من 70% في غضون عامين فقط من اعتماد الشارات. تحولت هذه الأيقونات الصغيرة إلى رموز للمكانة الأكاديمية والموثوقية والنزاهة، مما دفع الباحثين إلى التنافس الإيجابي في تحسين ممارساتهم المنهجية للحصول عليها، وأرسى نموذجاً عملياً يثبت أن تعديل بيئة الحوافز الأكاديمية قادر على إحداث تحولات ثقافية كبرى تفوق ما تحدثه القوانين والقرارات الفوقية الصارمة.

9. إصلاح الممارسات الإحصائية والمنهجية في الأبحاث النفسية

9.1 إعادة النظر في دلالة القيمة الاحتمالية p-value

فجرت نتائج مشروع التكرار أزمة ثقة واسعة في النموذج الإحصائي الكلاسيكي الذي هيمن على الأبحاث التجريبية طوال القرن العشرين، والمتمثل في اختبار الفرضية الصفرية القائم على عتبة القيمة الاحتمالية التقليدية المشهورة ($p < 0.05$). اتضح للمجتمع الأكاديمي أن هذه العتبة، التي اقترحها رونالد فيشر كمعيار استرشادي غير ملزم، تحولت مع مرور الزمن إلى طوطم منهجي جامد وصنم رقمي يفصل تعسفياً بين ما يُعتبر "حقيقة علمية جديرة بالنشر" وما يُعد "عدماً لا قيمة له"، مما جعلها الهدف الأسهل للاختراق عبر أساليب القرصنة الإحصائية وممارسات التدليس غير المتعمدة.

تصاعدت الدعوات الإصلاحية من كبار الإحصائيين؛ حيث نشرت مجموعة تضم 72 عالماً بارزاً ورقة بيان مرجعية في عام 2018 تطالب رسمياً بخفض عتبة الدلالة الإحصائية للإعلان عن اكتشافات علمية جديدة من ($p < 0.05$) إلى ($p < 0.005$)، مع الإبقاء على النطاق الواقع بينهما تحت تصنيف “دليل إيحائي فقط” (Suggestive Evidence). استند هذا المطلب إلى برهان رياضي يوضح أن قيمة$p = 0.04$، التي كانت تعتبر انتصاراً تجريبياً حاسماً، لا توفر في واقع الأمر سوى أدلة بالغة الضعف تدعم الفرضية البديلة بمعدل احتمالي خطأ يقارب 30% في كثير من السياقات. كما حذرت الجمعية الإحصائية الأمريكية (ASA) في بيانات تاريخية متتابعة من الاعتماد الأحادي والميكانيكي على القيمة الاحتمالية لتفسير الظواهر، داعية إلى استبدالها بتقديرات فترات الثقة وحسابات قوة الاستدلال كبدائل أكثر موثوقية وأماناً لبناء الاستنتاجات العلمية.

9.2 التحول نحو الإحصاء البايزي وتفسير الأدلة المتراكمة

في سياق البحث عن بدائل رياضية أكثر قوة ومنطقية لتجاوز عيوب المدرسة التكرارية الكلاسيكية، شهد حقل علم النفس والعلوم السلوكية موجة تحول كبرى نحو تبني “الإحصاء البايزي” (Bayesian Statistics). يقدم المنهج البايزي إطاراً فلسفياً ورياضياً بديلاً يتجاوز الثنائية القاصرة لاختبار الفرضية الصفرية، من خلال التركيز على قياس “الاحتمالية اللاحقة” لصحة النظريات في ضوء البيانات الجديدة، واستخدام “معامل بايز” (Bayes Factor – $BF$) كأداة كمية دقيقة لتحديد درجة رجحان البيانات لصالح الفرضية البديلة مقارنة بالفرضية الصفرية.

تكمن القوة الاستثنائية للنموذج البايزي، التي برزت بوضوح أثناء مراجعات مشروع التكرار، في قدرته على توفير أدلة إيجابية لدعم الفرضية الصفرية ذاتها، وهو ما يعجز عنه تماماً الإحصاء التقليدي؛ فباستخدام معامل بايز، يستطيع الباحث القول بثقة رياضية إن البيانات تؤيد “غياب التأثير” بشكل قاطع، وليس مجرد الفشل في رصد الدلالة. كما يتيح التحليل البايزي للعلماء تحديث معتقداتهم ونماذجهم النظرية تدريجياً وتراكمياً مع كل تجربة جديدة تضاف إلى المعرفة الإنسانية، دون الحاجة للبدء من نقطة الصفر أو الوقوع في فخ رفض الفرضية الصفرية الناتج اصطناعياً عن تضخم العينات، مما جعل الإحصاء البايزي لغة التفكير العلمي الحديث لحركة العلم المفتوح.

9.3 تعزيز التركيز على حجم الأثر والأهمية الإكلينيكية

فرضت الأزمة مراجعة نقدية عميقة للخلط المنهجي الشائع بين “الدلالة الإحصائية المجردة” (Statistical Significance) و”الأهمية العملية أو الإكلينيكية” (Practical / Clinical Importance). أظهرت بيانات دراسات التكرار أن دراسة ما قد تحقق دلالة إحصائية كاملة عند ($p < 0.001$) بفضل استخدام عينات بشرية بالغة الضخامة، في حين أن حجم الأثر الفعلي الملاحظ لا يتجاوز تحسناً طفيفاً لا يكاد يُميز في سلوك الفرد أو صحته النفسية في العالم الواقعي.

استجابة لهذا الوعي المتجدد، ألزمت المجلات النفسية المحكمة باحثيها بالإبلاغ الروتيني والإلزامي عن أحجام التأثير القياسية (مثل Cohen’s d، وHedges’ g، و$\eta^2$) مقترنة بفترات ثقتها بنسبة 95%، وعدم الاكتفاء بالقيم الاحتمالية. انصب الاهتمام المنهجي على تدريب الباحثين على تفسير ما إذا كان حجم الأثر كافياً لإحداث فارق ذي معنى في حياة الأفراد أو في السياسات الاجتماعية والصحية؛ فتحول علم النفس من السعي وراء إثبات وجود أثر أياً كانت ضآلته، إلى تقييم متانة وقوة هذا الأثر في السياقات الواقعية المعقدة خارج جدران المختبرات المكيفة، مما أعاد توجيه البوصلة العلمية نحو دراسة الظواهر ذات القيمة المجتمعية الحقيقية.

10. التأثيرات التربوية وتحديث مناهج التدريب الأكاديمي

10.1 إعادة هيكلة تدريس الإحصاء وتصميم التجارب

امتدت أصداء مشروع قابلية التكرار عميقاً لتصل إلى قاعات المحاضرات وفصول الدراسات العليا في كبريات الجامعات العالمية، حيث فرضت إعادة هيكلة شاملة لمناهج تدريس الإحصاء السلوكي وتصميم التجارب النفسية. تخلت الجامعات الرائدة عن النموذج التدريسي التلقيني القديم الذي كان يركز على تحفيظ الطلاب خطوات ميكانيكية لإجراء اختبارات “ت” (t-tests) وتحليلات التباين (ANOVA) للحصول على قيمة ($p < 0.05$) بأي ثمن، وبدأت في دمج مبادئ وفلسفة العلم المفتوح كعنصر تكويني تأسيسي في برامج البكالوريوس والدراسات العليا على حد سواء.

باتت المقررات الحديثة تركز بشكل مكثف على توعية الطلاب بمخاطر التحيزات المعرفية الشائعة في البحث العلمي، وكيفية مقاومة إغراءات القرصنة الإحصائية والتنقيب غير المشروع في البيانات، مع إبراز الأضرار الكارثية التي تلحقها هذه الممارسات بالمعرفة الإنسانية. كما شمل التحديث الأكاديمي تدريباً مكثفاً للباحثين الجدد على مهارات التوثيق البرمجي القابل لإعادة الإنتاج (Reproducible Coding)، من خلال تعليم لغات برمجة مفتوحة المصدر مثل R وأدوات النشر التفاعلي مثل RMarkdown وJupyter Notebooks، مما يضمن تخرج أجيال جديدة من علماء النفس يمتلكون المهارات التقنية والفلسفية اللازمة لممارسة البحث العلمي بشفافية وانفتاح مطلق منذ اليوم الأول لمسيرتهم الأكاديمية.

10.2 إدماج مشاريع التكرار في الأطروحات والواجبات الأكاديمية

شهدت المنظومة التربوية تحولاً تطبيقياً بارزاً تجسد في إدماج مشاريع التكرار المباشر كجزء أساسي من الأطروحات والواجبات الأكاديمية لطلاب الماجستير والدكتوراه، بعد أن كانت الجامعات ترفض تاريخياً قبول دراسات التكرار بوصفها مشاريع تفتقر إلى “الأصالة والجدة”. بادرت كليات علم النفس بتكليف طلابها باختيار دراسات كلاسيكية أو حديثة منشورة وتطبيقها مجدداً في المختبرات التعليمية، مستفيدين من الدعم المنهجي الذي توفره شبكات العلم المفتوح العالمية.

حقق هذا النموذج التربوي فوائد مزدوجة مذهلة؛ فمن ناحية تعليمية، تعلم الطلاب التفكير النقدي وتفكيك المنهجيات المعقدة والتعامل المباشر مع صعوبات التطبيق الميداني وتوثيق البيانات بدقة متناهية، بدلاً من الاكتفاء بالقراءة النظرية السلبية. ومن ناحية علمية عامة، أسهمت البيانات التي جمعها الطلاب في رفد قواعد بيانات التكرار واسعة النطاق بمئات المحاولات المستقلة ذات القوة الإحصائية العالية. والأهم من ذلك، ساعد هذا النهج في كسر حاجز الخوف النفسي المتوارث من “النتائج الصفرية” في نفوس الباحثين الشباب، مغذياً في وجدانهم أن الفشل في تكرار نتيجة سابقة ليس فشلاً شخصياً أو عيباً أكاديمياً، بل هو خدمة جليلة ومساهمة علمية حيوية لتصحيح مسار العلم وبناء المعرفة الرصينة.

10.3 تعزيز ثقافة التواضع الفكري والشفافية في المجتمع العلمي

لعل أعمق الآثار التربوية والمعنوية التي أفرزها مشروع قابلية التكرار يتمثل في التأسيس لثقافة أكاديمية جديدة تسودها قيم “التواضع الفكري” (Intellectual Humility) والشفافية الراديكالية بين العلماء. لعقود خلت، سادت الأوساط البحثية صورة نمطية زائفة تُصور العالم بوصفه عبقرياً معصوماً لا يخطئ، يقدم كشوفاً سحرية ونتائج حاسمة لا يتطرق إليها الشك، وهو ما ولّد خوفاً مرضياً من الاعتراف بالخطأ ودفع الباحثين للدفاع المستميت عن فرضياتهم المتهاوية حفاظاً على سمعتهم المهنية.

أثبت المشروع الجماعي أن الخطأ التجريبي والتعثر الإحصائي هما الوجه الطبيعي للبحث العلمي الصادق، وأن الشجاعة الأكاديمية لا تكمن في الزعم بالوصول إلى اليقين المطلق، بل في امتلاك الجرأة على الإفصاح عن القيود ونقاط الضعف المنهجية ومشاركة البيانات التي قد تنقض الافتراضات الشخصية للباحث. بدأت الأوساط الأكاديمية تشهد احتفاءً غير مسبوق بالاعتراف بالخطأ؛ حيث بادر علماء كبار بنشر أوراق تصحيحية أو سحب مقالاتهم طواعية عند اكتشافهم عدم قابلية تكرارها، مما ساهم في تغيير معايير التقييم الأكاديمي لتكافئ جودة المسار البحثي وأمانته بدلاً من الانبهار السطحي ببريق النتائج المثيرة ولكن الواهية.

11. المشاريع الشقيقة والامتدادات متعددة التخصصات

11.1 مبادرات التكرار واسعة النطاق (Many Labs)

ألهم نجاح نموذج العمل المشترك في مشروع قابلية التكرار إطلاق سلسلة من المبادرات العملاقة التابعة لمركز العلوم المفتوحة عُرفت باسم “مشاريع المختبرات المتعددة” (Many Labs Projects)، والتي استهدفت نقل التكرار التجريبي إلى مستوى غير مسبوق من الدقة والقوة الاستدلالية. بدلاً من قيام مختبر واحد بمحاولة تكرار دراسة واحدة كما كان الحال في المشروع التأسيسي لعام 2015، يقوم نموذج (Many Labs) بحشد عشرات المختبرات المستقلة (تتراوح بين 30 إلى 60 مختبراً حول العالم) لإجراء بروتوكول تجريبي موحد لدراسة أو نظرية نفسية بعينها في آن واحد وبشكل متزامن ومتطابق تماماً.

أتاحت هذه المنهجية الجبارة حسم النزاعات النظرية العميقة بقوة إحصائية هائلة؛ فبفضل مشاركة آلاف المفحوصين عبر العالم، تمكن الباحثون من حساب حجم الأثر الكلي للنظريات بدقة ميكروسكوبية، وقياس “التباين بين المختبرات” (Between-site Heterogeneity) بصورة إمبيريقية حاسمة. شملت هذه المبادرات فحص ظواهر سلوكية شهيرة مثل “استنزاف الأنا” (Ego Depletion)، و”فرضية التغذية الراجعة لتعابير الوجه” (Facial Feedback Hypothesis)، وأظهرت البيانات المجمعة من عشرات المختبرات المستقلة تلاشي الكثير من هذه التأثيرات إلى حدود الصفر، مما أسدل الستار بشكل علمي حاسم على أساطير ونظريات كلاسيكية ظلت مهيمنة على الكتب المدرسية لقرابة نصف قرن دون سند تجريبي قوي.

11.2 انتقال موجة التكرار إلى الاقتصاد والعلوم الطبية الحيوية

لم تلبث موجة التحقق المنهجي العاتية أن كَسرت حدود علم النفس لتنتقل بجرأة إلى مختلف التخصصات الإمبيريقية الأخرى، كاشفة أن “أزمة التكرار” ليست عيباً خاصاً بعلوم السلوك، بل هي معضلة هيكلية تشترك فيها العلوم التجريبية برمتها. في عام 2016، أطلق تحالف تعاوني مشروعاً موازياً تحت عنوان “مشروع قابلية التكرار: الاقتصاد التجريبي” (Experimental Economics)، نُشرت نتائجه في مجلة ساينس، مسجلاً معدل تكرار أعلى نسبياً بلغ 61%، غير أنه وثق بدوره انكماشاً واضحاً في أحجام التأثير في الدراسات الاقتصادية التي تعاملت مع سلوكيات اتخاذ القرار والمخاطرة المالية.

إلا أن الصدمة الأكبر والأكثر إثارة للقلق تجلت عند تطبيق هذا النموذج في قلب العلوم الطبيعية والطبية الحيوية عبر “مشروع قابلية التكرار: بيولوجيا السرطان” (Reproducibility Project: Cancer Biology)، الذي امتد بين عامي 2013 و2021 بقيادة إليزابيث إيرنز ومركز العلوم المفتوحة. أظهرت النتائج المنشورة في دورية (eLife) أن معدل التكرار في الأبحاث قبل السريرية الأساسية لعلاج السرطان المنشورة في أرقى الدوريات الطبية العالمية (مثل Nature وCell) كان أدنى بكثير من علم النفس؛ حيث نجحت 46% فقط من المحاولات في إعادة إنتاج التأثيرات البيولوجية الأصلية، وتراجعت أحجام التأثير بمعدل صادم وصل إلى 85%. أثبتت هذه المشاريع المتكاملة أن الأزمة بنيوية وعامة، وتتعلق بطريقة تمويل العلم ونشره وإدارته في العصر الحديث، مما فرض ضرورة تبني إصلاحات العلم المفتوح كضرورة قصوى لإنقاذ مصداقية الاستثمار في البحث العلمي على مستوى العالم.

11.3 تأسيس شبكات التعاون العالمي الدائمة

توجت هذه المسيرة التاريخية من العمل الجماعي بتأسيس شبكات تعاونية عالمية ومستدامة تمثل الجيل القادم من البنية التحتية للأبحاث السلوكية، ولعل أبرزها هو “مُسرع العلوم النفسية” (Psychological Science Accelerator – PSA). تأسس هذا التحالف المؤسسي في عام 2017 بوصفه شبكة عالمية دائمة ولامركزية تضم أكثر من 1400 باحث ومختبر ينتمون إلى أكثر من 80 دولة حول العالم، تعمل كـ “منظمة أبحاث سريعة ومفتوحة” قادرة على جمع بيانات ضخمة وعالية الموثوقية لاختبار الفرضيات النظرية المستجدة بكفاءة غير مسبوقة.

نجح هذا النموذج في مواجهة أحد أعتى التحيزات التاريخية في العلوم الإنسانية، والمتمثل في حصر الدراسات على مجتمعات “WEIRD”؛ حيث مكنت الشبكة العالمية المختبرات المستقلة في آسيا، وإفريقيا، وأمريكا اللاتينية من المشاركة كأطراف متكافئة في قيادة وتصميم وتنفيذ الأبحاث الدولية الرائدة. تجلى الانتصار الأعظم لهذا النموذج التعاوني خلال جائحة كوفيد-19؛ حيث استطاع المسرع حشد عشرات الآلاف من المشاركين حول العالم في غضون أسابيع قليلة لاختبار آليات التواصل السلوكي ورسائل الصحة العامة الفعالة عبر سياقات ثقافية متنوعة، مقدماً دليلاً قاطعاً على أن التعاون العلمي المفتوح والعابر للقارات هو السبيل الوحيد لإنتاج معرفة نفسية وسلوكية موثوقة وعالمية التطبيق.

12. مستقبل البحث السلوكي في ضوء حركة العلم المفتوح

12.1 إعادة بناء الثقة العامة في علوم السلوك البشري

يقف حقل علم النفس اليوم في مرحلة تاريخية فارقة تتمثل في إعادة بناء الجسور المهتزة بين المعرفة السلوكية الأكاديمية والجمهور وصناع القرار. لقد ولّدت أزمة التكرار، عندما تناولتها وسائل الإعلام العالمية، موجة مفهومة من التشكيك الجماهيري في تطبيقات علم النفس والسياسات العامة المستندة إليه؛ إذ كيف يمكن الوثوق بتوصيات خبراء يعجزون عن إعادة إنتاج تجاربهم الأساسية في المختبرات المستقلة؟

تتمثل الاستجابة المستقبلية الأكثر نضجاً وموثوقية في تقديم “الشفافية الراديكالية وقابلية التدقيق المستمر” بوصفهما الضمانة الوحيدة لمصداقية الاستنتاجات العلمية أمام المجتمع. لم يعد العلماء يطلبون ثقة الجمهور على أساس السلطة الأكاديمية المطلقة أو الألقاب الجامعية الرفيعة، بل على أساس وضوح الأدلة وفتح مسارات الفحص والتدقيق العام للبيانات والبرمجيات أمام كل متشكك. إن ترسيخ نماذج التدخلات السلوكية والسياسات العامة (مثل وحدات التوجيه السلوكي النفعي Nudge Units) المستندة فقط إلى أبحاث مسجلة مسبقاً ومكررة في بيئات متعددة يمثل السبيل الحقيقي لاستعادة ثقة المجتمع، وتحويل علم النفس إلى قوة تنويرية يعتمد عليها صناع القرار لبناء مجتمعات أكثر صحة وعدالة وازدهاراً.

12.2 إصلاح منظومة الحوافز والترقيات الأكاديمية

يدرك رواد حركة الإصلاح المنهجي أن المستقبل الحقيقي للعلم المفتوح يرتبط ارتباطاً عضوياً بإصلاح منظومة الحوافز والمكافآت والترقيات الأكاديمية في الجامعات والمؤسسات المانحة للتمويل؛ فما دام معيار النجاح المهني الوحيد للأكاديمي هو كمية الأوراق المنشورة ومعاملات التأثير التقليدية لمجلاته، فستظل الممارسات المشبوهة تتسلل إلى المختبرات بطرق ملتوية. بدأ العالم يشهد بوادر تحول حقيقي في هذا الصدد؛ حيث بادرت كبرى الجامعات العالمية (مثل جامعات هولندا وبريطانيا وألمانيا) إلى توقيع إعلانات دولية رائدة مثل “إعلان سان فرانسيسكو بشأن تقييم البحوث” (DORA) و”مبادئ لايدن للمقاييس العلمية”.

بموجب هذه التحولات المؤسسية، بدأت لجان الترقية والتعيين في الجامعات تقيم أعضاء هيئة التدريس بناءً على جودة وموثوقية أبحاثهم وممارستهم للشفافية المفتوحة (مثل مشاركة البيانات، والمواد، والتقارير المسجلة، ودراسات التكرار الناجحة والصفرية)، بدلاً من الاعتماد الأعمى على عدد المقالات المنشورة. كما بدأت جهات التمويل الكبرى (مثل المعاهد الوطنية للصحة NIH والمفوضية الأوروبية) تخصص مسارات تمويلية إلزامية ومستقلة لدعم مشاريع التكرار المباشر والمراجعات المنهجية، مما جعل الشفافية والدقة المنهجية استثماراً مهنياً رابحاً للأكاديميين يعزز استقرارهم الوظيفي ومكانتهم العلمية بدلاً من كونهما عائقاً أمام تقدمهم المهني.

12.3 الرؤية المستقبلية لعلم نفس تراكمي ومستدام

ترسم حركة العلم المفتوح اليوم ملامح عصر جديد للبحث النفسي يتسم بالبناء التراكمي الموثوق والاستدامة المعرفية، مغادراً نهائياً عهد “البطولات الفردية” والاكتشافات المعزولة البراقة التي تميزت بها العقود الماضية. يتجه الحقل نحو نموذج “العلم التعاوني الضخم” (Big Team Science)، حيث يجتمع مئات الباحثين حول العالم لمعالجة الأسئلة المعرفية الوجودية الكبرى عبر دراسات ضخمة متعددة الثقافات تتمتع بقوة إحصائية جبارة تصون نتائجها من عاديات الصدفة والتحيز.

كما يشهد المستقبل القريب اندماجاً عميقاً لأدوات الذكاء الاصطناعي التوليدي والتعلم الآلي في الفحص المنهجي التلقائي؛ حيث يجري تطوير خوارزميات ذكية قادرة على فحص آلاف الأوراق البحثية لحظة كتابتها لرصد الأخطاء الإحصائية، واكتشاف أساليب القرصنة في البيانات، والتأكد من مطابقة النتائج للمسودات المسجلة مسبقاً بدقة مذهلة. إن تحول ممارسات العلم المفتوح من مجرد مبادرات نضالية تطوعية إلى المعيار الافتراضي الحاكم لكافة مسارات المعرفة يضمن أن علم النفس لن يعود أبداً إلى الوراء؛ بل سيمضي قدماً كعلم تجريبي رصين، يمتلك الشجاعة لنقد ذاته، ويؤسس لنهضة معرفية وإنسانية مستدامة تمتد آثارها لعقود وأجيال قادمة.

خاتمة شاملة

يمثل “مشروع قابلية التكرار: علم النفس” لحظة فارقة وإبستمولوجية حاسمة في تاريخ العلوم الإنسانية والتجريبية الحديثة؛ فلم يكن مجرد تقرير إحصائي رصد خللاً في نتائج دوريات عام 2008، بل كان مرآة نقدية عكست شجاعة غير مسبوقة لمجتمع بحثي قرر أن يخضع نفسه ومنظومته المعرفية لأقصى وأقسى درجات المساءلة التجريبية المستقلة. إن الصدمة التي ولّدها انخفاض معدل التكرار وتراجع أحجام التأثير كانت الدواء المر الذي أيقظ المجتمع العلمي من سباته الدوغمائي، ودفع به نحو إعادة هندسة بناه التحتية وسياساته التحريرية ومناهجه التعليمية.

لقد أثبتت ثورة العلم المفتوح التي انطلقت من رحم هذه التجربة أن قوة العلم لا تكمن في عصمته من الخطأ، بل في قدرته المؤسسية الفريدة على تصحيح مساره الذاتي عبر النقد الموضوعي والشفافية الراديكالية. إن الدروس المستفادة من مشروع التكرار لم تعد اليوم حكراً على علماء النفس وحدهم، بل غدت دستوراً إرشادياً تهتدي به سائر العلوم الطبية والاقتصادية والطبيعية لبناء معرفة بشرية متراكمة، متواضعة، وموثوقة، تقف بثبات أمام اختبار الزمن وتخدم الإنسان بصدق وتجرد.

المراجع

• Bem, D. J. (2011). Feeling the future: Experimental evidence for anomalous retroactive influences on cognition and affect. Journal of Personality and Social Psychology, 100(3), 407–425. https://doi.org/10.1037/a0021524
• Benjamin, D. J., Berger, J. O., Johannesson, M., Nosek, B. A., Wagenmakers, E. J., Berk, R., … & Johnson, V. E. (2018). Redefine statistical significance. Nature Human Behaviour, 2(1), 6–10. https://doi.org/10.1038/s41562-017-0189-z
• Camerer, C. F., Dreber, A., Forsell, E., Ho, T. H., Huber, J., Johannesson, M., … & Wu, H. (2016). Evaluating replicability of laboratory experiments in economics. Science, 351(6280), 1433–1436. https://doi.org/10.1126/science.aaf0918
• Errington, T. M., Denis, A., Perfito, N., Iorns, E., & Nosek, B. A. (2021). Challenges for assessing replicability in preclinical cancer biology. eLife, 10, e67995. https://doi.org/10.7554/eLife.67995
• Gilbert, D. T., King, G., Pettigrew, S., & Wilson, T. D. (2016). Comment on “Estimating the reproducibility of psychological science”. Science, 351(6277), 1037. https://doi.org/10.1126/science.aad7243
• Kidwell, M. C., Lazarević, L. B., Baranski, E., Hardwicke, T. E., Piechowski, S., Falkenberg, L. S., … & Nosek, B. A. (2016). Badges to acknowledge open practices: A simple, low-cost, effective method for increasing transparency. PLOS Biology, 14(5), e1002456. https://doi.org/10.1371/journal.pbio.1002456
• Klein, R. A., Ratliff, K. A., Vianello, M., Adams, R. B., Bahník, Š., Bernstein, M. J., … & Nosek, B. A. (2014). Investigating variation in replicability: A “Many Labs” replication project. Social Psychology, 45(3), 142–152. https://doi.org/10.1027/1864-9335/a000178
• Moshontz, H., Campbell, L., Ebersole, C. R., IJzerman, H., Urry, H. L., Forscher, P. S., … & Chartier, C. R. (2018). The Psychological Science Accelerator: Advancing psychology through a distributed collaborative network. Advances in Methods and Practices in Psychological Science, 1(4), 501–515. https://doi.org/10.1177/2515245918797607
• Nosek, B. A., Alter, G., Banks, G. C., Borsboom, D., Bowman, S. D., Breckler, S. J., … & Yarkoni, T. (2015). Promoting an open research culture. Science, 348(6242), 1422–1425. https://doi.org/10.1126/science.aab2374
• Open Science Collaboration. (2015). Estimating the reproducibility of psychological science. Science, 349(6251), aac4716. https://doi.org/10.1126/science.aac4716
• Simmons, J. P., Nelson, L. D., & Simonsohn, U. (2011). False-positive psychology: Undisclosed flexibility in data collection and analysis allows presenting anything as significant. Psychological Science, 22(11), 1359–1366. https://doi.org/10.1177/0956797611417632
• Wagenmakers, E. J., Wetzels, R., Borsboom, D., & van der Maas, H. L. (2011). Why psychologists must change the way they analyze their data: The case of psi: Comment on Bem (2011). Journal of Personality and Social Psychology, 100(3), 426–432. https://doi.org/10.1037/a0022790