التكرار المباشر: ركيزة الموثوقية في علم النفس

يُمثّل التكرار المباشر أحد أهم الأعمدة المنهجية التي تضمن رصانة المعرفة السيكولوجية وتماسكها الإمبيقي؛ إذ يُعدّ المحك الأساسي للتحقق من صدق المكتشفات العلمية وتجريدها من التحيزات العارضة أو الصدفة الإحصائية. في ظل النقاشات العميقة التي شهدها الميدان الأكاديمي خلال العقد الأخير حول ما عُرف بأزمة التكرار، بات فهم هذا المفهوم وتطبيقه الدقيق ضرورة حتمية لكل باحث يسعى إلى بناء صرح علمي متين ومستدام.

التكرار المباشر

1. التعريف الموجز والدقيق

التكرار المباشر (Direct Replication) هو إجراء بحثي منهجي يهدف إلى إعادة تطبيق دراسة تجريبية سابقة باستخدام الإجراءات والمواد والأدوات والظروف المنهجية الأصلية ذاتها بأكبر قدر ممكن من التطابق والدقة، وذلك لاختبار ما إذا كانت النتائج الأصلية قابلة للظهور مجدداً مع عينة جديدة مستقطبة من المجتمع الإحصائي نفسه.

يتجاوز هذا المفهوم مجرد إعادة القراءة النقدية للبيانات؛ فهو يتطلب تنفيذاً إمبيقياً مستقلاً يعيد محاكاة البروتوكول التجريبي بدقة بالغة. تكمن الغاية الأساسية للتكرار المباشر في تقييم مدى متانة الأثر المُلاحظ (Effect Size) والتأكد من أنه ليس نتاج خطأ من النوع الأول (Type I Error) أو تلاعب بالبيانات أو خصوصية مفرطة مرتبطة بظروف معملية عابرة.

وعلى النقيض من التكرار المفاهيمي الذي يختبر الفرضية النظرية بأساليب مغايرة، يركز التكرار المباشر على المصداقية الإجرائية للبحث الأصلي؛ مما يجعله خط الدفاع الأول في فلسفة العلوم التجريبية ضد تراكم النتائج الزائفة داخل الأدبيات التخصصية.

2. التأثيل والاشتقاق اللغوي

يعود الأصل اللغوي لمصطلح “التكرار” في اللغة العربية إلى الجذر الثلاثي (ك-ر-ر)، والذي يدل على الرجوع وإعادة الشيء مرة بعد أخرى؛ فيُقال كرّر الشيء أي أعاده وردده حالاً بعد حال. أما صفة “المباشر” فمشتقة من الجذر (ب-ش-ر)، وتدل على الملامسة الحقيقية والمقاربة دون وساطة أو تحوير، مما يعكس المعنى الاصطلاحي للالتزام التام بالتفاصيل الميدانية للبحث الأصلي دون إدخال تعديلات بنيوية.

في السياق الغربي، يُقابل المصطلح التعبير الإنجليزي (Direct Replication)، المشتق بدوره من الكلمة اللاتينية (Replicare)، والتي تعني حرفياً “يطوي إلى الخلف” أو “يعيد إنتاج الشيء بدقة”. دخل هذا المفهوم إلى لغة العلم الحديث مع بواكير المنهج التجريبي في القرنين السابع عشر والثامن عشر على يد رواد مثل روبرت بويل، قبل أن يتبلور بصورته الدقيقة في حقل العلوم السلوكية والنفسية خلال القرن العشرين.

3. النطق والبنية النحوية

يُنطق المصطلح باللغة العربية: “التَّكْرَارُ المـُبَاشِرُ” بفتح التاء وسكون الكاف في “التكرار” (ويجوز كسر التاء لغوياً، بيد أن الفتح هو الأفصح والأشيع في المعاجم)، وضم الميم وكسر الشين في “المباشر”. من الناحية النحوية والتركيبية، يمثل المصطلح مركباً نعتياً، حيث يُعرب لفظ “التكرار” اسماً أو مبتدأً بحسب موقعه في الجملة، و”المباشر” نعتاً تابعاً له في حركته الإعرابية وتذكيره وتعريفه.

يُستخدم المصطلح في الأدبيات كاسم علم منهجي مجرد للدلالة على العملية الإجرائية برمتها، ويُشتق منه الفعل المركب “أجرى تكراراً مباشراً”، أو الوصف النعتي “دراسة تكرارية مباشرة” (Direct Replication Study)، مشكلاً بذلك وحدة لغوية واصطلاحية متماسكة داخل المعاجم النفسية والإحصائية.

4. الشرح المفاهيمي المفصل

يقوم التكرار المباشر على افتراض جوهري مفاده أن الظواهر النفسية الحقيقية ليست حوادث فردية فريدة غير قابلة للاسترجاع، بل هي انتظاميات سلوكية وإدراكية تخضع لقوانين عامة ويمكن ملاحظتها مجدداً إذا ما توافرت الشروط المعملية ذاتها. وبناءً على ذلك، يسعى الباحث المكرِّر إلى تجميد جميع المتغيرات الدخيلة والالتزام الصارم بتعليمات الباحث الأصلي ونصوص المثيرات وتوقيتاتها الزمنية وتصميم التجربة وبرمجيات العرض والمقاييس المستعملة.

تتضمن حدود المفهوم إدراكاً فلسفياً لاستحالة “التطابق المطلق”؛ إذ لا يمكن لأي تجربة أن تكرر الماضي بصورة فيزيائية تامة. فالمشاركون جدد، والزمن قد اختلف، والتاريخ الثقافي والاجتماعي في حركة مستمرة. لذا، يُعرّف التكرار المباشر علمياً بأنه السعي للتقريب الأقصى من شروط التجربة الأصلية إلى الحد الذي يجعل أي تغير طفيف في البيئة أو خلفية الأفراد غير ذي دلالة نظرية مؤثرة على الفرضية المختبرة.

يميز علماء النفس بين التكرار المباشر الدقيق (Exact Replication)، والتكرار المباشر القريب (Close Replication). فبينما يمثل الأول غاية مثالية تتطلب استعمال نفس أجهزة الاختبار ومطابقة التركيبة الديموغرافية للعينة بدقة متناهية، يكتفي الثاني باستخدام البروتوكول التجريبي ذاته مع إمكانية إجرائه في مختبر آخر وبإشراف فريق بحثي مغاير، وهو النمط العملي الأكثر شيوعاً في الممارسات المعاصرة.

يُسهم التكرار المباشر في تحديد الدقة الإحصائية لحجم الأثر الأصلي؛ فالكثير من الدراسات الأولية تعاني مما يُعرف بظاهرة انحدار الفائز (Winner’s Curse)، حيث تُنشر الدراسات التي بالغت في تقدير حجم الأثر بفعل الصدفة. ومن خلال التكرار المباشر ذي القوة الإحصائية العالية (High Statistical Power)، يستطيع الميدان العلمي الحصول على تقدير غير متحيز لحجم التأثير الفعلي في الواقع العملي.

5. التطور التاريخي

تعود الجذور الأولى للتكرار التجريبي إلى بدايات الثورة العلمية، حيث كان الفيزيائي روبرت بويل يصر على ضرورة حضور شهود مستقلين لتكرار تجاربه على مضخة الهواء لضمان صحة الوقائع التجريبية. ومع تأسيس فيلهلم فونت لأول مختبر لعلم النفس التجريبي في لايبتزغ عام 1879، دخل مفهوم التكرار إلى علم النفس بوصفه شرطاً أساسياً لضبط تقارير الاستبطان الذاتي والملاحظات الحسية والفسيولوجية.

في منتصف القرن العشرين، رسخ الفيلسوف كارل بوبر مكانة التكرار كركيزة لمعياره الشهير في القابلية للتكذيب (Falsifiability)، مشيراً إلى أن التجارب الفردية المعزولة لا قيمة علمية لها ما لم تكن قابلة للتكرار المنتظم من قِبل أي باحث يتبع الخطوات الإجرائية ذاتها. وعلى الرغم من هذا التأصيل النظري، عانى علم النفس لعقود طويلة من إهمال التكرار المباشر بسبب هيمنة ثقافة النشر الأكاديمي التي كانت تكافئ النتائج الجديدة والمفاجئة وتنبذ الدراسات التكرارية بوصفها جهداً مهدوراً يفتقر إلى الابتكار.

حدث التحول الجذري في عام 2011، الذي اعتُبر عام الزلزال الإبستمولوجي في علم النفس؛ حيث نُشرت دراسات تدعي إثبات ظواهر مستحيلة فيزيائياً مثل الإدراك المسبق للزمن باستخدام أساليب إحصائية معتمدة، وتزامنت مع فضائح تزوير كبرى. استجابةً لذلك، أطلق برايان نوسيك وزملاؤه مشروع استنساخ علم النفس عبر مركز العلوم المفتوحة، حيث قامت مجموعة من الباحثين بتكرار 100 دراسة نفسية مباشرة في مشروع سُمي (Open Science Collaboration, 2015). كانت النتيجة صدمة مدوية؛ إذ نجح تكرار ما يقارب 36% فقط من الدراسات وفق المعايير الأصلية، مما فجّر ما بات يُعرف رسمياً بـ “أزمة التكرار” ودفع بحركة التكرار المباشر إلى واجهة الأولويات المنهجية العالمية.

6. الأسس النظرية والأطر الفكرية

يستند التكرار المباشر إلى إطار فلسفي يستمد مبادئه من الواقعية النقدية والوضعية الإمبيقية؛ فالفرضية الأساسية هي وجود واقع نفسي وسلوكي موضوعي يمكن الوصول إليه وقياسه عبر أدوات حسية وتجريبية منضبطة. يتطلب هذا الأساس استبعاد الذاتية الفردية للباحث؛ فالنتيجة العلمية لا تكون حقيقة موضوعية إلا إذا تحررت من خصوصية الشخص الذي لاحظها أول مرة وانتقلت إلى حيز المشاع العلمي العام.

من منظور نظرية المعرفة الاحتمالية، يستند التكرار إلى نظرية الاختبار الإحصائي للفرضيات (Hypothesis Testing) المستمدة من كتابات رونالد فيشر وجيرزي نيمان وإيغون بيرسون. تعتمد النتائج العلمية في علم النفس على مستويات دلالة احتمالية (غالباً p < 0.05)، مما يعني وجود احتمال دائم بأن تكون النتيجة الظاهرة مجرد صدفة إحصائية؛ وهنا يبرز التكرار المباشر كأداة لا غنى عنها لتقليص هذا الاحتمال التراكمي إلى الصفر تقريباً من خلال الاختبارات المتتابعة المستقلة.

كما يتصل المفهوم اتصالاً وثيقاً بنظرية الإشارات والضوضاء المنهجية؛ إذ يُنظر إلى الظاهرة النفسية كإشارة خافتة محاطة بكميات هائلة من الضجيج الإجرائي والديموغرافي والبيئي. يعمل التكرار المباشر المنضبط كمرشح تحليلي يعزل الإشارة الحقيقية عن الضوضاء العشوائية، مؤكداً أن التأثير المكتشف يمتلك قوة ثبات منهجية كافية لتبرير دمجه ضمن النظريات السيكولوجية الكبرى وتطبيقاتها السريرية والتربوية.

7. المكونات الأساسية والأبعاد والأنواع

يتفرع مفهوم التكرار المباشر في الممارسة المعملية المعاصرة إلى أبعاد ومكونات دقيقة تشمل الآتي:

• تطابق المواد التجريبية: الالتزام باستخدام نصوص المحفزات ذاتها، الصور، المقاطع المرئية، استبيانات القياس، وبرمجيات التشغيل دون تعديل في صياغتها أو ترتيبها.
• المطابقة الإجرائية التامة: تنفيذ خطوات الجلسة التجريبية بدقة متناهية، بما في ذلك نبرة التعليمات الشفهية، فترات الراحة بين المهام، وظروف الإضاءة والهدوء المعملي.
• التطابق العيني (محددات العينة): اختيار عينة جديدة تمتلك ذات الخصائص الديموغرافية والاجتماعية والثقافية للعينة الأصلية (مثل الفئة العمرية، والنوع، والمستوى التعليمي).
• التكرار المباشر الداخلي (Internal Direct Replication): قيام الباحث الأصلي نفسه بتكرار التجربة في دراسة لاحقة داخل نفس الورقة البحثية للتأكد من ثبات تأثيره قبل النشر.
• التكرار المباشر المستقل (Independent Direct Replication): قيام فريق بحثي خارجي ومستقل تماماً بإعادة تطبيق التجربة دون أي تواصل يوجه النتائج، وهو المعيار الذهبي للموثوقية العلمية.
• التكرارات المباشرة المتعددة والمسجلة (Registered Replication Reports – RRR): مشاريع ضخمة تشترك فيها عشرات المختبرات حول العالم لتكرار تجربة مفصلية واحدة وفق بروتوكول موحد ومسجل سلفاً.

8. أمثلة وحالات توضيحية

تتعدد الحالات التي وضعت التكرار المباشر في قلب الممارسة النفسية التطبيقية، ومن أبرزها دراسة “فرضية التغذية الراجعة للوجه” (Facial Feedback Hypothesis) للباحث فريتز شتراك وزملائه عام 1988؛ حيث ادعت التجربة الأصلية أن إمساك قلم بالأسنان (مما يجبر الوجه على اتخاذ وضعية الابتسام) يجعل المشاركين يُقيّمون الرسوم المتحركة بأنها أكثر إمتاعاً مقارنة بإمساك القلم بالشفاه (وضعية العبوس). في عام 2016، أُجري مشروع تكرار مباشر متعدد شارك فيه 17 مختبراً مستقلاً شملت نحو ألفي مشارك مع الالتزام بالبروتوكول الأصلي حرفياً، ولم ينجح المشروع في إيجاد أي أثر دال إحصائياً للفرضية، مما أحدث مراجعة جذرية لكيفية فهم تأثير تعبيرات الوجه على المشاعر الإنسانية.

مثال آخر يتجلى في دراسات “الإرهاق النفسي للأنا” (Ego Depletion) التي صاغها روي بوميستر، والتي تفترض أن قوة الإرادة وضبط الذات مورد محدود ينفد بالاستهلاك. عندما أُجري تكرار مباشر واسع النطاق قاده مارتن هاجر وشمل أكثر من 20 مختبراً مستقلاً، فشل التكرار في رصد التأثير بالحجم المزعوم سابقاً، مما قاد إلى نقاشات منهجية ونظرية عميقة أسهمت في إعادة النظر في النماذج الفسيولوجية والنفسية لضبط الذات.

9. القياس والتقييم المنهجي

لا يقتصر تقييم نجاح التكرار المباشر على النظر في قيمة الدلالة الإحصائية (p-value) فحسب، بل يعتمد على حزمة متكاملة من المؤشرات الرياضية والإحصائية المتقدمة. يُعد مؤشر حجم الأثر (Effect Size) مثل (Cohen’s d) أو (η²) الركيزة الأساسية؛ إذ يُقارن حجم الأثر في التجربة التكرارية بنظيره في التجربة الأصلية للتحقق مما إذا كان يقع ضمن فترات الثقة الإحصائية (Confidence Intervals) المحددة مسبقاً.

تُستخدم كذلك أساليب اختبار التكافؤ (Equivalence Testing) لتحديد ما إذا كان التأثير المرصود في التكرار المباشر قريباً بدرجة كافية من التأثير الأصلي بحيث يمكن اعتبارهما متكافئين عملياً، أو ما إذا كان التأثير غائباً فعلياً ضمن حدود مقبولة إحصائياً. بالإضافة إلى ذلك، تُوظف مقاربات الإحصاء البايزي (Bayesian Statistics) لحساب معامل بايز (Bayes Factor)، الذي يُحدد مدى ترجيح البيانات الجديدة للفرضية الصفرية (عدم وجود أثر) في مقابل فرضية البحث الأصلية.

أصبح التقييم اليوم مشروطاً بإجراءات “التسجيل المسبق” (Preregistration) عبر منصات مثل مستودع إطار العلوم المفتوحة (OSF)؛ حيث يُوثّق الباحث خطته المنهجية وتحليلاته الإحصائية قبل البدء بجمع البيانات، لضمان عدم لجوء المكرّر أو الباحث الأصلي إلى ممارسات التنقيب غير المشروع عن البيانات (p-hacking) أو تعديل الفرضيات بعد معرفة النتائج (HARKing).

10. التطبيقات والأهمية العملية

تتجلى الأهمية القصوى للتكرار المباشر في الميادين التطبيقية لعلم النفس، ولا سيما في علم النفس العيادي والطب النفسي؛ حيث إن تبني بروتوكولات علاجية نفسية (مثل تقنيات العلاج السلوكي المعرفي) دون إخضاع تجارب فاعليتها الأولية لتكرارات مباشرة مستقلة قد يؤدي إلى تطبيق علاجات وهمية أو ضارة على المرضى وإهدار موارد الرعاية الصحية العامة.

وفي حقل علم النفس الصناعي والتنظيمي، تعتمد الشركات الكبرى ومؤسسات التوظيف على استراتيجيات تحفيزية واختبارات نفسية لانتقاء الكفاءات؛ ويضمن التكرار المباشر لهذه الأدوات ألا تُبنى قرارات التعيين والتقييم المؤسسي على دراسات معملية هشة أو متلاعبة تعجز عن الصمود عند إعادة اختبارها في بيئات العمل الحقيقية.

أما على صعيد السياسات العامة ونظريات “الوخز السلوكي” (Behavioral Nudges)، فإن الحكومات تستثمر الملايين لتوجيه سلوك المواطنين الصحي والاقتصادي استناداً إلى نتائج علم النفس المعرفي والاجتماعي؛ وهنا يمثل التكرار المباشر شبكة الأمان التي تحمي متخذي القرار من تطبيق تدخلات واسعة النطاق لم تثبت موثوقيتها واستقرارها التجريبي بعد.

11. الأبحاث والأدلة الإمبيقية

تراكمت خلال السنوات الأخيرة قاعدة بيانات إمبيقية رصينة حول سلوك التكرار ذاته وما تكشفه نتائجه؛ ومن أبرز المحطات البحثية دراسة “مشروع استنساخ علم النفس” (Psychology Replication Project) المنشورة في مجلة Science عام 2015، والتي كشفت أن نسبة الدراسات التي أمكن تكرارها في علم النفس الاجتماعي كانت أقل بكثير مقارنة بعلم النفس المعرفي، مما سلط الضوء على تباين استقرار الظواهر باختلاف المجال التخصصي.

كما أجرى مشروع (Many Labs) دراسات تكرار مباشر متزامنة لنفس التجارب الكلاسيكية عبر عشرات المختبرات حول العالم تحت قيادة باحثين مثل ريتشارد كلاين؛ وقد أظهرت هذه الأبحاث أن بعض الظواهر النفسية (مثل تأثير التثبيت والمطابقة الإدراكية) تمتلك قوة ارتداد تكراري هائلة تتجاوز 90%، مما يثبت صلابتها وتجردها من التحيزات البيئية، في حين انهارت ظواهر أخرى بمجرد نقلها إلى مختبرات مستقلة.

أكدت هذه المخرجات الإمبيقية أن انخفاض معدلات التكرار لا يعني بالضرورة تزييف البيانات الأصلية، بل كشف عن دور العوامل الخفية مثل قوة الاختبار الإحصائي المتدنية في العينات التاريخية الصغيرة، والتحيز للنشر الأكاديمي الانتقائي للنتائج الإيجابية فقط (Publication Bias)، وهو ما أرسى دعائم ثورة المنهجية الشفافة في المجلات العالمية المصنفة.

12. الاعتبارات الثقافية والعابرة للثقافات

يواجه التكرار المباشر تحديات معقدة عند نقله عبر سياقات ثقافية متباينة؛ فالكثير من التجارب النفسية الأصلية أُجريت على عينات مستقطبة حصراً من مجتمعات الـ (WEIRD) – وهي اختصار للدول الغربية، المتعلمة، الصناعية، الغنية، والديمقراطية – والتي لا تمثل سوى شريحة ضئيلة من سكان الأرض.

عند محاولة إجراء تكرار مباشر في بيئة ثقافية غير غربية (كالمجتمعات العربية أو الآسيوية)، يبرز إشكال التمييز بين “فشل التكرار” الناتج عن ضعف المنهجية الأصلية، وبين “التباين الثقافي المشروع”؛ إذ قد تكون التعليمات أو المثيرات المعملية غير قابلة للنقل المباشر دون أن تفقد حمولتها الدلالية والنفسية. لذلك، تتطلب هذه الدراسات مواءمة دقيقة للمواد مع الإبقاء التام على البنية النظرية للتجربة، والتفريق الحذر بين ما هو عابر للثقافات وثابت بيولوجياً، وما هو نتاج تنشئة سوسيو-ثقافية نوعية.

13. الانتقادات والجدالات والحدود المنهجية

على الرغم من المكانة الرفيعة للتكرار المباشر، فإنه لم يسلم من نقد منهجي وفلسفي حاد؛ إذ يرى بعض الباحثين، مثل سوزان فيسك، أن التركيز الهوسي على التكرار المباشر قد يؤدي إلى خنق الإبداع العلمي وتحويل الباحثين إلى مجرد “محققي شرطة أكاديميين” يطاردون أخطاء الآخرين بدلاً من ابتكار نظريات جديدة تثري المعرفة الإنسانية.

ويتمثل انتقاد آخر في مشكلة “المتغيرات السياقية الخفية” (Hidden Moderators)؛ حيث يدافع أصحاب الدراسات الأصلية أحياناً عن دراساتهم بالقول إن فشل التكرار المباشر لا يعود إلى بطلان الأثر، بل إلى عدم قدرة المكررين على محاكاة الخبرة المعملية الدقيقة، أو التغير التدريجي في السياق الزمني (على سبيل المثال، انخفاض تأثير مثير سياسي أو إعلامي بمرور السنين)، مما يجعل مفهوم التطابق المباشر التام أمراً طوباوياً لا يمكن تحقيقه في العلوم السلوكية الإنسانية الحية.

14. المصطلحات ذات الصلة والفروق التمييزية

لتجنب اللبس المنهجي، من الضروري التمييز بدقة بين التكرار المباشر والمصطلحات المقاربة في فلسفة العلوم:

• التكرار المفاهيمي (Conceptual Replication): اختبار الفرضية النظرية ذاتها باستخدام أدوات أو منهجيات أو تصميمات تجريبية مختلفة كلياً عن الدراسة الأصلية، وذلك لمعرفة ما إذا كانت الظاهرة تعمم عبر سياقات متباينة، بينما يلتزم التكرار المباشر بنفس الأدوات والإجراءات المحددة.
• إمكانية إعادة الإنتاج الحسابي (Reproducibility): إعادة تحليل ذات البيانات الخام للدراسة الأصلية باستخدام نفس الأكواد البرمجية والتحليلات الإحصائية لمعرفة ما إذا كان المحلل الخارجي سيصل إلى ذات الأرقام والمخرجات، دون جمع أي بيانات جديدة من عينات بشرية.
• المتانة المنهجية (Robustness): فحص مدى استقرار النتائج عند تغيير خيارات التحليل الإحصائي (مثل نماذج الاستبعاد، أو التعامل مع القيم المتطرفة) على نفس بيانات الدراسة الأصلية.
• التعميمية (Generalizability): اختبار ما إذا كانت النتائج تنطبق على مجتمعات سكانية أو فئات عمرية وظروف بيئية جديدة لم تكن مشمولة بالدراسة الأصلية إطلاقاً.

15. الخلاصة والأفكار الأساسية

يمثل التكرار المباشر صمام الأمان الحقيقي والمحك المعياري لليقين العلمي في الدراسات السيكولوجية والتجريبية المعاصرة. إن الهدف الجوهري من هذا الإجراء ليس تقويض المكتشفات العلمية أو التشكيك الشخصي في أمانة الباحثين، بل تعزيز عملية التصحيح الذاتي المتواصل التي تميز العلم الحقيقي عن المعارف الزائفة أو الآراء الانطباعية.

يتطلب الارتقاء بجودة البحوث النفسية العربية التوسع في مشاريع التكرار المباشر المنضبطة والمسجلة مسبقاً، واحتضان مبادئ العلم المفتوح لمكافحة التحيزات النشرية وبناء قاعدة معرفية عربية ذات موثوقية عالية تقف بثبات في المحافل العلمية الدولية.

في المحصلة الختامية، يُعدّ التكرار المباشر التجسيد العملي للشك المنهجي البنّاء؛ فهو يُثبت أن الظاهرة النفسية الراسخة هي تلك التي تتحدى الزمن وتصمد أمام تباين المختبرات واستقلالية الباحثين، لتبقى الحقيقة التجريبية المتماسكة هي الغاية الأسمى للبحث العلمي الرصين.

المراجع

• Open Science Collaboration. (2015). Estimating the reproducibility of psychological science. Science, 349(6251), aac4716. https://doi.org/10.1126/science.aac4716
• Zwaan, R. A., Etz, A., Lucas, R. E., & Donnellan, M. B. (2018). Making replication mainstream. Behavioral and Brain Sciences, 41, e120. https://doi.org/10.1017/S0140525X17001972
• Wagenmakers, E. J., Beek, T., Dijkhoff, L., Gronau, Q. F., Acosta, A., Adams, R. B., … & Zwaan, R. A. (2016). Registered Replication Report: Strack, Martin, & Stepper (1988). Perspectives on Psychological Science, 11(6), 917-928. https://doi.org/10.1177/1745691616674458
• Nosek, B. A., & Errington, T. M. (2020). What is replication?. PLoS Biology, 18(3), e3000691. https://doi.org/10.1371/journal.pbio.3000691