نموذج الملاحظة المباشرة (DOF)

الملخص

يُعد نموذج الملاحظة المباشرة (Direct Observation Form – DOF؛ Butterfield et al., 2023) أداة تقييم سيكومترية مقننة صُممت خصيصاً لقياس وتطوير أداء طلاب الطب في إجراء المقابلات النفسية الإكلينيكية أثناء فترة تدريبهم السريري (Psychiatry Clerkship). تم اشتقاق وتطوير محتوى الأداة استناداً إلى مراجعة منهجية للأدبيات والمعايير المهنية الصادرة عن رابطة مديري تعليم طلاب الطب في الطب النفسي (ADMSEP) (Roman et al., 2016)، وخضع لعمليات تنقيح تجريبية مكثفة. يتألف المقياس من 4 فقرات محورية تُقيّم عبر مقياس ليكرت خماسي الدرجات (1 إلى 5)، تغطي مهارات بدء المقابلة وإنهائها، وتطبيق أساليب المقابلة المتخصصة، والحضور والتناغم مع المريض، وبناء التحالف العلاجي وضبط الحدود المهنية، إلى جانب عناصر وصفية تسجل مدى تعقيد الحالة، وسؤال تقييمي إجمالي مصاغ وفق إطار الأنشطة المهنية الموثوقة (EPA).

أظهرت الدراسات السيكومترية للأداة كفاءة قياسية رفيعة؛ حيث يتمتع المقياس بثبات اتساق داخلي ممتاز بقيم ألفا كرونباخ تتراوح بين 0.88 و 0.89. وأثبتت مؤشرات الصدق حساسية الأداة الفائقة للاستجابة التعليمية (Test Responsiveness)، مع تسجيل تحسن دال إحصائياً في درجات الطلاب بين نقطتي التقييم الأولى والثانية (p < 0.001). كما أظهر النموذج صدقاً تنبؤياً قوياً بارتباطه بالدرجات الإكلينيكية النهائية للمقرر (p < 0.001) حتى بعد ضبط المتغيرات الدخيلة، وارتباطاً تقاربياً مرتفعاً مع تقييم النشاط المهني الموثوق (r = 0.76 إلى 0.79)، في حين أثبت صدقاً تمايزياً قاطعاً بعدم ارتباطه بدرجات الاختبارات التحريرية المعرفية (Shelf Exam)، مما يؤكد أنه يقيس كفاءات إكلينيكية حية مستقلة لا تستوعبها الاختبارات الورقية التقليدية.

الكلمات المفتاحية

نموذج الملاحظة المباشرة, المقابلة النفسية الإكلينيكية, تقييم طلاب الطب, فترة التدريب الإكلينيكي في الطب النفسي, الأنشطة المهنية الموثوقة (EPA), الاتساق الداخلي, الصدق التنبؤي, استجابة المقياس, الكفاءة السريرية, التعليم الطبي القائم على الكفايات.

المؤلفون

تم تطوير الأداة والتحقق من خصائصها القياسية من قِبل فريق بحثي متخصص في التعليم الطبي والطب النفسي في كلية الطب بـ جامعة كولورادو (University of Colorado School of Medicine)، الولايات المتحدة الأمريكية:

• أوستن بوترفيلد (Austin Butterfield, MD): قسم الطب النفسي، كلية الطب بجامعة كولورادو. الباحث الرئيسي والمؤلف المراسل (البريد الإلكتروني: [email protected] | معرف أوركيد: 0000-0003-0231-7266).
• آشلي كاري (Ashley Curry, MD): قسم الطب النفسي، كلية الطب بجامعة كولورادو.
• جويل ياغر (Joel Yager, MD): أستاذ الطب النفسي الفخري، قسم الطب النفسي، كلية الطب بجامعة كولورادو.
• جوزيف ساكاي (Joseph Sakai, MD): قسم الطب النفسي، كلية الطب بجامعة كولورادو (معرف أوركيد: 0000-0003-1600-6100).

الغرض

يتمثل الغرض الأساسي لـ نموذج الملاحظة المباشرة (DOF) في تقديم أداة قياس بنائية ومعيارية تتيح لأعضاء هيئة التدريس والأطباء المقيمين تقييم الأداء العملي الحقيقي لطلاب الطب في السنة الثالثة أثناء إجرائهم للمقابلات النفسية الإكلينيكية المباشرة مع المرضى النفسيين في بيئات الرعاية السريرية الحقيقية (Psychiatry Clerkship). على مدار عقود طويلة، عانى تعليم الطب النفسي من الاعتماد شبه الحصري على التقييمات بأثر رجعي، حيث يقدم الطالب تقريراً شفوياً أو مكتوباً عما جرى في المقابلة دون أن يشهد المشرف التفاعل السريري الفعلي بين الطالب والمريض، مما يؤدي إلى فجوة تقييمية تُخفي الأخطاء في التواصل وإقامة التحالف العلاجي.

يسعى هذا المقياس إلى سد هذه الفجوة الإكلينيكية عبر:

• التقييم في بيئة العمل المباشرة (Workplace-Based Assessment): توفير وسيلة موضوعية توثق مهارات الفحص والمقابلة لحظة حدوثها، مما يمنح المقيّم إطاراً موحداً لرصد السلوكيات المهارية بدقة وملاحظة الفروق الفردية بين الطلبة.
• تسهيل التغذية الراجعة التكوينية (Formative Feedback): لا يقتصر الهدف على رصد الدرجات، بل يمتد لتسهيل الحوار الإشرافي الموجه وتقديم ملاحظات فورية ومحددة للطالب حول نقاط القوة وجوانب القصور القابلة للتطوير السريع.
• قياس التطور والنمو المهني: استخدام الأداة في نقطتين زمنيتين على الأقل (بداية ومنتصف أو نهاية فترة التدريب) يتيح قياس المنحنى التعليمي للطالب وحساسية الأداء للتدريب والخبرة التراكمية.
• التوافق مع إطار الأنشطة المهنية الموثوقة (EPAs): ربط درجات المقابلة النفسية بمدى الثقة الممنوحة للطالب للاستقلال بإجراء المقابلات، مما يسهم في اتخاذ قرارات تقييمية ترتبط بجاهزية الطالب لممارسة المسؤوليات السريرية بأمان تحت إشراف متدرج.

البناء النفسي

يقيس نموذج الملاحظة المباشرة (DOF) كفاءة إجراء المقابلة النفسية كبناء نفسي-إكلينيكي مركب، يتألف من أربعة أبعاد مهارية متكاملة، يُضاف إليها تقييم شمولي للثقة الإكلينيكية ومؤشرات سياقية:

1. مهارات افتتاح المقابلة واختتامها (Opening Portion and Closing of the Interview)

يركز هذا البعد على البنية الإجرائية للمقابلة النفسية. يشمل التقييم قدرة الطالب على تقديم نفسه بوضوح واحترافية للمريض، وتوضيح أهداف المقابلة وطبيعتها الإكلينيكية، وبناء الألفة الأولية (Rapport)، وتحديد جدول الأعمال المتبادل (Agenda Setting). وفي ختام المقابلة، يقيس البعد كفاءة الطالب في تلخيص المعلومات الأساسية التي تم جمعها، والتحقق من فهم المريض وموافقته، ومناقشة الخطوات التالية، وإتاحة مساحة للمريض لطرح أسئلته ومخاوفه، وإنهاء اللقاء بدفء واحترافية دون تسرع أو إرباك.

2. فنيات وأساليب المقابلة (Interview Techniques)

يقيم هذا البعد البراعة التكتيكية والتقنية في جمع البيانات النفسية والطبية. يشمل ذلك استخدام الأسئلة المفتوحة تليها الأسئلة المغلقة المحددة (قمع المقابلة)، ومهارات الاستماع النشط (Active Listening)، وإعادة الصياغة، وتوجيه مسار الحوار بسلاسة دون مقاطعة فجة، وتجنب الأسئلة التوجيهية أو الإيحائية، وتطبيق استراتيجيات التنقل السلس بين المحاور الحساسة (مثل الأفكار الانتحارية، والتاريخ الجنسي، وتعاطي المواد)، مع ضبط إيقاع المقابلة وإدارتها ضمن الإطار الزمني المحدد.

3. الحضور والتناغم الوجداني مع المريض (Presence/Attunement to Patient)

يمثل هذا البعد الجانب النفسي الديناميكي والإنساني في اللقاء الإكلينيكي. يُقاس به مدى استغراق الطالب الذهني والعاطفي وتركيزه الكامل مع المريض، وقدرته على التقاط الإشارات غير اللفظية (Non-verbal Cues) الدقيقة؛ مثل نبرة الصوت، ولغة الجسد، وتغير تعبيرات الوجه، والتوافق الانفعالي مع حالة المريض. كما يشمل إظهار التعاطف الحقيقي والصدق الإنساني، والحفاظ على سلوك علاجي محترم ومهدئ يخفف من قلق المريض ووصمة المرض النفسي.

4. بناء التحالف العلاجي والحدود المهنية (Alliance Building and Boundaries)

يقيس هذا البعد القدرة على إرساء أساس لشراكة علاجية إيجابية ومتينة، يتعاون فيها الطالب والمريض معاً لفهم المشكلات والتعامل معها. ويتكامل هذا الهدف مع الصيانة الصارمة للأطر والحدود المهنية (Professional Boundaries)؛ بما يضمن تجنب السلوكيات التي قد تخل بتوازن العلاقة، أو الانزلاق نحو التفاعل الشخصي غير الملائم، أو إظهار ردود فعل سلبية تجاه سلوكيات المريض الصعبة (مثل العدائية أو الارتياب)، مع الحفاظ على الحياد الإكلينيكي الدافئ والموقف الداعم غير المشروط.

المتغيرات السياقية والتقييم الإجمالي للنشاط المهني الموثوق (EPA)

يتضمن النموذج كذلك عناصر فرعية لتحديد سياق المقابلة، مثل تحديد ما إذا كانت المقابلة تشكل تحدياً خاصاً لمستوى تدريب الطالب أو تتسم بدرجة عالية من التعقيد النفسي/الطبي، مما يوفر ضبطاً سياقياً للتقييم، متوجاً بسؤال إجمالي يصنف الطالب وفق مستويات الإشراف المطلوبة (EPA)، انطلاقاً من الملاحظة فقط إلى القدرة على الأداء باستقلالية تامة.

الإطار النظري

يستند نموذج الملاحظة المباشرة إلى تقاطع نظري رصين يجمع بين نظريات التعليم الطبي القائم على الكفايات (CBME)، ونموذج ميلر لتقييم الكفاءة السريرية (Miller’s Pyramid, 1990)، ونظريات التحالف العلاجي في الطب النفسي والتحليل النفسي.

يميز هرم ميلر الشهير بين أربعة مستويات للكفاءة: المعرفة الأساسية (Knows)، والمعرفة التطبيقية (Knows How)، وإظهار الكيفية في بيئة محاكاة (Shows How)، والأداء الحقيقي المستقل في الواقع السريري (Does). تقتصر معظم امتحانات الطب التقليدية واختبارات الرف (Shelf Exams) على المستويين الأدنى (المعرفة)، في حين يركز نموذج الملاحظة المباشرة (DOF) حصرياً على قمة الهرم (Does) عبر تقييم السلوك الإكلينيكي الحقيقي للطالب أمام مريض واقعي في العيادة أو القسم الداخلي. يتسق هذا التوجه مع حركة التقييم في بيئة العمل المباشرة (Workplace-Based Assessment – WBA) التي تؤكد أن الملاحظة العينية المباشرة هي الأداة الوحيدة القادرة على قياس الكفايات المعقدة والتفاعلية بدقة ومصداقية.

من الناحية النفسية، يرتكز المقياس على مفهوم التحالف العلاجي (Therapeutic Alliance) كما صاغه إدوارد بوردين (Edward Bordin)، ونظريات العلاقة بين الطبيب والمريض، وتناغم التفاعل (Intersubjectivity). تُعد المقابلة النفسية أكثر من مجرد عملية جمع بيانات للأعراض؛ إنها أداة علاجية وتشخيصية متزامنة تتطلب حضوراً عقلياً ووجدانياً دقيقاً. لذلك، تم تصميم بنود المقياس بحيث لا تقيس فقط الجوانب التقنية الجافة (مثل صياغة الأسئلة وتلخيصها)، بل تمنح وزناً مساوياً للقدرة على التناغم العاطفي وضبط الحدود التفاعلية، مما يعكس الفهم المعاصر للطب النفسي الذي يدمج البعد البيولوجي العصبي مع البعد النفسي والاجتماعي في كل تفاعل سريري.

الصدق

خضع نموذج الملاحظة المباشرة لفحوصات سيكومترية دقيقة في دراسة بوترفيلد وزملائه (Butterfield et al., 2023) المنشورة في دورية Academic Psychiatry، حيث تم تطبيقه على عينة من طلاب السنة الثالثة بكلية الطب، وأظهرت النتائج شواهد صدق قوية ومتعددة:

1. صدق الاستجابة للاختبار (Test Responsiveness)

أظهر النموذج حساسية إحصائية فائقة للتغير في أداء الطلاب عبر الزمن؛ حيث سُجلت زيادة ذات دلالة إحصائية مرتفعة جداً في متوسط الدرجات الكلية للنموذج بين وقت التقييم الأول (Time 1) ووقت التقييم الثاني (Time 2) بقيمة احتمال (p < 0.001). يشير هذا إلى أن الأداة لا ترصد أداءً ثابتاً غير متفاعل، بل تلتقط بدقة التحسن التدريجي وتطور المهارات الإكلينيكية نتيجة التعلم والخبرة السريرية أثناء فترة التدريب.

2. الصدق التنبؤي (Predictive Validity)

أظهرت درجات النموذج المقدمة في وقت التقييم الثاني (Time 2) ارتباطاً إيجابياً دالاً إحصائياً بالدرجات الإكلينيكية النهائية للطلاب في مقرر الطب النفسي (p < 0.001). والأهم سيكومترياً أن هذا الارتباط ظل دالاً إحصائياً بصورة قاطعة حتى بعد استخدام نماذج الانحدار الخطي المتعدد لضبط مجموعة من المتغيرات الوسيطة والمربكة المحتملة، والتي شملت: الفترة من العام الأكاديمي التي أنهى فيها الطالب المقرر، والرتبة الأكاديمية للمقيّم (طبيب مقيم مقابل عضو هيئة تدريس)، ومدى تعقيد الحالة المرضية، وصعوبة المقابلة (Time 2 p < 0.001). كما كشفت النتائج عن ارتباط متوسط الدرجات بتوقيت دراسة المقرر خلال العام الأكاديمي؛ إذ حصل الطلاب الذين خضعوا للتقييم في بدايات العام على درجات أدنى مقارنة بأقرانهم في الفترات المتأخرة (p = 0.01 في الوقت الأول، و p = 0.002 في الوقت الثاني)، مما يدعم صدق البناء للأداة كمعيار عاكس لتراكم الخبرة الطبية الكلية للطالب.

3. الصدق التقاربي والارتباط بالأطر الإشرافية (Convergent Validity & EPA)

أظهرت درجات بنود النموذج الأربعة ارتباطاً إيجابياً قوياً للغاية بالسؤال الإجمالي المستند إلى الأنشطة المهنية الموثوقة (EPA)؛ حيث بلغ معامل الارتباط في وقت التقييم الأول (r = 0.76, p < 0.001) وفي وقت التقييم الثاني (r = 0.79, p < 0.001). يدل هذا الارتباط العالي على أن البنود الأربعة تغطي بالفعل الكفاءات السريرية الجوهرية التي يستند إليها المشرفون في تقييم مدى استقلالية الطالب وجدارته بالثقة الإكلينيكية.

4. الصدق التمايزي (Discriminant Validity)

في مقابل الارتباط القوي بالتقييم الإكلينيكي، لوحظ عدم وجود أي ارتباط دال إحصائياً بين درجات نموذج الملاحظة المباشرة (DOF) ودرجات امتحان الرف التحريري الوطني (Shelf Exam)؛ حيث بلغ معامل الارتباط في الوقت الأول (r = 0.10, p = 0.24) وفي الوقت الثاني (r = 0.11, p = 0.21). يمثل هذا الدليل السيكومتري حجراً أساسياً لصدق المفهوم المتمايز؛ إذ يثبت أن النموذج يقيس مهارات إكلينيكية وتفاعلية متميزة ومستقلة تماماً عن المعرفة الطبية النظرية المجردة المخزنة في الذاكرة والتي تقيسها الاختبارات الورقية ذات الاختيار من متعدد.

5. ارتباط الدرجات بالرتبة الأكاديمية للمقيّم (Rater Rank Association)

كشفت التحليلات الإحصائية أن درجات النموذج في الوقت الأول ارتبطت إيجابياً برتبة المقيّم (p = 0.005)؛ حيث أظهرت النتائج أن الأطباء المقيمين (Residents) مالوا إلى منح درجات أعلى مقارنة بالأطباء الاستشاريين وأعضاء هيئة التدريس (Faculty)، وهي ظاهرة سيكومترية معروفة في أدبيات التقييم الطبي تفرض أهمية تدريب المقيّمين لتوحيد المعايير الإسنادية.

الثبات

أظهر نموذج الملاحظة المباشرة (DOF) مستويات ممتازة من الاتساق الداخلي (Internal Consistency) عبر مختلف نقاط القياس:

• معامل ألفا كرونباخ (Cronbach’s Alpha): تراوحت قيم ألفا كرونباخ للمقياس بين 0.88 و 0.89، وهي قيم سيكومترية مرتفعة جداً تعكس ترابطاً وتجانساً متيناً بين الفقرات الأربع المكونة للأداة، وتؤكد أنها تقيس جميعاً أبعاداً متناغمة تنتمي للبناء العام لكفاءة المقابلة النفسية دون حشو أو تكرار لفظي لا طائل منه.
• ثبات البنود الفردية: أظهرت مصفوفة معاملات الارتباط بين البنود وعلاقتها بالدرجة الكلية (Item-Total Correlations) مساهمة إيجابية جوهرية لكل بند من البنود الأربعة في التباين المشترك للدرجة الكلية للمقياس.
• الخطأ المعياري للقياس واعتبارات ثبات المقيّمين: نظراً لأن التقييم يقع ضمن فئة الملاحظة المباشرة الحية، فإن التباين بين المقيّمين يمثل مصدراً هاماً لخطأ القياس. وقد أظهرت نتائج الدراسة أن النموذج يحافظ على دقته الإحصائية عبر مراقبة الفروق المنهجية المعتمدة على الرتبة، مما يدعو في الاستخدامات عالية المخاطر (High-stakes assessments) إلى تدريب المقيّمين واستخدام مقيّمين متعددين لتعزيز معامل الموثوقية العامة (Generalizability Coefficient).

التحليل العاملي

وفقاً للدراسة القياسية التأسيسية التي أجراها بوترفيلد وفريقه (Butterfield et al., 2023)، لم يتم إجراء تحليل عاملي استكشافي (Exploratory Factor Analysis – EFA) أو توكيدي (Confirmatory Factor Analysis – CFA) رسمي على بيانات النموذج نظراً لمحدودية عدد الفقرات (4 فقرات محددة بإحكام) وطبيعة حجم العينة التجريبية التي ركزت على التحقق من الصدق الميداني والحساسية للاستجابة السريرية (Responsiveness).

من المنظور السيكومتري النظري، تدعم قيم الاتساق الداخلي العالية (ألفا = 0.88 – 0.89) فرضية أحادية البعد العام (Unidimensionality) أو وجود عامل عام مهيمن يمثل “الكفاءة السريرية في إجراء المقابلة النفسية”، حيث تشترك المهارات التواصلية، والتقنية، والتناغمية، وضبط الحدود في تفسير حصة كبرى من التباين الكلي. وتوصي الأدبيات المستقبلية بإجراء تحليل عاملي توكيدي متعدد العينات مع التوسع في استخدام الأداة في مراكز طبية متعددة للتحقق من بنيتها العاملية الصلبة واختبار ثبات القياس (Measurement Invariance) عبر مستويات التدريب المختلفة وبيئات المرضى المتنوعة.

أداة القياس

تتميز أداة التقييم بالخصائص والمواصفات الفنية التالية:

• نوع الاختبار: أداة ملاحظة وتقييم مباشر للأداء الإكلينيكي في بيئة العمل السريرية (Workplace-Based Direct Observation Assessment).
• تنسيق المقياس: استمارة قياس موجزة تتألف من 4 فقرات تقييمية أساسية، يعقبها عنصران اختياريان لتقييم سياق المقابلة، وسؤال إجمالي للثقة الإشرافية (EPA).
• عدد الفقرات: 4 فقرات رئيسية مقننة + بندان سياقيان اختياريان + بند تقييم كلي.
• مقياس الاستجابة: مقياس متدرج خماسي النقاط (5-point scale)، حيث تمثل الدرجة 1 أدنى مستوى أداء، وتمثل الدرجة 5 أعلى مستوى أداء احترافي ممكن لمتدرب في هذا المستوى.
• العناصر السياقية الإضافية: خانات اختيار اختيارية للمقيّم لتوثيق: (1) ما إذا كانت المقابلة تشكل تحدياً استثنائياً بالنسبة لمستوى تدريب الطالب، أو (2) ما إذا كانت الحالة تتسم بدرجة عالية من التعقيد النفسي أو الطبي.
• التقييم الإجمالي للنشاط المهني الموثوق: سؤال إلزامي للمقيّم لتحديد مستوى الاستقلالية والإشراف الذي يحتاجه الطالب للقيام بهذا النشاط مستقبلاً.
• آلية التصحيح وحساب الدرجات: يتم جمع درجات الفقرات الأربع للحصول على درجة خام مركبة تعكس الأداء الكلي في المقابلة (الدرجة القصوى 20 نقطة)، إلى جانب تحليل منفصل لكل بند لتوجيه التغذية الراجعة.
• الفقرات المعكوسة: لا توجد فقرات مصاغة بصورة عكسية؛ فجميع الفقرات مصممة باتجاه إيجابي تصاعدي من 1 إلى 5.
• الفئة المستهدفة: طلاب السنة الثالثة بكليات الطب أثناء فترة تدريبهم السريري في الطب النفسي (ويمكن تكييفه لمتدربي الماجستير والتمريض النفسي).
• المقيّمون المؤهلون: الأطباء المقيمون في الطب النفسي (Psychiatry Residents)، والزملاء المتدربون (Fellows)، والأطباء الاستشاريون وأعضاء هيئة التدريس (Attending Physicians/Faculty).
• زمن التطبيق: يتزامن مع مدة المقابلة الإكلينيكية (عادة من 20 إلى 45 دقيقة)، مع استغراق ما بين 3 إلى 5 دقائق من قِبل المشرف لملء الاستمارة وتقديم التغذية الراجعة اللحظية.
• اللغة المتاحة: اللغة الإنجليزية (النسخة الأصلية).

الأذونات والرسوم وسنة الاختبار

تم نشر وتطوير المقياس في عام 2023 من قِبل الباحث الدكتور أوستن بوترفيلد وزملائه في جامعة كولورادو. المقياس غير تجاري (Non-commercial)، ومتاح مجاناً للاستخدام في الأغراض التعليمية والأكاديمية والبحثية دون رسوم مالية. للحصول على الأذونات الرسمية للاستخدام الإكلينيكي أو الأكاديمي الموسع أو تعريب الأداة، يُشترط التواصل مع المؤلف المراسل والحصول على موافقته:

الدكتور أوستن بوترفيلد ([email protected])، كلية الطب بجامعة كولورادو، الولايات المتحدة الأمريكية.

المراجع

• Butterfield, A., Curry, A., Yager, J., & Sakai, J. (2023). A direct observation form for evaluation of the psychiatric interview: Pilot testing during the psychiatry clerkship. Academic Psychiatry, 47(4), 368–373. https://doi.org/10.1007/s40596-023-01762-0
• Miller, G. E. (1990). The assessment of clinical skills/competence/performance. Academic Medicine, 65(9), S63–S67. https://doi.org/10.1097/00001888-199009000-00045
• Norcini, J., & Burch, V. (2007). Workplace-based assessment as an educational tool: AMEE Guide No. 31. Medical Teacher, 29(9-10), 855–871. https://doi.org/10.1080/01421590701775453
• Roman, B., Balon, R., Hales, D. J., & ADMSEP Task Force. (2016). Recommended clerkship learning objectives: Association of Directors of Medical Student Education in Psychiatry (ADMSEP). Academic Psychiatry, 40(6), 874–878. https://doi.org/10.1007/s40596-016-0610-6
• ten Cate, O. (2013). Nuts and bolts of entrustable professional activities. Journal of Graduate Medical Education, 5(1), 157–158. https://doi.org/10.4300/JGME-D-12-00380.1

13. فقرات المقياس (Scale Items)