ارزيابي فراگيران با استفاده از ابزار DOPS

اهداف جلسه در پايان اين جلسه شرکت کنندگان بايد قادر باشند: کاربرد ابزار DOPS را در ارزيابي فراگيران بيان کنند ويژگيها، مزايا و محدوديتهاي اين ابزار را نام ببرند. چگونگي استفاده از DOPS در سيستم ارزيابي فراگيران را شرح دهند. توانايي خود را در استفاده از اين ابزار در ارزيابي فراگيران نشان دهند.

سازماندهي جلسه سخنراني تعاملي در خصوص DOPS نمايش فيلم يک آزمون DOPS کارگروهي 1و2 ارائه نتايج کار گروهي پرسش و پاسخ جمع بندي و ارزشيابي جلسه

DOPS يعني... Direct Observation of Procedural Skills

DOPS چيست؟ DOPS روشي براي ارزيابي مهارتهاي عملي و دادن باز خورد ارزيابي بصورت عيني و ساخت يافته مشاهده مستقيم فراگير در حين انجام پروسيجر در محيط کار واقعي ثبت نتايج مشاهدات ارزيابي کننده بر طبق يک چک ليست ساخت يافته ارائه بازخورد عيني به فراگير

چرا DOPS؟ مهارتهاي تکنيکي بايد در حين آموزش مورد ارزيابي قرار گيرند. در مدل سنتي استاد مسئول ارزيابي توانمندي فراگير است و روش ارزيابي اغلب subjective است. اصلاح کاستي هاي موجود در آموزش مهارت يا ميزان چيره دستي فرد نيازمند ارائه بازخورد عيني (objective) است که اين امر خود ارزيابي عيني را ضروري مي سازد. پروسيجرها بخش مهمي از طبابت را تشکيل مي دهند.

چرا DOPS؟ چرا DOPS؟ توانمندي در انجام يک پروسيجر صرفاً محدود به مهارت تکنيکي نيست. دانش، توانائي تصميم گيري، مهارتهاي برقراري ارتباط، و توانايي رهبري از ديگر اجزاء ضروري هستند. روشهاي کنوني، با استفاده از مدلهاي بي جان، فقط جزء مهارت تکنيکي را ارزيابي مي کنند.

چرا DOPS؟ چرا DOPS؟ log book : مشاهده مستقيم به روش سنتي: تنها بيانگر انجام يک پروسيجر و کميت آن توانمندي فراگير را در انجام آن نشان نمي دهد. مشاهده مستقيم به روش سنتي: بصورت گلوبال انجام مي شود فاقد معيارهاي مشخص روشهاي ديگر از جمله زمان انجام پروسيجر، موربيديته و مورتاليته بيماران : عوامل مخدوش کننده زياد روايي محتوايي پايين پايايي کم

چرا DOPS؟ Objective assessment of technical skills in surgery. BMJ. 327 (1), November 2003: 1032-1037

مزاياي DOPS مزاياي استفاده از روش DOPS : با استفاده از اين روش ، آزمونگر توجه و تمرکز خود را معطوف نکات مهمي مي نمايد که براي انجام پروسيجر مورد نظر ضروري هستند . اين روش باعث مي شود ارائه بازخورد با دستيار تسهيل شود چرا که به جاي اظهار نظر کلي، بازخورد بر اساس رفتارهاي واقعي و عيني صورت مي گيرد. با توجه به فرمها و چک ليستها مي توان ميزان پيشرفت دستياران را ارزيابي و رديابي کرد .

محدوديتهاي DOPS محدوديت هاي استفاده از روش DOPS : انجام مشاهده مستقيم ممکن است براي اعضاء هيات علمي دشوار و يا بسيار وقت گير باشد استانداردها در بين برنامه هاي دستياري مختلف يکسان نيستند و در نتيجه، نتايج آزمون براي رتبه بندي تمام فراگيران مناسب نيست فراگيران تا حدودي روي کساني که آنها را امتحان مي کنند و بصورت غير مستقيم روي محتواي آزمون کنترل دارند و در نتيجه ممکن است آزمون به نفع آنها bias داشته باشد .

DOPS چگونه؟ (مرحله برنامه ريزي) مشخص نمودن مهارتهاي اساسي در هر مقطع تعداد پروسيجرهاي مورد ارزيابي در طي دوره مشخص چگونگي تعيين افراد ارزيابي کننده تعيين نحوه ثبت و مستند سازي نتايج (تهيه فرم) تعيين جايگاه اين آزمون در سيستم کلي ارزيابي نحوه اطلاع رساني به فراگيران آموزش ارزيابي کنندگان

DOPS چگونه؟ (مرحله اجرا) مشاهده مستقيم فراگير در حين انجام پروسيجر ارزيابي بر اساس محورهاي از قبل تعيين شده ثبت مشاهدات در فرم مخصوص ارائه بازخورد به فراگير نگهداري مستندات

DOPS Utility چه چيز را مي سنجد؟ مهارتهاي پروسيجرال سودمندي: پايايي: ± (زياد بودن تعداد دفعات ارزيابي و تنوع ارزيابي کنندگان) روايي: + تاثير آموزشي: باعث ارتقا مهارتهاي پروسيجرال مي شود مقبوليت: + عملي بودن: + هزينه:؟، هزينه اثر بخشي: بالا

DOPS DOPS

GRF vs. Checklists Best evidence Expert opinions Advances in Health Sciences Education. 1996; 1(3): 227-233 Academic Medicine 1998;73:993-7 Advances in Health Sciences Education. 2002;7(2):133-45 Expert opinions John J. Norcini, Ph.D. Zubair Amin, MD, MSc. Brian D. Hodges, MD, PhD, FRCPC