معاونت آموزشی- آنالیز آزمون
آنالیز آزمون

حذف تصاویر و رنگ‌ها

جدول میلمن AWT IMAGE

آنالیز کمی و کیفی آزمون های چندگزینه ای

چکیده گزارش نهایی طرح تحقیقاتی
عنوان: تجزیه و تحلیل کمی و کیفی آزمون های چندگزینه ای دروس تخصصی .... در نیمسال دوم تحصیلی 87-88

مجری: دکتر لیلا جویباری، دکتر اکرم ثناگو
همکار: مریم قنبری گرجی
آدرس: گرگان، دانشگاه علوم پزشکی گلستان، مرکز مطالعات و توسعه آموزش پزشکی

مقدمه: هر آزمونی به عنوان ابزار سنجش و اندازه گیری می باید دارای روایی و پایایی کافی برای سنجش صفت مورد نظر باشد. آزمون های چند گزینه ای رایج ترین انواع آزمون ها در آموزش پزشکی می باشند که از درجه پایائی بالایی برخوردارند. متاسفانه بسیاری از آزمون های معلم ساخته و استاندارد نشده با اشکالات متعددی همراه هستند.
هدف: هدف از این مطالعه ارزیابی کمی و کیفی گروهی از آزمون های چند گزینه ای ... در سال 1388 بوده است.
مواد و روش ها: در این مطالعه کاربردی توصیفی کلیه سؤالات آزمون های کتبی چند گزینه ای نیمسال تحصیلی دوم دو گروه ... شامل 12 درس و 523 سوال مورد بررسی قرار گرفت. سوالات از نظر ساختار مطابق چک لیست مبتنی بر اصول 14 گانه میلمن برای طراحی ساقه و گزینه های سؤال، تاکسونومی بلوم ارزیابی شدند. برای بررسی قدرت تمیز سوال و دشواری آزمون و سایر شاخص های کمی از نرم افزار آنالیز آزمون استفاده شد.
یافته ها: از 523 سوال مورد بررسی 94.3 درصد "ساختاری در حد خوب" داشتند. بیشترین اشکالات ساختاری مربوط به "چینش خطی گزینه ها 57.4درصد، قرار نداشتن بخش اعظم اطلاعات در ساقه سؤال 32.7درصد، کلمات تکراری در گزینه ها 32.1درصد و همسنگ نبودن گزینه ها از نظر طول و ساختار لغوی 29.8درصد "بوده است. 96.4درصد سوالات در سطح یک "دانش و فهم" قرار داشتند. 79.8 درصد سوالات از بایدهای یادگیری بودند. میانگین ضریب دشواری کل آزمون ها از 0.49 تا 0.8 متغیر بوده است. در کل 21.1 درصد سوالات، مناسب، 43.7درصد سوالات خیلی آسان و 14.5 سوالات نیز خیلی سخت بودند. تقریبا تمامی آزمون ها از قدرت تمیز کمی "با دامنه قدرت تمیز 0.14 و بیشترین قدرت تمیز 0.32" برخوردار بودند. از مجموع 12 درس دو درس  قدرت تمیز مطلوب داشتند.
نتیجه گیری: بررسی حاضر نشان داد اگرچه آزمون های چند گزینه ای مورد مطالعه از  نظر ساختاری در وضع نسبتا خوبی قرار داشتند اما از نظر توزیع تاکسونومی، قدرت دشواری، قدرت تمیز نیازمند اتخاذ تدابیر اصلاحی می باشند. این تدابیر می تواند برگزاری کارگاه های آموزشیبرای اساتید و نظارت دفتر ارزشیابی مرکز مطالعات و توسعه آموزش علوم پزشکی دانشگاه بر این امر مهم باشد. بررسی کمی و کیفی آزمون های سایر گروه های بزرگ آموزشی دانشگاه ضروری می باشد.
کلمات کلیدی: پیشرفت تحصیلی، آزمون چند گزینه ای، تاکسونومی، اصول میلمن، آنالیز کمی، آنالیز کیفی

 مقایسه روش های آزمون چند گزینه ای، صحیح - غلط و کوتاه پاسخ

مقایسه روش های آزمون چند گزینه ای، صحیح - غلط و کوتاه پاسخ در دانشجویان پزشکی

تا کنون اعتبار روش های مختلف برای ارزیابی دانش فراگیران، مستقل از یکدیگر بررسی و تعیین گردیده است.

این تحقیق توصیفی- تحلیلی به گونه ای طراحی شده است که یک نکته علمی به سه روش چند گزینه ای، صحیح- غلط و کوتاه پاسخ (تکمیل جملات با کلمه مناسب) از 1372 دانشجوی پزشکی سوال گردیده تا بتوان نتایج هر روش را با دو روش دیگر در همان افراد مقایسه نمود.

هر یک از استادان 9 کلاس با انتخاب تصادفی، 30 سوال با سه روش برای 10 نکته علمی طرح نمودند که مجموعا 270 سوال مورد بررسی قرار گرفت.

آنالیز فاکتور نمرات دانشجویان، پس از حذف سوالات با درجه تمایز کمتر از 0.3 نشان داد که معتبرترین روش مورد بررسی، سوالات کوتاه پاسخ است (r=0.685). ضرایب کاپا برای روش کوتاه پاسخ و دو روش دیگر در محدوده توافقی ”fair“ قرار داشت. بیشترین ضریب توافقی بین روش های چند گزینه ای و صحیح غلط بود (402/0). تعداد جواب های درست در روش کوتاه پاسخ کمترین 53درصد و در روش صحیح-غلط بیشترین 65درصد بود. تعداد جواب های غلط در روش چند گزینه ای 32 درصد بیشتر از روش صحیح-غلط 26درصد بود که می تواند به علت مواجهه دانشجویان با تعداد زیاد پاسخ های انحرافی در روش چند گزینه ای باشد که بدون اتکا به دانش خود آنها را علامت زده اند.

پیشنهاد می شود برای ارزیابی میزان یادگیری و یادداری دانشجویان از یک طرف و گمراه نکردن آنان از طرف دیگر روش های کوتاه پاسخ و صحیح - غلط در ترکیب اصلی سوالات قرار گیرند و به سوالات چند گزینه ای اکتفا نگردد

حکیم زمستان 1381; 5(4):271-278.
 رساییان نیر,نخعی سهیلا,صادقی قندهاری نوید


 •  سوالات چند گزینه ای one-best-answer item

سوالات چند گزینه ای متداول ترین  نوع تست های ارزیابی دانش است

 به دشواری می توان یک  ازمون با سوالات  چند گزینه ای خوب پیدا کرد .  در یک بررسی  39 هزار تست چند گزینه ای ارزیابی شدند نتیجه نشان داد یک چهارم مواردی که دانشجویان  به خطا پاسخ دادند ناشی از  اشکال در طراحی سوال توسط استاد بوده است

کیفیت یک ازمون چندگزینه ای را چگونه بررسی می کنیم

باید اهداف اموزشی را  تحت پوشش قرار دهد

معمولا هم  سطوح شناختی پایین  تاکسونومی بلوم  با این سوالات  محقق می شود

محدودیت های تست را بدانیم  قرار نیست با یک ازمون  چند گزینه ای  همه چیز را بررسی کنیم

تست های چند گزینه ای انواع دارند

دو شکل اساسی ان

 - یک پاسخ از همه بهتر است   one-best-answer - format که یکی از گزینه ها نسبت به سایرین بهترین است

  فرم دوم: صحیح و غلط. یک گزینه صد درصد  صحیح و دیگری صد در صد غط است

سوال چند گزینه ای شامل ساقه سوال ، یک سوال پیش برنده یا lead-in- question  و  چندین گزینه است

 یک گزینه بهترین است و چهار گزینه  دیگر کمترین صحت را دارند

 زیرا در  عالم واقع به هنگام مواجهه با بیماران نیز نمی توان برای مثال تشخیصی را صد در صد رد نمود

از مشخصات این قبیل سوالات

 دانشجو باید قادر باشد قبل از اینکه گزینه ها را بخواند صرفا با خواندن ساقه سوال  پاسخ را بگوید یعنی نباید بخشی از سوال در  گزینه ها قرار داده شوند

تمام سوال باید در ساقه باشد

اشکالات تکنیکی سوالات چند گزینه ای

وجود اشکالات تکنیکی منجر می شود دانشجویانی که درس  را نخواندند با حدس و  سرنخ های موجود

در سوالات و گزینه ها پاسخ  صحیح را انتخاب نمایند به  این دانشجویان  testwiseness  گویند  یعنی خرد 

تست زدن دارند

قرار است امتحان ما قادر باشد یک پزشک  با دانش خوب را از پزشک با دانش بد  شناسایی نماید نه اینکه کسی دارای  هوش تست زدند از طرف دیگر  قرار نیست که بیهوده سوالات را دشوار نماییم و رویکرد سادیتیک داشته باشیم  به طوری که  افراد با سواد نمره نیاورند

 موارید از قبیل گزینه های  طولانی ، پیچیده، واژگان مبهم، زبان  غیرموازی ساقه و گزینه ، داده های عددی  گیج کننده، ترتیب نادرست گزینه ها و یا استفاده از هیچکدام از موارد فوق به عنوان  پاسخ یکی از  گزینه ها از  جمله اشکالات تکنیکی در طراحی ازمون ها به شمار می روند

وجود راهنماهای گرامری نیز مورد دیگر است

 برای مثال در ساقه امده است   یک اقای 60 ساله با تابلوی ..... مراجعه کرده است  تزریق کدامیک ....

 و در گزینه ها بیاورید

 بررسی مایع مغزی نخاعی

 سی تی اسکن

 فنی توئین

 دیازپام

در دنیای روزمره  مفاهیم معمولا مطلق نمی باشند  می توانید در گزینه ها اغلب بیاورید ولی از اوردن 

همیشه ، هرگز و کلمات مطلق  خودداری نمایید .  دانشجو به راحتی موارد مطلق را کنار می گذارد

از دیگر اشکالات

 گزینه درست گزینه ای طولانی است . برخی از مدرسن دوست دارند ضمن امتحان به دانشجو چیزی را یاد بدهند و این اشتباه است  هر کدام زمان خاص خود را دارند

از دیگر اشکالات  تکرار کلمه ای خاص در ساقه سوال و در  گزینه ها می باشد

 دانشجو از راهبرد تقارب استفاده می کند  به راحتی از کلمات مشابه فاکتور می گیرد   و به صورت تقاربی به گزینه درست می رسد

مواردی که باعث می شود دانشجوی باسواد جواب درست ندهد

 گزینه های طولانی

 گزینه های پیچیده

 گزینه های دابل

 استفاده از  داده های عددی بهم نزدیک

مثال:

 کمتر از 20 درصد

 بین 20 تا 30 درصد

 بیش از 90 درصد

 75 درصد

از واژگانی استفاده شود که مفهوم ثابت ندارد

در یک پژوهش به دانشجویان گفتند usually  برای شما  چند درصد را تداعی می کند.  عده ای گفتند پنجاه و عده ای  شصت درصد .

 از قیدهای تکرار و مقدار بهتر است در گزینه ها کمتر استفاده شود: همیشه، اغلب، بندرت.

  زبانی که استفاده می شود موازی نباشد و ترتیب گزینه ها منطقی نباشد. سوالی که می پرسید و پاسخ ها چند جنبه مختلف را در کنار هم قرار دهد . باید دانشجو با خواندن ساقه سوال به نتیجه برسد

 از موارد دیگر

 کدامیک از شهرهای زیر  به تهران نزدیک تر است؟  چهار شهر را می نویسید و گزینه پنجم می نویسید "هیچکدام" .  این مورد اشکال  تکنیکی به شمار می رود . به هر حال یک  شهر به  تهران نزدیک تر است

گزینه هیچکدام

 قرار است دانشجو بهترین  پاسخ را انتخاب کند ایا در عالم واقع در مطب شما می توانید بگویید  هیچ تشخیص افتراقی مطرح نمی باشد

 ما تست هوش برگزار نمی کنیم  نباید پیچیدگی های ذهن خود را به رخ بکشیم  پس سوال ما نباید گول زننده باشید و بیهوده پیچیدگی را  اضافه نماییم

از کلاس های دکتر شهرام یزدانی دانشگاه شهید بهشتی دوره اموزش پزشکی  غیر حضوری


 آزمون با رویکرد مشکل کلیدی Key feature problem بخش اول

در سال 1987 آقایانbordage و page برای اولین بار بکار بردند. تحلیل نقادانه ای برای clinical assessment هایی که تا سال 1985 انجام شده بود صورت گرفت. دنبال این بودند بداننند وقتی بحث تصمیم گیری های بالینی و مهارت های آن مطرح می شود ارزیابی های اون چه چیزهایی را بررسی می کند. در ان زمان به چند مشکل اساسی پی بردند. در ان زمان روش غالب در ارزیابی patient management problem بود. یک کیس case / سوال خیلی طولانی می دهند که مراحل خیلی طولانی دارد و گاه در یک امتحان نود دقیقه ای فقط یک PMP مطرح می شود.

پیش فرضی که در ان زمان وجود داشت این بود که مهارت های تصمیم گیری ژنریک است و به اون کیس مطرح شده ربطی ندارد پس اگر دانشجویی بتواند یک مساله بالینی را در قالب پی.ام.پی حل کند پس باید بتواند سایر پی.ام.پی ها را نیز حل کند. این پیش فرض تا سال 1987 وجود داشت. روش پی.ام.پی در زمان خودش از سناریوی بالینی و سوالات/مراحل متعدد به دنیال ان تشکیل می شد. معمولا طولانی بود حداکثر سه تا پنج سوال پی.م.پی در یک امتحان بود. یک سری ایراد اساسی در مورد پی.ام.پی مطرح شد. علی رغم اینکه authenticity و face validity بالایی داشت و ظاهر آنها خیلی واقعی است

اما چهار ایراد اساسی دارند: پایایی خیلی پایینی دارند. پژوهش های خیلی متعددی انجام شد. اگر بخواهیم پایایی را افزایش دهیم باید امتحان طولانی شش یا هفت ساعته برگزار کنیم و چند نوبت امتحان.

نکته دوم این که فرایند تصمیم گیری فقط فرایند ژنریک نیست بلکه یک "ویژگی مساله بالینی" دارد. یعنی این نیست که یک مساله را حل کرد بتواند سایر مسائل را هم حل کند. بحث content coverage یا پوشش محتوایی مطرح شد. پس باید پوشش محتوایی معقولی داشته باشد و دو یا سه پی.ام.پی نمی تواند این را فراهم نماید.

سوم. تحقیقات همان زمان نشان داد عملکرد یک داشجوی جینیور با پزشک متبحر خیلی با هم در تست ها فرق ندارد. در حالی که باید متفاوت باشد. نمرات یک پزشک متبحر از پی.ام.پی با پزشک تازه کار یکی بود پس احتمالا اون چیزی که اندازه گیری می شد تصمیم گیری بالینی نبود.

نکته دیگر. نمرات افراد از پی.ام.پی با نمرات انها در تست های دانش محفوظی factual knowledge همبستگی خیلی بالایی داشت. ما قبلا می گفتیم دانش محفوظاتی یک سازه انتزاعی است مستقل از تصمیم گیری بالینی. پس انتظار داشتیم نمرات ان با تست های دانشی همبستگی خیلی بالایی نداشته باشد. فردی ممکن است خیلی خوب از بر کند اما تواند تصمیم گیری بالینی نداشته باشد. تحقیقات نشان داد که پی.ام.پی تصمیم گیری بالینی را اندازه نمی گیرد بلکه دانش محفوظاتی را می سنجد.

مرور این دو محقق نشان داد که پی.ام.پی کفایت لازم را ندارد و شروع کردند به طراحی تست بالینی دیگری به نام key feature problem

مشخصات آزمون رویکرد مشکل کلیدی: شکل خاصی دارند. به مشخصات اساسی یک مشکل اشاره دارد. هر سوال ان می تواند بیش از یک پاسخ داشته باشد.

ما را به یک محیط واقعی تصمیم گیری نزدیک می کند چون در محیط واقعی ما با بیش از تشخیص مواجه هستیم و انعطاف پذیری بیشتر نسبت یه ازمون های چند گزینه ای MCQ دارد. مزیت دیگر این است که فرایند طولی تصمیم گیری بالینی در ان لحاظ می شود. تصمیمات متوالی را بالای سر بیمار می گیریم. در KFP نیز همین نکته وجود دارد البته این مورد با P.M.P مشترک است.

KFP بعد از طراحی توسط این دو فرد توسط موسسات مختلفی اتخاذ شد و جواب پس داد. برای مثال نظام پزشکی کانادا یک KFP چهار ساعته را با یک MCQ سه و نیم ساعته تلفیق می کند و به عنوان qualifying examination برای اعطای مدرک بکار می برد. دو امتحان می گیرد یکی چهار ساعته است و یکی سه و نسم ساعته است. نتیجه خیلی خوبی گرفته است. پژوهش هایی که در این خصوص انجام شده است نشان داده واقعا ترکیب این دو ازمون قادر است دانش و صلاحیت competence را به طور جداگانه بسنجد.

از جاهای دیگر کالج پزشکان عمومی استرالیا است برای اعطای مدرک از یک KFP سه ساعته به همراه یک آزمون کتبی چهار ساعته و یک آزمونOSCE سه ساعته در مجموع 10 ساعته برای پزشکان عمومی و اعطای مدرک استفاده می کند.

اغلب اوقات تلفیق می بینیم. بخشی از صلاحیت توسط OSCE و بخشی از دانش محفوظاتی توسط MCQ یا ازمون های چند گزینه ای بررسی می شود.

کالج پزشکان امریکا نیز MKSAP یا برنامه خود ارزیابی دانش پزشکی دارد که اساس ان KFP است. این ازمون برای آموزش مداوم استفاده می شود.

به هر حال این ازمون خیلی زود جای خود را باز کرده است.

برای تهیه یک KFP چه باید کرد؟ ابتدا باید یک تیم تشکیل داد که به محتوا تبحر و به این روش آشنایی دارد.

مساله یا مشکل را انتخاب می کنند . مثلا اسهال یا استفراغ یا هماچوری. خیلی ها فهرستی از این مسائل را از قبل دارند. این تیم از خودشان می پرسند مواردی از بیماران که اخیرا داشتید و کیس واقعی بودند و به این مشکلات دچار بودند را به یاد بیاورید. هر کدام پنج تا دقیقه فکر می کنند.

اون سوالات مهمی که در ارتباط با این بیماران به ذهن افراد امد و مجبور شدند تصمیم بگیرند چه بوده است . این موارد را فهرست می کنند. این سوالات اساسی همان key feature را به ما ادرس دهی می کند. خیلی از اقدامات است که مهم محسوب می شود اما اساسی یا critical محسوب نمی شود. در KFP باید به سراغ قدم های اساسی یا critical برویم. مدیریت این بیماری که کتواسیدوز دیابتی دارد ممکن است 20 اقدام انجام بدهیم که 15 تای آنها مناسب است اشتباه نمی باشد اما پنج تای آن اساسی است. در KFP به سراغ اون پنج اقدام اساسی یا critical می رویم.

key feature چه چیزی می تواند باشد؟ هر جزئی از فرایندهای اساسی ذهنی ما در حین مدیریت یک بیمار را می توانند تشکیل دهد. معمولا دو گروه می شوند: یک گروه تصمیم های بالینی است clinical decision مریضی که با علائم دمانس امده است باید افسردگی را نیز در تشخیص های بالینی خود لحاط نمایید. این یک key feature از جنس تصمیمات بالینی است. تصمیمی نگرفته اید که بخواهید اقدامی انجام بدهید بلکه به یک اجماع ذهنی رسیده اید. به دنیال ان اقدامی صورت نمی گیرد. گروه دوم اقدامات بالینی یا clinical action مثل دستور یک ماموگرام، سوال در باره عوامل خطر از بیمار، درخواست یک تست، نوشتن یک نسخه است. اقدام بالینی تظاهری از تصمیم بالینی است.

تصمیمات اساسی که در قالب یک KFP می تواند تست شود سامل موارد زیر است:

اخذ شرح حال یا تاریخچه

تفسیر علائم

جستجو برای یافته های فیزیکی اساسی

تفسیر یافته های فیزیکی

تدوین فهرست تشخیصی یا تشخیص های افتراقی

درخواست بررسی هایی برای تایید یا رد تشخیص های افتراقی

اهداف درمانی یا تصمیمات

تجویز دارو

پیگیری مشخص

مرحله بعدی: یک سری واژگان کلیدی در سوال قرار می دهیم یا qualifier

Common qualifiers in key features

مانند: فوری، آغزاین، طولانی مدت، مشخص، بلافاصله، مهم ترین، محتمل ترین، نباید از قلم افتاده شود

چرا این واژگان مهم است؟ زیرا ما، طراحان آزمون، وقتی به اون مسائل کلیدی فکر می کردیم حال با این واژگان دانشجو را هدایت کنیم تا به key feature ها فکر کند.

قدم بعدی تدوین یک مورد یا case development است

فکر می کنند یک کیس واقعی یا کیس غیر واقعی را به صورت یک سناریو در می آورند. به اون نکات اساسی اشاره می شود مانند سن ، جنس ... اگر سوال تشخیصی باشد case کوچک تر می دهند و اگر سوال درمانی باشد معمولا کیس ما طولانی تر و مبسوط تر است و در نهایت ترتیب و توالی سوالات را به صورت طولی/زمانی در نظر گرفته می شود. توالی زمانی سوالات رعایت می شود. معمولا سناریوی key feature در حد یک و یا یک و نیم پاراگراف است. خیلی طولانی نیست.

چیزهایی که در سناریو قرار داده می شود Typical elements in KFP clinical scenarios 

منظور از مراجعه به پزشک : مثلا درد قفسه صدری، چک آپ، فالوپ

درخواست: پیشگیری، ...

علائم: سرفه ، ...

نشانه ها: تندرنس شکمی

نتایج: بیوشیمیایی، تصویر برداری، هماتولوژی، رادیولوژی، نوار قلبی، اسپیرومتری

فوتوگراف ها: نشانه های بالینی، راش ها

مشکلات درمان یا درمان های قبلی اگر داشته است

نوشتن سوالات writing the questions

بعد سوالات را می نویسیم. معمولا دو تا سه سوال بعد از سناریو می آید و هر کدام به یک یا دو key feature اشاره دارد. هدف این نیست که تمامی key feature را در نظر بگیریم معمولا 5 تا 6 جنبه کلیدی در قالب دو یا سه سوال می آید.

نکته مهم: پاسخ های هر سوال می تواند بیش از یکی باشد که معمولا هم بیش از یکی است.

سوالات شکل مشخصی دارند. سوال می تواند مربوط به جمع اوری داده ها باشد ، می تواند تشخیصی باشد، مثلا چه مشاوره ای را مطرح می سازید. تشخیص افتراقی باشد و یا مدیریتی باشد.

پاسخ به سوال یک مورد نیست. وقتی می گوئیم قدم های اساسی ممکن است چند قدم باشد همانگونه که در بالین اینطور است. معمولا چند تاست. پاسخ های درست می تواند بین یک تا 10 مورد باشد اما معمولا بین 3 تا 5 مورد است. خیلی اوقات سه مورد است. به هر حال بیش از یکی است و این موضوع مهم می باشد. دانشجو باید به یک موارد اساسی فکر کند مثلا قند خون را چک می کنید اما دیگر چه؟ قدم های دیگر. مثلا دو یا سه قدم اساسی . خوب پتاسیم را چک کند و وزن مخصوص ادرار

شکل سوالات selecting question formats 

دو جور سوالات مطرح است:

سوالات Write-In جواب خیلی کوتاه در حد کلمه دارد. دانشجو خود باید جواب را بنویسد مثلا "دیابت وابسته به انسولین"، یا " تجویز پنی سیلین"

سوالات Short-Menu دانشجو باید از میان تعدادی optionپاسخ ها را انتخاب کند. در منو یا لیست کوتاه گاه تا 25 آیتم قرار داده می شود.

ادامه دارد

یادداشت های کلاسی از دوره آموزش پزشکی غیرحضوری دانشگاه شهید بهشتی: کلاس درس دکتر شهرام یزدانی، واحد درسی شیوه های ارزشیابی دانشجو

به عنوان دانشجوی این رشته، از تدریس بسیار جذاب، صحیح و اصولی دکتر یزدانی قدردانی می نمایم.


اصل کلی: تعداد این option ها باید آن قدر باشد که دانشجوی نتواند حدس بزند و سه یا چهار مورد را انتخاب کند
توصیه: به ازای هر پاسخ درست 4 یا 5 پاسخ غلط هم کنارش قرار بدهید
سوال. اقدامات تشخیصی که باید برای بیمار انجام دهید چیست؟ و سه اقدام اساسی در نظر گرفتید به ازای هر اقدام اساسی 4 یا 5 گزینه فرعی بتوانید بگذارید که بشود حدود 15 تا 18 تا
اغلب تلفیق short menu و write-in را داریم. منوی کوتاه برای تصحیح راحت است حتی به ماشین می دهند ولی نوع نوشتنی نیاز به یک فرد مصحح دارد
تحقیقات کالج پزشکی کانادا نشان داد نوشتن کوتاه write-in نسبت به فهرست کوتاه short menu از قدرت بیشتری برای افتراق افراد قوی و ضعیف برخوردار است. Write-in علی رغم اینکه طراحی دشوارتری دارد و تصحیح آن دشوارتر است اما معمولا از آن استفاده می شود. مزیت دیگر آن است که کوتاه فهرست ها امکان حدس زدن پاسخ را از سوالات قبلی تا حدی ممکن می سازد یعنی وقتی سوال سوم را کوتاه فهرست گذاشته اید دانشجو از پاسخ هایی که در کوتاه فهرست سوم شما امده است می تواند بفهمد پاسخ سوال اول چه بوده است که این مورد در سوالات تسلسلی و پی.ام.پی و key feature وجود دارد
دانشجویان خیلی اوقات از backward cueing استفاده می کنند و به سوال اخر که می رسند جواب سوال اول را راحت پیدا می کنند یا اگر سوال اول را اشتباه زده باشند می فهمند و بر می گردند تصحیح می کنند
توصیه می شود از هر دو نوع سوال استفاده شود. سوالات اول از نوع کوتاه فهرست باشد و سوالات اخر از نوع write-in باشد که backward cueingکمتر شود
سوالات باید راهنمای سوال داشته باشند. مشخص کنید مثلا دو مورد یا سه مورد را انتخاب کنید یا حداکثر ایکس مورد یا تا سه مورد یا اینکه عدد نمی دهید و یا می گویید هیچکدام یعنی اگر هیچکدام مناسب نبود گزینه هیچکدام را انتخاب کنید
مثال:
یک خانم 35 ساله مادر سه فرزند در ساعت 17 با شکایت از اسهال آبکی و شدید به مطب مراجعه کرده است. از سوالاتی که مطرح می کنید مشخص می شود 24 ساعت است که بیمار می باشد. طی این مدت 15 بار اسهال ابکی ، تهوع بدون استفراغ داشت. وی به عنوان آشپز در یک مرکز نگهداری بیماران مزمن کار می کند اما محل کار خود را ترک کرده و به مطب مراجعه کرده است. در چارت او پرستار مطب فشارخون در حال استراحت 105 روی 50 میلی متر جیوه، در حال خوابیده 110 و در ایستاده 9 روی 4 و درجه حرارت دهانی 36.8 ثبت نموده است. در معاینه فیزیکی مخاط خشک است و صداهای روده ای فعال می باشد. آزمایش ادرار ، نمونه میکروسکوپی، طبیعی است و وزن مخصوص 1030 می باشد.
سوالاتی که طرح می شود
. به چه مشکلات اساسی critical problem در مدیریت فوری این بیماری متمرکز می شوید. تا سه مورد را مشخص کنید. بیمار در این موقع چگونه باید درمان کرد؟ تا سه مورد را انتخاب نمایید.
1. داروهای ضد اسهال
2. داروهای ضد تهوع
3. سدیم کلراید 0.9 درصد وریدی
4. سرم قندی نمکی وریدی
5. مترونیدازول
6. رینگر لاکتات وریدی
7. ساکشن و گذاردن لوله معده
8. منع تغذیه از راه دهان
9. امپی سیلین خوراکی
10. کلرامفینکل خوراکی
11. جنتامایسین وریدی
12. مایعات خوراکی
13. سند رکتال
14. خانه برود اما پیگیری دقیق صورت گیرد
15. مشاوره جراحی
16. انتقال به بیمارستان
طبق راهنمای سوال دانشجو باید سه مورد از شانزده مورد و نه بیشتر را انتخاب نماید
بعد از مدیریت اولیه این بیمار چه اقدامات دیگری را انجام می دهید . تا چهار مورد را انتخاب کنید یا اینکه مورد یازده را انتخاب کنید .
1. اجتناب از فراورده های لبنی
2. کولون سکوپی
3. احتیاطات روده ای
4. مشاوره گوارشی
5. تجویز سرم ایمونوگلوبولین به بیماران مرکز نگهداری بیماران مزمن، محل کار بیمار مذکور.
6. مشاوره بیماری عفونی
7. اطلاع به اداره بهداشت عمومی
8. کشت مدفوع
9. ایزولاسیون شدید بیمار
10. غیبت از کار به طور موقت
11. هیچکدام
همانطور که ملاحظه می شود اکثر موارد سقف گذاشته می شود. دانشجو اگر همه را هم بزند ممکن است درست بزند ولی سقف گذاشته میشود.

نمره دهی یا Scoring در ازمون های با رویکرد مشکل کلیدی. به حالات مختلف که فرد پاسخ میدهد را یک نمره می دهید. برای فهرست کوتاه نمره دادن راحت است اما برای فرم نوشتاری باید از قبل مشخص نحوه نمره دهی را مشخص کنیم مثلا  اگر  کم ابی را نوشت را یک می گیرد و اگر چیزی ننوشت یا بیش از سه مورد را نوشت صفر تعلق می گیرد

در این ازمون، پاسخ در حد کلمه است. این یک ازمون  کوتاه پاسخ یا short answer  نیست که فرد دو یا سه خط بنویسد. اگر به دانشجو گفته اید سه مورد فقط و دانشجو 10 مورد نوشت به امید اینکه از این تعداد چیزی درست در آید نمره ای تعلق نمی گیرد و صفر می شود قرار نیست ساچمه تفنگی عمل کند و جواب بنویسید

نمره

پاسخ

تظاهرات

یک

کم آبی

هیپوولمی، اتلاف مایعات، تخلیه مایعات

صفر

بیش از سه مورد

 

 

پایایی آزمون

 تحقیقات نشان داد این نوع آزمون از پایایی بالایی برخوردار است. در یک آزمون چهار ساعته پایایی 8/0 بوده است.

یادداشت های کلاسی از دوره آموزش پزشکی غیرحضوری دانشگاه شهید بهشتی: کلاس درس دکتر شهرام یزدانی، واحد درسی شیوه های ارزشیابی دانشجو


 



نشانی مطلب در وبگاه معاونت آموزشی:
http://goums.ac.ir/find-16.3557.2639.fa.html
برگشت به اصل مطلب