دیدآموز

تحلیل کیفیت سوالات آزمون؛ ضریب دشواری و ضریب تمیز چه می‌گویند؟

۱۲ آبان ۱۴۰۵ · ۶ دقیقه مطالعه · تیم دیدآموز

تحلیل کیفیت سوالات آزمون با نمودار ضریب دشواری و ضریب تمیز روی میز مشاور آموزشی

تحلیل کیفیت سوالات آزمون یعنی بررسی رفتار هر سؤال با دادهٔ واقعی پاسخ‌ها. ضریب دشواری نشان می‌دهد چند درصد دانش‌آموزان درست زدند و ضریب تمیز نشان می‌دهد سؤال بین دانش‌آموز قوی و ضعیف تفاوت گذاشته یا نه. سؤالی که دشواری معقول دارد اما تمیز نزدیک صفر است، اغلب معیوب است نه دانش‌آموز.

تحلیل کیفیت سوالات آزمون یعنی بررسی رفتار هر سؤال با دادهٔ واقعی پاسخ‌ها، نه با حس و سابقهٔ طراح. دو شاخص پایه برای این کار کافی است: ضریب دشواری که می‌گوید چند درصد دانش‌آموزان به سؤال درست پاسخ داده‌اند و ضریب تمیز که می‌گوید سؤال بین دانش‌آموز قوی و ضعیف تفاوت گذاشته یا نه. اگر این دو عدد را نشناسید، ممکن است یک سؤال بد را به حساب ضعف دانش‌آموز بگذارید.

چرا سؤال بد شبیه افت تحصیلی دیده می‌شود

کارنامهٔ یک آزمون، سه لایه دارد: عملکرد دانش‌آموز، کیفیت سؤال و شرایط برگزاری. مشاور معمولاً فقط لایهٔ اول را می‌بیند. دانش‌آموزی که در آزمون قبل نمرهٔ خوبی گرفته و این بار افت کرده، ممکن است همان دانش‌آموز باشد و سؤال‌ها عوض شده باشند.

سه نشانهٔ رایج که باید شک را به سمت آزمون ببرد:

  1. افت نمره در یک درس با افت هم‌زمان در چند درس دیگر رخ نداده و فقط محدود به چند سؤال است.
  2. تعداد زیادی از دانش‌آموزان قوی همان سؤال‌ها را غلط زده‌اند و دانش‌آموزان ضعیف همان‌ها را درست زده‌اند.
  3. دانش‌آموز بعد از آزمون می‌گوید «سؤال را می‌فهمیدم ولی منظور طراح را نفهمیدم» یا «دو گزینه واقعاً یکی بود».

پیش از هر گفت‌وگوی مشاوره‌ای دربارهٔ افت، مسیر درست این است که ابتدا کیفیت سؤال را بررسی کنید. برای دیدن چک‌لیست کامل بررسی علت افت تحصیلی دانش‌آموز و برای تفکیک نوسان نمره از پیشرفت واقعی، تحلیل روند تحصیلی دانش‌آموز را ببینید.

ضریب دشواری چیست و چه عددی قابل قبول است

ضریب دشواری، نسبت تعداد پاسخ‌های صحیح یک سؤال به تعداد کل دانش‌آموزانی است که به آن سؤال پاسخ داده‌اند. عددی بین صفر و یک به دست می‌آید.

  • ضریب نزدیک ۱ یعنی تقریباً همه درست زده‌اند؛ سؤال آسان است و اطلاعات کمی دربارهٔ تفاوت دانش‌آموزان می‌دهد.
  • ضریب نزدیک صفر یعنی تقریباً همه غلط زده‌اند؛ سؤال بسیار سخت یا معیوب است.
  • محدودهٔ سالم برای آزمون‌های پیشرفت تحصیلی معمولاً بین ۰٫۳ تا ۰٫۸ است.

نکتهٔ مهم این است که دشواری به‌تنهایی قضاوت نمی‌کند. سؤال سخت در یک آزمون سطح‌بندی‌شده می‌تواند کاملاً درست باشد. مشکل وقتی شروع می‌شود که سؤال هم سخت باشد و هم هیچ تفاوتی بین دانش‌آموزان ایجاد نکند.

ضریب تمیز؛ سؤال خوب فرق دانش‌آموز قوی و ضعیف را نشان می‌دهد

ضریب تمیز از مقایسهٔ دو گروه محاسبه می‌شود: ۲۷ درصد بالای گروه بر اساس نمرهٔ کل آزمون و ۲۷ درصد پایین گروه. سپس درصد پاسخ صحیح به آن سؤال در گروه بالا منهای درصد پاسخ صحیح در گروه پایین محاسبه می‌شود.

تفسیر سادهٔ عدد:

  • بالای ۰٫۳: سؤال متمایزکننده و سالم.
  • بین ۰٫۱ تا ۰٫۳: قابل قبول اما نیازمند بازبینی.
  • نزدیک صفر: سؤال بین قوی و ضعیف تفاوتی نمی‌گذارد؛ تقریباً بی‌فایده است.
  • منفی: دانش‌آموزان ضعیف بیشتر از قوی‌ها درست زده‌اند؛ نشانهٔ جدی خطا در کلید یا صورت سؤال.

ضریب تمیز منفی همیشه تقصیر دانش‌آموز نیست. در عمل، بیشترین علت‌های آن این‌ها هستند: کلید اشتباه در پاسخنامه، دو گزینهٔ درست هم‌زمان، صورت سؤال دو پهلو، یا انتقال اشتباه گزینه‌ها در نسخهٔ چاپی.

وقتی تعداد دانش‌آموزان کم است

در کلاس‌های کوچک یا آزمون‌های آزمایشی با شرکت‌کنندهٔ کم، این دو شاخص نوسان زیادی دارند. در این حالت عدد را به‌عنوان سرنخ ببینید نه حکم قطعی، و تصمیم نهایی را به دو یا سه آزمون بعدی موکول کنید. ثبت منظم نتیجهٔ هر آزمون در یک بانک سؤال، همان چیزی است که به‌مرور قضاوت را دقیق می‌کند.

جدول تصمیم: کدام سؤال بماند، کدام بازنویسی شود

| ضریب دشواری | ضریب تمیز | تفسیر | اقدام پیشنهادی | | --- | --- | --- | --- | | بالای ۰٫۸ | هر مقدار | سؤال آسان | در آزمون سنجش پیشرفت نگه ندارید؛ برای گرم‌کردن ابتدای آزمون مناسب است | | ۰٫۳ تا ۰٫۸ | بالای ۰٫۳ | سؤال سالم | در بانک سؤال بماند | | ۰٫۳ تا ۰٫۸ | کمتر از ۰٫۱ | مبهم یا گزینه‌های هم‌پوشان | بازنویسی صورت سؤال و گزینه‌ها | | کمتر از ۰٫۲ | بالای ۰٫۳ | سخت اما متمایزکننده | در آزمون‌های سطح بالا نگه دارید | | کمتر از ۰٫۲ | منفی یا نزدیک صفر | احتمال کلید اشتباه | بازبینی فوری کلید و پاسخنامه |

مراحل عملی تحلیل کیفیت سوالات آزمون در مؤسسه

  1. پاسخ‌برگ‌ها را پیش از اعلام نتایج به داده تبدیل کنید. اگر آزمون کاغذی است، ورود داده را از همان روز شروع کنید.
  2. نمرهٔ کل هر دانش‌آموز را محاسبه و گروه را مرتب کنید تا دو گروه ۲۷ درصد بالا و پایین مشخص شود.
  3. برای هر سؤال، درصد پاسخ صحیح کل و درصد پاسخ صحیح در دو گروه را جدا کنید.
  4. سؤال‌های با ضریب تمیز منفی یا نزدیک صفر را جدا فهرست کنید و کلید آن‌ها را دوباره بخوانید.
  5. سؤال‌های معیوب را قبل از اعلام کارنامه اصلاح یا از محاسبه حذف کنید، سپس نمرهٔ نهایی را بازمحاسبه کنید.
  6. نتیجهٔ تحلیل را در بانک سؤال ثبت کنید تا سؤال اصلاح‌شده در آزمون بعدی دوباره آزمایش شود.

مسیر کامل این فرایند از طراحی تا گزارش، در مقالهٔ مدیریت آزمون در مؤسسهٔ آموزشی آمده و جزئیات برگه و تحلیل، در آزمون کاغذی و آزمون‌ساز.

چک‌لیست ارزیابی سریع پس از هر آزمون

  • آیا سؤال‌های با ضریب تمیز منفی شناسایی شده‌اند؟
  • آیا کلید همهٔ سؤال‌های مشکوک دوباره بررسی شده است؟
  • آیا سؤال‌های بسیار آسان از آزمون‌های سنجش پیشرفت حذف شده‌اند؟
  • آیا سهم سؤال‌های سخت و متمایزکننده در آزمون متعادل است؟
  • آیا برای دانش‌آموزانی که افت کرده‌اند، گزارش جداگانه با ذکر سؤال‌های معیوب تهیه شده است؟
  • آیا سؤال اصلاح‌شده در بانک سؤال با یادداشت تغییر ثبت شده است؟

دیدآموز همین مسئله را چطور حل می‌کند

دیدآموز، پلتفرم یکپارچه مدیریت مؤسسات آموزشی و مشاورهٔ تحصیلی است و این تحلیل را از حالت دستی خارج می‌کند:

  • تحلیل هوشمند آزمون شاخص‌های هر سؤال را از دادهٔ پاسخ‌ها محاسبه می‌کند تا سؤال‌های معیوب پیش از اعلام کارنامه مشخص شوند.
  • بانک سؤال اختصاصی مؤسسه و بانک عمومی سؤال اجازه می‌دهد سؤال اصلاح‌شده نگه‌داری شود و سابقهٔ عملکرد آن باقی بماند.
  • کارخانه سؤال هوشمند و ورود گروهی سؤال کار آماده‌سازی و اصلاح بانک سؤال را سریع‌تر می‌کند.
  • برگزاری آزمون آنلاین و آزمون کاغذی هر دو پوشش داده می‌شود و دادهٔ پاسخ‌ها در یک جا جمع می‌شود.
  • تحلیل عملکرد دانش‌آموز و گزارش‌های تحلیلی پیشرفته به مشاور کمک می‌کند افت نمره را با کیفیت سؤال تفکیک کند.
  • خروجی داده و گزارش امکان بررسی مستقل داده‌ها را برای مدیر فراهم می‌کند.

برای دیدن این مسیر روی دادهٔ مؤسسهٔ خودتان، درخواست دموی رایگان دیدآموز را ثبت کنید یا پلن‌ها و ظرفیت‌های دیدآموز را ببینید.

پرسش‌های متداول

ضریب دشواری سؤال چگونه محاسبه می‌شود؟

تعداد پاسخ‌های صحیح به یک سؤال تقسیم بر تعداد کل دانش‌آموزانی که به آن سؤال پاسخ داده‌اند. عددی بین صفر و یک به دست می‌آید و محدودهٔ سالم آن معمولاً ۰٫۳ تا ۰٫۸ است.

ضریب تمیز منفی یعنی چه؟

یعنی دانش‌آموزان ضعیف بیشتر از دانش‌آموزان قوی به آن سؤال درست پاسخ داده‌اند. رایج‌ترین علت آن کلید اشتباه، صورت سؤال مبهم یا دو گزینهٔ درست هم‌زمان است.

چطور بفهمم افت نمرهٔ دانش‌آموز از سؤال بد است یا ضعف واقعی؟

کیفیت سؤال‌های همان آزمون را بررسی کنید. اگر سؤال‌های افت‌کرده ضریب تمیز پایین یا منفی دارند، ابتدا آزمون را اصلاح کنید و بعد دربارهٔ دانش‌آموز تصمیم بگیرید.

آیا سؤال سخت را باید از آزمون حذف کرد؟

نه. سؤال سخت با ضریب تمیز بالا ارزش تشخیصی دارد. سؤالی که باید حذف یا بازنویسی شود، سختی بالایی دارد و در عین حال بین دانش‌آموزان تفاوتی ایجاد نمی‌کند.

در کلاس‌های کوچک این شاخص‌ها قابل اعتماد هستند؟

در تعداد کم شرکت‌کننده نوسان زیادی دارند. آن‌ها را سرنخ بگیرید و تصمیم نهایی را بر اساس نتیجهٔ چند آزمون متوالی بگیرید.

سؤال اصلاح‌شده را باید دوباره در آزمون بعدی استفاده کرد؟

بله. ثبت سؤال در بانک سؤال و آزمایش دوبارهٔ آن در آزمون بعدی، تنها راه اطمینان از درست شدن اصلاح است.

مطالب مرتبط

طراحی آزمون جبرانی؛ سنجش رفع اشکال بدون تکرار سؤال

طراحی آزمون جبرانی؛ سنجش رفع اشکال بدون تکرار سؤال

آزمون جبرانی وقتی معنا دارد که با سؤال‌های تازه و هم‌سطح آزمون اصلی برگزار شود، نه با تکرار همان برگه. معیار عبور را پیش از آزمون و در سطح مبحث تعیین کنید تا اثر اصلاح برنامه سنجیده شود، نه حافظهٔ کوتاه‌مدت دانش‌آموز.

۱۱ آبان ۱۴۰۵ · ۱ دقیقه مطالعه
مقایسه نتایج آزمون‌های آزمایشی؛ درصد، تراز یا رتبه؟

مقایسه نتایج آزمون‌های آزمایشی؛ درصد، تراز یا رتبه؟

مقایسه نتایج آزمون‌های آزمایشی تنها با یک عدد معتبر نیست. درصد خام به دشواری سؤال و بودجه‌بندی حساس است، تراز به جامعهٔ شرکت‌کنندگان وابسته است و رتبه هم بیش از همه از ترکیب این دو اثر می‌گیرد. مقایسهٔ درست، مقایسهٔ هم‌ز

۹ آبان ۱۴۰۵ · ۱ دقیقه مطالعه
جلوگیری از تقلب در آزمون آنلاین؛ مقایسهٔ سه روش و محدودیت‌ها

جلوگیری از تقلب در آزمون آنلاین؛ مقایسهٔ سه روش و محدودیت‌ها

جلوگیری از تقلب در آزمون آنلاین با ترکیب سه اهرم عملی ممکن است: زمان‌بندی مشخص، تنوع سؤال و طراحی مفهومی. هیچ‌کدام تقلب را صفر نمی‌کند؛ هرکدام نوعی از تقلب را گران‌تر می‌کند و محدودیت خودش را دارد.

۱۳ آبان ۱۴۰۵ · ۱ دقیقه مطالعه