پروژه Monte Carlo (قسمت سوم)

ثبات آماره‌های سؤال تئوری سؤال- پاسخ و تئوری کلاسیک- تست:

جداول 4 و 5 نتایج شبیه‌سازی ما را که ویژگی‌های ثبات چارچوب‌های اندازه‌گیری تئوری کلاسیک – تست و تئوری سؤال- پاسخ را بررسی می‌نماید ارائه می‌کند. ارقام ثبت شده در این جداول معدل همبستگی‌های با استفاده از Fisherz transformations برآوردهای برآوردهای دشواری سؤال (جدول 4) و برآوردهای تمییز سؤال (جدول 4) مشتق شده از همان چارچوب اندازه‌گیری در 100 آزمون شبیه‌سازی شده هستند. هر آزمون دو نمونه متفاوت از آزمودنی‌های شبیه‌سازی شده پاسخگو، که در کل 200 نمونه اتفاقی آزمودنی‌ها برای هر شرایط وجود داشت. برآوردهای پارامتری سؤال تئوری سؤال- پاسخ از نمونه‌های متفاوت آزمودنی (نمونه 1 در مقابل نمونه 2) همبستگی برای اندازه‌گیری ثبات آماره‌های سؤال مبتنی بر تئوری سؤال- پاسخ اندازه‌گیری شد. آماره‌های سؤال تئوری کلاسیک-تست حاصل از نمونه‌های متفاوت بطور مشابه با یکدیگر مقایسه گردید.

پروژه Monte Carlo (قسمت دوم)

آماره‌های سؤال و آزمودنی

آماره‌های سؤال و آزمودنی تئوری سؤال- پاسخ و تئوری کلاسیک- تست برای هر سری داده‌های پاسخ ایجاد شده در این مطالعه برآورد شدند. نتایج برای قابلیت قیاس (هم نظیری)، ثبات و صحت مورد بررسی قرار گرفتند. این فرآیند 100 بار برای هر وضعیت مطالعه انجام شد. دشواری سؤال در چارچوب تئوری کلاسیک-تست بعنوان نسبت آزمودنی‌ها که بطور موفقیت آمیز به هر سؤال (مثل 100) پاسخ دادند اندازه‌گیری شد. یک شاخص دشواری سؤال بالا برای یک سؤال نشان می‌دهد که نسبت بزرگتری از آزمودنی‌ها بطور صحیح پاسخ دادند. بدین صورت، مقادیر دشواری بالا سؤالات آسان‌تر را نشان می‌دهد، در حالیکه مقادیر پایین سؤالات سخت‌تر را نشان می‌دهد. آماره‌های دشواری سؤال در چارچوب اندازه‌گیری تئوری سؤال- پاسخ برای هر سؤال بعنوان پارامتر b (دامنه‌ی حدود 2 تا 2- ) در هر دو مدل یک و دو پارامتری تئوری سؤال- پاسخ اندازه‌گیری شد. در این چارچوب، مقادیر پارامتری بالا سؤالات مشکل را نشان می‌دهند، در حالیکه مقادیر پایین سؤالات ساده را نشان می‌دهند.

پروژه Monte Carlo (قسمت اول)

با وجود امتیازات نظری شناخته شده تئوری سؤال- پاسخ نسبت به تئوری کلاسیک-تست تحقیقاتی که ویژگی‌های تجربی‌شان برای معلوم کردن تفاوت‌های پایدار قابل اثبات بودند، ناکام ماندند. این مطالعه با استفاده از تکنیک‌های Monte Carlo با داده آزمون شبیه سازی شده ویژگی آماره‌های آزمودنی و سؤال حاصل از این دو چارچوب اندازه‌گیری را بررسی نمود. یافته‌ها ارائه نمودند که برآوردهای توانایی آزمودنی و دشواری سؤال مبتنی بر تئوری سؤال- پاسخ و تئوری کلاسیک- تست در شرایط شبیه‌سازی آزمون با یکدیگر بسیار قابل مقایسه (همانند) باثبات و دقیق هستند. اگر چه، در حالیکه برآوردهای تمییزسؤال براساس تئوری سؤال- پاسخ در میان اکثر شرایط تجربی درست هستند، پارامترهای تمییزسؤال مبتنی بر تئوری کلاسیک- تست ثابت شد تنها تحت یکسری شرایط صحت دارند. کاربردهای نتایج این مطالعه برای تجزیه و تحلیل سؤال روانسنجی و انتخاب سؤال بحث می‌شود.