طراحی خزانه های سوال بهینه برای سنجش انطباقی کامپیوتری با در نظر گرفتن امنیت آزمون

سال انتشار: 1394
نوع سند: مقاله ژورنالی
زبان: فارسی
مشاهده: 291

فایل این مقاله در 47 صفحه با فرمت PDF قابل دریافت می باشد

استخراج به نرم افزارهای پژوهشی:

لینک ثابت به این مقاله:

شناسه ملی سند علمی:

JR_JRESE-5-10_006

تاریخ نمایه سازی: 8 اردیبهشت 1401

چکیده مقاله:

سنجش انطباقی کامپیوتری به خزانه سوالی نیاز دارد که به خوبی طراحی شده و برای ساخت آزمون های مجزا، تعداد مناسبی  سوال داشته باشد. همچنین شامل سوال هایی باشد که از لحاظ محتوایی متعادل باشد و هزینه ساخت آزمون را کاهش دهد. یکی از روش های طراحی خزانه سوال، روش رکیس است، که در آن از روش مونت کارلو برای تعیین ویژگی های یک خزانه سوال بهینه استفاده می شود. در این پژوهش، از این روش برای طراحی خزانه هایی که با مدل سه پارامتری لجستیک مدرج شده اند، استفاده شده است. برای کنترل نرخ مواجهه سوال از روش سیمپسون-هتر و برای شبیه سازی سوال های آزمون از سه روش تصادفی (R)، تصادفی آمیخته و پیش بینی (MRP) و حداقل آگاهی آزمون (MTI) استفاده شده است. عملکرد خزانه های سوال شبیه سازی شده و عملیاتی با در نظر گرفتن مجموعه ای از ملاک های ارزیابی، با یکدیگر مقایسه شده اند. نتایج نشان می دهد که خزانه MRP نسبت به سایر خزانه های بهینه از امنیت و دقت اندازه گیری بالاتری برخوردار است و شامل سوال های زیادی با ضریب تشخیص بالا است. نرخ همپوشی آزمون در آن کمتر و درصد کوچکی از سوال های بیش مواجهه و کم مواجهه دارد. در مقابل اندازه خزانه MTI نسبت به سایر خزانه های بهینه کوچک تر و سوال هایی با ضریب تشخیص پایین تر دارد. به طور کلی با در نظر گرفتن عامل کنترل مواجهه، خزانه های بهینه، بهتر از خزانه عملیاتی عمل می کند.

کلیدواژه ها:

سنجش انطباقی کامپیوتری ، خزانه سوال بهینه ، روش مونت کارلو-رکیس ، کنترل نرخ مواجهه سوال ، روش سیمپسون-هتر

نویسندگان

مریم مقدسین

دانشجوی دوره دکتری سنجش و اندازه گیری دانشگاه علامه طباطبایی

محمدرضا فلسفی نژاد

دانشیار دانشکده روانشناسی و علوم تربیتی دانشگاه علامه طباطبایی

علی دلاور

استاد دانشکده روانشناسی و علوم تربیتی دانشگاه علامه طباطبایی

احسان جمالی

استادیار سازمان سنجش آموزش کشور

نورعلی فرخی

دانشیار دانشکده روانشناسی و علوم تربیتی دانشگاه علامه طباطبایی

مراجع و منابع این مقاله:

لیست زیر مراجع و منابع استفاده شده در این مقاله را نمایش می دهد. این مراجع به صورت کاملا ماشینی و بر اساس هوش مصنوعی استخراج شده اند و لذا ممکن است دارای اشکالاتی باشند که به مرور زمان دقت استخراج این محتوا افزایش می یابد. مراجعی که مقالات مربوط به آنها در سیویلیکا نمایه شده و پیدا شده اند، به خود مقاله لینک شده اند :
  • Ariel, A.; Veldkamp, B. P. & van der Linden, W. ...
  • Bergstrom, B. A. & Lunz, M. E. (۱۹۹۹). CAT for ...
  • Belov, D. I. & Armstrong, R. D. (۲۰۰۹). Direct and ...
  • Birnbaum, A. (۱۹۶۸). Some latent trait models and their use ...
  • Chang, H. (۲۰۰۷). Book review: Linear models for optimal test ...
  • Chang, H. H., & Ying, Z. (۱۹۹۹). Alpha-stratified multistage computerized ...
  • Chang, H. H., & van der Linden, W. J. (۲۰۰۳). ...
  • Cheng, Y., & Chang, H. (۲۰۰۹). The maximum priority index ...
  • Chen, S. Y.; Ankenmann, R. D. & Spray, J. A. ...
  • De Ayala, R.J. (۲۰۰۹). The theory and practice of item ...
  • Gu, L. (۲۰۰۷). Designing optimal item pools for computerized adaptive ...
  • Gu, L. & Reckase, M. D. (۲۰۰۷). Designing optimal item ...
  • Guide. M. U. S. (۲۰۱۴). The mathwork. Lnc. Natich, MA, ...
  • Hambleton, R. K., Swaminathan, H., & Rogers, H. J. (۱۹۹۱). ...
  • Hau, K. T., & Chang, H. H. (۲۰۰۱). Item selection ...
  • He, W., & Reckase, M. (۲۰۱۰). Optimal item pool design ...
  • He. W., & Reckase, M. (۲۰۱۱). Optimal item pool design ...
  • Jensema, C. J. (۱۹۷۷). Bayesian tailored testing and the influence ...
  • Lord, F. (۱۹۸۰). Applications of item response theory to practical ...
  • McBride, J. R. & Weiss, D. J. (۱۹۷۶). Some properties ...
  • Millman, J. & Arter, J. A. (۱۹۸۴). Issues in item ...
  • Owen, R. J. (۱۹۷۵). A Bayesian sequential procedure for quantal ...
  • Parshall, C., Davey, T., & Nering, M. (۱۹۹۸). Test development ...
  • Reckase, M.D. (۱۹۸۹). Adaptive testing: The evolution of a good ...
  • Reckase, M. D. (۲۰۰۱). Item pool design for computerized adaptive ...
  • Reckase, M. D. (۲۰۰۳). Item pool design for computerized adaptive ...
  • Reckase, M. D. (۲۰۰۷). The design of p-optimal item bank ...
  • Reckase, M. D. (۲۰۰۹). Optimal Item Pool Design for the ...
  • Reckase, M. D. (۲۰۱۰). Designing Item Pools to Optimize the ...
  • Reckase, M. D. & He, W. (۲۰۰۴). The ideal item ...
  • Reckase, M. D. & He, W. (۲۰۰۵). Ideal item pool ...
  • Reckase, M. D. & He, W. (۲۰۰۸). The impact of ...
  • Reckase, M. D., & He, W. (۲۰۰۹a). ). Optimal item ...
  • Reckase, M. D., & He, W. (۲۰۰۹b). The influence of ...
  • Robin, F.; van der Linden, W. J.; Eignor, D. R.; ...
  • Stocking, M. L. & Swanson, L. (۱۹۹۸). Optimal design of ...
  • Stocking, M. L. & Lewis, C. (۲۰۰۰). Methods of controlling ...
  • Sympson, J. B. & Hetter, R. D. (۱۹۸۵). Controlling item-exposure ...
  • Urry, V. W. (۱۹۷۷). Tailored testing: A successful application of ...
  • Van der Linden, W. J. (۲۰۰۰a). Constrained adaptive testing with ...
  • Van der Linden, W. J. (۲۰۰۰ b). Optimal assembly of ...
  • Van der Linden, W. J. (۲۰۰۵a). A comparison of item-selection ...
  • نمایش کامل مراجع