بازطراحی آزمون های استاندارد در مواجهه با هوش مصنوعی: تحلیل مزایا و معایب مدل شفاهی

سال انتشار: 1405
نوع سند: مقاله ژورنالی
زبان: فارسی
مشاهده: 14

فایل این مقاله در 34 صفحه با فرمت PDF قابل دریافت می باشد

استخراج به نرم افزارهای پژوهشی:

لینک ثابت به این مقاله:

شناسه ملی سند علمی:

JR_QJSDS-20-3_010

تاریخ نمایه سازی: 22 مهر 1405

چکیده مقاله:

پژوهش حاضر با هدف بازطراحی آزمون ها در عصر هوش مصنوعی، به بررسی و مقایسه عملکرد سه مدل زبانی پیشرفته (GPT-۴o، Google Gemini ۱.۵ Pro، Anthropic Claude ۳.۵ Sonnet) با دانشجویان انسانی در قالب آزمون های کتبی و شفاهی بازطراحی شده است. روش تحقیق به صورت ترکیبی (کمی و کیفی) بوده و داده ها از طریق آزمون های استاندارد زبان و شناختی (IELTS، Raven’s Progressive Matrices، N-Back)، تحلیل خطا و پرسشنامه تجربه کاری گردآوری شد. جامعه آماری تحقیق شامل دانشجویان پزشکی دانشگاه علوم پزشکی آزاد تهران در سال تحصیلی ۱۴۰۴-۱۴۰۳ بود که معادل ۵۸۵ نفر بوده و نمونه گیری به روش تصادفی طبقه بندی شده انجام شد. حجم نمونه با استفاده از فرمول کوکران؛ معادل ۲۳۲ نفر برآورد گردید.  نتایج نشان داد که مدل های هوش مصنوعی در اغلب شاخص ها (دقت، سرعت پاسخ گویی و میانگین نمرات) عملکردی بالاتر از انسان داشتند، هر چند نوع خطاهای آنان ماهیتا با خطاهای انسانی متفاوت بود. همچنین، نسخه بازطراحی شده آزمون شفاهی موجب بهبود تجربه کاربری، افزایش وضوح دستورالعمل ها، کاهش استرس و ارتقای ادراک عدالت در میان شرکت کنندگان شد. میان مولفه های پرسنامه تجربه کاری نیز همبستگی معناداری در  سطح ۰.۰۱ وجود داشت ( p<۰.۰۱). یافته ها بیانگر آن است که اگرچه هوش مصنوعی توانسته است در بازتولید دانش و پردازش سریع اطلاعات از انسان پیشی گیرد، اما آزمون های شفاهی و تعاملی همچنان ظرفیت بالاتری در سنجش مهارت های استدلالی، خلاقیت و تفکر انتقادی دارند.

کلیدواژه ها:

هوش مصنوعی ، دانشجویان انسانی ، آزمون های کتبی و شفاهی ، خطا

نویسندگان

آنیتا همایون نیا

گروه علوم تربیتی، دانشگاه پیام نور، تهران، ایران

مراجع و منابع این مقاله:

لیست زیر مراجع و منابع استفاده شده در این مقاله را نمایش می دهد. این مراجع به صورت کاملا ماشینی و بر اساس هوش مصنوعی استخراج شده اند و لذا ممکن است دارای اشکالاتی باشند که به مرور زمان دقت استخراج این محتوا افزایش می یابد. مراجعی که مقالات مربوط به آنها در سیویلیکا نمایه شده و پیدا شده اند، به خود مقاله لینک شده اند :
  • Bazgir Jahantighi, Z.; Heydari Azad, Z.; Mir, S.; Shahraki, S. ...
  • Celik, I.; Dindar, M.; Muukkonen, H.; Järvelä, S. (۲۰۲۲). “The ...
  • Chang, L. (۲۰۲۴). “An Empirical Study on the Impact of ...
  • Dindar, M., Muukkonen, H., & Järvelä, S. (۲۰۲۲). “The promises ...
  • Dong, Y., Liu, Z., Wang, H., & Chen, Y. (۲۰۲۴). ...
  • Hamedi-Nasab, S., Rahimi, Sh. (۲۰۲۴). “Barriers and challenges of implementing ...
  • Hao, J.; von Davier, A.A.; Yaneva, V.; Lottridge, S.; von ...
  • Hashemi, H.; Shahsavari, M.; Mahdi, F.; Ghaderi, D. (۲۰۲۵). “Investigating ...
  • Huawei, S.; Aryadoust, V. (۲۰۲۳). “A systematic review of automated ...
  • Jiao, H.; Yadav, C.; Li, G. (۲۰۲۳). “Integrating psychometric analysis ...
  • Jingshan, H. (۲۰۲۳). “Analysis of the Application of Artificial Intelligence ...
  • Kamalov, F.; Sulieman, H.; Calonge, D.S. (۲۰۲۱). “Machine learning based ...
  • Karademir Coskun, T.; Alper, A. (۲۰۲۴). “Evaluating the evaluators: A ...
  • Keykha, A.; Mohammadi, H.; Darabi, F.; Hosseini, S.S. (۲۰۲۵). “Identifying ...
  • Khera, R.; Simon, M.A.; Ross, J. S. (۲۰۲۳). “Automation bias ...
  • Kitsara, I. (۲۰۲۲). “Artificial intelligence and the digital divide: From ...
  • Kiss, G.; Moreira Bastos, S. (۲۰۲۵). “Experiences of online and ...
  • Kumar, Y.; Li, J.; Singh, R. (۲۰۲۳). “A testing framework ...
  • Lee, U.; Jung, H.; Jeon, Y.; Sohn, Y.; Hwang, W.; ...
  • Li, J.; Tang, T.; Zhao, W.X.; Nie, J.-Y.; Wen, J.-R. ...
  • Luan, H.; Géczy, P.; Lai, H.; Gobert, J.; Yang, S.; ...
  • Lund, B.D.; Wang, T. (۲۰۲۳). “Chatting about ChatGPT: How may ...
  • Novidi, A.; Gheysari, H. (۲۰۲۳). “Investigating the impact of artificial ...
  • Nguyen, T. (۲۰۲۳). “Exploring the efficacy of chatgpt in language ...
  • Pack, A.; Barrett, A.; Escalante, J. (۲۰۲۴). “Large language models ...
  • Parapadakis, D. (۲۰۲۰) “Can artificial intelligence help predict a learner’s ...
  • Rahm, L. (۲۰۲۳). “Education, automation and AI: a genealogy of ...
  • Ranger, J.; Schmidt, N.; Wolgast, A. (۲۰۲۳). “Detecting cheating in ...
  • Reib, M. (۲۰۲۱). “The use of ai in education: practicalities ...
  • Sayed, B., Younes, Z., Alkhayyat, A., Adhamova, I., Teferi, H. ...
  • Sayin, A., & Gierl, M. (۲۰۲۴). “Using OpenAI GPT to ...
  • Scarfe, P., Watcham, K., Clarke, A., & Roesch, E. (۲۰۲۴). ...
  • Selwyn, N., & Gašević, D. (۲۰۲۲). “Assessment in the age of ...
  • Swiecki, Z.; Khosravi, H.; Chen, J.; Martinez-Maldonado, R.; Lodge, J. ...
  • Tate T. P., Steis, J., Bailey, D., Steve, G., Moon, ...
  • Wang, Sh., Wang, F., Zhu, Zh., Wang, J., Tran, T., & ...
  • Wecks, J. O., Voshaar, J., Plate, B. J., Zimmermann, J. ...
  • Williamson, B., Macgilchrist, F., & Potter, J. (۲۰۲۳). “Re-examining AI, ...
  • Wongvorachan, T., Lai, K. W., Bulut, O., Tsai, Y.-S., & ...
  • Yu, L. & Yu, Z. (۲۰۲۳). “Qualitative and quantitative analyses ...
  • Zaeri, F., Namvar, K., Zarei, M. A., & Ahmadi, F. ...
  • Zawacki‐Richter, O., Marín, V. I., Bond, M., & Gouverneur, F. ...
  • Zhang, M., Ruan, C., & Johnson, M. S. (۲۰۲۴). “Explainable ...
  • Zhong, W., Cui, R., Guo, Y., Liang, Y., Lu, S., ...
  • نمایش کامل مراجع