ارزیابی اتوماتیک آزمون های تشریحی مبتنی بر رویکردهای محاسباتی و داده کاوی

هدف: نمرهدهی خودکار آزمون های تشریحی فرآیند ارزیابی اتوماتیک پاسخ های سوالات مبتنی بر متن با استفاده از روش های محاسباتی و یادگیری ماشین است. گسترش استفاده از سیستم های آموزشی هوشمند و اهمیت ارزیابی نیاز به سیستم های خودکار برای نمره دهی آزمون ها را بیش از پیش افزایش داده است.روش شناسی پژوهش: با توجه به اینکه در فرآیند نمره دهی خودکار، پاسخ های متنی ارائه شده توسط دانش آموزان با یک پاسخ ایده آل بر اساس میزان شباهت آن ها مورد مقایسه قرار می گیرد، می توان از تکنیک های محاسبه ارتباط و شباهت معنایی بین متون نیز برای اینکار بهره برد. در این راستا، در این مقاله ابتدا روش های مختلف محاسبه ارتباط معنایی در کاربرد ارزیابی خودکار آزمون های تشریحی با هم مقایسه و تاثیر دامنه و اندازه منبع دانش پیش زمینه ای روی دقت الگوریتم ها بررسی شد. در ادامه ، یک رویکرد برای بهبود عملکرد سیستم نمره دهی خودکار آزمون های تشریحی معرفی شده که از پاسخ های ارائه شده توسط آزمون دهندگان که بالاترین نمره را دریافت کرده اند، به عنوان بازخورد استفاده می کند.یافته ها: برای ارزیابی کارایی روش های محاسبه شباهت و ارتباط معنایی در کاربرد نمرده دهی خودکار آزمون های تشریحی و عملکرد مدل پیشنهادی، آزمایشاتی روی مجموعه داده ارائه شده توسط  موهلرو میهالسیا که دارای ۷ سوال با ۶۳۰ پاسخ تشریحی است، صورت گرفت.اصالت/ارزش افزوده علمی:  بر اساس نتایج حاصل از آزمایش ها، نه تنها روش های محاسبه ارتباط معنایی از کارایی بالایی در حوزه ارزیابی خودکار آزمون های تشریحی برخوردارند، بلکه استفاده از از بازخورد اتوماتیک نیز می تواند دقت و کارایی روشهای محاسبه ارتباط معنایی برای این هدف به طور قابل توجهی افزایش دهد.

کلیدواژه ها:

ارتباط معنایی ، ارزیابی خودکار آزمون های تشریحی ، رویکرد داده کاوی ، شباهت معنایی