The Construction and Validation of a Q-matrix for a High-stakes Reading Comprehension Test: A G-DINA Study

  • سال انتشار: 1400
  • محل انتشار: مجله بین المللی آزمون سازی زبان، دوره: 11، شماره: 1
  • کد COI اختصاصی: JR_IJLT-11-1_004
  • زبان مقاله: انگلیسی
  • تعداد مشاهده: 469
دانلود فایل این مقاله

نویسندگان

Fateme Roohani Tonekaboni

English department, Shahid Chamran University, Ahvaz, Iran

Hamdollah Ravand

Vali-e-Asr University of Rafsanjan, ۷۳۱۵۶۷۹۸۲۳, Rafsanjan, Iran.

Reza Rezvani

Yasouj University, Yasouj, Iran

چکیده

Investigating the processes underlying test performance is a major source of data for supporting the explanation inference in the validity argument (Chappelle, 2021). One way of modeling the cognitive processes underlying test performance is through the construction of a Q-matrix, which is essentially about summarizing the attributes explaining test takers’ response behavior. The current study documents the construction and validation of a Q-matrix for a high stakes test of reading within a generalized-deterministic inputs, noisy “and” gate (G-DINA) model framework. To this end, the attributes underlying the 20 items of the reading comprehension test were specified through retrospective verbal reports and domain experts’ Delphi techniques. In the ensuing stage, the Q-matrix thus developed along with item response data of 2625 test-takers were subjected to empirical analysis using the procedure suggested by de la Torre and Chiu (2016). Item-level results showed that, except for one item, the processes underlying the other items were captured by compensatory and additive models. This finding has significant implications for model selection for DCM practitioners.

کلیدواژه ها

Keywords: Cognitive Diagnostic Assessment, Test Reading Comprehension, Q-Matrix construction, Q-matrix Validation

اطلاعات بیشتر در مورد COI

COI مخفف عبارت CIVILICA Object Identifier به معنی شناسه سیویلیکا برای اسناد است. COI کدی است که مطابق محل انتشار، به مقالات کنفرانسها و ژورنالهای داخل کشور به هنگام نمایه سازی بر روی پایگاه استنادی سیویلیکا اختصاص می یابد.

کد COI به مفهوم کد ملی اسناد نمایه شده در سیویلیکا است و کدی یکتا و ثابت است و به همین دلیل همواره قابلیت استناد و پیگیری دارد.