كاركرد دوگانه سوال براساس رويكرد مبتني بر نظريه تشخيصي طبقه بندي در آزمون خواندن ودرك مفاهيم كنكور منحصرا زبان

Gender in DIF in the Reading Comprehension Section of the University Entrance Examination for the Applicants for English programs at Iranian Universities Using Diagnostic Classification Modeling Approach

كارگرد دوگانه سوال (DIF) وقتي اتفاق مي افتد كه آزمون شوندگان با سطح توانايي برابر از سازه مورد سنجش، عملكرد متفاوتي در هر كدام از سوالات يك آزمون داشته باشند. مطالعه حاضر به بررسي DIF در سوالات خواندن و درك مفاهيم آزمون منحصرا زبان ورودي دانشگاه هاي ايران مي باشد. علاوه بر اين در مطالعه حاضر روش DIF مبتني بر مدل هاي تشخيصي طبقه بندي و روش منتل هنزل پرداخته شده است. بدين منظور پاسخ 10000 نفر از داوطلبان آزمون مذكور با استفاده از بسته هاي CDM و difRدر نرم افزار R استفاده گرديد. نتايج نشان داد كه در روش تشخيصي طبقه بندي يك سوال و در روش سنتي منتل هنزل دو سوال داراي DIF متوسط شناخته شدند كه به نظر مي رسد تهديدي براي روايي سازه آزمون مورد نظر محسوب نمي شود. همچنين مي توان نتيجه گرفت هنگامي كه نيمرخ خصيصه اي به عنوان متغير جور كردني استفاده مي شود تعداد سوالات كمتري به عنوان DIF شناخته مي شود.

The present study investigated DIF in the reading comprehension items of the university entrance examination for the applicants into the English programs at Iranian universities. A diagnostic classification DCM-based method of DIF detection was used. A comparison was also made between the DCM-based method and the traditional Mantel-Hanzel method in which the matching variable was total score. To this end, item responses of 10000 test takers who took the test in 2014 were analyzed using the CDM and difR packages in R. based on the DCM approach, one item and based on the Mantel-Hanzel approach two items were flagged for moderate DIF. As to the construct validity of the test under study, it can be concluded that the results are generalizable across gender. A methodological implication of the present study can be that when the matching variable in DIF detection methods is total score, more items are likely to be flagged for DIF, as compared with when the attribute profiles of the test takers are used as the matching variable.