Effectiveness of Options in Multiple-choice Items: the case of “none of the above”

Effectiveness of Options in Multiple-choice Items: the case of “none of the above”

به عنوان يكي از گزينههاي سوالات چندگزينهاي بررسي « هيچكدام از موارد بالا » اين پژوهش، كاربرد گزينه در سوالاتي با « حدس » و عامل « ضريب تمييز » ،« ضريب دشواري » ،« تناسب » كرده است. هدف پژوهش، برآورد آزمون كليدي انگليسي سال » اين گزينه و تخمين پايايي كل آزمون بوده است. محققان اين طرح، پنج متن از هيچ - » موسوم به كت را انتخاب و سوالات آن را در دو شكل موازي بازسازي كردند. آزمون اول، گزينه «2010 را نداشت؛ اما، آزمون دوم كه دو هفته بعد برگزار شد، شامل اين گزينه بود. هر دو آزمون، « كدام از موارد بالا مشتمل بر سي و دو سوال بود و بر روي صد و چهل و دو دانشآموز سوم دبيرستان اجرا شد. نتايج آزمونها - كه هيچكدام » آي آر تي) بررسي شدند – نشان داد كه سوالات داراي ) « پرسش- پاسخ » با روش سهپارامتري نظريه آسان تر بودند. اين گزينه به تناسب و ضريب تمييز سوالات آسيب نزد. ام?ا عامل حدس را افزايش « از موارد بالا داد. اين، به نوبه خود ميتواند پايايي و روايي آزمون را كاهش دهد.

The present study examined the effectiveness of ‘none of the above’ (NOTA) as a test alternative in multiple- choice items.It intended to estimate item fit, item difficulty, itemdiscrimination, guess factor of such a choice and the reliability of the whole test. To this end, the researchersselected five passages of reading section of the Cambridge Key English Test known as KET (2010) and developed a parallel form of that test; test one did not include NOTA, whereas the second test, administered two weeks later, included NOTA. The two tests, 32 items each, were given to 142 high-school third graders. The results, analyzed through 3-parameter logistic model of item response theory (IRT), revealed that multiple-choice questions including the alternative NOTA were easier than their counterparts. In addition, NOTA option did not threaten item fit and item discrimination but increased the guess factor, which, in turn may threaten the reliability and validity of the test.