نرخ آشكارسازي كنش افتراقي سؤال با استفاده از مدل درخت‌هاي راش يك مطالعه شبيه‌سازي‌شده و داده هاي واقعي آزمون هاي سرنوشت ساز ناجا

Differential Item Functioning Detection Rate Using Rasch Trees Model: A Simulated and Real Data Study of the NAJA High Stakes Tests

اگرچه تحليل مدل درخت‌هاي راش براي شناسايي سؤال‌هاي سودار آزمون‌هاي مختلف معرفي‌شده است، اما تحقيقات اندكي در اين خصوص صورت پذيرفته است.‌ هدف از اين تحقيق استفاده از مدل درخت‌هاي راش و بررسي عوامل مداخله‌گر در آشكارسازي كنش افتراقي سؤال‌هاي آزمون بود. براي پاسخگويي به سؤال‌هاي تحقيق از روش مطالعات شبيه‌سازي و داده‌هاي آزمون اختصاصي دانشگاه علوم انتظامي امين استفاده شد. پژوهش حاضر ازنظر هدف كاربردي و ازنظر روش، توصيفي موسوم به تحقيقات روان‌سنجي است. جامعه آماري آزمون اختصاصي سال 1398 دانشگاه علوم انتظامي امين به تعداد 2414 نفر به‌صورت تمام شمار مورد تحليل قرارگرفته است. جهت تشخيص نرخ آشكارسازي كنش افتراقي سؤال با استفاده از مدل درخت‌هاي راش از بسته DIFtree در نرم‌افزار R استفاده شد. نتايج حاصل از مطالعه شبيه‌سازي نشان داد كه مدل درخت‌هاي راش، كنش افتراقي سؤال را در نمونه‌هاي با حجم بالاي 1000 آزمودني به‌صورت صد درصد شناسايي مي‌كند. همچنين نتايج نشان داد كه در آزمون اختصاصي دانشگاه علوم انتظامي تعداد 9 سؤال داراي كنش افتراقي سؤال هستند كه در مهم‌ترين آن، تعداد 7 سؤال در گروه رياضي با 18 سال سن (رسته دوم) و 6 سؤال در گروه رياضي با 19 سال سن (رسته اول) داراي سوگيري نسبت به گروه علوم تجربي (رسته سوم) بوده وجهت‌آن به نفع رسته اول و دوم و به ضرر رسته سوم بوده است.

Although rasch tree model analysis has been introduced to identify Bias questions in various tests, little research has been done. The purpose of this study was to use the rasch tree model and to investigate the intervening factors in revealing the differential action of the test questions. To answer the research questions, the method of simulation studies and data of the specific test of Amin University of Law Enforcement Sciences were used. The present research is applied in terms of purpose and descriptive in terms of method called psychometric research. The statistical population of the special exam of Amin University of Law Enforcement Sciences in 1398 with the number of 2414 people has been analyzed in full. The DIFtree package in R software was used to determine the detection rate of the differentiation Item Functioning using the rasch tree model. The results of the simulation study showed that the rasch tree model detects the differentiation Item Functioning in samples with a volume of more than 1000 subjects as 100%. The results also showed that in the specific exam of the University of Law Enforcement Sciences, 9 questions have differentiation Item Functioning, in the most important of which, 7 questions in the mathematics group with 18 years of age (second category) and 6 questions in the mathematics group with 19 years of age (category First) has a bias towards the experimental sciences group (third category) and the orientation of the bias has been in favor of the first and second category and to the detriment of the third category.