بررسي مقايسه‌اي آزمون‌هاي مهارتي مبتني بر فناوري و آزمون‌هاي مبتني بر كاغذ (مورد مطالعه: اداره كل آموزش فني و حرفه‌اي البرز)

Comparative Study of Technology-based Proficiency Tests and Paper-based Tests (Case Study: The Department of Vocational and Technical Education of Alborz)

رشد سريع فناوري ارتباطات و اطلاعات در تدريس و يادگيري، رويكرد اصلي را از سيستم آزمون مبتني بر قلم و كاغذ به آزمون مبتني بر فناوري تغيير داده است. رايانه‌ها و فنّاوري‌هاي مرتبط ابزارهاي قدرتمندي براي رفع چالش‌هاي ارزشيابي ارائه مي‌دهند و ثبت مجموعه‌ي گسترده‌تري از مهارت‌هاي شناختي را آسان مي‌كنند. اين مطالعه با هدف بررسي مقايسه‌اي آزمون‌هاي مهارتي مبتني بر فناوري و آزمون‌هاي مبتني بر كاغذ از ديدگاه متقاضيان آزمون اداره كل آموزش فني و حرفه‌اي استان البرز انجام شده است. جامعه آماري اين تحقيق تعداد 420 نفر از آزمون دهندگان سازمان آموزش فني و حرفه‌اي بودند كه تعداد 201 نفر به صورت نمونه گيري خوشه‌اي با استفاده از فرمول كوكران، به عنوان حجم نمونه انتخاب شدند. اين پژوهش از نظر هدف كاربردي و از نظر روش گردآوري داده‌ها، آزمايشي است. گردآوري داده‌ها شامل پرسشنامه محقق ساخته با طيف پنج درجه‌اي ليكرت و با پايايي 0.89 مي‌باشد. پرسشنامه در سه بعد عوامل فني، محيطي و مديريتي تهيه شد. روايي پرسشنامه از طريق نرم‌افزار AMOS و تحليل عاملي بر اساس معادلات ساختاري، مطلوب بوده است. بررسي معناداري بارهاي عاملي نشان از معنادار بودن همه بارهاي عاملي در سطح 001/0 بوده است. آزمون شاخص‌هاي برازش نشان داد كه مدل از برازش نسبتاً مطلوبي برخوردار است. پرسشنامه بر روي دو گروه آزمودني مستقل، شامل گروه آزمودني مبتني بر رايانه و گروه آزمودني مبتني بر كاغذ اجرا شد. تجزيه و تحليل داده‌ها در دو سطح آمار توصيفي و آمار استنباطي با استفاده از نرم افزار SPSS صورت گرفت و تحليل يافته‌ها از طريق تحليل واريانس و t نمونه‌هاي مستقل انجام شد، نتايج آزمون نرماليتي نشان داد كه توزيع داده‌ها به صورت نرمال بوده است. نتايج آزمون t نمونه‌هاي مستقل براي تمامي ‌ابعاد در سطوح فني، محيطي و مديريتي نشان داد كه اختلاف معناداري ميان ميانگين‌هاي كسب‌شده در دو گروه آزمودني‌ها (كاغذي و الكترونيكي) وجود داشته است. همچنين نتايج تحقيق، نشان دهنده بالاتر بودن سطح ميانگين نظرات آزمون شوندگان الكترونيكي و اختلاف معنادار ميانگين ارزشيابي از طريق آزمون‌هاي مبتني بر فناوري در مقايسه با آزمون‌هاي سنتي يا كاغذي بوده است. به توجه به نتايج تحقيق به نظر مي‌رسد بايستي برنامه‌ريزي براي پياده‌سازي الگوهاي نوين ارزشيابي و اجراي انواع آزمون‌هاي مبتني بر فنّاوري براي ‌انواع آزمون‌ها صورت پذيرد.

Introduction The rapid development of information and communication technology in teaching and learning has changed the main approach of pen and paper-based test system to a technology-based test. Computers and related technologies provide powerful tools for solving evaluation challenges and facilitate the recording of a wider set of cognitive skills. The study aims to Compare the technology-based proficiency tests and paper-based tests from the perspective of General Department of Vocational and Technical Education of Alborz test applicants has been conducted. Method The research method is a descriptive method. The population of this study were 420 examinees from Alborz Vocational and Technical Educational Department which 201 subjects were selected as cluster sampling using Cochran formula as sample size. This study in a pilot study terms of functional and data collection method. Data collection consisted of researcher- made questionnaire with 5-point scale Likert with reliability of 0.89. The questionnaire was prepared in three dimensions: Technical, environmental and managerial factors. The reliability of the questionnaire has been satisfied by AMOS software, factor analysis based on structural equations. The significance of factor loadings indicated the significance of all factor loads at the level of 0.001. The fittest indices indicated that the model has a relatively good fit. Questionnaire administered in two independent subject groups including computer-based and paper-based subject groups. Data analysis was conducted based on two levels of descriptive and inferential statistics using SPSS software, and analyzing the results was performed by the analysis of variance and t independent samples. Results The research results indicates the higher average level of electronic examinees' comments and meaningful difference between the average valuations via technology-based tests compared with traditional or paper-based tests. Discussion Also, the results of the research indicate that the average level of e- readership is higher and the mean value of the evaluation is significantly different from the traditional tests or paper tests. Regarding the results of the research, it seems that planning for implementation of new models of evaluation and the implementation of a variety of technology-based tests for the types of tests should take place.