کاربرد مدل های چند ارزشیIRT در نمره گذاری آزمون های سرنوشت ساز (مورد مطالعه: آزمون پروانه وکالت)

هدف مطالعه حاضر، مقایسه میزان دقت و خطای اندازه گیری مدل های دوارزشی و چند ارزشیIRT در نمره گذاری آزمون های توانایی سرنوشت ساز بود.

روش پژوهش: 

جامعه پژوهش شامل تمامی شرکت کنندگان آزمون سراسری پروانه وکالت سال های 1396 و 1398 بوده که از میان آن ها تعداد 5000 نفر از سال 1396 و تعداد 5000 نفر از سال 1398 با روش نمونه گیری تصادفی ساده انتخاب شدند. همچنین، گردآوری داده ها با استفاده از پاسخ های شرکت کنندگان آزمون انجام یافت. متغیر مستقل این پژوهش، شیوه و مدل نمره گذاری و متغیر وابسته، میزان برازش و آگاهی (دقت) مدل محسوب می شود. بر این اساس، روش پژوهش آزمایشی است.

تجزیه و تحلیل یافته ها نشان داد که از میان مدل های لجستیک دوارزشی IRT، مدل 3 پارامتری، و از میان مدل های چندارزشی اسمی مورد مطالعه نیز، مدل 3 پارامتری در مقایسه با سایر مدل ها، برازش و نیز آگاهی دهندگی بیشتر و مطلوب تری بر روی داده های مورد مطالعه داشتند.

با توجه به برازش و میزان آگاهی مطلوب تر مدل 3 پارامتری دو ارزشی و مدل 3 پارامتری چندارزشی در مقایسه با سایر مدل ها، استفاده از این مدل ها در نمره گذاری می تواند به افزایش دقت اندازه گیری و کاهش خطا، و  نیز به منصفانه بودن فرآیند گزینش متقاضیان آزمون پروانه وکالت کمک نماید.