نوع مقاله : مقاله پژوهشی
نویسندگان
1 دکتری سنجش و اندازه گیری دانشگاه علامه طباطبائی، تهران، ایران.
2 دانشیار گروه سنجش و اندازه گیری دانشگاه علامه طباطبائی، تهران، ایران
3 استاد ممتاز گروه سنجش و اندازه گیری دانشگاه علامه طباطبائی، تهران، ایران.
4 استادیار سازمان سنجش آموزش، تهران، ایران.
چکیده
هدف از پژوهش حاضر شناسایی وزن هریک از دروس سوابق تحصیلی و نمره کل سازی براساس رویکرد روانسنجی مدل پیوسته IRT و رویکردهای مبتنی بر نظر متخصصان تاپسیس و AHP، و همچنین مقایسه اثر مدل وزن دهی بر رتبه بندی و پایایی روش های وزن دهی و نمره کل سازی سوابق تحصیلی بود. روش پژوهش حاضر ترکیبی بود. به منظور اجرای پژوهش در بخش اول 11 آیتم(دروس) سوابق تحصیلی از گروه متخصصان مورد نظرخواهی قرار گرفت و با استفاده از تکنیک های تاپسیس و AHP وزن دهی و اولویت بندی شد. در بخش دوم نمرات دروس نهایی سال سوم متوسطه داوطلبان و پذیرفته شدگان رشته های روانشناسی و مشاوره در دگروه علوم انسانی از سازمان سنجش دریافت شد و جهت برآورد نمرات تتا استفاده شد. به منظور مقایسه ی مدل های مختلف وزن دهی و نمره کل سازی، ابتدا گروه نمونه براساس نمرات حاصل از هر سه رویکرد رتبه بندی شده، و از لحاظ شاخص های پراکندگی و میزان تفاوت رتبه ها مقایسه شد. نتایج مقایسه سه رویکرد نشان داد بیشترین واریانس مربوط به روش نمره کل سازی با مدل پیوسته IRT است. نتایج تحلیل آماری مبنی بر آزمون ویل کاکسون جهت مقایسه متوسط رتبه ها نشان داد در حجم نمونه ی کم روش وزن دهی به هر سه روش نسبت به روش وزن های یکسان تفاوت معنادار در رتبه ها ایجاد می کند و بنابراین مدل وزن دهی در رتبه بندی داوطلبان در حجم نمونه کم تاثیر می گذارد. اما بین سه مدل وزن دهی تفاوت معناداری در رتبه بندی داوطلبان مشاهده نمی شود. همچنین نتایج نشان داد در حجم نمونه بالا(2000 نفر) روش وزن دهی به هر سه روش نسبت به روش وزن های یکسان تفاوت معنادار در رتبه ها ایجاد می کند. نتایج تحلیل داده ها نشان داد نمرات بدست آمده از مدل پیوسته IRT نسبت به دو روش دیگر در رتبه بندی داوطلبان تاثیر متفاوتی می گذارد . نمرات روش IRT پایایی بالاتری نسبت به روش های مبتنی بر نظر خواهی از متخصصان دارد. با این وجود به نظر نمی رسد روش وزن دهی بر میزان پایایی نمرات تاثیر معناداری داشته باشد.
کلیدواژه‌ها
عنوان مقاله [English]
The effect of weighting model on the scoring of educational background and ranking of volunteers entering universities and higher education institutions of the Iran
نویسندگان [English]
- meysam sadeghi 1
- mohammadreza falsafinejad 2
- ali delavar 3
- noorali farrokhi 2
- ehsan jamali 4
1 Ph.D. in Measurement and Measurement, Allameh Tabataba'i University, Tehran, Iran.
2 Associate Professor, Department of Measurement and Measurement, Allameh Tabataba'i University, Tehran, Iran
3 Distinguished Professor, Department of Measurement and Measurement, Allameh Tabataba'i University, Tehran, Iran.
4 Assistant Professor of Sanjesh Organization, Tehran, Iran.
چکیده [English]
The purpose of the present study was to identify the weight of each of the courses of academic record and scoring based on the psychometric approach of the IRT continuous model and approaches based on the viewpoint of the specialists of Topsis and AHP. The method of this study was a combination. In order to conduct research in the first part, 11 items (courses) of academic background were taken from the expert group and weighed and prioritized using Tapis and AHP techniques. The final third year grades of secondary school students were received from the assessment organization and accepted for psychology and counseling in the humanities group. Theta tests were used to estimate the grades. In order to compare different weighting and grading models, the sample group was first ranked based on scores derived from all three approaches, and compared in terms of dispersion indices and the degree of difference between rankings. The results of the comparison of the three approaches indicated that the most variance is related to the IRT continuous modeling method. The results of Wilcoxon's statistical analysis to compare the average rankings showed that in the small sample size, the weighting method in all three methods produced a significant difference in the rankings compared to the same weight method, and therefore the weighting model in the ranking of the volunteers In small sample size affects. But there are no significant differences between the three weighting models in the candidate ranking. Also, the results showed that in the high sample size (2000 persons), the weighting method in all three methods compared to the same weights makes a significant difference in the rankings. IRT method scores are more reliable than expert-based approaches.However, the weighting method does not seem to have a significant effect on the reliability of the scores.
کلیدواژه‌ها [English]
- Weighting
- Scoring and Ranking
- IRT Continuous Model
- Topsis
- AHP
)