نوع مقاله : مقاله پژوهشی
نویسندگان
1
دانشجوی دکتری رشته سنجش اندازه گیری، دانشگاه علامه طباطبایی، تهران، ایران
2
دانشیار گروه سنجش و اندازه گیری، دانشگاه علامه طباطبائی، تهران، ایران
3
استاد گروه سنجش و اندازه گیری، دانشکده روان شناسی و علوم تربیتی، دانشگاه علامه طباطبائی، تهران، ایران
4
استادیار گروه مهندسی کامپیوتر، واحد علوم تحقیقات، دانشگاه آزاد اسلامی، تهران، ایران
5
استاد گروه روان شناسی، دانشکده علوم تربیتی و روان شناسی، دانشگاه فردوسی مشهد، مشهد، ایران
چکیده
پژوهش حاضر به فرایند ساخت آزمون با رویکرد سنجش انطباقی کامپیوتری تشخیصی شناختی (CD-CAT) میپردازد که یک روش نوین در ارزیابی تحصیلی است. این رویکرد، ترکیبی از روشهای سنجش انطباقی (CAT) و مدلهای تشخیصی شناختی (CDMs) را به کار میگیرد تا بتواند به طور دقیقتر و شخصیسازیشدهتری تواناییها و نقاط ضعف افراد را شناسایی کند. در ابتدا، مبانی نظری و مفاهیم اصلی مرتبط با CD-CAT توضیح داده شده است. CD-CAT قابلیت ارائه ارزیابی دقیقتری از تواناییها و مهارتهای داوطلبان را دارد. این رویکرد با تحلیل نقاط قوت و ضعف در مهارتهای خاص هر داوطلب، بهجای ارائه یک نمره کلی، درک عمیقتری از وضعیت تحصیلی و توانمندیهای فردی فراهم میکند. مقاله حاضر به تشریح مراحل مختلف ساخت آزمون با روش CD-CAT، از جمله طراحی بانک سوالها، الگوریتمهای انتخاب سوال و قواعد خاتمه آزمون میپردازد. همچنین، مزایای این رویکرد نسبت به آزمونهای سنتی، از جمله افزایش دقت و پایایی ارزیابیها و بهبود کارایی فرایندهای آموزشی، بررسی شده است. تحقیقات نشان میدهد که CD-CAT میتواند با استفاده از تحلیل پاسخهای قبلی داوطلبان، سوالهای متناسب با سطح توانایی آنها را انتخاب کند و بهاینترتیب، فرایند ارزیابی را بهینه سازد. همچنین یافتهها نشان میدهد که CD-CAT میتواند به بهبود کیفیت ارزیابیها و افزایش دقت تشخیصها کمک شایانی کند. در نهایت، پیشنهاداتی برای تحقیقات آینده در زمینه توسعه و بهبود CD-CAT و کاربردهای عملی آن در حوزههای مختلف آموزشی و ارزیابی ارائه شده است.
کلیدواژهها
عنوان مقاله English
Cognitive diagnostic computerized adaptive testing (CD-CAT): Conceptual framework and steps for test development and validation
نویسندگان English
Samira Tavanaei Yousefian
1
Asghar Minaei
2
Mohammad Asgari
3
Shabnam Shadroo
4
Ali Mashhadi
5
1
PhD Candidate in Department of Educational Measurement and Assessment, Allameh Tabataba'i University, Tehran, Iran
2
Associate Professor, Department of Educational Measurement and Assessment, Allameh Tabataba’i University, Tehran, Iran
3
Professor, Department of Educational Measurement and Assessment,, Faculty of Psychology and Education, Allameh Tabataba’i University, Tehran, Iran
4
Department of Computer Engineering, Science and Research Branch, Islamic Azad University, Tehran, Iran
5
Professor, of Department of Psychology, Ferdowsi University of Mashhad, Mashhad, Iran
چکیده English
ABSTRACT
The present study explores the process of test construction using the Cognitive Diagnostic Computerized Adaptive Testing (CD-CAT) approach, a novel method in educational assessment. This approach integrates methods from Computerized Adaptive Testing (CAT) and Cognitive Diagnostic Models (CDMs) to identify individuals' abilities and weaknesses with greater accuracy and in a more personalized manner. Initially, the theoretical foundations and key concepts related to CD-CAT are discussed. CD-CAT can provide a more precise assessment of candidates' abilities and skills. Instead of offering a general score, this approach provides a deeper understanding of a student’s academic status and strengths by analyzing specific skill strengths and weaknesses. The article details the various stages of CD-CAT test construction, including item bank design, item selection algorithms, and test termination rules. Furthermore,the advantages of this approach over traditional tests, such as increased accuracy and reliability of assessments and improved efficiency of educational processes, are discussed. Research indicates that CD-CAT can optimize the evaluation process by selecting items tailored to the candidate's ability level based on their previous responses. The findings also suggest that CD-CAT can significantly enhance the quality of assessments and the accuracy of diagnoses. Finally, suggestions for future research in the development and improvement of CD-CAT and its practical applications in various educational and assessment fields are provided.
کلیدواژهها English
Cognitive diagnostic computerized adaptive testing (CD-CAT)
Computerized Adaptive Testing (CAT)
Cognitive Diagnostic Models (CDMs)
Testing