سنجش روانی تربیتی

سنجش روانی تربیتی

اثر پارامترهای تمیز و دشواری در کارایی رویکردهای تشخیص کنش افتراقی سؤال با حضور عامل حدس

نویسندگان
1 استادیار گروه عملیات ویژه، دانشکده علوم و فنون انتظامی، دانشگاه پلیس، تهران، ایران
2 دانشیار گروه سنجش و اندازه‌گیری، دانشکده روان‌شناسی و علوم تربیتی، دانشگاه علامه طباطبائی، تهران، ایران
3 دانشیار گروه آموزشی مطالعات برنامه‌ریزی درسی، دانشکده روان‌شناسی و علوم تربیتی، دانشگاه خوارزمی، تهران، ایران
چکیده
سوگیری اندازه‌گیری می‌تواند روایی آزمون را به خطر بیندازد و یافته‌ها نشان می‌دهد پارامترهای سؤال در ایجاد سوگیری آزمون نقش مهمی دارند. هدف پژوهش حاضر شناسایی روش بهینه سه‌پارامتری برای تشخیص کنش افتراقی سؤال با در نظر گرفتن اثر پارامترهای سؤال بود. این تحقیق از نوع کاربردی و در زمره مطالعات روانسنجی قرار می‌گیرد. داده‌های مورد نیاز بر اساس متغیرهای مستقل شامل نوع آزمون (رگرسیون غیرخطی، لرد و راجو سه‌پارامتری)، طیف پارامترها (کم، متوسط و زیاد) و پارامترهای سؤال شبیه‌سازی شد. شبیه‌سازی با دستکاری 20 درصد سؤالات دارای کنش افتراقی با شدت اثر 5/0 انجام گرفت. داده‌ها در 10 مجموعه و در مجموع 90 مجموعه تولید شد و برای هر مجموعه سه آزمون تشخیص کنش افتراقی اجرا شد که در مجموع 270 آزمون را شامل می‌شد. نتایج نشان داد اثر اصلی متغیر آزمون معنادار است و آزمون رگرسیون غیرخطی عملکرد بهتر و معناداری نسبت به آزمون راجو سه‌پارامتری دارد. همچنین، در شرایطی که پارامتر دشواری در سطح متوسط قرار دارد، میزان تشخیص صحیح کنش افتراقی بیشتر از شرایطی است که این پارامتر در سطح کم یا زیاد باشد. علاوه بر این، افزایش پارامتر تمیز باعث افزایش میزان تشخیص صحیح کنش افتراقی توسط آزمون‌ها شد. در مقابل، طیف‌های مختلف پارامتر حدس، تفاوت معناداری در کارایی آزمون‌ها ایجاد نکردند و عملکرد آزمون‌ها در تمام سطوح این پارامتر یکسان بود. این یافته‌ها نشان‌دهنده اهمیت توجه به پارامترهای دشواری و تمیز در تشخیص کنش افتراقی سؤال است. بر اساس نتایج، می‌توان نتیجه گرفت که روش رگرسیون غیرخطی در آزمون‌هایی که اثر حدس وجود دارد، می‌تواند به‌عنوان جایگزینی مفید و کارآمد برای روش‌های مبتنی بر نظریه پاسخ به سؤال (IRT) در تشخیص کنش افتراقی سؤال مورد استفاده قرار گیرد.
کلیدواژه‌ها

عنوان مقاله English

The Effect of Discrimination and Difficulty Parameters on the Efficiency of Differential Item Functioning Approaches in the Presence of a Guessing Factor

نویسندگان English

Ahmad Rezaei 1
Mohammadrez Falsafinejad 2
Masoud , Geramipour 3
1 Assistant Professor, Special Operations Department, Faculty of Police Sciences and Technologies, Police University, Tehran, Iran
2 Associate Professor, Assessment and Measurement Department, Faculty of Psychology and Educational Sciences, Allameh Tabataba’i University, Tehran, Iran
3 Associate Professor, Curriculum Planning Studies Department, Faculty of Psychology and Educational Sciences, Kharazmi University, Tehran, Iran
چکیده English

Measurement bias poses a serious threat to test validity, and research has consistently shown that item parameters play a crucial role in generating such bias. The present study aimed to identify the optimal three-parameter method for detecting differential item functioning (DIF) while considering the effects of item parameters. Designed as an applied psychometric investigation, the study simulated data based on independent variables including test type (nonlinear regression, Lord’s three-parameter, and Raju’s three-parameter methods), ranges of parameters (low, medium, and high), and item characteristics. Simulation was conducted by manipulating 20% of items to exhibit DIF with an effect size of 0.5, producing 10 sets of data and a total of 90 datasets. For each dataset, three DIF detection tests were performed, resulting in 270 analyses overall. Findings revealed that the main effect of test type was statistically significant, with nonlinear regression outperforming Raju’s three-parameter method in terms of accuracy. Moreover, DIF detection was more effective when the difficulty parameter was at a medium level compared to low or high levels, while increases in the discrimination parameter consistently enhanced correct detection rates. In contrast, variations in the guessing parameter did not yield significant differences, as test performance remained stable across all levels of guessing. These results underscore the importance of focusing on difficulty and discrimination parameters in DIF detection and suggest that nonlinear regression can serve as a practical and efficient alternative to item response theory (IRT)-based methods, particularly in contexts where guessing effects are present. Overall, the study contributes to psychometric methodology by highlighting parameter-specific influences and offering evidence for the utility of nonlinear regression in improving DIF detection.

کلیدواژه‌ها English

psychometrics
differential item functioning
guess effect
simulation
item parameters

  • تاریخ دریافت 15 خرداد 1404
  • تاریخ بازنگری 27 شهریور 1404
  • تاریخ پذیرش 17 مهر 1404