Aplicación de cuatro procedimientos de detección del funcionamiento diferencial sobre ítems politómicos

  1. Elosua Oliden, Paula
  2. López Jauregui, Alicia
Revista:
Psicothema

ISSN: 0214-9915

Año de publicación: 2007

Volumen: 19

Número: 2

Páginas: 329-336

Tipo: Artículo

DIALNET GOOGLE SCHOLAR lock_openAcceso abierto editor

Otras publicaciones en: Psicothema

Resumen

En este trabajo se describen cuatro procedimientos de detección del funcionamiento diferencial del ítem para formatos de respuesta politómica: Mantel, Mantel-Haenszel Generalizado (GMH), Regresión Logística Ordinal (RLO) y Regresión Logística Discriminante (RLD). Además de los modelos teóricos se describen las medidas del tamaño del efecto utilizables con cada uno de ellos. Con un diseño de validación cruzada se analizan los ítems politómicos de dos cuadernillos de la prueba de comprensión lectora del programa PISA2000. Las muestras analizadas provienen de Estados Unidos y España. Adoptando como regla de decisión la significación de la prueba estadística y la medida del tamaño del efecto, el acuerdo entre los procedimientos evaluados es total para dos de los ítems analizados.

Referencias bibliográficas

  • Agresti, A. (1984). Analysis of ordinal categorical data. New York: Wiley and Sons.
  • Agresti, A. (1990). Categorical data analysis. New York: Wiley and Sons.
  • Aylesworth, R., y Kristjanson, E. (2000). Effect sizes measures for detecting polytomous DIF. Unpublished working paper.
  • Berk, R.A. (ed.) (1982). Handbook of methods for detecting item bias. Baltimore: John Hopkins University Press.
  • Camilli, G., y L.A. Shepard (1994). Methods for identifying biased test items. London, Sage.
  • Dorans, N.J., y Holland, P.W. (1993). DIF detection and description: Mantel-Haenszel and Standarization. En P.W. Holland y H.Wainer (eds.): Differential item functioning (pp. 35-66) Hillsdale, NJ: Erlbaum
  • Dorans, N.J., y Kulick, E. (1986). Demonstrating the utility of the standarization approach to assessing unexpected differential item performance on the scholastic aptitude test. Journal of educational measurement, 23(4), 355-368.
  • Elosua, P., López, A., y Egaña, J. (2000). Idioma de aplicación y rendimiento en una prueba de comprensión verbal. Psicothema, 12(2), 201-206.
  • Elosua, P., López, A., y Torres, E. (2000). Desarrollos didácticos y funcionamiento diferencial de los ítems. Problemas inherentes a toda investigación empírica sobre sesgo. Psicothema, 12(2), 198-202.
  • Fidago, A.M., y Ferreres, D. (2002). Supuestos y consideraciones en los estudios empíricos sobre el funcionamiento diferencial de los ítems. Psicothema, 14, 491-496.
  • Fidalgo, A.M., Ferreres, D., y Muñiz, J. (2004). Liberal and conservative differential item functioning detection using Mantel-Haenszel and SIBTEST: Implications on the type I and type II error rate. The Journal of Experimental Education, 73(1), 23-39.
  • Fidalgo, A.M., Mellenbergh, G.J., y Muñiz, J. (1998). Comparación del procedimiento Mantel-Haenszel frente a los modelos loglineales en la detección del funcionamiento diferencial de los ítems. Psicothema, 10 (1), 219-228.
  • French, A.W., y Miller, T.R. (1996). Logistic regression and its use in detecting differential item functioning in polytomous items. Journal of Educational Measurement, 33, 315-332.
  • Gelin, M.A, y Zumbo, B.D. (2003). Differential item functioning results may change depending on how an item is scored: An illustration with the centre for epidemiologic studies depression scale. Educational and Psychological Measurement, 63(1), 65-74.
  • Hidalgo, M.D., y Gómez-Benito, J. (1999). Técnicas de detección del funcionamiento diferencial en ítems politómicos. Metodología de las Ciencias del Comportamiento, 1, 39-60.
  • Hidalgo, M.D., y Gómez-Benito, J. (2003). Test purification and the evaluation of differential item functioning with multinomial logistic regression. European Journal of Psychological Assessment, 19, 1-11.
  • Hidalgo, M.D., y López, J.A. (2004). DIF detection and effect size: A comparision between logistic regression and Mantel-Haenszel Variation. Educational and Psychological Measurement, 64, 903-915.
  • Holland, P.W., y Thayer, D.T. (1988). Differential item performance and the Mantel-Haenszel procedure. En H. Wainer y H.J. Braun (eds.): Test validity (pp. 129-145). Hillsdale, NJ: Lawrence Erlbaum
  • Holland, P.W., y Wainer, H. (eds.) (1993). Differential item functioning. Hillsdale, Lawrence Erlbaum Associates.
  • Jodoin, M.G., y Gierl, M.J. (2001). Evaluating type I error and power rates using an effect size with the logistic regression procedure for DIF detection. Applied Measurement in Education, 14, 329-349.
  • Kristjansson, E., Aylesworth, R., y Zumbo, B.D. (2005). A comparison of four methods for detecting differential item functioning in ordered response items. Educational and Psychological Measurement, 65(6), 935-953.
  • Mantel, N. (1963). Chi-square tests with one degree of freedom: Extensions of the Mantel-Haenszel procedure. Journal of American Statistical Association, 58, 690-700.
  • Mantel, N., y Haenszel, W.M. (1959). Statistical aspects of the analysis of data from retrospective studies of disease. Journal of the National Cancer Institute, 22, 719-748.
  • Miller, T., y Spray, J. (1993). Logistic discriminant function analysis of DIF identification of polytomously scored items. Journal of Educational Measurement, 30, 107-122.
  • Spray, J., y Miller, T. (1994). Identifying nonuniform DIF in polytomously scored test items (American College Testing Research Report Series 94-1). Iowa City, IA: American College Testing Program.
  • Swaminathan, H., y Rogers, H.J. (1990). Detecting differential item functioning using logistic regression procedures. Journal of educational measurement 27(4), 361-370.
  • Tian, F. (1999). Detecting differential item functioning in polytomous items. Unpublished doctoral dissertation, Faculty of Education, University of Ottawa.
  • Thomas, D.R., y Zumbo, B.D. (1998). Variable importance in logistic regression based on partitioning and R-squared measure. Paper presented at the annual meeting of the Psychometric Society, Urbana, IL.
  • Wilkinson, L., y APA Task Force on Statistical Inference (1999). Statistical methods in psychology journals: Guidelines and explanations. American Psychologist, 54, 594-604
  • Zumbo, B.D. (1999). A handbook on the theory and methods of differential item functioning (DIF): Logistic regression modelling as a unitary framework for binary and Likert-type item scores. Ottawa, Canadá: Directorate of Human Resources Research and Evaluation, Department of National Defense.
  • Zwick, R., J.R., Donogue, J., y Grima, K.L. (1993). Assessment of differential item functioning for performance tasks. Journal of Educational Measurement 30(3), 233-251.
  • Zwick, R., y D.T. Thayer (1996). Evaluating the magnitude of differential item functioning in polytomous items. Journal of Educational and Behavioral Statistics 21(3), 187-201.
  • Zwick, R., Thayer, D.T., y Mazzeo, J. (1997). Descriptive and inferential procedures for assessing differential item functioning in polytomous items. Applied Measurement in Education, 10, 321-344.
Fuente de los datos: Dialnet