Efecto de la instrucción sobre la dimensionalidad del test

  1. Pérez Meléndez, Cristino
  2. González Gómez, Andrés
  3. Padilla García, José Luis
Revista:
Psicothema

ISSN: 0214-9915

Año de publicación: 1999

Volumen: 11

Número: 1

Páginas: 183-193

Tipo: Artículo

Otras publicaciones en: Psicothema

Resumen

El interés por la unidimensionalidad ha aumentado en los últimos años por su relevancia para los modelos más populares de la Teoría de Respuesta a los Items. Sin embargo, las dudas sobre el cumplimiento del supuesto en el caso de los tests de rendimiento son generalizadas. De ahí su sustitución por versiones más débiles, por ejemplo, la de «unidimensionalidad esencial» (Stout, 1987). Presentamos los resultados de un estudio experimental sobre el efecto de las diferencias en las experiencias instruccionales en la «unidimensionalidad esencial» de las respuestas a un test de rendimiento. El procedimiento DIMTEST identifica la falta de unidimensionalidad esencial en un conjunto de 9 ítems (p<0.001), diseñados para medir el rendimiento en un contenido objeto de diferentes estrategias instruccionales para dos grupos de personas (N = 650). Por último, el trabajo analiza las implicaciones de los resultados para un posible funcionamiento diferencial del conjunto de ítems.

Referencias bibliográficas

  • Anderson, L. W. (1985). Opportunity to leam. En T. Husen y T. N. Postlethwaite (Eds.), The international encyclopedia of education. Oxford: Pergamon Press.
  • Birenbaum, M., y Tatsuoka, K. K. (1982). On the dimensionality of achievement test data. Journal of Educational Measurement, 19, 259-266.
  • Birenbaum, M., y Tatsuoka, K. K. (1983). The effect of a scoring system based on the algorithm underlying the student's response patterns on the dimensionality of achievement test data of the problems solving type. Journal of Educational Measurement, 20, 17-26.
  • Camilli, G., y Shepard, L. (1994). Methods for identifying biased test item. Thousand Oaks. CA: Sage Publications, Inc.
  • Crocker, L., y Algina, J. (1986). Introduction to classical and modern test theory. Rinehart and Winston, New York.
  • Cuesta, M. (1993). Utilización de modelos logísticos unidimensionales con datos multidimensionales. Tesis doctoral no publicada. Universidad de Oviedo. Oviedo, España.
  • Cuesta, M., y Muñiz, J. (1994). Utilización de modelos unidimensionales de teoría de respuesta a los ítems con datos multifactoriales. Psicothema, 6, 283-296.
  • De Champlain, A., y Gessaroli, M. E. (1991, April). Assessing test dimensionality using an index based on nonlinear factor analysis. Paper presented at the Annual Meeting of the American Educational Research Association, Chicago.
  • Ferrando, P J. (1996). Evaluación de la unidimensionalidad de los ítems mediante análisis factorial. Psicothema, 8, 397-410.
  • Gagné, R. M. (1987). Instructional Technology: Foundation. Hillsdale, New Jersey: Lawrence Erlbaum Associates, Publishers.
  • Gagné, R. M., y Glaser, R. (1987). Foundations in learning research. En R. M. Gagné (Ed.) Instructional Technology: Foundation. (pp. 4984). Hillsdale, New Jersey: Lawrence Erlbaum Associates, Publishers.
  • Gagné, R. M., Briggs, L. J., y Wager, W. (1988). Principles of instructional design. (3ed). New York: Holt, Rinehart y Winston.
  • Goldstein, H. (1980). Dimensionality, bias, independence and measurement scale problems in latent trait test score models. British Journal of Mathematical and Statistical Psychology, 33, 234-246.
  • Hambleton, R. K., y Rovinelli, R. J. (1986). Assessing the dimensionality of a set of test items. Applied Psychological Measurement, 10, 287-302.
  • Hambleton, R. H., y Swaminathan, H. (1985). Item response theory: Principles and applications. Boston: Kluwer-Nijhoff.
  • Hattie, J., Krakowski, K., Rogers, H. J., y Swaminathan, H. (1996). An assessment of Stout's index of essential unidimensionality. Applied Psychological Measurement, 20, 1-14.
  • Holland, P. W., y Rosenbaum, P. R. (1986). Conditional association and unidimensionality in monotone latent variable models. Annals of Statistics, 14, 1523-1543.
  • Lord, F. M. (1980). Applications of item response theory to practical testing problems. Hillsdale. New Jersey: Lawrence Erlbaum Associatest, Publishers.
  • McDonalsd, R. P. (1982). Linear versus nonlinear models in item response theory. Applied Psychological Measurement, 6, 379-396.
  • Mayer, R. E. (1989). Models for understanding. Review of Educational Research, 59, 43-64.
  • Martínez-Cardeñoso, J., Cuesta, M., y Muñiz, J. (1996). Dimensionalidad y función de información de los tests. Psicothema, 8, 215-220.
  • Merrill, M. D., Tennyson, R. D., y Posey, L. O. (1992). Teaching concepts: An instructional design guide. Englewood Cliffs, New Jersey: Educational Technology Publications, Inc.
  • Miller, M. D., y Linn, R. L. (1988). Invariance of item characteristic functions with variations in instructional coverage. Journal of Educational Measurement, 25, 205-219.
  • Muñiz, J., y Cuesta, M. (1993). El problema de la unidimensionalidad en la medición psicológica. En Forns y Anguera (comps.). Aportaciones recientes a la evaluación psicológica. Barcelona. PPU.
  • Muthén, B. O. (1989). Using item-specific instructional information in achievement modeling. Psychometrika, 385-396.
  • Nandakumar, R. (1993). Assessing essential unidimensionality of real data. Applied Psychological Measurement, 17, 29-38.
  • Nandakumar, R. (1994). Assessing dimensionality of a set of item responses. Comparison of different approaches. Journal of Educational Measurement, 31, 17-35.
  • Nandakumar, R., y Stout, W. F. (1993). Refinement of Stout's procedure for assessing latent trait dimensionality. Journal of Educational Statistics, 18, 41-68.
  • Nandakumar, R., y Yu, F. (1996). Empirical validation of DIMTEST on nonnormal ability distributions. Journal of Educational Measurement, 33, 355-368.
  • Osterlind, S. J. (1989). Constructing test items. Norwell. Massachusetts: Kluwer Academic Publishers.
  • Padilla, J. L., Pérez, C., González, A., y Rojas, A. (1997, Septiembre). La búsqueda de las causas del funcionamiento diferencial del item/sesgo en el item desde la teoría de la validez. Comunicación presentada al simposium Funcionamiento Diferencial de los Item. V Congreso de Metodología de las Ciencias Humanas y Sociales. Sevilla.
  • Padilla, J. L., Pérez, C., y González, A. (en prensa). Causas de la ejecución diferencial en los ítems de rendimiento. Psicothema.
  • Roussos, L. A., Stout, W. F., y Marden, J. I. (1993, April). Dimensional and structural analysis of standardized tests using DIMTEST with hierarchical cluster analysis. Paper presented at the Annual Meeting of the National Council on Measurement in Education, Atlanta, GA.
  • Shealy, R. S., y Stout, W. F. (1993). A modelbases standardization approach that separates true bias/dif from ability differences and detects test bias/dft as well as item bias/dif. Psychometrika, 58, 159-194.
  • Stout, W. F. (1987). A nonparametric approach for assessing latent trait unidimensionality. Psychometrika, 52, 589-617.
  • Stout, W. F. (1990). A new item response theory modeling approach with applications to unidimensionality assessment and ability estimation. Psychometrika, 55, 293-325.
  • Traub, R. E. (1983). A priori considerations in choosing an item response model. En R. K. Hambleton (Ed.). Applications of item response theory. (pp. 57-70). Vancouver. British Columbia: Educational Research Institute of British Columbia.