Estudio de aplicabilidad de modelos de teoría de respuesta al ítem a la prueba de selección universitaria de matemáticas

Abstract

La construcción de preguntas para pruebas estandarizadas, como la Prueba de Selección Universitaria (PSU), supone un gran desafío y enfrentarlo requiere un análisis continuo por parte de instituciones especializadas, a través del uso de teorías de medición que constituyen el marco teórico para el diseño e implementación de estos instrumentos. Actualmente, el análisis y desarrollo de la PSU se realiza a través de la denominada teoría clásica, con una creciente incorporación de la teoría de respuesta al ítem (IRT). Sin embargo, son conocidas las limitaciones de la teoría clásica y es deseable el estudio y la implemen- tación de otros modelos que permitan efectuar análisis más completos de esta prueba. En particular, la implementación de un modelo avanzado permitiría obtener más información de las preguntas utilizadas y de las habilidades de los alumnos, además de generar preguntas enfocadas en habilidades específicas. En este contexto se enmarca el presente trabajo de tesis, donde se realiza un estudio deta- llado y un análisis crítico de los modelos estándar de IRT que complementan los resultados de la teoría clásica. El objetivo es estudiar si se cumplen los supuestos para la aplicación de estos modelos. Se aplican distintos modelos IRT unidimensionales a los datos de la PSU de matemática y se contrastan los resultados obtenidos. Además, se estudian extensiones multidimensionales de IRT, donde los supuestos necesarios son menos restrictivos. Los resultados obtenidos con estos modelos extendidos son comparados con los modelos originales. Finalmente, en el caso de la PSU de matemática, la evidencia indica que no se cumplen los supuestos para poder aplicar los modelos IRT unidimensionales. Por otra parte, los mo- delos multidimensionales abordan aspectos que escapan del alcance de la teoría clásica y de los modelos IRT convencionales, por lo que su utilización podría entregar información sig- nificativa para comprender el comportamiento de grupos particulares de estudiantes o para la creación de preguntas que potencien habilidades específicas. Sin embargo, es necesario el estudio, comprensión e interpretación de los parámetros que definen a los modelos MIRT para complementar los análisis actuales de la PSU.