Análisis de Reactivos de Razonamiento Matemático en Instrumentos de Evaluación Área Temática: Evaluación de los Aprendizajes Miguel Ángel Vargas Lomelí, J. Deisy Santamaría Juárez, José I. Soriano Rosas [email protected], [email protected], [email protected] Vicerrectoría de Docencia Benemérita Universidad Autónoma de Puebla (BUAP) Los aspirantes a ingresar a la BUAP presentan un examen de Admisión que evalúa las áreas de Razonamiento Matemático, Verbal y Redacción Indirecta. La Vicerrectoría de Docencia de la BUAP ofrece un curso de preparación para ingresar a la universidad denominado “Seminario de Orientación para el Examen de Admisión a Carreras Profesionales”, que busca potenciar las habilidades de los aspirantes. En este Seminario se les presenta a los alumnos una serie de estrategias de solución que optimiza el proceso de solución de los reactivos Al inicio y al final del Seminario, el alumno presenta una prueba de Discriminación similar al examen de admisión. Una forma de medir la calidad de la prueba es realizar un análisis cualitativo y cuantitativo de cada reactivo de la prueba con la finalidad de medir su ganancia académica y verificar si la prueba realmente está discriminando a la población evaluada. En nuestro caso particular, desarrollamos el examen de la parte de Razonamiento Matemático, donde medimos las habilidades en las áreas temáticas de Aritmética, Álgebra, Geometría y Estadística. Para cada eje temático se generan reactivos por parte de docentes relacionados con el nivel académico. Cada reactivo es calificado tanto por el diseñador como por un grupo experto y responsable del proyecto, quienes les asignan una categoría y se le califica cualitativamente. Existen diferentes versiones de pruebas de discriminación, las cuales comparten un cierto número de reactivos cada una, dichos reactivos se les llama “testigos”, lo que nos permite estandarizar las pruebas y junto con la ganancia académica de cada reactivo se miden la calidad de las mismas. Existen dos momentos para el análisis de un reactivo. 1. Al elaborarlo y colocarlo “estratégicamente” en la prueba de Discriminación (Análisis cualitativo). 2. Después de la aplicación de la prueba de Discriminación, evaluar cada reactivo para contribuir a mejorar la prueba de Discriminación para revisar y descartar reactivos ineficientes, así como generar información de lo que saben los alumnos diagnosticados (Análisis cuantitativo). Estadísticas por reactivo Respuesta A La estadística nos dará herramientas para analizar cada uno de los reactivos de las pruebas de Discriminación en el área de Razonamiento Matemático y utilizando comandos estadísticos de hojas electrónicas de cálculo, permitirá la evaluación de conjuntos de datos de regular tamaño para su análisis. Para la aceptación de un reactivo de forma cuantitativa (después de la aplicación de la prueba), necesitamos determinar los siguientes indicadores: • Las frecuencias relativas de cada opción de respuesta del reactivo. • El índice de dificultad. • El índice de correlación de punto biserial. Haciendo uso de las hojas electrónicas de cálculo, se obtuvieron cada uno de los indicadores. Respuesta D Estadísticas por reactivo Respuesta D Repuesta Incorrecta B Cada reactivo es calificado cualitativa y cuantitativamente para obtener la ganancia académica de cada reactivo y esto permite actualizar la base de datos de los ejercicios y mejorar continuamente la calidad del seminario utilizando los mejores reactivos para incrementar las probabilidades de ingreso del aspirante. Conclusiones • Es muy importante realizar el análisis estadístico de cada reactivo para contribuir a las mejoras en los diseños de las pruebas de Discriminación. • El análisis nos permite reacomodar los reactivos en las pruebas de acuerdo a su índice de dificultad. • Permite visualizar los reactivos ineficaces. • Con el análisis nos permite distinguir el comportamiento de cada reactivo de acuerdo a las respuestas de los estudiantes de puntajes altos y bajos. Referencias Arévalo Espinosa Martín de Jesús, (2012) “Identificación de Tipos y Niveles de Razonamiento en Matemáticas de Estudiantes egresados del Nivel Bachillerato a través de Prueba similar a Prueba de Aptitud Académica”, Tesis de Licenciatura, FCFM, BUAP. Chávez Álvarez, César & SasdeHazin, Antonio. (2009) “Procedimientos básicos para el análisis de reactivos”. (Cuaderno técnico Número 8) México, Centro Nacional de Evaluación para la Educación Superior. Seminario de Orientación para el Examen de Admisión a Carreras Profesionales, (2013), BUAP.
© Copyright 2024