Maestría en Ingeniería · 2015
Pruebas experimentales para la determinación de niveles de dificultad de ítems para el aprendizaje en la asignatura Estática apoyado en el Sistema de Evaluación (SIEVAL)
Estática es una asignatura básica en la formación para ingenieros, por lo tanto el aprendizaje de los estudiantes que cursan esta asignatura es de suma importancia -- Tradicionalmente la evaluación de esta asignatura se desarrolla por medio de ejercicios de análisis físico los cuales requieren de conocimientos matemáticos para su solución, los ejercicios que se usan para la evaluación se pueden encontrar en los libros guías del curso, notas de clase y hoy en día en la plataforma que viene en desarrollo desde el año 2011, el sistema de evaluación (SIEVAL) -- Este sistema ha permitido que los estudiantes puedan entrenarse en cada uno de los capítulos de la asignatura Estática de una forma más dinámica, tratando siempre de mejorar el proceso de aprendizaje y esperando mejores resultados al momento de presentar la evaluación del curso -- Los ejercicios que se encuentran en el sistema de evaluación son tomados de algunos libros guías de la asignatura o son desarrollados por los docentes de la asignatura, cada ejercicio depende de una variedad de ítems, los cuales son preguntas que evalúan conceptos básicos de la asignatura -- Aunque la validez o la confiabilidad de dichos ítems pueden ser asumidas por criterio de los docentes, es importante poder determinar cómo estos ítems son los adecuados para entrenar y evaluar a los estudiantes que toman el curso de Estática -- Este trabajo muestra pruebas experimentales que se hacen a partir del primer semestre del año 2013 hasta finales del 2014, dichas pruebas están apoyadas en una teoría de evaluación que ya están implementada, IRT (Item Response Theory por sus siglas en inglés) -- Esta teoría puede determinar parámetros tales como, el nivel de dificultad de los ítems que sean evaluados; la discriminación de cada ítem y el factor de adivinanza de cada ítem -- Para las pruebas se utiliza un modelo de análisis de ítems de evaluación valido que permita conocer su dificultad y/o discriminación, y así conocer cuáles deben ser utilizados para cada uno de los ejercicios que el sistema de evaluación contiene y así mejorar cada vez más el nivel del sistema, logrando un mejor proceso de aprendizaje por parte de los estudiantes que toman el curso -- En el sistema hay alrededor de 100 ítems programados, de los cuales un 30% aproximadamente han sido analizados con las pruebas de este trabajo
Texto completo 70 páginas con texto
Leer la tesis completa Ficha en el repositorio
Contenido
- INTRODUCCIÓNp. 9
- OBJETIVOS Y MOTIVACIÓN DEL PROYECTOp. 9
- DESCRIPCIÓN DE LOS CAPÍTULOS DEL PROYECTOp. 9
- PRODUCCIÓN INTELECTUAL DEL PROYECTOp. 10
- MARCO TEÓRICOp. 11
- SISTEMA DE EVALUACIÓNp. 11
- TEORÍA DE RESPUESTA AL ÍTEM (IRT)p. 12
- Procedimiento de ANÁLISIS Y CALIBRACIÓNp. 14
- PRUEBAS REALIZADAS A ESTUDIANTESp. 15
- PRUEBA 1p. 15
- Descripción de la prueba 1p. 15
- Descripción de los ítems de la prueba 1p. 16
- Estimación de parámetros para la prueba 1p. 16
- Conclusiones de la prueba 1p. 17
- PRUEBA 2p. 18
- Descripción de la prueba 2p. 18
- Descripción de los ítems de la prueba 2p. 20
- Estimación de parámetros para la prueba 2p. 22
- Conclusiones de la prueba 2p. 26
- PRUEBA 3p. 26
- Descripción de la prueba 3p. 26
- Estimación de parámetros para la prueba 3p. 30
- Conclusiones de la prueba 3p. 32
- ANÁLISIS DE RESULTADOS Y MEJORAS DEL SISTEMAp. 33
- ANÁLISIS DE LOS RESULTADOS OBTENIDOS CON LAS PRUEBASp. 33
- MEJORAS DEL SISTEMA DE EVALUACIÓNp. 34
- Cambios realizadosp. 35
- Cambios significativosp. 35
- CONLCUSIONES Y SUGERENCIAS PARA TRABAJOS FUTUROSp. 36
- CONCLUISONESp. 36
- SUGERENCIAS PARA TRABAJOS FUTUROSp. 37
- BIBLIOGRAFÍAp. 39
- ANEXOSp. 40
- ANEXO 1p. 40
- Programación de ejercicios en Javap. 40
- Proceso de Creación de ejerciciosp. 42
- Importación a la plataforma MOODLEp. 46
- ANEXO 2p. 55
- Prueba 2p. 18
- Xcalibrep. 65
- Ilustración 1 Representación gráfica de los parámetros de la función IRTp. 12
- Ilustración 2 Vigas sometidas a una sola cargap. 16
- Ilustración 3 Vigas sometidas a dos cargasp. 16
- Ilustración 4 Gráfica de las dificultades de los ítems de la prueba 1p. 17
- Ilustración 5 Descripción gráfica de los ítems para la prueba 2p. 19
- Ilustración 6 Gráfica de resultados para test de valores fijos en la prueba 2p. 23
- Ilustración 7 Gráfica de resultados para test de valores variables en la prueba 2p. 24
- fijos) en la prueba 2p. 25
- prueba 3 (Selección múltiple)p. 27
- prueba 3 (Respuesta numérica)p. 29
- Ilustración 12 Cable con cargas puntuales para la prueba 3 (Selección múltiple)p. 30
- prueba 3p. 26
- Ilustración 14 Comparación dificultades para el punto de Cables para prueba 3p. 32
- Ilustración 15 Capítulos programados en Javap. 40
- Ilustración 16 Cantidad de ejercicios programados para un capítulop. 41
- Ilustración 17 Ejemplo de ejercicio programado en Javap. 42
- Ilustración 18 Código que asigna valores a los parámetros de un ejerciciop. 42
- evaluaciónp. 33
- Ilustración 20 Archivo XML exportado al computadorp. 44
- Ilustración 21 Cuerpo del archivo XML exportado desde la interfaz gráficap. 44
- evaluaciónp. 33
- Ilustración 23 Ventana de importación de preguntas en MOODLEp. 47
- Ilustración 24 Ventana con preguntas importadas en MOODLEp. 48
- Ilustración 25 Ventana del banco de preguntas y categorías en MOODLEp. 49
- MOODLEp. 50
- Ilustración 27 Actividades para añadir a un capítulo en MOODLEp. 51
- Ilustración 28 Configuración de un cuestionario en MOODLEp. 52
- MOODLEp. 53
- Ilustración 30 Capítulo con varias actividades creadas en MOODLEp. 53
- Ilustración 31 Ejemplo de un ejercicio del sistema de evaluación en MOODLEp. 54
- Ilustración 32 Archivo de datos para el software Xcalibrep. 63
- Ilustración 33 Archivo de control para el software Xcalibrep. 64
- Ilustración 34 Pestaña "Files" del software Xcalibrep. 65
- Ilustración 35 Pestaña "Input Format" del software Xcalibrep. 66
- Ilustración 36 Pestaña "IRT Model" del software Xcalibrep. 67
- Ilustración 37 Pestaña "Calibration" del software Xcalibrep. 68
- Ilustración 38 Pestaña "Estimation" del software Xcalibrep. 69
- Ilustración 39 Pestaña "Output Options" del software Xcalibrep. 70
- Tabla 1 Resultados de evaluación por parte de los estudiantesp. 13
- Tabla 2 Descripción de los ítems de la prueba 1p. 15
- IRTLRDIF201p. 17
- Tabla 4 Descripción de ítems para la prueba 2p. 19
- Tabla 5 Resultados para test de valores fijos para la prueba 2p. 23
- Tabla 6 Resultados para test de valores variables para la prueba 2p. 24
- prueba 2p. 18
- Tabla 8 Cables con preguntas de respuesta numérica para prueba 3p. 30
- respuesta para prueba 3p. 30
- prueba 3p. 26
- Tabla 12 Resultados de un examen realizados por los estudiantes - Anexo 2p. 62