Dra. Katherina E. Gallardo Córdova Escuela de Graduados en Educación

2. Evaluación del aprendizaje a través de exámenes comprensivos en la educación en línea y a distancia. Dra. Katherina E. Gallardo Córdova Escuela de Graduados en Educación

3. Definición • La evaluación del aprendizaje es el proceso por el cual se obtiene información para: • Determinar alcances obtenidos con respecto a objetivos de aprendizaje • Tomar decisiones sobre mejoras que se deben realizar a nivel • Curso / recursos • Prácticas docentes • Instrumentos de evaluación

4. Tipos, formas y medios para evaluar • Tipos: diagnóstica, formativa, sumativa • Formas: exámenes cerrados y abiertos, productos escritos, organizadores de información, registros de desempeño. • Medios: escritos u orales • Aplicaciones: automáticos o manuales

5. Evaluación en la educación a distancia • Limitantes: • Tecnológicas  ¿sabrá manejar apropiadamente la herramienta? • Identidad  ¿quién realizó el trabajo o presentó el examen? • Uso de recursos  ¿habrá dado créditos a los autores debidamente? • Desempeño  ¿habrá desarrollado realmente las habilidades que se promovieron a través del curso?

6. Evaluación en la educación a distancia • Tendencias: • Programas computacionalesmás sofisticados que permiten: • Exámenes • Inclusión de reactivos con grabación de procedimientos (ciencias, química, estadística). • Inclusión del elemento «voz» para registrar respuestas de los examinados. • Trabajos escritos • Seguimiento de avance en comparación con los objetivos (rúbricas electrónicas).

7. Examen • ¿Cómo evaluamos en nuestros cursos en línea y a distancia? • ¿Por qué optamos por trabajos escritos en lugar de exámenes y viceversa? • ¿Qué determina que un examen esté bien hecho?

8. Una experiencia con un examen comprensivo Materia: ED5048 Evaluación del aprendizaje

10. Material revisado en el módulo 1 • Castillo, S. (2002). Compromisos de la Evaluación educativa. • Méndez, J.M. (2001). Evaluar para conocer, examinar para excluir. • Padilla, R.A. (2009). Exámenes masivos internacionales y nacionales • Vidal, R. (2009). ¿Enlace, Exani, Excale o PISA? • Wolff, L. (2006). Los costos de las evaluaciones de aprendizaje en América Latina. 156 páginas a leer para la semana cuatro = 4.3 páginas por hora tomando como referencia las 36 horas de estudio que corren de la semana 2 a la 4.

11. Respuestas para el caso a compartir • ¿Cómo evalúo en el curso de evaluación? • Aplicación de diferentes estrategias que permiten corroborar cómo los alumnos van alcanzando los objetivos de aprendizaje

12. Respuestas para el caso a compartir • 2. Para el primer objetivo, ¿por qué opté por un organizador de información y luego por un examen? Dependió de su relación con el siguiente objetivo: • Apropiación de los contenidos • Precisión en el manejo de los contenidos

13. Respuestas para el caso a compartir • 3. ¿Qué determinó que el examen estuviera bien hecho? • Enfocarse en el nivel taxonómico (comprensión) • Elaborar un banco de reactivos para obtener preguntas al azar • Abarcar materiales revisados • Construir reactivos (preguntas) de opción múltiple según indica la técnica • Práctica 10%

14. Ejemplos reactivos

17. Resultados del examen

18. Resultados calificaciones

19. Mensajes recibidos

20. Mensaje recibidos • Hola Dra. • Me atrevo a escribirle, ya que de acuerdo a lo que he aprendido en las lecturas sobre evaluación, ésta es una forma de obtener información del proceso de enseñanza. • Tuve la inquietud de escribirle, posterior a realizar el examen de comprensión de lectura, el cual realicé de la manera más honesta, empleando sólo mis apuntes que tomé de las lecturas. Resultando que lo reprobé. • Situación que me agobió, porque esto me deja lejos de obtener un buen promedio en la materia (y a penas estamos empezando), pero sobre todo, porque las lecturas ME ENCANTARON, en realidad he aprendido mucho sobre ellas. Sí, reprobé el examen, pero me han dejado MUCHO para mi labor docente, incluso he empezado a "tomar cartas en el asunto" sobre mi manera de evaluar.

21. Mensajes recibidos (inconformidad) • «Aunque es evidente que mi nota no es para nada satisfactoria, lo que más me preocupa es el planteamiento tan inapropiado de los ítemes, redacción confusa, tendencia a la memoria, falta de explicación de respuesta de los ítemes al finalizar la prueba, en fín, indignación general.Creo que este curso tiene bases muy interesantes a nivel de evaluación como para terminar haciendo una prueba de un nivel sumamente malo por su construcción y planteamiento» • Alumno: respondió el examen de comprensión en 12 minutos

22. Ideas de cierre para reflexionar. • ¿Qué significaevaluar para cada uno de nosotros? • ¿Cómo estamos evaluando el aprendizaje en nuestros cursos? • ¿Qué relación guarda el cómo evalúo con la calidad académica que estamos buscando en U.V.? • ¿Qué innovaciones puedo implementar yo, como profesor titular o tutor para mejorar los actuales mecanismos de evaluación? • ¿Qué tipo de apoyos tecnológicos y de capacitación requerimos?

23. Fuentes recomendadas: • Baumann, M., Steinmetzer, J., Karami, M., & Schäfer, G.. (2009). Innovative electronic exams with voice in- and output questions in medical terminology on a high taxonomic level. Medical Teacher,31(10), E460.  Retrieved October 10, 2010, from AcademicResearchLibrary. (Document ID: 1880516481). • Díaz Barriga, A. (2000). Estudio preliminar: El examen: Un problema de historia y sociedad. En A. Díaz Barriga, A. (Compil.), El examen: Textos para su historia y debate (pp. 11–28). Distrito Federal, México: Centro de Estudios sobre la Universidad (CESU), Plaza y Valdés y UNAM. • Marzano, R. J. y Kendall, J.S. (2008). Designing and assessing educational objectives: Applying the new taxonomy. California, EE.UU.: Corwnin Press. • Marzano, R.J, Pickering, D.J. y Pollock, J.E. (2001). Classroom instruction that works: Research-based strategies for increasing student achievement. Alexandría, Virginia: Association for Supervision and Curriculum Development. • Thorndike, R. L. y Hagen, E. P. (1989). Medición y evaluación en psicología y educación (2a. ed.). Distrito Federal, México: Trillas.

24. Dra. Katherina E. Gallardo Córdova kgallar@itesm.mx