evaluando el aprendizaje de nuestros alumnos
TRANSCRIPT
ALFREDO PRIETO MARTÍN UNIVERSIDAD DE ALCALÁ
Evaluando el aprendizaje de nuestros alumnos
Resumen de resultados de aprendizaje de la asignatura de evaluación
Comprender la terminología en evaluación
Apreciar el papel de la evaluación en el aprendizaje.
Comprender las conexiones entre diseño del curso, actividades
de enseñanza/aprendizaje resultados de aprendizaje, y evaluación
Mejorar el diseño de la evaluación para que contribuya
eficazmente al cambio de abordaje frente al aprendizaje,
favorezca el aprendizaje proporcionando estímulo al esfuerzo y
oportunidades para el ejercicio de competencias y la recepción
de feedback sobre el desarrollo de las mismas.
Detección y resolución de problemas con la evaluación
CONOZCAMOS LA TERMINOLOGÍA ANGLOSAJONA PARA LA EVALUACIÓN DEL APRENDIZAJE
(ASSESSMENT IS NOT EVALUATION)
BASADO EN MATERIALES DEL CURSO CASLAT(CERTIFICATE OF ADVANCED STUDIES
IN LEARNING AND TEACHING) DEL
CENTRE FOR EDUCATIONAL DEVELOPMENT DEL
IMPERIAL COLLEGE OF LONDON
Diccionario Inglés-Español de términos sobre la evaluación del aprendizaje
En castellano evaluación es un término polisémico en inglés tienen un léxico más rico y
más preciso:
1. Medida y Valoración del aprendizaje (assessment) 2. Proporcionar retroinformación (feedback,
evaluation)3. Calificación del alumno (grading) 4. Valoración de la metodología de enseñanza-
aprendizaje (quality assessment, evaluation)5. Evaluación del profesor, el plan de estudios, la
institución (evaluation)
Evaluación
Evaluación en castellano es un término paraguasque engloba
Más terminología anglosajona en evaluación del aprendizaje
Assessment measuring the learning, the achievements and the progress of the learner.
Appraisal a mutual review by learner and teacher setting goals and training needs.
Evaluation is for curriculum, its delivery including evaluation of teaching.
Assessment is not the same as evaluation
Anécdota real de un Congreso sobre evaluación formativa del aprendizaje en España hace unos años. Contratan una videoconferencia de cierre congresual a una profesora de Estados Unidos sobre “evaluation”.
Empieza la videoconferencia y la experta se pone a tratar temas que no tienen nada que ver con la evaluación del aprendizaje. Mas bien habla de la evaluación de instituciones y de selección de profesionales para su contratación.
Ante la estupefacción del publico la conferenciante se da cuenta de que algo no va bien y pregunta por que supongo que ustedes serán evaluadores …¿Ustedes son evaluadores?
No, no somos evaluadores somos profesores universitarios interesados en los métodos para evaluar el aprendizaje de nuestros alumnos….
Ah, learning assessment ! Exclamó la conferenciante al darse cuenta del mal entendido Lo que parece triste es que los organizadores del congreso que contrataron esta video
conferencia no conocieran la gran diferencia entre evaluation y assessment
¿Que propiedades debe tener un sistema de evaluación?
1. Transparente 1. Deja muy claro que se pide al estudiante2. Con criterios claros de calificación
2. Justo debe operar igual para todos3. Fiable la corrección debe ser reproducible4. Reproducible el resultado con distintas pruebas 5. Valido debe poder medir con exactitud lo que
queremos medir6. Orientado al proceso debe valorar no solo la
solución, el resultado sino también el proceso de resolución.
Glosario de propiedades clave del método de evaluación
Fiabilidad (reliable) reproducibilidad consistencia y precisión. Representatividad de lo muestreado. Debe proporcionar resultados similares cuando se repite. Esto depende del número de las preguntas, su dificultad y su poder discriminativo
Validez (valid) adecuado y apropiado para medir lo que se pretende medir. Mide lo que se quiere medir y no otra cosa.
Transparencia (transparent) los procesos de evaluación son claros y abiertos a la impugnación y apelación. Revisión de examen
Justicia (fair) no supone desventaja para nadie Practicabilidad (feasible) realizable con los recursos disponibles
Tipos de evaluación del aprendizaje por su finalidad
Sumativa vs. formativa Sumativa (summative assessment ) para
calificar al final de una porción del aprendizaje, merecerá una calificación.
Formativa (formative assesment) usada durante el aprendizaje para diagnosticar fortalezas y debilidades mientras hay tiempo para mejorar. Pretende formar y estimular estudio y da oportunidad al feedback o retroinformación.
Retroinformación (feedback) a los estudiantes: sobre fortalezas y debilidades para ayudar al aprendizaje.
Tipos de evaluación del aprendizaje por el momento en que se produce
Final vs. continua Evaluación final (final assessment) sistema
usado hasta hace pocos años por las universidades de países atrasados del sur del continente (los famosos “PIGS that fly”) hasta que las normativas de los nuevos grados del EEES nos obligaron a dejar de usarla.
Evaluación continua (coursework/continuous assessment) “along the way” evaluación que se realiza durante el proceso de aprendizaje y puede contribuir a la calificación con lo que puede ser a la vez formativa y sumativa.
Tipos de evaluación del aprendizaje Evaluación con distintos niveles de repercusión
La repercusión se refiere a su peso en la toma de decisiones para calificar y promocionar a los alumnos
Low stakes assessment evaluación de baja repercusión calificativa diseñada para tener un impacto formativo, sin preocuparse por sus propiedades como instrumento de medida
High stakes assessment evaluación de alta repercusión calificativa diseñada para medir el aprendizaje y acertar en la decisiones
Tipos de evaluación calificativa o calificación
Calificación referida a normas. (Grading by the curve) ¿Cómo lo ha hecho
este alumno en relación con la norma establecida por sus compañeros?
Sirve para ordenar el nivel de aprendizaje de un alumno dentro de un grupo
de referencia
Calificación referida a criterios (Criterium referenced Grading by
standards). Juzga en que grado un alumno ha superado una serie de criterios
de calificación predeterminados. Respuesta individual es comparada contra
una respuesta modelo ideal o su descripción en una rúbrica.
Establecimiento de estándares. Se determina un nivel de aprobado para
cada juego de cuestiones. Se califica en base a criterios y se describen niveles
de ejecución. La nota de paso puede variar para cada cuestión.
Estructura de la evaluación
Si separamos la información de distintas competencias nos servirá para enjuiciar de manera estructurada las competencias de un alumno.
Si por ejemplo evalúo por separado adquisición de conocimientos, adquisición de habilidades, comprensión y transferencia de ideas esenciales puedo dar feedback por separado sobre ello.
Bien en conocimientos, regular en habilidades, flojo en comprensión y necesita mejorar en transferencia
Debemos evaluar distintos resultados de aprendizaje e intentar mantener por separado la información que generan
Desestructuración de la evaluaciónLa evaluación será estructurada mientras mantenga la
riqueza de la información sobre los distintos aspectos evaluados.
Esto requiere mantener separada la información de los distintos aspectos evaluados para proporcionar feedback especifico sobre ellos y poder realizar un seguimiento de su evolución.
Si hago una suma de todo y lo convierto en un solo número de uno a 10 ya no podré saber en que aspectos es fuerte el alumno y en cuales flojea, mi evaluación habrá perdido su estructura y mucho de sus contenido informador sobre el aprendizaje del alumno.
Tenemos la mala costumbre de desaprovechar la información que la evaluación estructurada nos da para fomentar el desarrollo de nuestros alumnos.
Calificando las pruebas de evaluación
Guía de calificación, rubrica, (rubric) declaración explicita de las respuestas esperadas y la asignación de calificaciones en función del nivel demostrado en los criterios elegidos.
Criterios de calificación características que las respuestas o tareas de los estudiantes deben mostrar para obtener una determinada calificación. Se establecen distintos niveles.
Estándares niveles de referencia nacional o local con los que se comparan los logros de los estudiantes
Usa la evaluación para fomentar el “aprendizaje de banda ancha” (ADSL) Assessment Drives Student Learning
Nuestra evaluación contribuye y condiciona fuertemente la manera en que nuestros alumnos estudian y aprenden nuestra asignatura.
Los alumnos aprenden lo que evaluamos.Lo que no evaluemos no será aprendidoNuestra evaluación debe incluir todo aquello
que consideramos un aprendizaje valioso para nuestros alumnos y que humanamente nos de tiempo a valorarlo o corregirlo en los plazos de tiempo de los que dispongamos.
Alineamiento constructivo del curriculum y de la evaluación
Objetivos, métodos de evaluación y métodos de enseñanza aprendizaje deben apuntar en la misma dirección para conseguir la mayor eficacia en el aprendizaje.
Cuanto menos alineado sea, menos aprendizaje del deseado se obtendrá.
intención
Activid
ades
E-A
y ev
aluac
ión
LogroCuánto más alineemos los objetivos con la evaluación mayor nivel de logro obtendremos
Blueprinting es
Asegurarse de que la evaluación cubre todo lo que debe ser aprendido y cubre todos los resultados de aprendizaje que son objetivos de la asignatura.
Debemos poder comprobar que las formas de evaluación que utilizamos cubren todos los resultados de aprendizaje pretendidos.
Podemos hacerlo utilizando una Matriz de resultados de aprendizaje y métodos de enseñanza aprendizaje para alcanzarlos.
Matriz de evaluación asignatura ECTS
Evaluación continua(entre 40% y 100%) (60%)
Examen final (0-
60%) (40%)
Total en la calificación final
Actividad Competencia
PBL Evaluación continua
Participación Examen
Conocimientos específicos (recuerdo)
10%
Tests
2,5% 20% 32,5%
Aplicación (de los conocimientos) y (habilidad)
10% ejercicios
2,5% 10% 22,5%
Análisis, síntesis evaluación (con los conocimientos) (comprensión)
5% 2,5% 10% 12,5%
Comunicación (de los conocimientos) (en transferencia)
10% Escrita 10% Oral
2,5% 22,5%
Búsqueda autónoma de información (y transferencia)
5% tutorías 5%
Relaciones de la evaluación en un sistema alineadoPrincipales Competencias que desarrolla la asignatura
Relación con las actividades de aprendizaje
Relación con las actividades de evaluación
1Conocimientos de inmunología
Estudio previoExposiciónTests autoevaluación
Examen teoría
2Técnicas de obtención de información experimental en inmunología
Practicas de laboratorio
Examen prácticas
3Proceso de información en inmunología
ABP Tutoría asimilación
4 trabajo en equipo ABP Tutoría Evaluación compañeros
5Aprendizaje autodirigido ABP Tutoría asimilación 6Pensamiento crítico y creativo
Actividades en clase HCAPP
7Resolución de problemas ABP Tutoría presentación8Lengua extranjera inglés. ABP Tutoría asimilación9 Uso de TICs en biología. ABP Presentación10 Comunicar información científica oralmente, por escrito y por canales on line.
ABP Exposición oral
Relaciones de la evaluación en un sistema alineado Principales Competencias que desarrolla la asignatura
Evidencias de aprendizaje Criterios de referencia para la calificación
Reflejo en la calificación
1Conocimientos y aplicación de inmunología Examen teoría
Acertar Tests , resolver casosMostrar comprensión relacional
50%
2Técnicas de obtención de información experimental en inmunología (prácticas)
Realiza, analiza e interpreta técnicas Práctica laboratorio
15%
3Proceso de información en inmunología (ABP)
Asimilación articulo en tutoría 2,5%
4 trabajo en equipo (ABP) Evaluación compañeros 2,55Aprendizaje autodirigido (ABP)
Asimilación articulo en tutoría 2,5%
6Pensamiento crítico y creativo(ABP y Actividades en clase)
HCAPP 5%
7Resolución de problemas(ABP)
Presentación (en el 10% de presentación)
8Lengua extranjera inglés.(ABP)
Asimilación articulo en tutoría 2,5%
9 Uso de TICs en biología. (ABP)
Presentación 10%
10 Comunicar información científica oralmente, por escrito y por canales on line. (ABP)
Exposición oral 10%
Battery (combination de métodos de evaluación) Nuestra battery debe:
Comprobar conocimiento factual (Test) y comprobar
competencias cognitivas de alto nivel de razonamiento
(análisis con casos y supuestos).
Ser fiable tests discriminativos y corrección con rúbricas.
Alinearse con los resultados de aprendizaje pretendidos
Ser coherente con los métodos de enseñanza aprendizaje utilizados
Ser claro acerca de los objetivos que estamos evaluando
Ser transparente
Proporcionar feedback a tiempo y que sea útil para mejorar
Servirme para conocer qué objetivos he conseguido
Métodos de evaluación y dominios que ponen a prueba
Cognitivo(conocimiento, comprensión, pensamiento)
Habilidades(prácticas y transferibles)
Afectivo(actitudes /valores)
MCQRespuesta cortaEnsayos
Oral vivaOSCEProyectosInformes de laboratorioPresentación EMQ (extended matching questions)
Los propósitos de la evaluación
1. Saber lo que nuestros alumnos aprenden y lo que no, mantener
estándares.
2. Saber los que aprenden y los que no, diferenciar en función del grado
de aprendizaje.
3. Proporcionar información al alumno feedback sobre lo que esta
aprendiendo y debe aprender, nota, lugar en comparación y
comentarios escritos.
4. Certificación de competencia.
5. Motivar y modelar el comportamiento adecuado.
6. Información acerca de la eficacia de la enseñanza y el profesor.
¿Quién es evaluado y por quién?
Quien es evaluado
Por quien Asuntos
Un individuo Uno mismo Auto evaluaciónCompañeros (peer assessment)ProfesorSistema informático
Propósito de cada opción
Un grupo Miembros del mismo grupoOtros gruposProfesores
Misma o diferente nota a los distintos miembrosEvaluar a compañeros nos pone en el camino de aprender a evaluarnos
nosotros mismosAuto evaluar nuestro aprendizaje es el primer paso para dirigir de modo intencionado nuestro aprendizaje autónomo
Evaluación y abordaje frente al aprendizaje
Una evaluación desalineada favorece que los alumnos adopten un abordaje superficial frente a su aprendizaje
Una evaluación alineada favorece el aprendizaje profundo
Una evaluación alineada junto a un buen sistema de entrenamiento y evaluación formativa que proporcione feedback son la manera de asegurar que nuestros alumnos aprendan lo que queremos que aprendan