Métodos de eficacia probada para la mejora del aprendizaje universitario
Alfredo Prieto Martín
00 Presentación del curso
Presentaciones Background of the speaker
Biology/Degree in immunologyBackgroundBackground
Current RoleCurrent Role
20 years as researcher, 54 JCR original research articles, 16 thesis, Best young researcher prize UAH 2000,
Over 20 years’ experience as Immunology professor
former vicepresident and president of the Iberian Society of Cytometry.
7 years giving 98 courses in 22 universities about ABP/PBL, inductive learning, EHEA, professional development, ICTs assessment, competency-based curriculums
Fourth world position at TEMS 2013 (Top E-learning Movers and Shakers 2013) http://zaidlearn.blogspot.com.es/2014/01/the-top-e-learning-mover-shaker-of-2013.html
UAH Award on teaching innovation 2013-2014 http://profesor3punto0.blogspot.com.es/2014/10/el-grupo-de-innovacion-magistrales.html
Alfredo Prieto
Ideas importantes del curso
Comprender que tenemos que aprender mucho sobre como enseñar y como evaluar para que nuestros alumnos aprendan mejor
Comprender maneras alternativas de enseñar y evaluar y perder el miedo a experimentar con ellas.
Aprender a fomentar el estudio y la preparación previa de los estudiantes usando cuestionarios on line.
Aprender a incorporar cuestionamiento y metodologías inductivas en nuestras clases (razonamiento crítico sobre casos y profblemas).
Aprender a incorporar más práctica a las prácticas.
3
Comentarios a las preguntas urgentes
A continuación os conté una historia para sacaros de vuestra zona de comodidad
4
Demostración del uso de la metodología Just in time teaching / Enseñanza justo a tiempo11 de vosotros contestasteis al cuestionario de expectativas y ahora voy a responder a vuestras preguntas urgentes
Más allá de la intuición y la experiencia personal (Cees van der
Veluten)Premio del Instituto Karolinska en Educación
Médica 2013¿Por qué el profesor de medicina basa su práctica médica en
la medicina basada en la evidencia publicada y su práctica
docente en la tradición y su opinión personal?
¿Por qué a su paciente le administra el tratamiento que
según la última literatura médica es el mas eficaz y sin
embargo a su alumno le enseña de aquella manera que
simplemente le resulta más cómoda a él o simplemente es la
que dicta la tradición ancestral?
¿Por qué esta disociación del comportamiento?
Pensadlo individualmente y después discutirlo en parejas.
5
¿Qué es la práctica profesional basada en la evidencia?6
Hacer lo más correcto en cada situación en función de lo que la
literatura indica que es la mejor opción, decidimos que hacer en
función de la mejor evidencia publicada no en función de la tradición
y la opinión.
Por ejemplo en medicina
“… the conscientious, explicit, and judicious use of current best
evidence in making decisions about the care of individual patients.”
David Sackett MD (1994)
Esto permite definir las mejores prácticas a emplear en cada caso
¿Por qué no hacemos esto mismo para enseñar a los alumnos?
¿Por qué?
¿Se vuelven tontos los profesores de medicina al ir del hospital a la facultad?
7
Obviamente no ¿Por qué cada servicio del hospital realiza
sesiones clínicas todos los días y pasa un lustro sin que en el Dpto. de Medicina se haga una sesión para modernizar la docencia?
Estamos tan acostumbrados a que esto sea así, que lo que debería ser normal y ordinario (afrontar nuestra enseñanza de una manera profesional) nos parece lo anormal y extraordinario.
Es una convención cultural que en los países anglosajones llevan décadas cambiando y nosotros debemos empezar a cambiar
La respuesta de Cees van der Veluten
El profesor de medicina ha sido formado en medicina pero no en docencia. Es y se comporta como un profesional de la medicina y sin embargo se comporta como un amateur en la docencia.
Si se comportara com un amateur en su práctica médica sería demandado por sus pacientes que le acusarían de negligencia profesional por usar procedimientos desfasados que ya no son los mejores.
Sin embargo ningún alumno demanda a sus profesores por enseñar con métodos anticuados.
Debemos esforzarnos por convertirnos en profesionales de la docencia. Debemos basarnos en las mejores prácticas puestas a prueba en los países más avanzados y publicadas en la literatura de enseñanza universitaria .
Best practices teaching university immnology
8
¿Cómo enseñaría y evaluaría un profesional?
Siguiendo los dictados de la literatura publicada sobre enseñanza y evaluación de su disciplina
Para ello debemos informarnos y leer Libros y manuales para la innovación y la mejora
docente (se recomienda empezar por aquí) Podemos seguir con las revisiones, meta análisis y
artículos seleccionados (os proporcionaremos algunos de alto impacto)
Crearnos un PLE (personal learning renvironment) buscando y siguiendo a expertos en docencia en las redes sociales.
Después incluso podremos pasar a estudiar y practicar la Investigación original sobre educación
9
Tormenta de libros ¿Cuál es nuestro conocimiento de la
literatura sobre enseñanza universitaria?Vamos a hacer una lista de los libros que
hemos leído sobre enseñanza universitaría.-----
Si somos profesionales de la enseñanza universitaria tal vez deberíamos leer más sobre metodologías para mejorarla
10
El test de los diez libros (blog profesor 3.0)
1. MCKeachie´s Teaching Tips: Strategies, Research, and Theory for College and University Teachers (14th Ed) M Svinicki W J. McKeachie
2. Teaching for quality learning at University (4th Ed) J Biggs, C Tang
3. What the Best College Teachers Do (2004) Ken Bain. 4. Creating Significant Learning Experiences: An Integrated
Approach to Designing College Courses.(2nd Ed) L. Dee Fink 5. Learner-Centered Teaching: Five Key Changes to Practice (2nd
Ed ) Maryellen Weimer6. Classroom assesment techniques: A handbook for college
teachers (2nd Ed ) T Angelo T and P Cross. 7. Teaching with your mouth shut (2000) Don Finkel 8. Engaging Ideas: The Professor's Guide to Integrating Writing,
Critical Thinking, and Active Learning in the Classroom (2nd Ed ) John C. Bean
9. Developing critical thinkers (1987) S Brookfield. 10. How learning works seven research based principles for smart
teaching. (2010) Susan Ambrose
11
Interpretación del test de los diez libros He leído X libros sobre enseñanza
universitaria
X= Interpretación Recomendación
0 No te preocupes estas como la mayoría de los profesores españoles
Lee al menos uno, o dedícate a la políticaTraducidos Bain Biggs Finkel Inglés Fink
1 Mejor que la mayoría Sigue leyendo más
2 Vas por el buen camino Sigue leyendo más
3 o más Eres un líder en docencia Haz de coach de tus compañeros
10 Eres un maestro de profesores
Ponte a dar cursos de formación del profesorado
12
Conclusión: Todavía tenemos mucho que aprender sobre como enseñar
Ideas claves de este curso
El alumno aprende lo que hace, no de lo que hace su profesor No basta con contarles la disciplina Es necesario el aprendizaje activo (por medio de la
actividad) es necesario que hagan para que aprendan. Debemos pensar en términos de ejercicio de
competenciasEs fundamental que los profesores
prioricemos los resultados de aprendizaje que más deseamos que logren nuestros alumnos.
Si queremos que practiquen y se ejerciten en situaciones presenciales, deberemos ahorrar mucho del tiempo que tradicionalmente dedicamos a la transmisión de conocimientos.
13
¿Cuáles son los resultados de aprendizajes qué más valoramos?En condiciones ideales si mis alumnos hiciesen todo lo que les mando
¿ Qué me gustaría que se llevasen de mi a signatura ?
Maneras de enseñar
1.El método: Transmisión por monólogo vs. cuestionamiento socrático o dialógico, (Mazur E, Prieto A)
2.El objetivo: Enseñanza para la reproducción vs. enseñanza para la comprensión y la transferencia (Wiggins G)
3.La estrategia cognitiva: Metodologías tradicionales deductivas vs. metodologías inductivas y funcionales, (Prieto A , Prince M y Felder R).
4.El protagonismo en el proceso: Transmisión por el que enseña versus acción, indagación y resolución de problemas por el que aprende, (Barrows H).
14
Maneras de enseñar (II)
5. El uso del tiempo de clase: Pedagogía tradicional por transmisión vs pedagogía inversa (flipped learning), (Santiago R, Sams A & Bergman J)
6. El entorno del aprendizaje: La dicotomía entre la enseñanza presencial y la enseñanza on line (Bowen JA)
7. El grado de motivación por aprender: el alumno que la tiene y el alumno que no, el profesor que la aumenta y el que no (Imbernon F)
8. La enseñanza en la zona de confort vs. la enseñanza que te saca de ella y te obliga a ampliarla desarrollándote. (Vygotsky L)
15
T CEducaciónPor transmisión
Transmisión más cerca del 100%que de el 75%
50%T -50%C
75% T –25% C
25% T -75% C
Educación por cuestionamiento
Cuestionamiento más cerca
del 100%que de el 75%
¿Donde esta tu propia educación cómo alumno universitario a lo largo de esta línea?
¿A qué se dedicaba el tiempo de clase presencial?
Educación híbrida
A B C DBlanco
¿Se aprende lo mismo de estas dos maneras?17
¿Qué se aprende con un profesor que te cuenta cosas?Lo que te cuenta y se olvida pronto¿Qué aprendes con un profesor que te plantea preguntas?A responderlas razonando con los conocimientos de la
asignatura. Es un aprendizaje más independiente y de efectos más permanentes.
Este tipo de aprendizaje requiere el estudio previo del alumno.
¿Qué tipo enseñanza producirá más desarrollo de competencias?
¿Qué tipo de aprendizaje será más apropiado para adaptarse a las demandas del siglo XXI?
Situación problemática
Te viene un compañero de área y te cuenta: “No se que hacer para que mis alumnos estudien antes de las
clases y las prácticas. Les he preparado materiales y vídeos. Se los he puesto en el
Moodle. Les pido que estudien antes de clase y no lo hacen ni la cuarta parte.
Como no han estudiado casi ninguno les tengo que explicar todo y los que lo han estudiado se aburren.”
¿Qué le aconsejaríais a este compañero?Debe establecer un sistema de comprobación y fomento del estudio
previo Primera clase con el método socrático http://flipasaurus.com/vq/38f60SP5JNCOLD CALL y cuestionamiento directivo
Afortunadamente el mundo evoluciona
El profesor Kingsfield explica la metodología del método socrático
http://flipasaurus.com/vq/71n88WdIeDVídeo Aarom Sams os va a presentar el
flipped classroom https://www.youtube.com/watch?v=obvnAMu
N7hA
Llevamos 2 h. Intermedio
(salté desde 21 hasta aquí)Metodologías a revisar en el curso
Enseñanza Tradicional por Transmisión
Enseñar contando
Enseñanza por cuestionamiento Aprender planteando y respondiendo
cuestiones y retos (active learning) I+A+R
Metodología deductiva
Disociación teoría /práctica
Escasa aplicación e integración
Disciplinar énfasis en conocimiento especifico
Escaso desarrollo personal
Clase magistral
unidireccional
Aprendizaje de pobre calidad
Clase interactiva y multidireccional
Metodología Inductiva
M. SocráticoEstudio de casos
ABPIndagación científica
Metodología Híbrida D-I
Just in time teaching
Aprendizaje activo TPS
Peer teachingTeam based learning
Elemento social cooperativocolaborativo
Desarrollo competencias genéricas y transversales
PEPEOLA wired PBL Elemento TICVídeo jay Mc Tighe castellanohttp://www.youtube.com/watch?v=3VsbnGt1nzE
¿Cómo demostrar la eficacia de un método para mejorar el aprendizaje?21
¿Cómo podemos saber científicamente si un método de enseñanza produce más aprendizaje que otro?
Midiendo la ganancia de aprendizaje¿Qué es?La diferencia en conocimiento y competencia
entre el antes y el después de la enseñanza ¿Cómo podemos determinarla?Midiendo antes y después y hallando la
diferencia
Test de comprensión conceptual: obtención de ganancias de aprendizaje postest (después enseñanza) menos pretest
22
Monkey
Aristotelian Newtonian
Pretest
Postestmedia
Ganancia obtenida = marca media post – marca media pre
% Ganancia relativa =(respecto de la potencial)
Máxima Ganancia potencial = máximo-pre
Ganancia obtenida
Máxima Ganancia
Ganancia Obtenida
Máxima Ganancia Potencial
Pretest media
¿Cómo medir lo que han aprendido los alumnos en nuestra asignatura?
23
¿Cómo saber si con una metodología nuestros alumnos aprenden más que con la otra?
Comparando las ganancias obtenidas con cada método.
Diagramas que muestren punto de partida y progreso en una asignatura
¿Qué demuestra este diagrama de punto de partida y ganancia relativa?
Problema: Interpretar el diagrama de Puntuación pretest vs. Ganancia relativa:
El rendimiento de métodos tradicionales es muy inferior al de los interactivos
Con las metodologías interactivas se aprende el doble que con las tradicionales
% Ganancia =
Ganancia obtenida
Máxima Ganancia
25
Siguiente generación de métodos Activo+ flipped Métodos para el fomento y la comprobación del estudio previo Metodologías flipped classroom
Fomenta estudio previo e interacción de más calidad
Profesor
Alumnos
Clase
Envíamateriales
Recibe feedback de sus alumnos Evalúa dificultades y replantea , su clase
para responder a sus necesidades
estudia reflexiona
y responde cuestionario
Van preparados a clase habiéndose formulado preguntas
sobre lo que han estudiado
Aumenta el nivel de conocimientos de partida Aumenta la cantidad Y la calidad de la participación
Recepción Comprobación y bonificación
Test antes de clase o durante
Diálogo previo
Las distintas metodologías flipped consiguen mejoras similares sobre el ineficaz método tradicional
26
Novak con Just In Time Teaching Just-In-Time Teaching: Blending Active Learning
with Web Technology Gregor Novak , Andrew Gavrin, Wolfgang Christian, Evelyn PattersonPrentice-Hall 1999
Mazur con Peer Instruction y con Peer Instruction +JITT Peer instruction: A User’s Manual Eric Mazur 1997
Michaelsen con Team Based Learning Team-Based Learning: Small Group Learning’s Next
Big Step. New Directions for Teaching and Learning, Eds. Larry K. Michaelsen, Michael Sweet & Dean X. Parmelee, (2008)
Po
rcen
taje
de
gan
anci
a C
on
res
pec
to a
la
máx
ima
po
ten
cial
La incorporación de más métodos interactivos mejora los resultados del peer instruction
PIPI + JITT
¿Qué podemos concluir de estos resultados?Sobre el efecto de combinar dos métodos flipped
Traditional teaching vs. Peer Instruction
Ganancia mediade aprendizaje
con metodología tradicional
Física (Hestenes)
20%
(Mazur)25%
Biología (Knigth, Allen)
17%
Ganancia mediade aprendizaje
con metodología activa e inversa
Física(Hestenes active
engagement) 40%
Mazur flipping classroom with
peer instruction 50-75%
Biología(Knight)
33%
El definitivo ridículo de la clase magistralDavid venció a Goliat (Deslauriers Science 2011)
30
Diseño perverso: profesor estrella vs. Posdoctoral novato ¿quién ganó?
¿ FUNCIONARÁN ESTAS METODOLOGÍAS
CON NUESTROS ALUMNOS ÍBEROS, CELTAS Y CELTÍBEROS ?
Ya, parece que estos métodos funcionan en las mejores
universidades de los países más avanzados pero….
31
Porque no estan acostumbrados a estudiar antes de las clases sólo antes de los
exámenes32
Las peculiaridades de los alumnos íbericos son bien conocidas por sus profesores.
Cuando en los cursos de formación del profesorado cuento que mis alumnos estudian los temas antes de que los tratemos en clase, veo caras que me miran con incredulidad porque piensan que sus alumnos no lo harán y no se creen que lo consigamos con nuestros alumnos.
Afortunadamente los que nos concedieron el Premio de Innovación docente de la Universidad de Alcalá 2013-14 si se lo creyeron.
Indibil y MandonioCaudillos Illergetas
Liderazgo docente: El elemento clave para mejorar el aprendizaje
33¡Alumnos celtiberos, vetones e ilergetas! ¡ Esta universidad…
va a civilizaros y convertiros en profesionales y
ciudadanos del siglo XXI!
Lo que vais a aprender dependerá sobre todo de lo que trabajéis cada uno. ¿Queréis convertiros
en profesionales competentes ?
Sólo puedo marcaros el camino, vosotros
lo tenéis que recorrer
El lograr que los alumnos dediquen una cantidad de tiempo significativa a trabajar por su cuenta y asimilar los conocimientos de la asignatura es el elemento clave para mejorar su aprendizaje.
Nosotros lo hemos conseguido en todas las clases en las que lo hemos intentado con grados de resistencia variables que correlacionan inversamente al curso en que se encuentran.
Los alumnos de los primeros cursos se resisten más que los de los cursos más avanzados pero al final pasan por el aro gracias al poder de la gamificación y los sistemas de recompensas a cambio de pequeñas acciones.
(hablaremos de ello en la segunda sesión)
En esta asignatura
vais a desarrollar
competencias trabajando en
casos profesionales
y seréis evaluados con
ellos.
El marketing para hacer llegar las ventajas del estudio previo
34 Hay que mostrarles las
diferencias en las calificaciones que obtienen los que lo hacen y los que no.
Al reconocer el efecto del estudio previo sobre la nota de examen más de un 95% de nuestros alumnos se comportan racionalmente y realizan el estudio previo de más de la mitad de los temas.
Primer paso: mostrarles tras el primer examen de bloque, como los resultados obtenidos se correlacionan con la realización o no del estudio previo en los dos primeros temas.
El porcentaje del sector azul muestra el porcentaje De alumnos que suspenderán de cada subgrupo
El estudio previo produce una mejora en los resultados de los alumnos que lo hacen
35La visualización de las
calificaciones y de la proyección de resultados hacia el aprobado o suspenso de la asignatura anima a muchos alumnos que no realizaron el estudio previo de los primeros temas a cambiar de actitud y estudiar los siguientes.
Cuando realizamos el examen de mitad de cuatrimestre (midterm) les volvemos a mostrar las calificaciones en relación al número de temas en los que han realizado el estudio previo.
El resultado también es muy inspirador
¿Funciona el flipped classroom con alumnos españoles? Si, aunque requiere insistir
(Prieto y cols. 2014)37
Porcentaje medio de alumnos que preestudian más de la mitad de los temas
Calificación media en las pruebas de evaluación del aprendizaje
Inmunología clínica (4º) Inmunología (3º) Métodos biología (1º)
Media original Con la
metodología tradicional
Nueva media Flipping classroom with
JITT
¿Qué significa una mejora de 1 SD en las calificaciones de pruebas de evaluación de
aprendizaje?
El alumno medio aprende con flipped Lo que el alumno del percentil 84 conLa metodología tradicional
39
Siguiente generación de métodos flipped: el flipped forte o (flipped)2
Fomenta el feedback en las dos direcciones y mejora el estudio previo
Profesor
Alumnos
Clase
Envíamateriales
Recibe feedback de sus alumnos Evalúa dificultades y replantea , su clase
para responder a sus necesidades
estudia reflexiona
y responde cuestionario
Van preparados a clase habiéndose formulado preguntas
sobre lo que han estudiado
Aumenta el nivel de conocimientos de partida Aumenta la cantidad Y la calidad de la participación
Recepción Comprobación y bonificación
Test antes de clase o duranteDiálogo previo
Retroinforma sobre dudas urgentes
Flipped de segunda generación o Flipped Forte mejora los resultados del flipped
40
Una vez conocidos estos resultados ¿Es ético seguir utilizando la
metodología tradicional de enseñanza? Una analogía con el ensayo clínico de tratamientos.
La eficacia de distintos tratamientos se compara en ensayos clínicos
aplicando un tratamiento a un grupo de pacientes, otro a otro grupo
y comparando los resultados.
En medicina cuando se demuestra que un tratamiento es el doble
de eficiente que otro y se publica y se admite como un hecho
la superioridad del tratamiento I (Innovador) sobre el
tratamiento T (Tradicional) deja de ser ético el seguir
administrando el tratamiento T.
Un médico puede ser demandado por negligencia profesional si
sigue usando el tratamiento tradicional.
¿Qué ocurriría? Si un investigador propusiera realizar otro estudio comparando
los tratamientos I y T
¿Qué haría el comité de ensayos clínicos que debe aprobar los
estudios?
No concederían el permiso legal para realizar el estudio
¿por qué negarían el permiso?
“No es éticamente admisible negar a un grupo de pacientes
el mejor tratamiento conocido”
En los servicios de los hospitales se realizan sesiones diarias
de discusión de casos y actualización permanente. ¿Se hace
lo mismo en los Departamentos en relación a la docencia?
Os planteo una cuestión como profesores que sois
¿Por qué como profesores negamos a nuestros
alumnos lo que los médicos dan a sus pacientes?
el mejor tratamiento disponible
¿Es ético hacerlo?Si la evidencia publicada demuestra que no es
ético seguir haciendo lo tradicional¿Por qué ignoramos la evidencia publicada?
ESO TIENE QUE
CAMBIARDEBEMOS INCORPORAR NUEVAS
METODOLOGÍAS PARA LOGRAR QUE NUESTROS ALUMNOS APRENDAN MÁS Y MEJOR
El ejercicio profesional de la enseñanza todavía se basa en tradición y experiencia individual en lugar de basarse en la mejor
evidencia publicada en la literatura especializada.
Reflexión ¿Qué hemos aprendido hoy?45
Ignoramos mucho sobre como enseñarDebemos desarrollarnos profesionalmente
como docentes.Enseñamos siguiendo la tradición sin
reflexionar lo suficiente e informarnos sobre maneras alternativas de hacerlo mejor
Mala noticia: las evidencias demuestran la ineficacia del método tradicional de enseñar contando.
Buenas noticias: hay métodos más eficaces que doblan y hasta triplican las ganancias de aprendizaje
En la próxima sesión los practicaréis como alumnos y como profesores
Tareas para realizar antes de la segunda sesión (día 15 de diciembre)
1. Responder a unas preguntas reflexivas2. Estudiar materiales didácticos sobre
distintos métodos de pedagogía inversa.
46
Tarea 1. responde a las siguientes preguntas
1. ¿Cuáles son los resultados de aprendizaje que más valoro y me gustaría que alcanzasen mis alumnos en mi asignatura?
2. ¿Cuál considero que es la misión más importante de mi asignatura ?
3. ¿Qué problemas de aprendizaje tienen mis alumnos en mi asignatura?
4. ¿Que es lo que más me cuesta que aprendan?5. ¿Qué aprendizajes esenciales se no logran?Redactar Informes escritos sobre estas cinco
preguntas y compartiremos las respuestas en la próxima sesión
47
Tarea 2. para el próximo día como preparación para los grupos
disciplinares
Vais a cooperar dentro del equipo pero vais a competir con otros equipos.
Os voy a enviar materiales para que estudiéis antes de la siguiente sesión
Os voy a poner un examen 8 preguntas de test que responderéis individualmente
Después discutiréis y haréis un examen conjunto.
Esa metodología se llama Team Based Learning.
La usan en universidades norteamericanas, academias de la USAF, y academia Asturias para preparación MIR
48