El Ciclo de Aval

1
El Ciclo de Avalúo del Aprendizaje Explicación
y Aplicación

• Dra. Vivian Navas Dr. Eddie Marrero
• Oficina de Avalúo para el Aprendizaje
• y el Mejoramiento Continuo
• Colegio de Artes y Ciencias, UPRM
• Taller Ofrecido al Departamento de
• Fecha
• Salón, Edificio, UPR-RUM

2
Ejercicio de avalúo

• Defina brevemente qué usted entiende por avalúo
  del aprendizaje.
• Enumere algunos de los pasos que usted entiende
  conlleva hacer avalúo del aprendizaje.

3
Objetivos

• Introducir a los participantes al concepto de el
  ciclo de avalúo del aprendizaje
• Presentar y discutir la plantilla de trabajo para
  la planificación, implementación y reporte de un
  ciclo de avalúo del aprendizaje
• Presentar y discutir ejemplos concretos de ciclos
  avalúo del aprendizaje
• Objetivo de aprendizaje
• Que los participantes pueden desarrollar
  utilizando la plantilla de trabajo un ciclo de
  avalúo para alguno de los temas de sus cursos

4
Definiendo el avalúo del aprendizaje

• Avalúo del aprendizaje es
• Un proceso estructurado a través del cual se
  procura evidenciar si se están alcanzando o no
  unos determinados objetivos de aprendizaje y se
  toman acciones basado en lo que revelan los
  resultados (Marrero, 2006).

5
Examinando la definición

• Avalúo es
• Un proceso estructurado
• (conlleva una serie de pasos)
• se procura evidenciar
• (conlleva recoger datos para sustentar algo)
• si se están alcanzando o no unos determinados
  objetivos de aprendizaje
• (conlleva evaluar datos)
• se toman acciones basado en los resultados
• (conlleva una aplicación)

6
Flujograma de los pasos fundamentales del ciclo
de avalúo
7
(No Transcript)
8
El ciclo de avalúo recogido en una plantilla de
trabajo
9
La plantilla de trabajo

• Hemos sintetizado el ciclo de avalúo en un
  documento de trabajo que llamamos
• la plantilla básica del ciclo de avalúo
• La plantilla es una guía para la planificación,
  implementación y eventual informe de un ciclo de
  avalúo

10
Objetivo de Aprendizaje Objetivo de Aprendizaje Qué (contenido o destreza) se propone avaluar en este ciclo? A qué objetivo del prontuario y del departamento responde este tema?
Justificación Justificación En qué se fundamenta la selección de este tema? (Ej. Recomendación, datos previos, revisión de literatura, etc.)
Población Población Quiénes (profesores, estudiantes, otros) y cuántos son impactados en este ciclo de avalúo?
A V A L U O Pre Intervención Qué mediciones se harán/hicieron para determinar el estatus del estudiante en cuanto a la destreza o contenido seleccionado previo a la intervención?
A V A L U O Intervención Qué actividad se llevó/llevará a cabo para promover el aprendizaje del estudiante en el contenido o destreza seleccionado?
A V A L U O Post Intervención Qué mediciones se harán/hicieron para determinar el aprendizaje del estudiante después de la intervención?
Análisis de los Resultados Análisis de los Resultados Qué indican los resultados? Qué posibles explicaciones hay para los mismos?
Acción a tomar Acción a tomar Qué acciones se tomaron/tomarán a raíz de la interpretación de los resultados?
11
Ejemplos esquemáticos de ciclos de avalúo
12
Ej. del Dpto. de Biología

• Aprendizaje de conceptos en un mismo curso (BIOL
  3051)
• Los conceptos se cubren a lo largo del semestre
• Paticipan simultáneamente varios profesores que
  enseñan el mismo curso
• El avalúo se hace al comienzo del semestre y
  cerca del final

13
Focus of Assessment Project Focus of Assessment Project Assess the learning of basic biology concepts and identify misconceptions in the first part of the General Biology course (BIOL 3051)
Justification Justification This course is taken by all freshman biology majors Introduces important concepts that are necessary for advanced courses. Many course topics are comprised within the Department learning outcomes
POPULATION Student Faculty POPULATION Student Faculty Project impact Pre test - 279 students, Post test 174 students, 2 faculty members
A S S E S S M E N T Pre- A diagnostic pretest on content was offered on the first day of class.
A S S E S S M E N T Int Conventional lectures, laboratory exercises, small group diagnostic test discussion
A S S E S S M E N T Post- Post test was offered near end of the semester (before semester ended to allow for taking action).
Results and discussion Results and discussion Students improved performance. The test average increased from 33.78 in the pre-test to 62.90 in the post test Incoming and persisting misconceptions as well as missed concepts were identified and further discussed with students before semester ended
Dissemination of Results Dissemination of Results Failed questions and the misconceptions were discussed with the course faculty.
Course of Action Course of Action Course faculty was made aware of the misconceptions and the difficult concepts for them to emphasize with their students
14
Ej. del Dpto. de CiSo

• Avalúo de un tema específico (Hist. de la
  psicología) en un curso específico (Psic 3001)
• Individual Un solo curso dos secciones
• Intervención 3 clases aprox.
• Pre-prueba 15 minutos aprox.
• Post-prueba Se hace en la casa. La discusión en
  clase toma 15-20 min. aprox.

15
Objetivo de Aprendizaje Objetivo de Aprendizaje Que los estudiantes puedan mencionar y describir las principales escuelas en la historia de la psicología.
Justificación Justificación Estudiantes tienden a confundir temas de una escuela y otra.
Población Población Estudiantes de Psic 3001 (dos secciones, 66 estudiantes).
A V A L U O Pre Intervención Se les provee listado de ideas, conceptos, personajes y fechas, y se les pide que las organice en un mapa conceptual utilizando las escuelas psicológicas como eje central.
A V A L U O Intervención Lecturas y conferencias sobre el trasfondo histórico de la psicología (tres horas conf. aprox.)
A V A L U O Post Intervención Repetir la preintervención.
Análisis de los Resultados Análisis de los Resultados Evaluar la corrección del segundo mapa. Identificar qué áreas muestran aún deficiencias.
Acción a tomar Acción a tomar Atender deficiencias identificadas.
16
(No Transcript)
17
(No Transcript)
18
Ej. de la Biblioteca

• Avalúo del aprendizaje sobre recursos de la
  biblioteca luego de un taller sobre ese tema.
• Grupos de entre 15 20 estudiantes
• El taller dura aprox. 45 min.
• La pre-prueba y la post-prueba de 5 a 7 min.
  aprox. cada una

19
Tema del ciclo de avalúo Tema del ciclo de avalúo Que el estudiante aprenda en qué lugares específicos de la biblioteca puede encontrar determinadas fuentes de información.
Justificación Justificación Estudiantes no saben donde buscar la información
Población Población Estudiantes del curso X (cantidad varía)
A V A L U O Pre Intervención Cuestionario con preguntas de contenido específico sobre lugares en la biblioteca en los que puede encontrar determinadas fuentes de información
A V A L U O Intervención Presentación en PP o Conferencia sobre las fuentes de información en la biblioteca. Se ajusta al curso en cuestión
A V A L U O Post Intervención Se administra el mismo cuestionario que en la preintervención o uno modificado con las mismas preguntas y otras preguntas equivalentes o más sofisticadas
Resultados Resultados
Análisis de los Resultados Análisis de los Resultados
Acción a tomar Acción a tomar Si los resultados son positivos, repetir el ciclo con otros estudiantes. Si son negativos, re-trabajar el asunto con el mismo grupo revisar y ajustar la intervención y readministrar con otro grupo.
Próximo ciclo de avalúo Próximo ciclo de avalúo
Apéndices Apéndices
20
Ej. del Dpto. ???
21
Ubicar aquí el ejemplo o ejemplos correspondiente
22
Manos a la obra

• Utilice la plantilla provista para que desarrolle
  un ciclo
• Seleccione un tema que le interese y que usted
  crea necesita avaluo
• Si le surgen dudas, por favor, pregunte

23
Sesión de trabajo

• Conceder 15 para el trabajo individual
• No interrumpir
• Hacer sólo intervenciones individuales

24
Sesión de intercambio

• Solicitar voluntarios para que presenten sus
  ciclos
• Que indiquen
• El tema
• Por qué lo seleccionó
• Pre intervención
• Intervención
• Post intervención

25
Recomendaciones

• Comenzar con ciclos sencillos
• Trabajar con lo que le interese y con lo que más
  necesite del avalúo
• El tema dede patir de los objetivos del curso y
  del departamento
• Puede hacer un ciclo individual, junto con otros
  profesores o participar en el ciclo que está
  llevando a cabo el coordinador
• En todos los casos, puede hacer los ajustes que
  mejor se adapten a su curso

26
Recomendaciones

• Explore si su ciclo responde a educación general
  y/o educación sub-graduada. Si es así, su
  contribucián estará siendo doble
• Guarde todos los datos, los necesitará para hacer
  un pequeño informe de la actividad
• No tenga temor de consultar si tiene dudas o
  preguntas
• Solicite la carta de reconomiento por
  participación y los créditos del CEP. Puede usar
  ambos en la sección de mejoramiento profesional
  de curriculum vitae.

27
Otros ejemplos
28
Focus of Assessment Project Focus of Assessment Project Evaluar el conocimiento en enfermería de los estudiantes.
Justification Justification Estudiantes no están saliendo como deberían en la reválida
POPULATION Student Faculty POPULATION Student Faculty 22 estudiantes , 6 profesores
Assessment Pre-intervention Puntuaciones en reválida, Pre- prueba
Assessment Intervention Facultad ofrece repasos luego de terminadas las clases.
Assessment Post-intervention Post prueba Puntuaciones en revalida de los estudiantes que completaron el repaso
Results Results Veintidós (22) estudiantes de cuarto año tomaron la pre-prueba De éstos solo ocho (8) estudiantes terminaron todos los repasos y tomaron la post prueba. Estudiantes no estaban motivados (indicaron estaban cansados y esto no tenia nota) La nota en la posprueba aumento o diminuyo
Possible Reasons or Hypotheses Possible Reasons or Hypotheses Aumento en la nota indica repaso fue efectivo Disminución repaso inefectivo
Course of Action Course of Action Hacer el repaso requisito para todo graduando No hacer intervención a finales de semestre Hacer intervenciones similares a mediados del currículo Hacer intervenciones similares en los cursos requisitos Cambiar la intervención
Next learning assessment closing the loop project Next learning assessment closing the loop project
Appendix Appendix
29
Focus of Assessment Project Focus of Assessment Project Assess the students level of knowledge concerning health promotion and maintenance.
Justification Justification These concepts were selected because they are part of our, mission, philosophy and conceptual framework and did not know how we are doing.
POPULATION Student Faculty POPULATION Student Faculty Thirty three senior nursing students were impacted.
Pre-intervention Diagnostic test
Intervention Nursing courses where the themes of health promotion and maintenance were discussed and a selection of those in which they had the opportunity to apply these concepts
Post-intervention A diagnostic test (content, courses and activities where concepts were learned and applied. The scale used in this instrument was the following 90 100 excellent, 80- 89 satisfactory, 70 79 average, 60 69 poor and 59 deficient.
Results Results Results reflected that 87.8 of students identified correctly the definition of health promotion and maintenance. Sixty three point nine percent (63.9) of students identified correctly the definition of health maintenance. Six (6) of the 10 themes (60) of health promotion and maintenance obtained punctuation between excellent and satisfactory.
Possible Reasons or Hypotheses The level of achievement obtained by our students in relation to Health Promotion and Maintenance was satisfactory.
Course of Action Faculty presentation. Discussion of findings with the faculty and students in order to develop strategies to obtain excellence. To examine the strategies used for the development of these concepts in each course. Reinforce these themes in the second semester courses to all students including second, third and senior years.
Appendix Include copies of all assessment tools
30
Possible Reasons or Hypotheses The level of achievement obtained by our students in relation to Health Promotion and Maintenance was satisfactory.
Course of Action Faculty presentation. Discussion of findings with the faculty and students in order to develop strategies to obtain excellence. To examine the strategies used for the development of these concepts in each course. Reinforce these themes in the second semester courses to all students including second, third and senior years.
31
Sugerencia

• Añada copia de sus ciclos de avalúo en su
  portafolio de ascenso evidenciando su eficiencia
  en el proceso de enseñanza/aprendizaje

32
Referencias

• Plans, assessment cycles, reports, assessment
  tools (http//www.uprm.info/avaluo )
• Avalúo Plus
• (http//uprm.info/avaluoplus/ )
• Plantilla avalúo
• http//www.uprm.edu/ideal/plantillacierrefinal.do
  c

33
Ejercicio práctico

• Identifique un objetivo que le gustaría avaluar
• Diseñe un ciclo de avalúo usando la plantilla
  básica

34
(No Transcript)
35
OTROS EJEMPLOS
36
Ejemplo

• Tomado de un curso de español básico
• Búsquedas especializadas en internet

37
Objetivo de Aprendizaje Objetivo de Aprendizaje Que los estudiantes puedan realizar búsquedas sobre temas relacionados con los estudios hispánicos usando la red.
Justificación Justificación Muchos estudiantes desconocen la existencia de bases de datos especializadas en los estudios hispánicos.
Población Población Estudiantes Espa 4215 (2 secciones) en su mayoría de especialidad.
A V A L U O Pre Intervención Búsqueda especializada (ej. Egon Wolf, La barca de la medusa y ekphrasis). Discutir los resultados y mostrar dificultades encontradas cuando no se usa una base especializada.
A V A L U O Intervención Taller en la biblioteca sobre búsquedas en bases de datos especializadas y evaluación de la relevancia y confiabilidad de las fuentes. (ver rúbrica)
A V A L U O Post Intervención Repetir ejercicio de la búsqueda especializada y la evaluación de las fuentes.
Análisis de los Resultados Análisis de los Resultados Evaluar efectividad de la búsqueda (indicadores de tiempo y contenido, además de la confiabilidad de las fuentes).
Acción a tomar Acción a tomar Instituir un taller de búsquedas especializadas como parte del curso.
38
Objetivo de Aprendizaje Objetivo de Aprendizaje Que el estudiante pueda mencionar los pasos del método científico
Justificación Justificación Es uno de los objetivos del prontuario. Que el estudiante vea la diversidad de instancias en las que se puede aplicar el método científico
Población Población Estudiantes de Psic 3001
A V A L U O Pre Intervención Pedirle que mencionen cuáles son a su entender los pasos del método científico y el orden de los mismos
A V A L U O Intervención Conferencia sobre los pasos del método científico
A V A L U O Post Intervención Hacer un flujograma que ilustre los pasos del método científico ajustándolo a su área de especialidad o interés
Análisis de los Resultados Análisis de los Resultados Ver corrección de la secuencia y la pertinencia de la aplicación
Acción a tomar Acción a tomar Mostrar ejemplos entre los estudiantes. Aclarar dudas
39
(No Transcript)
40
Ejemplo 4

• Tomado de un curso de gramática
• Probar utilidad de técnica de intervención para
  enseñar un tema Explicación verbal vs. gráfica
  para identificar clases de predicados

41
Objetivo de Aprendizaje Objetivo de Aprendizaje Que los estudiantes puedan identificar clases de predicados.
Justificación Justificación Es parte de los objetivos del prontuario. Estudiantes tienen dificultad entendiendo el sistema de clasificación explicado de forma verbal.
Población Población
A V A L U O Pre Intervención Asignar lectura y conferencia sobre sistema de clasificación de predicados. Asignar ejercicio en el que los estudiantes hagan clasificación de predicados.
A V A L U O Intervención Presentar sistema de clasificación en forma gráfica.
A V A L U O Post Intervención Que los estudiantes vuelvan a realizar el mismo ejercicio de clasificación de predicados de la preintervención y nuevos ejercicios.
Análisis de los Resultados Análisis de los Resultados Comparar la corrección con que los estudiantes hacen la tarea en ambos casos. Auscultar la opinión de los estudiantes sobre el sistema.
Acción a tomar Acción a tomar Decidir si implementar nuevo sistema gráfico para identificar clases de predicados. Hacer los ajustes correspondientes.
42
(No Transcript)
43
(No Transcript)