1 of 23

Competencias del líder educativo en la implementación de una cultura de assessment en la educación superior: Estudio de casos múltiples en Puerto Rico

Universidad Interamericana de Puerto Rico, Recinto Metropolitano

Chamary Fuentes Vergara, Ed.D.

2 of 23

¿Qué es assessment?

  • Proceso sistemático para recopilar, analizar e interpretar información sobre el aprendizaje y la efectividad institucional con el fin de mejorar programas y servicios (Banta & Palomba, 2015).
  • Surge como movimiento de reforma educativa en respuesta a la insatisfacción pública y a la exigencia de rendición de cuentas sobre la calidad de los egresados universitarios (Walvoord, 2010).

Efectividad institucional

Aprendizaje estudiantil

3 of 23

Desarrollo de política pública

4 of 23

Modelos de política pública

Valor añadido

    • Tennessee
    • pre y pos pruebas
    • medir la ganancia de aprendizaje

Medición de competencias

    • Florida
    • pruebas estandarizadas (College Level Academic Skill Test)
    • asegurar dominio de competencias en momentos de transición

Subvención competitiva

    • New Jersey (Kean College)
    • propuestas competitivas para acceder fondos
    • implementar proyectos innovadores que fortalezcan el aprendizaje

Control local

    • modelo más común
    • elección de la institución
    • exigir la implementación del assessment, pero la decisión sobre cómo ejecutarlo es libre

​

(Astin & Lising, 2012)

5 of 23

Planteamiento del problema

  • Aunque la literatura reconoce que el liderazgo es fundamental para implementar y fortalecer una cultura de assessment en la educación superior (Kuh et al., 2015; Maki, 2010; Middaugh, 2010; Walvoord, 2010), no se han identificado investigaciones que analicen directamente las competencias de quienes dirigen este proceso.
  • Por ello, esta investigación tuvo como propósito identificar los conocimientos, habilidades, actitudes y valores que debe poseer un líder para lograr el desarrollo exitoso de una cultura de assessment.

6 of 23

Metodología

  • Enfoque cualitativo: estudio de casos múltiples.
  • Entrevistas semi-estructuradas:
    • Trasfondo académico y profesional
    • Percepción como líder
    • Prácticas exitosas de assessment
    • Competencias del líder
  • Revisión documental de políticas y procedimientos institucionales.
  • Análisis de datos con Nvivo.
  • Modelo de Wolcott (1994): descripción, análisis e interpretación.

7 of 23

Descripción de los casos

Caso A

    • Directora de Assessment
    • Institución privada
    • Maestría en INEVA y bachillerato en Enseñanza del Nivel Elemental.
    • 12 años de experiencia

Caso B

    • Coordinadora de Investigación Institucional
    • Institución pública
    • Doctorado en Currículo, maestría y bachillerato en Ciencias Naturales
    • 7 años de experiencia

Caso C

    • Directora de Investigación, Planificación y Efectividad Institucional
    • Institución pública
    • Doctorado en Liderazgo Educativo, maestría en INEVA y bachillerato en Ciencias Naturales
    • 13 años de experiencia

8 of 23

Descripción de los casos

Caso D

    • Coordinadora de Avalúo
    • Institución pública
    • Doctorado en Liderazgo Educativo, maestría y bachillerato en Administración de Empresas
    • 4 años de experiencia

Caso E

    • Coordinadora de Avalúo y Acreditación
    • Institución privada
    • Maestría en INEVA y bachillerato en premédica con créditos en Educación
    • 17 años de experiencia

Caso F

    • Coordinadora de Avalúo
    • Institución privada
    • Bachillerato en Educación Secundaria y maestría en Currículo
    • 10 años de experiencia

9 of 23

Preparación académica

  • Ninguna tomó cursos formales en assessment.
  • La formación en Educación resultó clave para su desempeño.

INEVA (Casos A, C, E):diseño de instrumentos, análisis de datos, métodos de investigación.

Preparación de Maestros (Casos A, E, F): evaluación educativa y procesos de aprendizaje.

Currículo y Enseñanza (Casos B, F): diseño y evaluación curricular.

Liderazgo Educativo (Casos C, D): supervisión de personal y teorías organizacionales.

10 of 23

Preparación en assessment

Estudio independiente

“Cuando me tocó empezar a trabajar con assessment, yo no sabía específicamente que era eso, ni lo que iba a hacer y me tocó aprender mucho, mucho, mucho. Comencé a leer del área (…) Así que yo diría que fue completamente autodidacta el proceso.” (Caso C)

Talleres

“Esos adiestramientos que yo tomé con AACSB, fueron los que me ayudaron a entender bien cómo era el proceso, cuáles eran los retos que yo podía enfrentar.” (Caso D)

Mentoría

“Esto no ha sido así tampoco de un día para otro. Yo he tenido mentores en el proceso y continúo teniendo mentores en el proceso.” (Caso A)

11 of 23

Percepción como líder

  • Todas las participantes expresaron que se consideran líderes y que su liderazgo se manifiesta en su práctica profesional.
  • “Y hay que, en muchas ocasiones, ser líder y tomar decisiones y presentar evidencia de ¿qué vamos a hacer? ¿cómo lo vamos a hacer? No es fácil, porque no es fácil, pero hay que ser líder, porque si no, no. No te hacen caso, no ven la importancia del trabajo que hay que hacer.” (Caso E)

12 of 23

Estilos de liderazgo

Liderazgo transformacional

(Bass y Avolio, 1994)

​

Inspiran, motivan y convencen a profesores y administradores sobre la importancia del assessment. Logran transformar percepciones negativas e incentivar la participación activa.

“Uno lo nota cuando salen de un training que les he dado o saliendo de una conversación conmigo, ellos salen motivados, salen inspirados a seguir el proceso. Se sienten más seguros de sí mismos.” (Caso C)

Liderazgo participativo

(Esquivel, et al, 2018)

​

Promueven la integración activa de los profesores en el assessment del aprendizaje estudiantil.

“Los profesores también tienen que ser líderes en el proceso. Son ellos los que conocen el contenido de la materia que enseñan. Ellos son los que saben cómo los estudiantes demuestran dominio.” (Caso D)

13 of 23

Práctica exitosa de assessment

  • Proceso planificado, sostenido y continuo.
  • No solo recopilar datos, sino usar la evidencia para la mejora.
  • Eje central: misión institucional y mejora continua.
  • “Es un ciclo virtuoso que se repite y repite” (Caso D).

Resultados esperados

Recopilar evidencias

Interpretar la información

Implementar cambios

Misión Institucional

14 of 23

Retos del assessment

Carga adicional sin valor

(Estépar, 2012)

“Lo más significativo es la idea que se tiene de que el avalúo no sirve, de que es para darle un número a la Middle States. Esa idea hay que derrotarla (…) Pero cuando el docente experimenta el proceso en carne propia, dice que funciona y le sirve para sus clases; ahí tú dices: triunfé.” (Caso D)

Uso punitivo

(Maki, 2010; Kramer y Swing, 2010)

“A lo mejor se preocupan de que van a usarlo en contra mía. A lo mejor si no sales bien, mis estudiantes van a hablar mal sobre mi performance.” (Caso C)

Falta de documentación

(Collazo, 2013)

“Muchas de las instituciones, y a nosotros nos pasaba, era que no estaban las cosas articuladas. Se recoge, se recoge, pero no hay minuta, no hay documentación (…) Por eso es que, cuando nos toca acreditación es una locura porque no lo tienen.” (Caso B)

15 of 23

Competencias al implementar el assessment

Dimensión Conceptual

Dimensión Procedimental

Dimensión Actitudinal

Conocimientos

Destrezas y habilidades

Valores y actitudes

  • Conocimiento técnico
  • Medición
  • Currículo
  • Teorías organizacio-nales
  • Análisis de datos
  • Organización
  • Destrezas tecnológicas
  • Planificación
  • Trabajo en equipo
  • Comunicación
  • Honestidad
  • Justicia
  • Empatía
  • Aprendizaje continuo

16 of 23

Competencias al implementar el assessment

Dimensión Conceptual

Dimensión Procedimental

Dimensión Actitudinal

“Es bien importante aprender sobre los diferentes procesos académicos y administrativos que están relacionados con assessment. Saber cómo funciona la institución, cómo es su cultura, para de ser necesario transformarla, o al menos, trabajar con ella.” (Caso D) Teorías organizacionales

“Obviamente, conocimientos estadísticos, hay que saberlos. Ahí tienes que tener destreza de cómo comunicarlos de una forma sencilla. (…) Saber cómo presentar lo que tú quieres decir con datos, no solamente de diferentes fuentes, pero de diferentes formas, también, para que puedan entenderte.” (Caso E) Análisis de datos y Comunicación

“Honestidad en la ética. Como te decía, conmigo no cuenten para sacarse números de la manga o procesos que no existen y esas cosas. Así que todo lo que vaya en contra de mi ética como profesional, prefiero abandonar el escenario.” (Caso A) Honestidad

17 of 23

Conclusiones

  • El assessment exitoso es un proceso sostenido y cíclico, orientado a la mejora basada en resultados.
  • Los principales retos: percepción de carga adicional, visión punitiva y falta de documentación.
  • Todas las participantes se consideran líderes; predominó el liderazgo transformacional.
  • Se identificaron 14 competencias en tres dimensiones (conceptual, procedimental y actitudinal), consistentes con otros estándares profesionales.
  • No hubo diferencias entre universidades públicas y privadas, aunque sí variaciones según el trasfondo académico (currículo, liderazgo, investigación y evaluación).

18 of 23

Implicaciones y recomendaciones

Para programas graduados en Educación

  • Incluir un curso especializado en assessment (conceptos, modelos, técnicas y uso de resultados).
  • Fortalecer el curso de estadísticas con contenidos aplicados al assessment:
    • análisis de ítems y confiabilidad
    • análisis por cohorte
    • estadísticas multivariadas
  • Ofrecer experiencias de internado en assessment.

19 of 23

Implicaciones y recomendaciones

Para asociaciones profesionales en educación superior

  • Establecer estándares de competencias para quienes lideran el assessment.
  • Usar esta lista de competencias como punto de partida para la discusión colectiva.
  • Guiar el desarrollo profesional, el reclutamiento y la autoevaluación de especialistas en assessment.

20 of 23

Reconocimientos

  • A mi comité de grado:
    • Dr. Rafael Aragunde, Dr. Francisco Vélez y Dr. Julio Rodríguez, por su mentoría y acompañamiento en este proceso de investigación.
  • A las seis extraordinarias mujeres líderes participantes, por su confianza, experiencias y peritaje, que enriquecieron este estudio y fortalecen los procesos de assessment en la educación superior de Puerto Rico.

21 of 23

Referencias

Astin, A. W., & Antonio, A. L. (2012). Assessment for excellence: The philosophy and practice of assessment and evaluation in higher education (2nd ed.). Rowman & Littlefield.

Banta, T. W., & Palomba, C. A. (2015). Assessment essentials: Planning, implementing, and improving assessment in higher education (2nd ed.). Jossey-Bass.

Bass, B. M., & Avolio, B. J. (1994). Improving organizational effectiveness through transformational leadership. SAGE Publications.

Collazo, A. (2013). Assessment in higher education: Practices and challenges in Puerto Rico. Editorial Universidad de Puerto Rico.

Esquivel, M., Rodríguez, A., & Sánchez, L. (2018). Liderazgo participativo en la gestión educativa: Un enfoque de integración docente. Revista Iberoamericana de Educación, 76(2), 45–62. https://doi.org/10.35362/rie7623182

22 of 23

Referencias

Kramer, G. L., & Swing, R. L. (2010). Higher education assessment: Trends and practices. Journal of Assessment and Institutional Effectiveness, 1(1), 1–20. https://doi.org/10.5325/jasseinsteffe.1.1.0001

Kuh, G. D., Jankowski, N., Ikenberry, S. O., & Kinzie, J. (2015). Using evidence of student learning to improve higher education. Jossey-Bass.

Maki, P. L. (2010). Assessing for learning: Building a sustainable commitment across the institution (2nd ed.). Stylus.

Middaugh, M. F. (2010). Planning and assessment in higher education: Demonstrating institutional effectiveness. Jossey-Bass.

Walvoord, B. E. (2010). Assessment clear and simple: A practical guide for institutions, departments, and general education (2nd ed.). Jossey-Bass.

Wolcott, H. F. (1994). Transforming qualitative data: Description, analysis, and interpretation. SAGE Publications.

23 of 23

¡Gracias por su atención!

Contacto:

​

Chamary Fuentes Vergara, Ed.D.

​

chamary.fuentes@gmail.com

cfuentes@coopsei.org

​

www.coopsei.org