Tema 3. La evaluación de la calidad
Si definir la calidad en la educación superior es una empresa compleja, abastar los modelos de evaluación, los procesos y los diferentes agentes que intervienen no es menos complicado. Podríamos afirmar que la evaluación de la calidad, también en educación superior, se basa fundamentalmente en el ciclo de calidad y en el establecimiento de unos estándares de evaluación. La calidad no es solo es un concepto polisémico, como hemos visto en el tema 1, sino también multifacético.
Recurso 1. Capítulo de libro imprescindible
Hay que prestar especial atención a las figuras 4.1 y 4.2.
En las páginas propuestas se explica que la evaluación de la educación superior se basa en la espiral de la evaluación de la calidad. Además, se consideran cuatro componentes que han de ser evaluados en la unidad de enseñanza a nivel institucional: contexto, inputs, proceso y producto.
Después de haber leído con detenimiento este recurso, se debería poder contestar a las siguientes preguntas:
En cuanto a la espiral de la calidad (figura 4.1):
- ¿Qué parte es interna y qué parte es externa?
- ¿Por qué se dice que el proceso de la calidad es cíclico?
- ¿Cuáles son los elementos fundamentales que aseguran la calidad de un proceso de evaluación de la calidad?
En cuanto al mulifacetismo en la evaluación de un programa (figura 4.2):
- ¿Cuáles son los inputs?
- ¿Cuáles son los procesos?
- ¿Y la tipología de resultados?
Recurso 2. Vídeo ilustrativo de YouTube
La sigla CIPP representa los cuatro conceptos básicos del modelo: contexto, inputs, proceso y producto. Este enfoque, desarrollado a finales de la década de los años sesenta, busca mejorar y lograr la rendición de cuentas en la programación educativa mediante un enfoque de learning by doing.
3.1. Las funciones y los modelos de la evaluación de calidad
Los distintos modelos evaluativos deberían dar respuesta al contexto en el que se inscriben. El objetivo de este apartado es identificar, de manera muy somera, los modelos de evaluación y el rol de la garantía de la calidad en función de los problemas/cuestiones a resolver/tratar.
En las asignaturas La evaluación externa: finalidades, marcos regionales y estándares y Procesos y metodologías de evaluación externa se profundizará en los modelos de evaluación de la calidad existentes, tanto desde el punto de vista de su planteamiento y filosofía como desde su aplicación práctica. Aquí solo apuntaremos que la finalidad de la evaluación de la calidad en educación puede ser de una mera inspección, en la que se verifica que el objeto de evaluación cumple los requisitos establecidos, o puede estar orientada a la mejora. Los principios modernos de la evaluación y la gestión de la calidad (orientación al cliente, gestión por procesos, entre otros) influyen en la evaluación de la calidad educativa. Se ha incorporado la gestión de la calidad, cuyos orígenes están en el ámbito empresarial, en el mundo de la formación superior y en sus diferentes variantes, como los sistemas de control, de garantía, los planes de mejora y los mecanismos rendición de cuentas.
Recurso 1. Glosario imprescindible
En el glosario propuesto por la Asociación Europea para la Garantía de la Calidad de la Educación Superior se recogen distintos modelos de evaluación de la calidad. Después de haberlo leído con detenimiento, se debería poder contestar a las siguientes preguntas:
- ¿Qué significa evaluar?
- ¿Qué significa acreditar?
- ¿Qué significa auditar?
- ¿Dónde residen las diferencias principales entre modelos?
Recurso 2. Tabla imprescindible
La tabla identificada como recurso imprescindible ayuda a visualizar el rol de la evaluación de la calidad en función de las cuestiones a tratar o resolver.
- ¿Crees que la propuesta de fases secuenciales que contiene la tabla se corresponde con la realidad? ¿Por qué?
Recurso 3. Artículo imprescindible
Donald F. Westerheijden es investigador principal del Centro de Estudios sobre Políticas de Educación Superior (CHEPS) de la Universidad de Twente (Países Bajos), donde desde hace más de veinte años coordina la investigación sobre la gestión de la calidad.
Este artículo presenta una tipología basada en la literatura de la garantía de la calidad. El documento aplica la tipología al desarrollo de la garantía de calidad en tres países; finalmente, se analizan las fortalezas y debilidades del enfoque de modelización a la luz de la evidencia empírica. El artículo concluye con un debate sobre las orientaciones futuras para el estudio comparativo del cambio de políticas en el Espacio Europeo de Educación Superior sobre la base de esta conceptualización de la evolución de la política de garantía de calidad.
Después de haberlo leído con detenimiento, se debería poder contestar a las siguientes preguntas:
- ¿Qué diferencia la evaluación de la calidad como estrategia de la evaluación de la calidad como opción simbólica?
- ¿Qué riesgos existen cuando la evaluación de la calidad no está consensuada entre la administración que la impulsa y las instituciones que la tienen que implantar?
Recurso 4. Capítulo de libro para profundizar
Este recurso está recomendado para aquellos estudiantes que necesiten profundizar en los modelos de evaluación de la calidad de la educación superior, teniendo en cuenta que es un tema que se trabaja en profundidad en las asignaturas La evaluación externa: finalidades, marcos regionales y estándares y Procesos y metodologías de evaluación externa.
Después de haberlo leído con detenimiento, se debería poder contestar a las siguientes preguntas:
- ¿Cuál es la diferencia entre un proceso orientado a la mejora y una acreditación?
- ¿Qué es una acreditación ex ante?
- ¿En qué se diferencian estos procesos con la auditoría de calidad?
Recurso 5. Entrevistas (en formato vídeo) ilustrativas
5.1. Fragmento de la entrevista a Héctor Sauret, Argentina
El entrevistado incide en los juicios colegiados y en la calidad como mejora.
5.2. Fragmento de la entrevista a Manuel Cortés Fontcuberta Abucci, Perú
El entrevistado contrasta la norma ISO con la acreditación institucional y programática.
5.3. Fragmento de la entrevista a Ronny Heintze, Alemania
El entrevistado presenta las ventajas y los inconvenientes de la acreditación de programas frente a la acreditación de instituciones.
Recurso 6. Informe para profundizar
Este recurso ofrece una visión integrada que permite la autoevaluación del sistema de educación superior de un país, desde las políticas hasta los marcos regulatorios.
Después de haberlo leído con detenimiento, se debería poder contestar a la siguiente pregunta:
- ¿Cuál sería la puntuación de mi país en el subestándar 5.1, «Accreditation and institutional quality standards», del estándar 5 de garantía de calidad?
3.2. Los grupos de interés
En la evaluación de la calidad intervienen distintos agentes que, como hemos visto anteriormente, aportan distintas perspectivas al concepto de calidad. La integración de los agentes implica una visión rica y compleja de la realidad evaluada.
Los agentes se pueden clasificar de distintas maneras. Una de ellas es según si son internos o externos a la institución educativa. Entre los internos, se encuentran responsables académicos, estudiantes, personal docente e investigador, personal de administración y servicios; entre los externos, graduados, ocupadores, futuros estudiantes, familias, gobiernos, etc. Los agentes tienen distintos roles en el proceso evaluativo: expertos académicos, profesionales y estudiantes, metodólogos, entre otros. Cada grupo o agente aporta su visión e incide en la mejora de la calidad, y debe actuar con independencia y evitar el conflicto de intereses.
Las diferentes perspectivas que los grupos de interés aportan a la concepción de la calidad se vuelven a mencionar en la asignatura La evaluación externa: Finalidades, marcos regionales y estándares.
Entrevistas (en formato vídeo) ilustrativas
1.1. Fragmento de la entrevista a Héctor Sauret, Argentina
1.2. Fragmento de la entrevista a Manuel Cortés Fontcuberta Abucci, Perú
1.3. Fragmento de la entrevista a Francisco Marmolejo, del Banco Mundial
Se presentan tres fragmentos de entrevistas en los que se menciona el rol de los principales agentes de interés.
Las preguntas que habría que poder responder después de la visualización de los tres fragmentos son las siguientes:
- ¿Cuáles son los agentes o grupos de interés implicados en la garantía de la calidad de la educación superior?
- ¿Tienen la misma importancia/relevancia?