MODELOS DE EVALUACIÓN

Alicia Sianes Bautista
asianes2@alumno.uned.es
	CRONBACH
Diseño Funcional de la Evaluación	PÉREZ JUSTE
La Evaluación de Programas Educativos	STUFFLEBEAM
Modelo CIPP (Contexto Entrada Proceso Producto)	STAKE	
CONCEPTO DE EVALUACIÓN	Es la recogida y uso de la información para tomar decisiones sobre un programa educativo.	Consiste en un proceso sistemático de recogida de información orientada a valorar la calidad y los logros para la toma de decisiones de mejora del personal y del programa.	Es un proceso para identificar, obtener y proporcionar información de utilidad y descriptiva acerca del valor y mérito de las metas, la planificación, la realización y el impacto de un objeto determinado, con el fin de servir de guía para la torna de decisiones, solucionar los problemas de responsabilidad y promover la comprensión de los fenómenos implicados.
	Conforma un proceso para descubrir el mérito y las deficiencias de un programa	
FUNCIONES DE EVALUACIÓN	Señala la función “formativa” de la evaluación.	Señala las funciones “formativa” y “sumativa”.	Señala que la evaluación está orientada a la toma de decisiones.
	Señala la función formativa de la evaluación	
PARA QUIÉN SE HACE LA EVALUACIÓN	El destinatario último para la cual se hace la evaluación es la sociedad. Se reconoce que los estudios de evaluación deben ir más allá de informes sobre un curso concreto, el fin es mejorar la educación. 	Para la mejora del programa, del personal implicado en el mismo e, indirectamente, la sociedad. Los destinatarios son, en definitiva, todos aquellos interesados en el programa objeto de evaluación. 	Los destinatarios son todos los componentes de la comunidad educativa o la comunidad en concreto, hay un reparto de papeles entre: clientes, evaluadores, especialistas, coordinadores, y otros personales involucrados. 	La evaluación se realiza para todos los participantes en el programa	
CARACTERÍSTICAS DEL EVALUADOR	Algunas características que Cronbach atribuye al evaluador son:
-	El evaluador es parte del sistema político
-	Es un mediador
-	Influye, aun no queriéndolo, en el resultado de las evaluaciones
-	El evaluador es un experto, un profesional del campo.	Pérez Juste se refiere al evaluador del programa como agente experto en el proceso en el que se lleva a cabo la evaluación. Puede ser:
-	Interno
-	Externo	Debe observar, e involucrarse, en las actividades del personal implicado en el desarrollo del programa, en su aplicación, y presentar informes sobre los resultados de la evaluación de proceso cada poco tiempo, con el fin de que puedan detectarse, señalarse y solucionarse los problemas de realización de los programas a tiempo.	El evaluador ha de estar atento a lo que ocurre en el programa, respondiente.
El evaluador debe:
-  Proporcionar información justificativa de los fundamentos del programa y descubrir la base racional del mismo, incluyendo sus necesidades.
- Después debe mencionar las intenciones de entrada, antecedentes, recursos, y condiciones existentes, las transacciones, referidas a los procesos y a las actividades, y los resultados.
- Recoger información, a través de la observación, sobre los antecedentes, las transacciones y los resultados, tanto los pretendidos como los no pretendidos, de las tres categorías.
- Explicitar las normas, criterios, expectativas, rendimientos, para valorar los antecedentes, transacciones y resultados del programa y recoger los juicios hechos por la gente que participa en el programa sobre las condiciones de partida (antecedentes), las transacciones y los resultados.
- El evaluador, finalmente, debe analizar la información de la matriz descriptiva atendiendo a la congruencia entre lo pretendido y lo observado y teniendo en cuenta las relaciones dependientes de los resultados y las transacciones de los antecedentes. 	
ÁMBITOS Y CONTEXTOS MÁS ADECUADOS PARA SU APLICACIÓN		Es el programa el que ha de adecuarse al contexto en el que se aplica. Para ello, consideraciones psicológicas y sociológicas son tenidas en cuenta. Es un elemento fundamental en la evaluación.	Este modelo se ajusta más a la evaluación de centros que a la evaluación de los aprendizajes individuales de los alumnos, aunque pueden utilizarse también para esta tarea siempre que se realicen los ajustes oportunos. 		
FASES PRINCIPALES DE LA APLICACIÓN DEL MODELO	Primer Estadio Piloto o Provisional: el nuevo programa, o sus mejoras, se aplican de modo provisional, a pequeña escala, a modo de estudio piloto.
Segundo Estadio o de Superrealización: Tras la 1ª fase se reelabora el programa, iniciándose un estudio bajo condiciones controladas para probar las posibilidades de éxito.
Tercer Estadio o Prototípico: aplicación del programa bajo condiciones lo más próximas a la realidad.
Cuarto Estadio de Operación de programas: el programa se aplica en su contexto real.	Etapa Inicial o Evaluación del programa:
Se tienen en cuenta la calidad intrínseca del programa, la adecuación del mismo tanto al contexto como a la situación de partida.
Etapa Procesual o Evaluación del desarrollo del programa: Se llevan a cabo los criterios para la evaluación de la aplicación de los programas así como el empleo de una metodología adecuada a la evaluación de procesos.
Etapa Final o Evaluación de los resultados del programa: Se recogen los logros del programa y la valoración de los resultados.
Institucionalización de la Evaluación de Programas: La evaluación del programa forma parte del mismo.	Las etapas de identificar, obtener y proporcionar información. De ahí su propuesta CIPP, que distingue cuatro tipos de evaluaciones con sus correspondientes decisiones de mejora: 
Evaluación del contexto: sirve de base a las decisiones de planificación, necesidades de un programa para definir sus objetivos. 
Evaluación del "input" o entrada: nos indica los recursos disponibles, los métodos aplicables, las estrategias alternativas al programa y los planes de mayor potencial. 
Evaluación del proceso: proporciona información sobre la marcha del programa y si las actividades siguen el plan previsto, con el fin de introducir las modificaciones que sean necesarias. 
Evaluación del producto: valorar, interpretar y juzgar los logros del programa. Analizar si se han alcanzado los objetivos propuestos para decidir si el programa debe seguir o ampliarse o reformularse. 
	Se establece una concepción de la evaluativa como servicio, evaluación de la figura y evaluación respondiente.
Las actuaciones a realizar en las evaluaciones respondientes son:
1. Hablar con los clientes, el personal del programa y las audiencias o beneficiarios de los programas.
2. Identificar la extensión y el alcance del programa
3. Revisar las actividades del programa.
4. Descubrir los propósitos y preocupaciones del personal y los grupos interesados o audiencias.
5. Conceptualizar los temas.
6. Identificar las necesidades de datos y temas.
7. Seleccionar los observadores, los jueces; y los instrumentos si fueran necesarios.
8. Observar los antecedentes, las transacciones y los resultados.
9. Tematizar -categorizar-, preparar descripciones, estudios de caso.
10. Validar, confirmar, tratar de desconfirmar.
11. Presentar los resultados a las audiencias.
12. Adaptar para el uso de los diferentes grupos interesados o audiencias.
	
METODOLOGÍA EVALUATIVA	Métodos cuantitativos y cualitativos	Usa tanto la cuantitativa como la cualitativa.	Cuantitativa o cualitativa, en función de cada tipo de evaluación	Preferencia por los métodos cualitativos: estudio de casos.	
TIPO DE INFORMACIÓN A RECOGER	Cronbach está interesado en 4 tipos de datos:
Información relativa al estudio de los procesos.
Información para la valoración de actitudes 
Información para el estudio de los logros de los alumnos, en relación con:
-	La valoración de sus habilidades personales.
-	El análisis de las respuestas a las pruebas de rendimiento
-	La adaptación de diferentes pruebas a grupos diferentes de alumnos
-	La selección de pruebas adaptadas para su utilización por los desarrolladores del curso y sus patrocinadores
Información para estudios con fines de investigación para la generalización de los hallazgos.	Para Pérez Juste es importante que la información sea amplia, veraz y diversa. Procedente del propio programa, del contexto, de los procesos y de los resultados.	De las necesidades, los recursos, el funcionamiento y el impacto. 
Cada tipo de evaluación es simbiótica, una apoya a la siguiente y aporta información fundamental para comprender la totalidad del proceso educativo.
La lista de control que contiene diez elementos: los CIPP, impacto, sostenibilidad, efectividad, transferencia, meta evaluación y  el informe final.	Se recoge todo lo que está ocurriendo en el programa	
MÉTODOS, INSTRUMENTOS Y TÉCNICAS	Cuantitativos y cualitativos. También hay que destacar que señalan diversos instrumentos y técnicas.	Cuantitativos y cualitativos. Diversos instrumentos y técnicas, principio de complementariedad (evaluadores y métodos) y complementariedad sucesiva (técnicas). Observación como técnica principal. Triangulación para contraste de resultados.	Observación, entrevista, cuestionario, etc.	Se utilizan métodos emergentes, estudio de caso. Las principales técnicas que se utilizan son la observación, entrevista y análisis de informe.	
TIPOS DE INFORME DE RESULTADOS	El evaluador no debe someterse a solo estilo informativo, Cronbach está a favor de los informes informales, frecuentes, no planificados.	Pérez Juste es partidario de los informes de resultados de carácter descriptivo.	Frecuente y para proporcionar una guía para la mejora del programa.	El tipo de informe es fotográfico y narrativo.	
POSIBLE GENERALIZACIÓN	Validez interna y externa. Naturalista	La que permita el diseño.	La que permiten el muestreo y la metodología utilizada.	Naturalista, experiencia vicaria.	
UTILIDAD DE LOS HALLAZGOS	Formación de la sociedad.	Mejora del programa, del personal y de la comunidad.	Pretende alcanzar el perfeccionamiento de los programas para que estos funcionen de manera efectiva aprovechando de la mejor manera los recursos y obteniendo mejores resultados. 	Para los participantes en el programa y para el lector	
CRITERIOS PARA JUZGAR LAS EVALUACIONES	Usa la validez externa	Rigurosidad (evaluación valiosa, válida y fiable).	Se tienen claros el contexto, el estado actual del programa, los procesos que lo integran y los productos que se derivan de este.
Busca el perfeccionamiento.
Propone alternativas de mejora.
Se tiene conocimientos de cómo se dan los procesos.
Los productos son los contemplados desde los objetivos.
Se respetan las cuestiones éticas.	Si descubre el mérito y las deficiencias de los programas para ayudar a los participantes a incrementar su comprensión y responder a sus necesidades	
CONTRIBUCIONES DEL MODELO	El diseño funcional, la validez interna y externa de Cronbach.	Desarrollo de teorías de programas, complementariedad metodológica y técnica.	Evaluación de los contextos y los modelos.	Al desarrollo de los métodos naturalistas y de otros enfoques evaluativos