Faculty_Scriven.jpg

Michael Scriven


El Dr. Michael Scriven es un distinguido profesor en la Escuela de Ciencias del Comportamiento y de organización de la Claremont Graduate University. Michael Scriven obtiene la licenciatura en matemáticas y en la filosofía de la lógica matemática en la Universidad de Melbourne, y su doctorado en filosofía en Oxford. Ha sido profesor en los Estados Unidos, Australia y Nueva Zelanda, en los departamentos de matemáticas, filosofía, la psicología, la historia y la filosofía de la ciencia y la educación, incluyendo doce años en la Universidad de California / Berkeley. También ha ocupado de becas en el Centro de Estudios Avanzados en Ciencias del Comportamiento (Palo Alto), el Centro de Estudios Avanzados en Psicología Teórica (Universidad de Alberta), el Educational Testing Service (Princeton), el Centro para el Estudio de las Instituciones Democráticas (Santa Bárbara), la Academia de Ciencias Sociales en Australia, la Nacional Science Foundation, y como compañero Whitehead en la Universidad de Harvard. Sus 400 publicaciones forman principalmente en los campos de sus citas y en las áreas de pensamiento crítico, los estudios de tecnología, estudios de informática y evaluación. Es o ha estado en los consejos editoriales de 42 revistas en estos nueve campos y algunos otros como la psiquiatría, y editado ha varios de ellos, incluyendo MicroNews de la Universidad. Él es un ex-presidente de la American Educational Research Association , y de la Asociación Americana de Evaluación ., y el receptor de la Medalla de Lazarsfeld la Asociación Americana de Evaluación de las contribuciones a la teoría de la evaluación página web: http://michaelscriven.info/










NOTA: El autor aclara que la secuencia de los pasos (indicadores) descritos anteriormente, no tienen que ajustarse estrictamente a un orden ya que el que evalúa podría ir y volver sobre un mismo aspecto con el objeto de darle una orientación formativa o sumativa al proceso de evaluación.


Modelo images_(6).jpg
El modelo de evaluación orientada al consumidor o al cliente propuesto por Scriven también es conocido como Modelo sin Referencia a Metas, por cuanto para este autor, lo importante no es evaluar el logro de los objetivos sino emitir juicios de valor, en tal sentido, el propósito de este método es juzgar los méritos relativos de bienes y servicios alternativos, por ello sus organizadores previos los constituyen las necesidades y valores sociales

El consumidor, es decir el cliente o beneficiario del bien o servicio que se oferta. El método se interpela sobre el valor que tiene un programa que se oferta en relación a los costos que éste genera, las necesidades concretas de sus consumidores o beneficiarios y los valores en general de la sociedad a la cual se dirige.

En un contexto educativo se haría referencia a la inversión que se realiza en el sector, el grado de satisfacción de necesidades de sus educandos, y la respuesta que ese sistema es capaz de dar a las demandas de su contexto y su sociedad

Para desarrollar su propuesta, Scriven propone como instrumentos y técnicas esenciales las listas de control, los test diagnósticos, las entrevistas, la elaboración de informes, en fin, todos aquellos que permitan realizar una descripción del juicio del evaluador luego de ejecutada su función.
La ejecución del método de Scriven plantea un proceso que involucra las siguientes acciones:
1.Valoración de Necesidades: Tanto del educando, de la sociedad donde éste está inserto como del contexto.2.La revisión de las metas planteadas.3.La comparación con otras alternativas.4.La comparación de la relación costo-inversión y efectividad.5.La combinación de la evaluación de las personas involucradas y del programa en sí mismo.Ventajas y Desventajas Respecto a ello Pérez Gómez (1989), explica que el modelo sin referencia a las metas propuesto por Scriven, requiere criterios o estándares que le sirvan de base para juzgar la efectividad de un programa. Para Scriven las necesidades son la base de la evaluación, pero las necesidades de los consumidores o clientes no son equiparables a sus deseos, requieren ser determinadas y descubiertas mediante un análisis externo y objetivo.



centro_trcno.jpg




Evaluación de programas educativos
La evaluación de programas educativos, supone un conjunto de destrezas y habilidades orientadas a determinar si los servicios prestado son necesarios, si se utilizan, si son suficientes, si se dan en los términos planificados, si ayudan dentro de un costo razonable o si incuso, provocan efectos no deseados.
Existen así, diferentes intenciones a la hora de evaluar los programas
- Seguimiento: para saber si el programa es eficaz o no e introducir modificaciones en el diseño
- Identificar proyectos y problemas
- Desarrollar programas pilotos para mejorar la eficacia
- Identificar efectos diferenciales en diferentes poblaciones
- Para determinar la relevancia y la valide de los princpios del programa
Scriven, diferenciará entre evaluación Formativa (orientada a la mejora) y Sumativa (centrada en el impacto y los resultados del programa)
Por otra parte, hay tres formas de establecer la relación entre el desarrollo del programa y la evaluación:
Causal: siguiendo el modelo de objetivos.
Fortuita: la relación se atribuye al azar o a variables externas
Independencia: Scriven propone que los evaluadores desconozcan los objetivos del programa para centrarse en los efectos reales.
La elección de un modelo evaluativo, supone elegir una teoría epistemológica y de concepción de la realidad. Los modelos sirven para conceptualizar el campo de la evaluación y proporcionar un lenguaje común que permita debatir puntos y temas conflictivos.
1. Modelo de objetivos y comportamiento (Enfoque de Tyler Bloom)

La evaluación se encarga de definir los resultados y los objetivos del programa, de manera que la tarea del evaluadora, consiste en ver hasta qué punto esos objetivos fueron alcanzados.

Este modelo de evaluación utiliza objetivos mesurables como parámetro comparativo para lo cual utiliza diseños experimentales y cuasi experimentales.
Debilidad: la definición de los objetivos a veces es arbitraria. El conocimiento previo de los objetivos puede sesgar el resultado de la evaluación (Scriven).2. Análisis de Sistemas (Rossi y Freeman)
Este modelo se basa en la microeconomía aplicada al área de servicios humanos. Se basa en el análisis de costo y beneficio.
La evaluación debe ser objetiva de manera tal que cualquier otro grupo de investigadores, arribe a las mismas conclusiones. En este modelo, son sinónimos la objetividad y la fiabilidad.
Los datos son reducidos a unos pocos indicadores para realizar el cálculo costo-beneficio y determinar la eficacia del programa.
Debilidad: La del programa queda muy reducida e ignora los intereses de los que participan en el programa.
3. Toma de decisiones (Stufflebeam/Patton)
Este modelo, también denominado CIPP (porque considera las variables Contexto, Imput, Proceso, Producto), se caracteriza por estar orientado a la toma de decisiones. Así, la evaluación se estructura en función de la decisiones que deben tomarse.
Debilidad: aumenta el riesgo en el uso de resultados.



images_(7).jpg



4. Enfoque libre de objetivos (Scriven)

El evaluador no debe conocer los objetivos para evitar un determinado perfil en el estudio de los resultados. El evaluador debe ser un experto capaz de evitar un perfil determinado debido a sí mismo, como a factores externos para determinar causalidad en condiciones no experimentales.

Debilidad: el evaluador puede sustituir los objetivos del programa por los propios. Scriven lo resuelve centrando el resultado de la evaluación en el producto que el programa ha generado, que es más objetivable, desvinculado la subjetividad del evaluador.


5. Enfoque de la crítica de arteEs empírico y cualitativo, ofrece conocimiento de la cualidad y la calidad que posee el objeto para poderlo valorar.
6.
Enoque participativo (Acreditación profesional o cuasi legal)
Considera los aspectos importantes para el público, de manera que aumenta la participación más que en otros modelos.
7.
Estudio de casos
El objetivo central es el de mejorar la comprensión y el conocimiento del objeto evaluado. Se plantea la representación del programa como un proceso y ofrece una visión de su perspectiva como la de todos los que participan en él.
El valor básico de este estudio es que aparecen representados múltiples intereses. El papel del evaluador es en parte el de un intermediario de información entre los diferentes grupos participantes.
Stakes observa que son narraciones descriptivas que muestran la complejidad de situaciones del mundo real, y en donde la comparación que se establece a parece de forma implícita. Desde el punto de vista metodológico se puede trabajar tanto cuali como cuantitativamente, pero la primera modalidad es tan preponderante que el enfoque queda marcado por sus características.
Debilidades: aparente subjetividad y dificultad para representar los intereses de forma equilibrada.
Las técnicas utilizadas para el estudio de casos son las entrevistas, las observaciones, los estudios de cuestionarios y las preguntas abiertas.
Por otra parte, este método presenta como dificultad el hacer generalizaciones aún cuando sus informes son muy accesibles.
8.
Etnográfica (Santos Guerra)
El enfoque etnográfico, es una de las opciones metodólogicas dentro del paradigma cualitativo e implica conocer de qué manera funcionan las escuelas para comprender y mejorar las actuaciones. Este enfoque tiene en cuenta aspectos como el contexto diacrónico y sincrónicos, los intercambios sociales, una investigación interpretativa de los hechos, la considearación de los procesos, combinar la evaluación interna y externa, etc.
Dice Santos Guerra que el propósito principal de la evaluación desde esta perspectiv es conoer cómo y por qué funcionan de una manera determinada los centros. El objetivo es comprender y explicar su naturaleza para mejorar la práctica, enriqueciendo la toma de decisiones.