Seminario de Modelos de Evaluación de Programas y Procesos de Enseñanza Maestría en Ciencias de la Educación Profa.

Edith Hernández Vázquez

EL MÉTODO CIENTÍFICO DE EVALUACIÓN DE EDWARD A. SUCHMAN

Integrantes: Cortes Ortiz patricio López arce Gabriela Adriana Lugo Velázquez María Luisa Martínez García Leticia de Jesús Grupo: 4421 2-Febrero-2013

EL MÉTODO CIENTÍFICO DE EVALUACIÓN DE EDWARD A. SUCHMAN Científico investigador, que creía en la necesidad de basar las conclusiones en evidencias científicas, consideraba que la evaluación debía disponer de la lógica del método científico, y que un evaluador debe utilizar todo tipo de técnicas que sean útiles y apropiadas a las circunstancias y necesidades de un sentido evaluativo determinado. Suchman distinguía entre evaluación e investigación evaluativa. A la primera se refería: “proceso de emitir juicio de valor” mientras la segunda a “procedimientos de recopilación y análisis de datos, demostrar, el valor de alguna actividad social.” Objetivos Suchman consideraba tres aspectos principales de la evaluación: 1. Aspectos conceptuales: que incluye los propósitos y principios, valores, proceso, suposiciones, tipos y categorías de evaluación. 2. Aspecto metodológico: incluye un enfrentamiento ente la investigación evaluativa y la no evaluativa, variaciones en la planificación, principios de la planificación y valores de los efectos (exactitud y validez). 3. Aspecto administrativo: incluye la ciencia evaluativa y los compromisos para cumplirlas obligaciones administrativas. Aspectos conceptuales de la evaluación Suchman conceptualizo la investigación evaluativa como la primera y principal investigación, que debe acercarse a las normas de la metodología investigativa. Adoptando el método científico un evaluador conseguirá resultados más objetivos (exactitud y validez). La investigación básica es el descubrimiento del conocimiento y la investigación evaluativa es investigación aplicada y su propósito es determinar hasta qué punto un programa específico ha conseguido el resultado deseado.

subtemas. 4.esta etapa incluye el grado que ha alcanzado el objetivo predeterminado. basados en principios que determinan tanto las metas como el perfeccionamiento de los programas. La próxima etapa es la identificación de algún tipo de actividad para alcanzar la meta y la operacionalización de esta actividad . Los valores y el proceso evaluativo Valor: como cualquier aspecto de una situación. actividad u objeto que tenga un interés particular. La evaluación empieza con un valor concreto (explícito o implícito). Describir si los objetivos han sido alcanzados y de que manera. Las presuposiciones en los estudios evaluativos Las principales suposiciones de Suchman es que cada programa tiene algún valor con algún propósito. 2. 3. Los valores desempeñan un amplio papel en la determinación de los objetivos de los programas. Determinar las razones de cada uno de los éxitos y fracasos. por lo tanto pueden estar construidos como modos de organizar la actividad humana. Descubrir los principios en un programa que ha tenido éxito.Propósitos de la evaluación Asumió los propósitos expuestos por Bigman: 1. luego procede a definir la meta. a la luz de los descubrimientos de la investigación. 5. Sentar las bases de una futura investigación sobre las razones del relativo éxito de técnicas alternativas. Los valores. 6. deben proporcionar la información básica para planificar. Redefinir los medios para alcanzar los objetivos. Dirigir el curso de los experimentos mediante técnicas que aumentan su efectividad. así como el medio de alcanzar esas metas. la investigación evaluativa debe conducir a una mayor comprensión de los procesos aplicados o administrativos. Seguidamente se seleccionan los criterios para valorar la consecución de la meta. Los medios para alcanzar los propósitos. Finalmente se emite un juicio acerca de si esta actividad dirigida hacia la meta ha resultad útil. La característica más identificable de la investigación evaluativa es la presencia de alguna meta u objetivo cuyo nivel . la naturaleza de la evaluación determinara el tipo de valoración que se deberá utilizar.

facilidad. ¿Cuál es la naturaleza del contenido del objeto? ¿Quién es el destinatario del programa? ¿Cuándo debe producirse el cambio deseado? ¿Los objetivos son unitarios o múltiples? ¿Cómo debe ser el objetivo que debe ser alcanzado? Clasificó las presuposiciones en dos clases: Presuposiciones de valor: pertenecen al sistema de creencias que determinan que es “bueno” para una sociedad. 2. Suficiencia del trabajo: el grado en que el trabajo efectuad coincide con los objetivos. 4. operación actividad. calidad. 5. Tipos de evaluación Hablaba de tres tipos: La evaluación última: se refiere a la determinación del éxito global del programa. Trabajo: se valoran los resultados del esfuerzo. Categorías de la evaluación Estas categorías representan varios criterios de éxito (o fracaso) con los que pueden juzgarse un programa: 1. la investigación preventiva: trata de los problemas intermedios que deben ser resueltos antes de abordar la evaluación final. Suchman apuntaba cuatro dimensiones para el análisis de un proceso: a) Los atributos del programa b) La gente a la que le afecta el programa c) El contexto . Propone seis preguntas que deben ser respondidas cuando se formulen los objetivos de un programa con propósitos evaluativos: 1. 4. 2. 3. para producir resultados en proporción al esfuerzo realizado? 5. 3. Eficiencia: ¿es la eficacia la capacidad de un individuo. Proceso: investigar explicaciones acerca de las razones que conducen a los resultados.de consecución constituye el principal centro de atención del problema investigativo. cantidad de actividades. la evaluación a corto plazo: busca información específica acerca de procedimientos concretos en términos de utilidad inmediata. organización. Esfuerzo: criterios como de éxito. Presuposiciones de validez: están relacionadas con los objetivos del programa.

Todo plan de investigación representa un compromiso. 3. La investigación evaluativa debe proporcionar información para la planificación del programa su realización y su desarrollo. No hay nada como un plan correcto y simple. tanto deseados como los indeseados. Un plan de investigación evaluativa es una serie de indicaciones para asegurar que se va en la buena dirección. Este modelo es muy importante para la planificación. La evaluación es aplicable únicamente al programa que está siendo evaluado y a sus ramificaciones contextuales. así el plan de estudios debe tomar precauciones para tener en cuenta las precondiciones y los acontecimientos que pueden influir. contienen una amplia serie de variables. Permite que las predicciones se conviertan en un resultado dela investigación. Los aspectos metodológicos de la evaluación Evaluación contra investigación no evaluativa La investigación evaluativa es un tipo de investigación aplicada cuya meta es valorar la aplicación de este conocimiento. Dando mucha importancia a la relación entre las causas y efectos de un programa. se atiene a los principios del método científico. Un buen plan es que el que resulta ser el más apropiado para el propósito del estudio. Variaciones en el plan de intervención evaluativa La investigación evaluativa no tenía una metodología propia.d) Los diferentes tipos de efectos producidos por el programa. 2. poniendo énfasis en la utilidad. Suchman propuso un modelo que demostrara que la secuencia de causas propuestas para una evaluación se convierte en uno más de los campos de acción y actividades que conducen a las conclusiones. Principios de la planificación de la investigación evaluativa 1. 4. Los efectos. la valoración de los efectos de un programa requiere que se especifiquen las cuatro principales categorías de variables: . La valoración de los efectos De acuerdo con Suchman.

sino también al significado de todo el proceso evaluativo. Validez de la administración: las condiciones del estudio. Y en lo que se refiere a programas futuros. La investigación evaluativa puede valorar el progreso experimentando y adelantar nuevas estrategias. 3. Población estimada y grupos a los que realmente concierne. 4. Validez del instrumento: la utilización de clasificaciones operacionalmente irrelevantes. El evaluador no debe valorar directamente el fenómeno que está siendo estudiado.1. 4. Efectos diferenciales del programa. 2. Condiciones situaciones en las que se desarrolla el programa. 7. Los estudios evaluativos de programas anteriores cumplen la importante función de sacar a la luz los esfuerzos improductivos. del instrumento: todo lo anterior (combinado) del proceso: enumerar los errores La validez presenta mucho más problemas que la fiabilidad porque no solo se refiere a valoraciones específicas. Fiabilidad del tema. Validez del sujeto: hábitos y predisposiciones que conducen a errores. 5. Validez del observador: introducción de errores basados en inclinaciones personales. Validez del análisis: errores deliberados o involuntarios. sino las clasificaciones de esos fenómenos. 3. Fiabilidad Fiabilidad Fiabilidad del sujeto: actitudes y comportamientos afectados por el estado de del observador: factores personales que influyen en la interpretación de la situación: condiciones de la valoración. Validez proposicional: la utilización de teorías incorrectas o inadecuadas. Las principales causas de variación asistemática en la investigación evaluativa: Fiabilidad ánimo. Partes integrantes o procesos del programa. 2. Validez del muestreo: falta de representatividad de la población escogida. La evaluación y la administración del programa La investigación evaluativa puede desafiar a la práctica tradicional y llevar a cabo la útil función de hacer más eficientes estas actividades. la . Exponemos a continuación a causa de los errores referentes a la validez en los estudios evaluativos: 1. 6.

la demostración y la ejecución. Fomenta las actitudes morales y críticas del personal implicándolo en la evaluación. en la realización de un proyecto. Examina la eficiencia de los programas comparándolos con otros métodos a las necesidades. El evaluador se preocupa más por los objetivos últimos. 6. Sugiere nuevos métodos para futuros programas. Administración de los estudios evaluativos La precisión del juicio del evaluador puede muy bien depender de la calidad de las actividades complementarias del evaluador y el personal más importante del estudio. Establece prioridades entre los programas. y no estorbar. Fomentar las técnicas interpersonales de todos los participantes por medio de un programa de preparación inicial. 5. Suchman subraya que la evaluación está concebida para ayudar. Especifica los puntos fuertes y los débiles de la operación programática y sugiere cambios y modificaciones. Acuerdos para solucionar los problemas administrativos . Si las relaciones entre los papeles del evaluador y del administrador se deterioran. según la escasez de recursos como los fondos. 4. pueden abordarse varias estrategias para mejorarlas: Desarrollar un óptimo nivel de expectación para la orientación inicial de ambas partes. 3. siendo los procesos anteriores la investigación. Facilita una responsabilización pública. el personal y el tiempo. la planificación.investigación evaluativa puede prestar una gran contribución a la definición de objetivos. Suchuman afirmaba que la evaluación había sido tradicionalmente considerada como el proceso final de la función administrativa que representa planificar un programa. La evaluación operacional (o ejecución) proporcionar una valoración de hasta qué punto el programa ha alcanzado los resultados deseados entre otras estas valiosas funciones: 1. Clarificar los papeles y actividades de ambas partes. 2. mientras que el administrador del programa se ocupa de los objetivos inmediatos.

Suchman consideraba que los estudios evaluativos debía alcanzar el mejor compromiso posible entre las exigencias de las ciencias y las condiciones realistas de la investigación. sin embargo. T. un proceso. (2008) Evaluación Institucional: Programa de Maestría en Ciencias de la Educación. La ingenuidad y confianza del evaluador. http://postgradeducaciondobolivar. políticas y económicas.com/2001/03/evalucacioninstitucional.pdf . Coordinación de Postgrado de Educación.files. los resultados de una evaluación deben ser claros indicadores de futuras direcciones. Un instrumento de política educativa para cambiar las estructuras con contenido.wrdprees. Suchman afirmaba que ambas partes deben consultarse acerca de la vialidad y las posibilidades del perfeccionamiento de las conclusiones mientras que los resultados de una evaluación deben ser traducidos a juicios referentes al éxito o fracaso del programa. El evaluador siempre debe recordar que una evaluación se desarrolla bajo condiciones naturales y que sus técnicas investigativas deben necesariamente adaptarse a la realidad de la recopilación y el análisis de datos. A partir de la conceptualización de la educación como un bien social. Para que tengan un valor real. se establece que la planificación debe responder. La planificación ya no es un sistema administrativo. Bibliografía: Chacare. a un concepto de la educación como demanda social según el cual existe una demanda de los individuos por educación en un lugar y tiempo dado bajo circunstancias culturales. un método social de la educación. sino una actitud. Universidad de Oriente Núcleo de Bolívar. necesitan el mayor control científico posible.