Seminario de Modelos de Evaluación de Programas y Procesos de Enseñanza Maestría en Ciencias de la Educación Profa.

Edith Hernández Vázquez

EL MÉTODO CIENTÍFICO DE EVALUACIÓN DE EDWARD A. SUCHMAN

Integrantes: Cortes Ortiz patricio López arce Gabriela Adriana Lugo Velázquez María Luisa Martínez García Leticia de Jesús Grupo: 4421 2-Febrero-2013

EL MÉTODO CIENTÍFICO DE EVALUACIÓN DE EDWARD A. SUCHMAN Científico investigador, que creía en la necesidad de basar las conclusiones en evidencias científicas, consideraba que la evaluación debía disponer de la lógica del método científico, y que un evaluador debe utilizar todo tipo de técnicas que sean útiles y apropiadas a las circunstancias y necesidades de un sentido evaluativo determinado. Suchman distinguía entre evaluación e investigación evaluativa. A la primera se refería: “proceso de emitir juicio de valor” mientras la segunda a “procedimientos de recopilación y análisis de datos, demostrar, el valor de alguna actividad social.” Objetivos Suchman consideraba tres aspectos principales de la evaluación: 1. Aspectos conceptuales: que incluye los propósitos y principios, valores, proceso, suposiciones, tipos y categorías de evaluación. 2. Aspecto metodológico: incluye un enfrentamiento ente la investigación evaluativa y la no evaluativa, variaciones en la planificación, principios de la planificación y valores de los efectos (exactitud y validez). 3. Aspecto administrativo: incluye la ciencia evaluativa y los compromisos para cumplirlas obligaciones administrativas. Aspectos conceptuales de la evaluación Suchman conceptualizo la investigación evaluativa como la primera y principal investigación, que debe acercarse a las normas de la metodología investigativa. Adoptando el método científico un evaluador conseguirá resultados más objetivos (exactitud y validez). La investigación básica es el descubrimiento del conocimiento y la investigación evaluativa es investigación aplicada y su propósito es determinar hasta qué punto un programa específico ha conseguido el resultado deseado.

así como el medio de alcanzar esas metas. Seguidamente se seleccionan los criterios para valorar la consecución de la meta. Los medios para alcanzar los propósitos.esta etapa incluye el grado que ha alcanzado el objetivo predeterminado. Determinar las razones de cada uno de los éxitos y fracasos. Redefinir los medios para alcanzar los objetivos. Finalmente se emite un juicio acerca de si esta actividad dirigida hacia la meta ha resultad útil. Los valores. La característica más identificable de la investigación evaluativa es la presencia de alguna meta u objetivo cuyo nivel . La evaluación empieza con un valor concreto (explícito o implícito). 4. Dirigir el curso de los experimentos mediante técnicas que aumentan su efectividad. subtemas. Las presuposiciones en los estudios evaluativos Las principales suposiciones de Suchman es que cada programa tiene algún valor con algún propósito.Propósitos de la evaluación Asumió los propósitos expuestos por Bigman: 1. 5. 6. luego procede a definir la meta. la investigación evaluativa debe conducir a una mayor comprensión de los procesos aplicados o administrativos. 2. La próxima etapa es la identificación de algún tipo de actividad para alcanzar la meta y la operacionalización de esta actividad . a la luz de los descubrimientos de la investigación. actividad u objeto que tenga un interés particular. por lo tanto pueden estar construidos como modos de organizar la actividad humana. Sentar las bases de una futura investigación sobre las razones del relativo éxito de técnicas alternativas. deben proporcionar la información básica para planificar. basados en principios que determinan tanto las metas como el perfeccionamiento de los programas. Descubrir los principios en un programa que ha tenido éxito. Los valores y el proceso evaluativo Valor: como cualquier aspecto de una situación. 3. Describir si los objetivos han sido alcanzados y de que manera. la naturaleza de la evaluación determinara el tipo de valoración que se deberá utilizar. Los valores desempeñan un amplio papel en la determinación de los objetivos de los programas.

facilidad. cantidad de actividades. para producir resultados en proporción al esfuerzo realizado? 5. Tipos de evaluación Hablaba de tres tipos: La evaluación última: se refiere a la determinación del éxito global del programa. ¿Cuál es la naturaleza del contenido del objeto? ¿Quién es el destinatario del programa? ¿Cuándo debe producirse el cambio deseado? ¿Los objetivos son unitarios o múltiples? ¿Cómo debe ser el objetivo que debe ser alcanzado? Clasificó las presuposiciones en dos clases: Presuposiciones de valor: pertenecen al sistema de creencias que determinan que es “bueno” para una sociedad. 5. Suficiencia del trabajo: el grado en que el trabajo efectuad coincide con los objetivos. Presuposiciones de validez: están relacionadas con los objetivos del programa. 4. Trabajo: se valoran los resultados del esfuerzo. 4. 3. 2. Eficiencia: ¿es la eficacia la capacidad de un individuo. operación actividad. la investigación preventiva: trata de los problemas intermedios que deben ser resueltos antes de abordar la evaluación final. 2. Proceso: investigar explicaciones acerca de las razones que conducen a los resultados. Esfuerzo: criterios como de éxito. Propone seis preguntas que deben ser respondidas cuando se formulen los objetivos de un programa con propósitos evaluativos: 1. la evaluación a corto plazo: busca información específica acerca de procedimientos concretos en términos de utilidad inmediata. Suchman apuntaba cuatro dimensiones para el análisis de un proceso: a) Los atributos del programa b) La gente a la que le afecta el programa c) El contexto . Categorías de la evaluación Estas categorías representan varios criterios de éxito (o fracaso) con los que pueden juzgarse un programa: 1.de consecución constituye el principal centro de atención del problema investigativo. calidad. organización. 3.

4. así el plan de estudios debe tomar precauciones para tener en cuenta las precondiciones y los acontecimientos que pueden influir. Los efectos. Dando mucha importancia a la relación entre las causas y efectos de un programa. Este modelo es muy importante para la planificación. Todo plan de investigación representa un compromiso. Un plan de investigación evaluativa es una serie de indicaciones para asegurar que se va en la buena dirección. contienen una amplia serie de variables. Un buen plan es que el que resulta ser el más apropiado para el propósito del estudio. Variaciones en el plan de intervención evaluativa La investigación evaluativa no tenía una metodología propia. Permite que las predicciones se conviertan en un resultado dela investigación. la valoración de los efectos de un programa requiere que se especifiquen las cuatro principales categorías de variables: . No hay nada como un plan correcto y simple. se atiene a los principios del método científico. La valoración de los efectos De acuerdo con Suchman. 2. Suchman propuso un modelo que demostrara que la secuencia de causas propuestas para una evaluación se convierte en uno más de los campos de acción y actividades que conducen a las conclusiones. Principios de la planificación de la investigación evaluativa 1. La evaluación es aplicable únicamente al programa que está siendo evaluado y a sus ramificaciones contextuales. La investigación evaluativa debe proporcionar información para la planificación del programa su realización y su desarrollo. 3. poniendo énfasis en la utilidad.d) Los diferentes tipos de efectos producidos por el programa. Los aspectos metodológicos de la evaluación Evaluación contra investigación no evaluativa La investigación evaluativa es un tipo de investigación aplicada cuya meta es valorar la aplicación de este conocimiento. tanto deseados como los indeseados.

2. Los estudios evaluativos de programas anteriores cumplen la importante función de sacar a la luz los esfuerzos improductivos. Exponemos a continuación a causa de los errores referentes a la validez en los estudios evaluativos: 1.1. Partes integrantes o procesos del programa. 2. 3. Validez del análisis: errores deliberados o involuntarios. Validez del muestreo: falta de representatividad de la población escogida. Validez del instrumento: la utilización de clasificaciones operacionalmente irrelevantes. La investigación evaluativa puede valorar el progreso experimentando y adelantar nuevas estrategias. Efectos diferenciales del programa. sino también al significado de todo el proceso evaluativo. del instrumento: todo lo anterior (combinado) del proceso: enumerar los errores La validez presenta mucho más problemas que la fiabilidad porque no solo se refiere a valoraciones específicas. El evaluador no debe valorar directamente el fenómeno que está siendo estudiado. La evaluación y la administración del programa La investigación evaluativa puede desafiar a la práctica tradicional y llevar a cabo la útil función de hacer más eficientes estas actividades. 6. 4. Condiciones situaciones en las que se desarrolla el programa. la . Fiabilidad Fiabilidad Fiabilidad del sujeto: actitudes y comportamientos afectados por el estado de del observador: factores personales que influyen en la interpretación de la situación: condiciones de la valoración. Validez del sujeto: hábitos y predisposiciones que conducen a errores. Fiabilidad del tema. Y en lo que se refiere a programas futuros. Validez proposicional: la utilización de teorías incorrectas o inadecuadas. Las principales causas de variación asistemática en la investigación evaluativa: Fiabilidad ánimo. Población estimada y grupos a los que realmente concierne. 3. 7. 4. Validez de la administración: las condiciones del estudio. sino las clasificaciones de esos fenómenos. Validez del observador: introducción de errores basados en inclinaciones personales. 5.

3. según la escasez de recursos como los fondos. Acuerdos para solucionar los problemas administrativos . la planificación. 4. Clarificar los papeles y actividades de ambas partes. siendo los procesos anteriores la investigación. Fomentar las técnicas interpersonales de todos los participantes por medio de un programa de preparación inicial. Fomenta las actitudes morales y críticas del personal implicándolo en la evaluación. El evaluador se preocupa más por los objetivos últimos. Suchman subraya que la evaluación está concebida para ayudar. Especifica los puntos fuertes y los débiles de la operación programática y sugiere cambios y modificaciones. Suchuman afirmaba que la evaluación había sido tradicionalmente considerada como el proceso final de la función administrativa que representa planificar un programa.investigación evaluativa puede prestar una gran contribución a la definición de objetivos. pueden abordarse varias estrategias para mejorarlas: Desarrollar un óptimo nivel de expectación para la orientación inicial de ambas partes. 5. la demostración y la ejecución. y no estorbar. el personal y el tiempo. Sugiere nuevos métodos para futuros programas. La evaluación operacional (o ejecución) proporcionar una valoración de hasta qué punto el programa ha alcanzado los resultados deseados entre otras estas valiosas funciones: 1. Establece prioridades entre los programas. mientras que el administrador del programa se ocupa de los objetivos inmediatos. en la realización de un proyecto. Examina la eficiencia de los programas comparándolos con otros métodos a las necesidades. Facilita una responsabilización pública. 6. 2. Si las relaciones entre los papeles del evaluador y del administrador se deterioran. Administración de los estudios evaluativos La precisión del juicio del evaluador puede muy bien depender de la calidad de las actividades complementarias del evaluador y el personal más importante del estudio.

La ingenuidad y confianza del evaluador.wrdprees. Universidad de Oriente Núcleo de Bolívar.pdf . http://postgradeducaciondobolivar. La planificación ya no es un sistema administrativo. necesitan el mayor control científico posible. un método social de la educación. Coordinación de Postgrado de Educación. un proceso. los resultados de una evaluación deben ser claros indicadores de futuras direcciones. Bibliografía: Chacare. políticas y económicas.com/2001/03/evalucacioninstitucional. (2008) Evaluación Institucional: Programa de Maestría en Ciencias de la Educación. Un instrumento de política educativa para cambiar las estructuras con contenido. sin embargo. Para que tengan un valor real.files. El evaluador siempre debe recordar que una evaluación se desarrolla bajo condiciones naturales y que sus técnicas investigativas deben necesariamente adaptarse a la realidad de la recopilación y el análisis de datos. T. a un concepto de la educación como demanda social según el cual existe una demanda de los individuos por educación en un lugar y tiempo dado bajo circunstancias culturales. se establece que la planificación debe responder. A partir de la conceptualización de la educación como un bien social. sino una actitud. Suchman afirmaba que ambas partes deben consultarse acerca de la vialidad y las posibilidades del perfeccionamiento de las conclusiones mientras que los resultados de una evaluación deben ser traducidos a juicios referentes al éxito o fracaso del programa.Suchman consideraba que los estudios evaluativos debía alcanzar el mejor compromiso posible entre las exigencias de las ciencias y las condiciones realistas de la investigación.