Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Preguntas Examen Planificación y Evaluación
Preguntas Examen Planificación y Evaluación
1. CONCEPTO DE PLANIFICACIÓN
Puede decirse que planificar consiste en establecer o seleccionar unos medios para la
consecución unos medios para la consecución de unos fines fijados con anterioridad.
Las Naciones Unidas definen la planificación como: “el proceso de selección entre las formas
alternativas de actuación, con vistas a la asignación de recursos escasos, en orden a obtener
unos objetivos específicos sobre un diagnóstico preliminar que cubre todos los factores
relevantes que pueden ser identificados”.
Hasta los años 60 se había pensado que el crecimiento económico actuaría como medida
igualitaria que pondría fin automáticamente a los desequilibrios sociales, Pronto se vio cómo la
relación entre crecimiento económico y desarrollo social seguía los ritmos de una tensión
dialéctica que acababa encontrándose con repetidos fracasos en el ámbito del bienestar social.
La alta tasa de natalidad, en los países de desarrollo frente al envejecimiento de las soc.
occidentales, los obstáculos institucionales y la reticencia al cambio llevaron a contemplar
nuevos factores sociales, políticos y culturales, que escapaban al tradicional ámbito económico.
PERSPECTIVAS DE LA PLANIFICACION
1. La planificación social como ineludible necesidad para el mantenimiento del status quo
2. La planificación social como complemento de las perspectivas de los sistemas
económicos
3. La planificación social como inversión productiva como instrumento para favorecer el
crecimiento económico
4. La planificación social como instrumento de control social para conseguir la adaptación y
la integración de los grupos desviados
TRADICIONES DE LA PLANIFICACION
CICLO DE LA PLANIFICACIÓN
1) Formulación de objetivos
2) Cto. de la situación de hecho
3) Inventario de los recursos disponibles
4) Formulación de estrategias para distribuir los recursos de modo eficiente y adecuado
para lograr los objetivos.
En todo caso la planificación dentro de los s.s, implica la concreción de unas metas cada vez más
específicas, en las que se avanza desde una planificación a largo plazo ligada a las líneas directrices
de la política social vigente, hacia diseños cada vez más concretos y operativos.
Los planes a medio plazo (entre 3 y 5 años) se rigen por un nivel mayor de
concreción, fijando los objetivos por fases y ligando a la misma una distribución
de recursos concreta
Los planes a corto plazo poseen un carácter operativo, respondiendo en la mayor
parte de las ocasiones a situaciones nuevas o urgentes
Es pues una fase de estudio y cto. concreto de la realidad que va a ser objeto de planificación.
Comprende:
Las necesidades no son, en sí mismas, naturales, sino que están condicionadas por factores
económicos, sociales y políticos, culturales, ideológicos etc. Las necesidades cambian, satisfecha
una necesidad, es el punto de partida de otra.
Otro criterio es la diferencia entre los servicios que existen un área, y los de otra. Si su situación
está descompensada entonces hay una necesidad.
Así, las necesidades sociales pueden definirse como: “Una construcción hipotética que permite la
identificación de los datos de la realidad sobre los que se establecen programas de intervención
social a partir de las carencias detectadas en la organización funcional de la comunidad en
relación al propio criterio de necesidad”
Lo importante es que sea cual sea el criterio utilizado de los anteriormente expuestos quede
definido con precisión.
Para determinar el área de necesidad o carencia de una determinada unidad geográfica o sectorial
debemos abordar un estudio en tres fases:
1) Análisis de las fuentes disponibles: estudios sobre la zona, toda información susceptible
de proporcionar datos, hipótesis de trabajo
2) Se pueden hacer investigaciones mediante encuestas, aplicadas científicamente, en el
cuestionario, en la determinación de la muestra y en el análisis
3) Efectuar un estudio general de la zona con una perspectiva dinámica (cuáles son las
tendencias de los fenómenos estudiados, ingresos de la población, paro…)
A partir de esta información, podremos diseñar los objetivos que guiarán nuestras acciones,
conociendo anteriormente los recursos que disponemos para desempeñar las mismas.
Análisis de recursos
Hay que conocer con exhaustividad estos recursos. Por ejemplo el grado de especialización de los
RRHH, a qué están destinadas cada partida económica, el nº de edificios con los que contamos, su
año de construcción etc.
El estudio debe efectuarse tanto sobre los recursos públicos como con los recursos privados y
además debe efectuarse municipio a municipio, en cada contexto local.
Cuando se cuenta con estos datos se puede elaborar un Mapa de servicios sociales: la elaboración
del mapa es el punto de partida para conocer los recursos existentes, la población que demanda
los servicios y que no es atendida, la propuesta de zonas para la asignación de servicios
especializados, etc.; reúne las características de un inventario amplio que nos permite presentar
de una manera clara la situación de los servicios sociales en el momento de su realización. Se trata
de un inventario de recursos que se representa en un mapa, y nos ofrece una visión gráfica de la
situación constituyendo de esta forma, un instrumento muy adecuado para la planificación.
Si las necesidades superan a los recursos hay que priorizar y establecer una jerarquía en las
alternativas de acción. Se trata de establecer un calendario de necesidades a abordar,
distinguiendo entre necesidades urgentes a corto, a medio y a largo plazo.
Los proyectos son más concretos, inciden en un programa y son pues el soporte de las acciones
encaminadas a modificar la situación social.
Tienen que estar enumerados con precisión, especificar la duración de su aplicación, tener la
previsión de coste económico, estar vinculados a algún programa u objetivo y tienen que
cumplirse.
No todas nuestras necesidades, ni preocupaciones son objeto de decisión por parte de los
políticos.
Tres son las visiones más generalizadas sobre el nacimiento de la política pública:
1.º) La población tendría una serie de demandas, que serían reagrupadas por los partidos
políticos y grupos de interés, convirtiéndose éstos en representantes ante la autoridad
pública. Cuando este método falla, la autoridad pública utiliza técnicas de detección de
opinión con el fin de conocer la demanda de los ciudadanos. No siempre la autoridad
pública escucha
2.º) La tiranía de la oferta: según la cual, las autoridades públicas son las que modelan las
necesidades de la gente (ejem. Se aplican programas contra la pobreza, siendo la
administración la que fija los criterios de quien es pobre)
3.º) En ocasiones, las acciones políticas surgen del desarrollo de una política pública ya
existente, de tal forma que son los múltiples “grupos de presión” y la interacción entre
ellos, los que en muchas ocasiones pueden llevar a la redefinición de una política hasta
el punto de ser distinta a la que se llevaba a cabo
La agenda contiene los problemas que se hallan dentro del debate público y que pasan a ser
objeto de intervención por parte de las autoridades públicas legitimadas por el proceso político de
representación. Dos tipos de agenda:
Agenda del sistema político: centrada en problemas definidos de forma muy general
compartidos por gran parte de la población
Agenda del gobierno: Los problemas se definen de forma más precisa dando
soluciones concretas a las necesidades planteadas
Para la formación de la agenda hay que tener en cuenta el grado de apoyo al tema planteado,
valorar el impacto sobre la realidad social y la viabilidad de la solución planteada. Existe una serie
de elementos a tener en cuenta y que responden a distintas preguntas:
1.º) Los hechos: La situación planteada ¿es un problema? ¿por qué? ¿a cuánta
gente afecta?
2.º) La organización de los grupos presentes ¿Cuántos miembros afectados por el
problema tienen esas organizaciones presentes y el grado de relevancia de esos
miembros? Este elemento puede llegar a ser decisivo a la hora de optar por
alternativas o llevar a la inmovilidad a la situación planteada.
3.º) La problemática de la representación ¿Tienen los afectados acceso directo a la
estructura representativa de los decisores públicos?
4.º) Estructura decisoria: vías de negociación y jerarquía democrática
5.º) Tradición o capacidad de respuesta del sistema. Existe o no experiencia
anterior sobre el tema planteado
6.º) Liderazgo: qué personas tienen más peso para tomar la decisión, su grado de
autoridad y su capacidad de conexión con el resto de los actores implicados
Existen, al menos, cuatro premisas para que un individuo actúe según la teoría del decisor racional:
Debe contar con un criterio accesible cuyo valor comparte todo el mundo, si es
razonable
Las preferencias son estables y explícitas
Conoce o puede conocer todas las alternativas posibles
Se comporta como puro intelecto, nada lo moviliza salvo el problema que gestiona
Este modelo ha sido superado puesto que en la mayoría de los casos no se cumplen
estas condiciones, hay que tener en cuenta los siguientes elementos:
Este modelo de racionalidad limitada sigue sin explicar la capacidad de decisión del sujeto dentro
de la organización, tampoco tiene en cuenta un cuadro político más global en el que entrarían
variables culturales y causales.
El modelo incremental formulado por LINDBLOM plantea que no existen criterios objetivos de
elección sino que en un proceso de elección se mezclan los intereses de los diversos actores en un
proceso de negociación en el que se intenta llegar a una solución que satisfaga al mayor nº de
individuos y de grupos posible. Llegar a un consenso es muy difícil, por tanto será necesario tener
en cuenta algunas estrategias y ppios. básicos que nos ayuden a negociar.
Apuesta por reducir las opciones, centrándose en aquellas que se parecen más a la política seguida
hasta entonces respecto al problema planteado, de tal forma que nos vayamos acercando
progresivamente al objetivo u objetivos deseados.
Si el problema tiene diversos factores será mejor aplicar nuestra tecnología sobre cada una de
estas variables que pueden introducir un cambio progresivo en la situación.
A veces, sí existe ambigüedad en la determinación de objetivos o la tecnología a utilizar no está
tampoco determinada, la participación de los actores varía a lo largo del tiempo de su ejecución, la
decisión puede ser más fruto de la casualidad que de un plan y una estrategia y esto afectará:
1.º) Un problema (P): Alternativas para una barriada con problemas de drogas
2.º) Ocasión de elección (O): que puede ir desde una reunión de expertos, hasta
un encuentro casual en un bar
3.º) Una solución (S): alguien toma la iniciativa y propone una solución, que si no
existe ninguna otra puede ser la alternativa
4.º) Los actores (A): individual o colectivo, no necesariamente institucionalizado
que decide participar, por su interés por el problema
Por tanto y puesto que conocemos que no todos los factores que influyen son objetivos, será
necesario aclarar en lo posible los objetivos, obtener la máxima información y ser capaces de
negociar entre diversos interés, la mayor parte de las veces en conflicto, con el fin de lograr los
objetivos propuestos.
CAPITULO 2: LA LÓGICA DE LA INTERVENCIÓN SOCIAL
Un ejemplo de este tipo es el lenguaje empleado en los test o cuestionarios que puede tener
distinta dificultad para unos sujetos u otros. Otro es el producido en los instrumentos de
evaluación que utilizan preguntas abiertas (entrevistas, cuestionarios. diarios, autorreflexión)
apareciendo el sesgo instrumental en la interpretación de las respuestas y en el juicio emitido por
el evaluador.
2º. sesgos es el efecto reactivo al programa: se produce por la mera existencia del
programa de evaluación que no tiene relación con el programa a evaluar. Estos efectos se
pueden producir entre los sujetos observados y en los evaluadores y puede tener su origen
en el contexto y en los instrumentos de evaluación.
Dentro de los efectos reactivos están:
3º sesgos es el efecto Halo: aparece cuando en una evaluación se utiliza jueces para
puntuar a los sujetos en una serie de rasgos de conducta. Puede ocurrir que los juicios se
emitan en base a la impresión general sobre el sujeto más que a la impresión de un rasgo
específico
4º. los límites en el instrumento de medición. En ocasiones al aplicar una escala o test, se
obtienen muchas puntuaciones que están en el máximo y en el mínimo, de forma que la
estructura del propio instrumento hace el papel de barrera en cuanto a las puntuaciones
que realmente debieran obtener los sujetos. Se produce un efecto techo: cuando el
instrumento corta las puntuaciones por arriba y el efecto suelo cuando las corta por abajo.
CAP. 3: LA EVALUACIÓN: ORIGEN Y DELIMITACIÓN CONCEPTUAL
Se denomina así por la falta de interés tanto de las autoridades como de la soc. Norteamericana
por la evaluación.
En la evaluación sólo se preocupó por los instrumentos y estrategias aplicables a los distintos
métodos evaluativos, como los test, la experimentación comparativa y la coincidencia entre
resultados-objetivos y sobre todo, se caracterizó por la falta de estudios evaluativos
Se inicia a ppios de los años 60 con el auge de la evaluación de proyectos a gran escala financiados
con fondos públicos y con una metodología evaluativa relacionada con los conceptos de utilidad y
relevancia.
Estas evaluaciones no estuvieron exentas de críticas y en 1971 se creó un Comité que recomendó
desarrollar nuevas teorías y nuevos métodos.
Se crearon nuevos métodos de evaluación que diferían radicalmente de los anteriores. Las nuevas
concepciones reconocen la necesidad de evaluar las metas, examinar las inversiones y analizar el
perfeccionamiento y la presentación de los servicios, así como determinar los resultados que se
desean –o no- obtener del programa e insistiendo, en la necesidad de enjuiciar el mérito o el valor
del objeto de la evaluación.
La característica que mejor define esta época es la teoría, por la gran cantidad de publicaciones,
elaboraciones de programas por parte de las universidades y talleres que tratan la evaluación que
se desarrollan en los años 70.Otra aportación de esta época es la metaevaluación (evaluación de
las evaluaciones) considerada como un medio para comprobar la calidad de las evaluaciones y las
normas para juzgar y guiar las evaluaciones de los programas.
En esta época aparecen algunos de los dilemas presentes hasta nuestros días: ¿quién debe
realizar la evaluación? La mayoría de los teóricos considera que quien tenga los mayores
conocimientos, destrezas, y ante todo que sean los menos subjetivos posible, por ello abogan por
un especialista en la evaluación. Esta inclinación por la evaluación especializada está en función de
tres factores:
1. TIPOS DE EVALUACIÓN
Toda evaluación está compuesta de cuatro etapas: estructura, observación, análisis y juicio. La
estructura es la etapa más amplia y más específica de la evaluación que corresponde con lo que
denominamos: el Plan de Evaluación, donde tenemos que clarificar y jerarquizar los contenidos a
evaluar ¿qué evaluar?, definir la técnicas de evaluación ¿cómo evaluar?, y establecer los criterios
de evaluación y las personas encargadas de realizarla. En definitiva planificar la evaluación.
Así la planificación se convierte en un esfuerzo reflexivo que integra los procesos y evita el carácter
restrictivo de ocupación exclusiva de resultados. Es lo que algunos autores llaman evaluación
democrática como una acción colectiva, lo cual implica planificar la evaluación a partir de una
comisión representativa de todos los implicados: profesionales y usuarios y de la Admr. Pública. Se
trata de conseguir un ppio esencial, llegar a un consenso sobre aquellos elementos importantes
que constituyen la intervención social.
Otra de las cuestiones a abordar en la planificación son los aspectos a evaluar, directamente
relacionados con las actuaciones de los profesionales, tales como: formación, cto de la materia,
organización de las actividades, motivación, tiempo dedicado, impacto sobre los usuarios, relación
profesional-usuario y resultados.
Asegurarse de que los instrumentos, la logística y el conjunto del proceso serán evaluados y
revisados periódicamente, es otra de las funciones de la comisión.
Analizar es la 3ª fase que, al igual que en cualquier tipo de investigación aplicada, es donde
estudiaremos toda la información recogida en la etapa anterior, profundizando en los cruces de
información pertinentes, estimar los resultados y efectos causados por la intervención del
programa.
Toda evaluación implica un juicio de valor por ello la última fase es el juicio de valor. En el Plan de
Evaluación se han de establecer los criterios de este juicio y quiénes serán los encargados de
realizarlo.
En definitiva, la elaboración del Plan de Evaluación es una tarea de máxima relevancia dentro de
todo el proceso de evaluación. Es donde se toman todas las decisiones que van a configurar el tipo
de evaluación. Además estructura, determina y cierra las fases de evaluación, así como los
contenidos evaluadores y parámetros sobre los que hacer un juicio de valor. Las 3 últimas fases
(observar, analizar y juzgar) corresponden a la “Aplicación del Plan de Evaluación”
FERNANDEZ BALLESTEROS (1996) define la metaevaluación como un proceso que pretende fijar
los criterios que nos permiten determinar la calidad de la evolución y una vez diseñados dichos
criterios el metaevaluador tendrá que elegir los que más se ajusten al caso concreto, y a las
necesidades y pretensiones de las organizaciones patrocinadoras.
¿Cuándo se debe realizar la metaevaluación?
a) Proporciona el plan de evaluación un perfil, lo más claro posible del programa que
se va a evaluar: Se contemplan los objetivos; las variables, metas e indicadores; los
destinatarios; área geográfica; métodos y actividades a evaluar; recursos humanos y
económicos; cuándo se ejecuta el programa
d) Recoge el plan de análisis de los resultados y el control del trabajo de campo: los
métodos estadísticos como el análisis cualitativo son importantes en este tipo de
evaluación. El plan de evaluación tiene que presentar qué plan se va a utilizar en el
análisis que de él dependerán los resultados y señalar qué tipo de análisis se puede
hacer con los datos disponibles y previstos
e) Señala las características del informe de evaluación: Los resultados presentados
serán meramente descriptivos o explican cada hecho. Los baremos en base a los
cuales de hace el juicio de valor del plan de evaluación ¿están especificados? ¿quién
realiza el juicio de valor?
¿Quién debe evaluar?
¿Cómo evaluar?
Qué técnicas pueden utilizarse para la recogida de información, cuáles tenemos disponibles, qué
tipo de pregunta se puede analizar con esta técnica, a qué tipo de conclusiones podemos llegar
con esta técnica. De entre las múltiples existentes señalamos dos:
Cuestionario de Valoración del Plan de Evaluación: referido a todos los aspectos relevantes del
mismo como: objetivos, actividades, recursos, etc.
Una vez que se dispone del juicio de los expertos, se elabora el informe de metaevaluación.
Informe que debe incluir los resultados, recomendaciones etc. A partir del mismo, los responsables
del plan de evaluación estarán en condiciones de tomar las decisiones oportunas: implementar el
plan de evaluación tal y como estaba diseñado, introducir mejoras o prescindir de él
Cuestiones centrales en la METAEVALUACIÓN
CRONBACH establece una serie de interrogantes que nos sitúan en el camino de la evaluación:
¿Los interrogantes de la evaluación formulados son los acertados, se derivan del problema
identificado y de sus relaciones causales?
¿Identifican los elementos claves de la problemática?
¿Contribuyen a reducir la incertidumbre que prioritariamente debe aclararse con la
evaluación?
¿Están presentes las voces de todos los usuarios en la formación de los interrogantes de
evaluación?
¿La metodología seleccionada es la óptima para responder a los interrogantes
seleccionados?
¿Los interrogantes guían el método escogido o se está prefiriendo el método sobre los
interrogantes?
¿Los interrogantes han sido revisados y reelaborados de acuerdo con los cambios
generados en el contexto del programa a evaluar?
¿Las conclusiones de la evaluación identifican dónde es posible realizar cambios? ¿Cuál es la
información que hay que generar y cuál no?
TEMA 5: EVALUACIÓN DIAGNÓSTICA
1.- DEFINICIÓN
Entendemos por Evaluación Diagnóstica aquella que tiene como finalidad el definir y conocer las
necesidades de un grupo o contexto social para hacerle frente. Este tipo de evaluación refleja el
proceso de definición del problema, el grupo al que afecta y la necesidad de una intervención
social.
El plan de evaluación es donde se toman todas las decisiones que van a configurar la evaluación
diagnóstica.
Hay que examinar la contextualización del objeto a evaluar con otras entidades de rango superior.
Es necesario saber qué relación guarda con otros contextos sociales próximos. Toda realidad social
se realiza en un marco o ambiente social que tiene consecuencias para su eficacia.
Tan necesario como conocer bien la realidad directa es estudiar la literatura especializada, sobre
todo en lo referido a ese contexto social, o parecido. Ello nos va a dar ideas de cómo diseñar
nuestro plan de evaluación, comparar las características comunes y así establecer paralelismos y
diferencias, pero ante todo, no cometer errores que otros han detectado, estudiado y solucionado.
A eso se lo denomina estado de la cuestión o antecedentes.
Conocido el contexto social, al ser una evaluación diagnóstico, parece que lo más aconsejable es
hacer una evaluación externa, sin que ello impida el poder ser interna.
La finalidad de una evaluación diagnóstica se plantea como meta general el conocer los distintos
problemas sociales y explicar el origen y causas de los mismos. Cabe mencionar otras finalidades,
como la de rendir cuentas sobre el gasto social de un contexto social, la de comparar dos
realidades sociales distintas, o la de evaluar un proceso de intervención social en ese contexto.
La evaluación diagnóstica puede ser tanto global o parcial. Si optamos por una global, molar u
holística todas las áreas sociales, todos los sujetos implicados en el contexto objeto de evaluación
forman parte del nivel de análisis. La evaluación ha de responder al principio de unidad que explica
la elaboración, aplicación y resultados del contexto social.
De otro lado el que sea parcial o molecular supone delimitar la evaluación diagnóstica a un
aspecto o parte de su totalidad, como puede ser la realidad económica, o centrarnos en las
necesidades básicas de la población. En este caso la evolución no contempla al contexto social
como un todo, sino que cada elemento es estudiado por separado.
La combinación de una evaluación global y parcial es la que denominamos mixta, caracterizada
por contar de partida con un conocimiento global o general del contexto social y, a través del
mismo, detectar los problemas sociales más importantes.
La evaluación implica hacer un juicio de valor, pero realizar un estudio de evaluación implica
proporcionar la información suficiente para permitir esa labor juzgadora.
Los responsables de tomar decisiones necesitan una evaluación diagnóstico que les permita
aclarar cuestiones como ¿Qué población es la más necesitada?, o ¿Qué población debería ser
objeto prioritario de intervención social?, o ¿Qué familias se encuentran en el umbral de la
pobreza?
En la evaluación diagnóstica los enfoques más adecuados para este tipo de evaluación son de
sistemas, toma de decisiones, sin objetivos y el de estudio de casos.
CAPITULO 6: LA EVALUACIÓN DE DISEÑO
1.- DEFINICIÓN
La Evaluación de Diseño es la que tiene como finalidad detectar y conocer las posibles debilidades
de un programa antes de su implementación.
La evaluación de diseño puede ayudar a no malgastar esfuerzos sin un costo elevado. Es un medio
para asegurar usos más prudentes con los escasos medios humanos y materiales disponibles así
como para ayudar, con este tipo de pre-evaluación, a conseguir intervenciones sociales
técnicamente más factibles que logren sus objetivos con mayor probabilidad.
Difícilmente podremos diseñar la evaluación sin el conocimiento previo del programa. Lo que
interesa es la familiarización con el programa. Esto nos obligará a realizar una descripción, entre
otros, de:
- El problema que intenta resolver
- Del origen del problema
- De la incidencia del problema
- De los lugares en donde se manifiesta el problema
- De los lugares donde no se produce o tiene menos intensidad el problema
- De la evolución del problema
El porqué del programa nos ayudará a conocer qué se pretende conseguir, cómo se piensa
conseguir, a quién va dirigido y, por encima de todo, dónde se piensa aplicar.
Conocer el contexto social próximo es una cuestión de máxima relevancia, ya que de él puede
depender el éxito o fracaso de la intervención social. Una cuestión muy importante en la
evaluación de diseño es lo referente al respaldo político de la intervención. Por muy eficaz y
eficiente que pueda ser el diseño de un programa sin el respaldo político de los responsables del
mismo, difícilmente podrá implementarse y, aún menos, que tenga éxito.
Conocido el problema hay que decidir sobre las opciones evaluativas: evaluación interna, externa o
coevaluación; finalidad de la evaluación; el enfoque global o parcial; evaluación inicial o procesual,
o final, o si optamos por una perspectiva cualitativa, cuantitativa o complementariedad de ambas.
En la evaluación de diseño lo más recomendable es hacer una evaluación externa, que es cuando
agentes externos al programa son quienes analizan su funcionamiento.
De igual forma es aconsejable realizar una evaluación global, molar u holística, en la que todas las
partes del programa, todos los sujetos implicados y todas las fases del desarrollo del programa
deben ser tenidos en cuenta de manera globalizadora.
El contenido de la evaluación está formado por todos y cada uno de los elementos que configuran
la intervención social:
Los objetivos: si están definidos, si hay que añadir algunos, reducir o eliminar otros, o qué
obstáculos pueden impedir el logro de los mismos
Los usuarios o beneficiarios del programa: si están claramente delimitados, si hay que
ampliar o reducir los posibles usuarios, la razón de elegir a unos y no a otros
Los recursos: si los humanos y económicos son suficientes, si tiene viabilidad económica, o
cuenta con el visto bueno de las instituciones implicadas,..
Las actividades: si están bien definidas, si se adecúan a los objetivos del programa, si están
temporalizadas, o quién realiza cada una de ellas.
En relación con los objetivos a conseguir con la evaluación de diseño, desde un punto de vista
profesional, el objetivo es determinar la idoneidad de un programa antes de su aplicación, o sea, si
la intervención social planificada se ajusta a las necesidades que pretende cubrir. En definitiva:
Estudiar la pertinencia del proyecto con la realidad social que se pretende modificar
Conocer la coherencia interna del programa en cuanto a objetivos, métodos de
intervención, duración y resultados esperados
Analizar la viabilidad de recursos económicos y humanos
Estudiar las previsiones de evaluación del programa
1.- DEFINICIÓN
2.- Recogida de información sobre los elementos clave que constituyen el programa, cómo se
aplican, cómo funcionan etc.
3.- Comparación con el programa en sus partes esenciales, cómo estaba diseñado en la teoría y
cómo funciona realmente.
La adecuada selección de cuáles son las actividades que constituyen y definen el programa.
Este tipo de evaluación puede ser visto con recelo por los profesionales implicados al considerar
que se puede cuestionar su manera de trabajar, aunque también permite realizar mejoras en los
procesos de intervención social, de manera que se puedan alcanzar niveles de calidad cada vez
mayores.
Conocer bien el programa es uno de los axiomas de este tipo de evaluación. Cuando la evaluación
de la implementación o formativa es de carácter interno, el conocimiento del programa sobra; en
el caso de optar por una evaluación externa, la realidad es bien distinta y en este caso es la
familiarización con el programa la primera tarea a realizar por los evaluadores. Según WEISS, “tan
importante como conceptualizar los resultados deseados constituye conceptualizar la naturaleza
del programa”. Lo que interesa es la familiarización con el programa y conocer cuáles son los
rasgos y actividades que caracterizan al programa.
Una vez familiarizado con el programa se hace necesario conocer el contexto social en el que se
está aplicando la intervención social. El contexto próximo es el de la Administración que financia y
lleva a cabo el programa, pero también es necesario abrir el marco de actuación, pues no en pocos
programas las condiciones socioeconómicas del entorno entran en conflicto con aquello que
pretende el propio programa.
ESTRUCTURA DEL PLAN DE EVALUACIÓN DE LA IMPLEMENTACIÓN
Comisión de evaluación
OBJETIVOS DE LA EVALUACIÓN
CONTENIDOS A EVALUAR
- Los responsables de la aplicación
- El desarrollo del plan de intervención
- Grado de aplicación del programa
- Calidad de las prácticas de intervención
- La dirección de los resultados
- Cambios realizados respecto a lo
planificado
ENFOQUE O MODELO:
- Objetivos basados en metas
-De revisión profesional
- Toma de decisión
- Sin objetivos
- Estudio de casos
- Otros
El grupo focal (focus group en inglés) es una técnica cualitativa de estudio de las opiniones
o actitudes de un público, utilizada en ciencias sociales y en estudios comerciales. Consiste
en la reunión de un grupo de personas, entre 6 y 12, con un moderador encargado de hacer
preguntas y dirigir la discusión. Su labor es la de encauzar la discusión para que no se aleje
del tema de estudio y, de este modo, da a la técnica su nombre en inglés ("grupo con
foco"). Las preguntas son respondidas por la interacción del grupo en una dinámica en que
los participantes se sienten cómodos y libres de hablar y comentar sus opiniones
Conocido el programa y el contexto social en el que se está aplicando, debemos decidir sobre cada
una de las siguientes opciones evaluativas: evaluación interna, externa o coevaluación; finalidad de
la evaluación; enfoque global o parcial; si es una evaluación inicial o procesual, o final, o si
optamos por una perspectiva cualitativa, cuantitativa, o complementariedad de ambas.
Hay que recordar que por coevaluación se entiende la combinación de la evaluación externa e
interna.
La finalidad última de la evaluación de la implementación debe ser la de realizar una evaluación
formativa, en el sentido de que contribuya al perfeccionamiento del programa en desarrollo. Se
realiza a lo largo de la vida del programa y se va constatando la validez de todos los componentes
del proceso con respecto al logro de los objetivos que se pretenden.
Entre las características básicas de la evaluación formativa podemos destacar que es:
Científica: analiza todos los elementos del proceso como parte de un sistema, con el fin de
determinar cuál es el papel de cada uno de ellos dentro de aquel
Un proceso de investigación que se realiza a lo largo de todo el desarrollo del programa que
posibilita su conocimiento, mediante la recogida de información y adecuación al contexto al
que se aplica.
Una interacción dialéctica* entre todos los elementos del programa (profesionales,
recursos, actividades y usuarios).
Ante una evaluación de la implementación parece que lo más razonable sería optar por una
evaluación global, molar u holística en la que todas las partes, todos los sujetos implicados y todas
las fases del desarrollo del programa deben ser tenidos en cuenta de manera global.
No debemos olvidar que debe ser el objeto de estudio el que determine el tipo de programa a
evaluar. Si optamos por una evaluación externa y global, la perspectiva cuantitativa puede ser la
más idónea, y se caracteriza por:
Enfoque basado en objetivos (o en metas). Parte del análisis de los objetivos formulados y
comprueba si están siendo alcanzados. Si no existe discrepancia entre objetivos formulados
y resultados obtenidos, la implementación está siendo un éxito. Este enfoque tiene en
cuenta la productividad y la responsabilidad, sin preocuparse por la eficiencia.
El enfoque que prescinde de los objetivos. Consiste en que el evaluador no sólo no tiene
que basar su evaluación en los objetivos del programa, sino que debe procurar evitar
deliberadamente informarse sobre ellos con el fin de que no le lleven a sesgos
tendenciosos. La evaluación sin objetivos debe contemplarse en el contexto de ver si se
cubren las necesidades sociales objeto de la intervención social.
Enfoque de revisión profesional. Puede ser de gran utilidad cuando se realice la evaluación
global del programa. Esto supone que son los compañeros de profesión los que juzgan el
trabajo de sus colegas.
Estudio de casos (o negociación). Se centra en la revisión de las partes de las que consta el
programa, utilizando la percepción de los sujetos que participan en él y el propio
evaluador. Pretende mejorar la comprensión que tienen los destinatarios, presentándole
cómo lo ven otro.
CAPÍTULO 8: LA EVALUACIÓN DE RESULTADOS
1.- DEFINICIÓN
Lo que sí toma una relevancia especial en la evaluación de resultados es conocer el contexto social
en el que se desarrolla la intervención social. Para HELEN SIMONA la investigación naturalista
supone el compromiso de estudiar los programas en sus contextos sociales; conocer y controlar
todas y cada una de las variables que pueden incidir y modificar el problema social que hemos
intervenido es tarea prioritaria del evaluador. WEISS insiste en la necesidad de utilizar diseños de
evaluación que controlen las variables contextuales y recomienda los diseños, como el de
remendado, para controlar los posibles sesgos de la evaluación de resultados.
En el análisis del contexto social tampoco podemos olvidar el tema de la influencia política. ¿Al
servicio de quién estaba la evaluación? era la pregunta que se hacían los teóricos de la
evaluación:
HOUSE afirma que la evaluación forma parte de los procesos políticos de nuestra sociedad.
CRONBACH sostiene que una teoría de la evaluación debe ser tanto una teoría de la
evaluación política como una teoría del modo de construir el conocimiento.
En definitiva se destaca la idea de la evaluación como parte de los procesos políticos de la
sociedad. En este sentido WEISS considera que la evaluación es una tarea racional en un contexto
político.
La finalidad última de la evaluación de resultados puede ser la de rendir cuentas (Accountability), o
la de hacer una evaluación sumativa. El concepto de “accountability” se refiere a criterios de
eficacia social.
Cuando la finalidad es la de realizar una evaluación sumativa hay que recordar que esta evaluación
sirve para adaptar, continuar, aplicar o rechazar un programa. Cumple 3 grandes funciones:
atestiguar el logro de los objetivos, certificar el estado y capacidad del programa, y comprobar su
vigencia.
En el caso de la evaluación de resultados parece que lo más sensato es realizar una evaluación
global, molar u holística, en la que todas las partes, todos los sujetos implicados y todas las fases
del desarrollo del programa deben ser tenidos en cuenta de manera global, ya que todos han
incidido en el resultado final obtenido. La evaluación ha de responder al principio de unidad, que
explica la elaboración, aplicación y resultados del programa.
WEISS, como defensora de la investigación evaluativa, dice que su objetivo es medir los efectos de
un programa por comparación con las metas que se propuso alcanzar, a fin de contribuir a la toma
de decisiones subsiguientes acerca del programa y para mejorar la programación futura.
Los criterios que mejor definen los objetivos a conseguir en la evaluación de resultados son: el
logro de los objetivos, el valor social, la utilidad, la pertinencia y el nivel de satisfacción de los
usuarios.
Como señala WEISS, los objetivos a cubrir con la evaluación pueden ser, entre otros:
No obstante, existen otros objetivos que se pueden pretender en una evaluación de resultados:
Entre los posibles enfoques a utilizar en la evaluación de resultados, el de sistemas es el que mejor
responde a las exigencias de la evaluación de resultados.
Enfoque de análisis de sistemas
Se centra en la medida de los resultados del programa. El objetivo es medir la eficiencia del
programa. Los datos que se utilizan en este enfoque son cuantitativos siendo su objetivo central
ser una evaluación lo más objetiva posible.
SUCHMAN,
La evaluación es un tipo de investigación aplicada y como tal debe seguir la lógica del método
científico, siendo el método apropiado para ello el experimental, porque permite detectar
relaciones causales entre el programa y los resultados.
SUCHMAN añade como objetivos de una evaluación: analizar los motivos de éxito y fracaso de
programas, resaltar la filosofía base de la intervención que ha tenido éxito, o la redefinición de los
medios necesarios para lograr los objetivos.
SUCHMAN afirma que el proyecto de evaluación debe ser formulado con series de hipótesis que
afirmen que las actividades A, B y C producirán los resultados X, Y y Z.
ESCOTET
Centra su modelo en 3 elementos que configuran la evaluación: entrada, operaciones y productos.
Con la combinación de los tres criterios, este autor construye un modelo de evaluación dentro del
enfoque de análisis de sistemas.
Bajo este modelo la evaluación es el proceso de retroinformación para la mejora del programa que
permite recoger datos empíricos de la relación entre las entradas, los procesos y los resultados del
mismo.
STUFFLEBEAM
Propone el modelo CIPP. La novedad de este modelo, respecto a los anteriores, radica en la
introducción de un nuevo componente: el contexto, es decir, el medio en que se encuentra
inmerso el programa de intervención social.
Las últimas consideraciones que incluye el plan de evaluación de resultados es lo referente a las
decisiones metodológicas. Tan sólo hacer mención a los resultados, tanto a su presentación, como
a quién irán dirigidos.
Por último, STUFFLEBEAM señala que una evaluación de calidad debe cumplir las características:
Útil: sirve para un mejor cto de la realidad social y mejorar la intervención social
4. Perspectiva 5. Enfoque
- Cualitativa 1. Racionalista
- Cuantitativa 2. Naturalista
- Complementariedad
Tanto la evaluación de los programas como de los centros o el conjunto de los s.s. tienen tres
niveles de análisis: el global, el parcial y el mixto
Considera la evaluación como un todo en el que todas las partes, todos los sujetos implicados y
todas las fases del desarrollo de un programa de deben ser tenidas en cuenta de manera global. Se
basa en los siguientes supuestos:
Que un mejor entendimiento del programa o de los s.s. podría mejorar las la
intervención
Que un estudio global puede ayudar a los profesionales a identificar los efectos que
requieran atención de departamento, servicios o de la organización entera.
Así la función de organización, que tiene por objeto la ordenación y coordinación, ha de responder
ante todo a un ppio que constituye la esencia de la organización: el ppio de unidad.
La evaluación global puede definirse, desde un punto de vista más novedoso al aplicar el modelo
ecológico al estudio y comprensión de las organizaciones.
El modelo ecológico aplicado a los s.s. los considera como un ecosistema: “conjunto de organismos
de un ambiente determinado” y basa la evaluación en los siguientes postulados:
El estudio de los papeles que desempeñan los profesionales, los usuarios y los
responsables, genera una especial perspectiva de interpretación de la realidad
Existen unas reglas de juego, unas normas que se negocian o se imponen en las
estructuras formal e informal
Existen unas conexiones con el medio exterior que condicionan la dinámica que se
produce en los s.s
Ventajas:
Aborda la realidad tal como es y admite que los comportamientos, actitudes y relaciones
de un elemento-subsistema- vienen condicionados por aquellos otros en cuyo marco se
inscriben
Permite apreciar las relaciones entre elementos
Permite constatar los desajustes, desfases y faltas de coordinación del sistema, así como
las coherencias entre los elementos.
Inconvenientes:
La metodología para su estudio es muy compleja ya que tiene que ser capaz de
incorporar la red de relaciones y encontrar procedimientos de análisis de datos que
puedan enfrentar idéntica tarea.
Supone incorporar gran cantidad de variables y a la vez cada variable necesita una
amplia red de indicadores. Esto supone una acumulación prácticamente inmanejable
de datos
Tb tenemos que tener en cuenta que supone la participación de todos los implicados,
profesionales de todos los servicios, directivos, beneficiarios, lo cual es una tarea ardua y
difícil
Ventajas:
Permite una visión más detallada y compleja, incluso más fiable y válida porque al ser
menos variables las que se manejan permite medirlas mejor
Inconvenientes:
Hace perder de vista la consideración del servicio como un ecosistema que permite
explicar y dar sentido al funcionamiento gral y a los procesos que desarrollan la
actividad
Caracterizado por contar de partida con un cto global o gral del programa o de los s.s. y a través
del mismo detectar-función diagnóstica de la evaluación- los niveles, funciones, actitudes,
relaciones o comportamientos que parecen poner de manifiesto dificultades, problemas, conflictos
e irregularidades. Un determinado estudio de las dificultades permite, tras decidir un orden de
prioridades, la toma de decisiones de mejora y la posterior evaluación parcial, localizada en tales
aspectos, más detallada y profunda que la global.
4. PERSPECTIVA EN LA QUE SE ENMARCA LA EVALUACIÓN
KHUN define paradigma como: “un conjunto de asunciones interrelacionadas acerca del mundo
social que proporciona un marco filosófico y conceptual para el estudio organizado del mundo
social”
Caracterizada por:
CRITICAS:
Características definitorias:
Los efectos secundarios y a largo plazo son tanto o más significativos que los
inmediatos y planificados
La mayoría de los autores consideran que ambas perspectivas son necesarias y que pueden
funcionar conjunta y complementariamente. Señalan las ventajas del empleo de ambos métodos:
Nos brindan una percepción que ninguno de los dos podría conseguir por
separado
Cabe señalar los obstáculos que surgen en el empleo conjunto de métodos cualitativos y
cuantitativos destacando:
Pero estos obstáculos no son insalvables. Existen todas las razones para emplearlos
conjuntamente con objeto de satisfacer las exigencias de la investigación, de la evaluación del
modo más eficaz posible.
5.ENFOQUES DE LA EVALUACIÓN
La revisión profesional supone que los cirujanos, profesores o abogados juzguen el trabajo de
sus colegas. Por regla gral, la participación en la revisión se circunscribe a los compañeros de
profesión.
Estudio de casos (o negociación) se centra en la revisión de las partes de las que consta
el programa, utilizando la percepción de los sujetos que participan en él y del propio
evaluador. Pretende mejorar la comprensión que tienen los destinatarios,
presentándole cómo lo ven otros.
Son muchas las decisiones a tomar a la hora de evaluar un programa, un centro de s.s. o un
centro especializado. Decisiones condicionadas en la mayoría de los casos, por dos cuestiones: