Está en la página 1de 9

PLANIFICACION Y EVALUACION DE SERVICIOS SOCIALES

GRADO EN TRABAJO SOCIAL UNED CANTABRIA



Pilar Mosquera Conde Pgina 1

Capitulo 9
OPCIONES EVALUATIVAS A CONSIDERAR EN LA EVALUACIN DE LA
INTERVENCIN SOCIAL

INTRODUCCION
Cuando se decide evaluar la intervencin social, bien sea un programa o una
organizacin social, hay que adoptar una serie de decisiones evaluativos que
se pueden agrupar en cinco bloques:
1) Modalidad de evaluacin,
2) finalidad de la misma,
3) enfoque a utilizar,
4) perspectiva de anlisis y, finalmente,
5) modelo de evaluacin.
Cada uno de estos bloques implica una serie de opciones que son las que van
configurando el tipo de evaluacin que se desea.
Cuadro 1 Pag. 176

1. ESTAMENTO DEL QUE PARTE LA DECISION DE EVALUAR

LA DECISION DE QUIEN REALIZA LA EVALUACION
La decisin de evaluar un programa social la pueden tomar:
- Administracin de quien depende el programa
- Equipo directivo del programa
- Profesionales
- Usuarios
- Investigadores privados.

Segn su pertenencia o no al programa, la evaluacin puede partir de:
A. Del propio programa. Para:
Mejorar la actividad del programa
Solucionar un problema
Aclara o profundizar en una situacin
Otros ms personales
B. De instancias superiores al Programa
Imposicin de decisiones para control
Contrastar eficacia de un programa
Mejora institucional
Rendir cuentas
C. De investigadores que pretenden realizar el estudio.
Privados, para tesis doctoral investigacin.

Dependiendo del estamento que decide evaluar y su implicacin o no en el
programa, hay tres tipos de evaluacin:
1) Interna
2) Externa
3) Mixta coevaluacin.




PLANIFICACION Y EVALUACION DE SERVICIOS SOCIALES
GRADO EN TRABAJO SOCIAL UNED CANTABRIA

Pilar Mosquera Conde Pgina 2

1.1 EVALUACION INTERNA (La realizan los implicados)
AUTOEVALUACION INSTITUCIONAL.
El programa se analiza a s mismo para:
- Comprobar si se est haciendo lo que se propuso
- Verificar si se est consiguiendo lo que se buscaba.
Problemas que pueden surgir:
- La resistencia de algunos profesionales a ser observados o
ser objeto de evaluacin
- El carcter individualista de algunos profesionales
- La falta de motivacin profesional
- La carencia de tiempo
- Falta de credibilidad
- Retraso del momento preciso
- Ocultacin de los problemas sustantivos
- Impaciencia por obtener resultados
- Miedo al poder punitivo de la evaluacin

Criterios generales sobre Ventajas e Inconvenientes:
1) Falta de objetividad.
2) El conocimiento y comprensin a evaluar y de los problemas ha de
ser mxima.
3) El peligro de la falta de distancia emocional y el compromiso de los
implicados en convertirlo en autojustificacin.
4) Puede servir para la autojustificacin, para reforzar la mediocridad,
ms que para promover el cambio necesario.
5) Si hay una buena disposicin de los implicados,y hay una libre
disposicin a la evaluacin, evita rechazos, malos entendidos y
puede mejorar el programa.

Las ventajas pueden superar a los inconvenientes:
- Incidir en la mejora de la profesionalidad
- La capacidad que le da a los programas para resolver sus
problemas
- La vala y fiabilidad de los datos aportados y la superior
implicacin del personal en las decisiones de mejora.
- Supone un anlisis y reflexin sobre la intervencin social.
- Puede considerarse como un proceso de investigacin en
la accin.

1.2 EVALUACION EXTERNA ( La realizan evaluadores externos)

Agentes externos al programa evalan su funcionamiento.
1 Puede ser promovida por los responsables como consecuencia del
deseo de acreditarse, recibir informacin tcnica y rigurosa sobre el estado
del programa.
2 Puede pretender la comprobacin de los grados de cumplimiento, el
conocimiento de la situacin, el nivel de logro conseguido.
Ventajas:
- Objetividad.

PLANIFICACION Y EVALUACION DE SERVICIOS SOCIALES
GRADO EN TRABAJO SOCIAL UNED CANTABRIA

Pilar Mosquera Conde Pgina 3

Inconvenientes:
- Mecanismo de control a los ojos de los profesionales
- Presiones para conseguir informacin rpida y sesgada
- Se exija informacin en formas y momentos inoportunos
- Se condiciona al observador a que ofrezca informacin rpida y
sesgada, con un sentido determinada.
- Se utiliza esa informacin recibida del evaluador de forma partidista,
arbitraria e interesada.
- Se pretende dirigir la evaluacin para que llegue a lugares, personas
o situaciones que interesan.

1.3 Evaluacin MIXTA O COEVALUACION
Cotejar los resultados de la e. interna y externa.
Conjuga los intereses de la externa o interna, pero su implantacin plantea
los inconvenientes de ambas y el coste de tiempo y recursos

2. FINALIDAD DE LA EVALUACION ( Para qu evaluar )
Objetivos generales:
2.1 Rendir cuentas a la sociedad ( Control )
Evaluacin coste/eficacia.
Los profesionales han sido considerados algunas veces como responsables
absolutos de los resultados de un programa. Falso, su contribucin es slo
uno de los factores.
John Elliot : Centra el proceso en la propia institucin.

Social
Tipos Econmica
Profesional

Aceptacin por la institucin de la responsabilidad de evaluarse a s
misma

2.2 Comparar programas sociales
Compara dos o ms programas de intervencin social. Mtodo comparado.
Proporciona una mirada no egocntrica y ensea cmo la intervencin
pblica va cambiando para hacer frente a problemas, el tipo de respuesta
dada y qu problemas se han encontrado.
Ventajas:
- Permite entender situaciones en diferentes contextos y
detectar soluciones y nuevas perspectivas.
Puede ser una herramienta til en la evaluacin de programas sociales con
el objeto de comparar procesos o resultados.

2.3 Conocer la evolucin de la intervencin (E. Formativa)
Contribuye al perfeccionamiento de un programa en desarrollo que se
realiza a lo largo de un proceso de implementacin y a travs del que se va
constatando la validez de todos los componentes del proceso con respecto
al logro de los objetivos que se pretenden.
PLANIFICACION Y EVALUACION DE SERVICIOS SOCIALES
GRADO EN TRABAJO SOCIAL UNED CANTABRIA

Pilar Mosquera Conde Pgina 4

Finalidad: Ir tomando decisiones, de forma fundamentada, necesarias para
readaptar los componentes del programa o de la intervencin social a los
objetivos o metas que inicialmente se fijaron.
Caractersticas:
Procesual: Forma parte intrnseca del programa
Integral: Abarca a todos los elementos del programa
Sistemtica: Es un proceso riguroso
Estructurante: Permite ir ajustndose a las necesidades del
momento
Progresiva: Tiene en cuenta los logros conseguidos
Innovadora: Permite constantemente la toma de decisiones
nuevas
Cientfica: Analiza todos los elementos del proceso como
parte de un sistema con el fin de determinar cul es el papel
de cada uno de ellos dentro del proceso.

2.4 Conocer los resultados finales de la intervencin social
( E. Sumativa )
Comprobar los resultados de un programa. Es complementaria a la
formativa.
Sirve para adaptar, continuar, aplicar o rechazar un programa de
intervencin social.
Funciones:
1. Atestiguar el logro de los objetivos
2. Certificar el estado
3. Certificar la capacidad de la institucin encargada de su
aplicacin

3. NIVEL DE ANLISIS EN LA EVALUACION DE LOS SERVICIOS
SOCIALES:

Hay 2 NIVELES:

3.1 Nivel global u holstico:
Considera la evaluacin como un todo en el que todas las partes, todos los
sujetos implicados y todas las fases del desarrollo de un programa deben ser
tenidas en cuenta de manera globalizadora.
Supuestos: Que
Un mejor entendimiento del programa podra mejorar las oportunidades
y experiencias que se prevn en la intervencin.
Estudios y revisiones sistemticas permiten a la institucin responsable
determinar y producir la evidencia de hasta qu punto estn
implantando la calidad deseada.
Un estudio global puede ayudar a los profesionales a identificar los
efectos que requieran atencin de departamento, servicios o de la
organizacin entera.
Puede definirse desde la aplicacin del modelo ecolgico al estudio y
comprensin de las organizaciones. Concepcin sistmica de la evaluacin
segn Sabirn Sierra.
Ecosistema: conjunto de organismos en un ambiente determinado
PLANIFICACION Y EVALUACION DE SERVICIOS SOCIALES
GRADO EN TRABAJO SOCIAL UNED CANTABRIA

Pilar Mosquera Conde Pgina 5

Postulados del modelo ecolgico:
Todos los elementos del ecosistema son iguales
El contexto es determinante
Atiende a procesos que se desarrollan en una comunidad
El ser de la institucin es lo que importa frente al debe ser
Estudia los papeles que desempean los profesionales, usuarios y
responsables para interpretar la realidad
Hay normas y reglas que se negocian o imponen
Se crean indicadores de situacin en la institucin
Hay conexiones con el medio exterior que condicionan la dinmica que
se produce en los servicios sociales.

Ventajas del anlisis global:
Aborda la realidad tal como es, con toda su riqueza y complejidad.
Es el nico que permite apreciar las relaciones entre elementos
Posibilita constatar las congruencias e incongruencias del sistema, los
desajustes, desfases y faltas de coordinacin, as como la coherencia
entre los elementos.
Inconvenientes del anlisis global:
Metodologa compleja
Incorporar gran cantidad de variables
Cada variable necesita una amplia red de indicadores para ganar en
validez
Dificultad para conseguir de las fuentes de los datos , la dedicacin y el
esfuerzo necesarios para contestarlos

3.2 Nivel de anlisis parcial o molecular:
Supone delimitar la evaluacin del plan o programa a un aspecto o parte de
su totalidad: usuarios, profesionales, la intervencin de un aspecto, redes de
informacin.
Inconvenientes:
Existe el peligro de hacer perder la referencia integradora y explicativa
de todo el proceso.
Hace perder de vista la consideracin del servicio como un ecosistema
que permite explicar y dar contenido al funcionamiento genera y a los
procesos que desarrollan la actividad.
Desde un punto de vista sistemtico no debe olvidarse que
descontextualiza el aspecto evaluado subsistema del sistema total, lo
que no permite comprender el porqu de determinados fenmenos
Ventajas:
Permite una visin ms detallada y completa, incluso ms fiable y vlida
por una mejor medida de las variables.

Inconvenientes:
Peligro de perder la referencia integradora y explicativa de todo el
proceso
Hace perder de vista la consideracin del servicio como un ecosistema
Descontextualiza el aspecto evaluado

PLANIFICACION Y EVALUACION DE SERVICIOS SOCIALES
GRADO EN TRABAJO SOCIAL UNED CANTABRIA

Pilar Mosquera Conde Pgina 6

3.3. Nivel de anlisis Mixto
Cuenta de partida con un planteamiento global para detectar niveles,
funciones actitudes, relaciones pueden poner de manifiesto dificultades,
problemas o conflictos.
A partir de un estudio de dificultades pueden decidir un orden de prioridades,
la toma de decisiones de mejora y la posterior evaluacin parcial, localizada en
esos aspectos, ms detallada y profunda que la global.

4. PERSPECTIVA EN LA QUE SE ENMARCA LA EVALUACIN
4.1 Cuantitativa:
Preocupacin por el control de las variables y la medida de los resultados
expresados numricamente.
Se fundamenta en la psicologa y en las ciencias exactas.
Caractersticas:
Objetividad en la evaluacin
nfasis casi exclusivo en los resultados
Mtodo hipottico-deductivo. Verificacin experimental de las
hiptesis.
Observacin rigurosa de la metodologa estadstica
Cuantificacin de las observaciones
Requiere la permanencia del proyecto durante un tiempo prolongado
Bsqueda de informacin cuantitativa mediante medios e
instrumentos objetivos
Da mayor importancia a las medias que a las diferencias individuales
y a medir de forma inmediata lo que parece ms cuantificable, no
rastrea los efectos a largo plazo.
Debe preocuparse del grado en que se han alcanzado los objetivos.
Los datos tienen una utilidad especfica para un destinatario
determinado: responsable del diseo o planificacin.
Crticas:
La naturaleza de los fenmenos sociales aconseja un enfoque
cualitativo porque su complejidad no puede ser captada totalmente
por los diseos experimentales.
Las explicaciones numricas no dejan paso a explicacin causal de
la realidad
La atribucin numrica a realidades complejas supone riesgos
importantes.
1. Proceso codificador.
Se parcela una realidad nica y se califica numricamente un
hecho cualitativo. Subjetividad del calificador.
2. Proceso decodificador.
Se atribuye significado a los nmeros asignados por el
calificador.
Utilizar pautas cuantificadas como criterio de comparacin resulta
arbitrario y no es adecuado comparar puntuaciones. Es relativo.
El investigador debe descifrar lo que dicen los nmeros. Comprender
las claves para realizar un correcto descifrado. Sin claves se llega a
conjeturas.
PLANIFICACION Y EVALUACION DE SERVICIOS SOCIALES
GRADO EN TRABAJO SOCIAL UNED CANTABRIA

Pilar Mosquera Conde Pgina 7

Los nmeros de la evaluacin descontextualiza el dato y le priva de
significado.

4.2 Cualitativa:
Su inters radica en la descripcin de los hechos observados para
interpretarlos en el contexto global en el que se producen, con el fin de
explicar los fenmenos.
Se fundamenta en la Etnografa y la Sociologa.

Caractersticas:
Objetividad en la ciencia es relativa. La ciencia pretende comprender la
realidad y la evaluacin entender y valorar los procesos y resultados de
un programa.
Comprender una situacin donde se interacta con intencionalidad y
significados subjetivos requiere tener en cuenta las diferentes
posiciones, opiniones e ideologas.
La evaluacin debe comprenderse en funcin de los valores.
El objetivo de la evaluacin no son slo conductas manifiestas, ni
resultados a corto plazo. Los efectos secundarios son tanto o ms
significativos que los inmediatos y planificados.
El campo de los productos de intervencin debe ampliarse.
La evaluacin centrada en los procesos intenta capturar la singularidad
de las situaciones concretas, las caractersticas particulares que definen
una situacin.
La evaluacin cualitativa requiere metodologa sensible a las
diferencias, a los acontecimientos imprevistos, al cambio y al progreso, a
las manifestaciones observables y a los significados latentes.
Usa la metodologa etnolgica de investigacin de campo.
Atiende a lo singular, requiere un diseo flexible que permita el enfoque
progresivo en reas que parecen ms significativas en el curso de la
investigacin.
Propsito: comprender el objeto de estudio comprendiendo las
aspiraciones, intereses e interpretaciones de los que interactan para
ofrecer informacin a cada uno de los participantes para entender,
interpretar e intervenir del modo ms adecuado.
Debe respetar el derecho a la intimidad de todos los que participan en la
evaluacin.
4.3 Complementariedad de perspectivas.
Las dos perspectivas se complementan y se sealan las ventajas del
empleo simultneo de ambos.
Ventajas:
1. Investigacin evaluativa tiene propsitos mltiples que han de
ser atendidos bajo las condiciones ms exigentes. Diversidad
de mtodos.
2. Empleando los dos mtodos pueden vigorizarse para
mejorarlo que puede aportar cada uno por separado.
3. Ningn mtodo est libre de prejuicios. Hay que emplear
mltiples tcnicas.

PLANIFICACION Y EVALUACION DE SERVICIOS SOCIALES
GRADO EN TRABAJO SOCIAL UNED CANTABRIA

Pilar Mosquera Conde Pgina 8

Inconvenientes:
1. Puede resultar caro
2. Supone demasiado tiempo
3. Los investigadores pueden no tener adiestramiento suficiente en
ambos tipos de mtodos para utilizarlos.
4. La moda o adhesin a la forma dialctica del debate.
Estos obstculos no son insalvables.

5. ENFOQUE DE LA EVALUACION

Enfoques o modelos tiles para la evaluacin de programas de intervencin
social:

Objetivos de comportamiento o en metas- Tyler
Parte del anlisis de los objetivos formulados por los responsables y
comprueba si se han alcanzado.
xito: no hay discrepancia entre lo formulados y el resultado.
Tiene en cuenta la productividad y responsabilidad. No la eficiencia.
Utilizado en Educacin y Administraciones Pblicas.

Sin referencia a objetivos. Scriven
Se basa en el anlisis de las necesidades del usuario
Su objetivo es reducir los efectos de los sesgos en la evaluacin.
El evaluador debe investigar todos los resultados.
Es el menos utilizado.
necesidad como fundamento de la evaluacin.
Establecer la validez objetiva de las necesidades proporciona al
evaluador una fuente autorizada de normas.
Intermedio entre el experimental y cualitativo

Enfoque de Toma de Decisiones - como informacin para la
adopcin de decisiones
Tiene que estructurarse a partir de las decisiones reales que hay que
tomar por los responsables.
Stuffelbeam 1987
La evaluacin es el proceso de delimitar, obtener y proporcionar
informacin til para posibles decisiones alternativas.

1. Homeostasia
Define 3 mbitos de decisin: 2. Incrementalismo
3. Neomovilismo

1. planificacin
Cuatro tipos de situacin: 2. estructuracin
3. implementacin
4. reciclado

Delimitacin
Tres fases de la evaluacin: Obtencin
Comunicacin
PLANIFICACION Y EVALUACION DE SERVICIOS SOCIALES
GRADO EN TRABAJO SOCIAL UNED CANTABRIA

Pilar Mosquera Conde Pgina 9

Contexto
Entrada
Cuatro tipos de evaluacin: Proceso
Producto

Anlisis de sistemas
Medida de los resultados, se basa en la eficiencia del programa.
Los datos que se utilizan son cuantitativos.
Las medidas de los resultados se relacionan con los procesos mediante
anlisis de correlacin y otras tcnicas estadsticas.
Requiere un buen modelo experimental y su objetivo fundamental es ser
una evaluacin lo ms objetiva posible, firme cuyos resultados no varen
aunque se cambie de evaluadores.
Problemas:
Proporciona pruebas vlidas y fiables pero caen en un reduccionismo
excesivo que no concuerda con la complejidad humana.

Revisin profesional ( acreditacin )
Evaluar la preparacin profesional.
Profesionales juzgan el trabajo de sus colegas.
La participacin de la revisin es sobre los compaeros de profesin.
Utilidad:
Evaluacin de de diseos de programas de intervencin social.
Evaluacin de la implementacin. Evaluacin global.
Ejemplos: departamentos o unidades de universidades
Tribunales de especializacin de las especialidades mdicas.
La fuente de normas y criterios son los profesionales mismos.

Estudio de casos ( o negociacin )
Revisin de las partes de que consta el programa, utilizando la
percepcin de las personas que participan en l y el propio evaluador.
Pretende mejorar la comprensin que tienen los destinatarios,
presentndole cmo lo ven los otros.( House 1994)