Propuesta de consultora sobre el impacto social y laboral en los estudiantes graduados
de los Diplomados y Cursos Modulares Tcnicos Vocacionales, impartidos en las sedes
del Complejo Educativo Catlico Jess Obrero e Instituto Catlico de Oriente. (Oferta tcnica y econmica)
Presentada por: Licda. Marcela Escobar de Melgar
Introduccin
Evaluar constituye un proceso sistemtico, metdico y neutral que hace posible el conocimiento de los efectos de un programa, relacionndolos con las metas propuestas y los recursos movilizados. Asimismo, se podra decir que la evaluacin es un proceso que facilita la identificacin, la recoleccin y la interpretacin de informaciones tiles a los encargados de tomar decisiones y a los responsables de la ejecucin y gestin de los programas. Bajo la denominacin de evaluacin de impacto se entiende el proceso evaluatorio orientado a medir los resultados de las intervenciones, en cantidad, calidad y extensin segn las reglas preestablecidas. La medida de los resultados, caracterstica principal de la evaluacin de impacto, permite comparar el grado de realizacin alcanzado con el grado de realizacin deseado. Compara, de esta forma, la planeacin con el resultado de la ejecucin. La evaluacin de impacto abarca todos los efectos secundarios a la planeacin y a la ejecucin: especficos y globales; buscados (segn los objetivos) o no; positivos, negativos o neutros; directos o indirectos (la puesta en marcha del programa puede generar por s misma efectos sobre los directamente involucrados, hasta la sociedad toda). En base a los objetivos planteados por la Corporacin Marista en los trminos de referencia proporcionados de cara a la evaluacin del programa educativo impartido en las sedes Ateos y San Miguel, se ve la necesidad de garantizar una medicin precisa y realista que fomente la ejecucin de directrices correctas, el seguimiento de lo que ya est siendo exitoso y la implementacin de nuevas iniciativas de capacitacin segn la demanda del mercado laboral en las zonas aledaas a dichas sedes con el fin de mejorar la calidad de vida de los y las estudiantes que acceden al programa. El desarrollo del programa presupone una fuerte presencia institucional, en un contexto socioeconmico favorable y con lineamientos consistentes orientados al desarrollo de recursos econmicos y humanos y con polticas sociales claras contra la pobreza y la exclusin. Este punto obliga a clarificar los objetivos de intervencin. Ya desde mediados de los noventas, organismos internacionales como la Organizacin Internacional del Trabajo (OIT) y la Comisin Econmica para Amrica Latina y el Caribe (CEPAL) han propuesto e implementado metodologas para la medicin del impacto de programas de capacitacin para jvenes en el contexto de la ayuda internacional para el desarrollo en Amrica Latina. En Amrica Latina y el Caribe, se remarc desde los inicios, la especial conveniencia de realizar evaluaciones para poder entender porqu algunos programas son exitosos y otros no y de este modo tener elementos para hacer recomendaciones que permitan remediarlos y hacerlos ms efectivos. Las evaluaciones y auditoras externas o internas fueron conducidas en la Regin por los organismos centrales del Proyecto, por evaluadores externos y/o por representantes de las instituciones financiadoras. En este sentido, se han intentado evaluaciones cuantitativas, cualitativas y mixtas. Entre las primeras, se disearon modelos cuasi experimentales y realmente experimentales; ambos compuestos por grupos participantes y grupos de control con iguales atributos y caractersticas (edad, gnero, raza, instruccin, experiencia en el mercado de trabajo), que se comparan mediante mtodos analticos. La forma de integrar los grupos experimentales verdaderos ha aparejado dificultades casi insalvables, entre los evaluadores, algunas de claro contenido tico, dado que proponer un grupo control puro, implica de antemano dejar fuera de los beneficios de la capacitacin a algunos jvenes igualmente carenciados. Ante este dilema, el grupo control se cubri con voluntarios y ms tarde con una tercera opcin metodolgica que consiste en abrir una inscripcin mayor que los nichos de capacitacin, y en forma aleatoria, configurar el grupo beneficiario y el grupo control. Asimismo, y en un mecanismo ms aceptable desde el punto de vista tico, se propuso constituir el grupo de control con aquellos jvenes inscritos en el programa y que por alguna razn personal no hicieron el curso y la capacitacin. Recientemente se present otra alternativa, consistente en seleccionar a los jvenes del grupo de control por avecinamiento (cercana de lugar de residencia) a los beneficiarios, que estara mucho ms acorde a los que se desea realizar en esta consultora.
1. Propuesta tcnica
1.1. Metodologa propuesta: generalidades El modelo que se propone debe nutrirse de observaciones de los programas, junto a entrevistas y encuestas en profundidad, a los participantes (ejecutores, beneficiarios, empresas) al igual que de relatos de la vida cotidiana de los programas, en el estilo de historias de vida, o de un da cualquiera: se describe el acontecer cotidiano del programa, mostrando los engranajes de la socializacin en el intercambio recproco e interrelacionado de los diferentes actores: las denominadas investigaciones cualitativas de estudios de casos. Esta metodologa cualitativa aportara la forma de implementacin de los programas, su marcha y sus retrocesos o bloqueos, segn los requerimientos 1.1.1. y 1.1.9. (2.1.1. y 2.1.9) y el apartado 1.2.(2.2.) de los trminos de referencia proporcionados por la Corporacin Marista. En relacin con los beneficiarios, este diseo cualitativo intentara medir, con resultados variables, el grado de satisfaccin y el cambio en la empleabilidad, con el objetivo de cubrir los requerimientos contemplados en los numerales 1.1.2 al 1.1.8 (2.1.2. al 2.1.8) de los TDR. Asimismo, se evaluaran cualitativamente a las empresas responsables de las pasantas, utilizando como variables el tipo de actividad; la antigedad y estabilidad y el tamao de la empresa. Los indicadores del tipo de actividad posibilitaran vislumbrar si la capacitacin es acorde con los nichos ocupacionales y la poltica nacional de empleo; pero adems, cul sector empresarial est realmente interesado y comprometido con el programa, para despus ahondar en las razones subyacentes para que eso sea as. En cuanto a la antigedad y estabilidad, su anlisis clarificara los nexos con la comunidad, la capacidad de participacin y la vitalidad de la empresa. As como aquellas iniciativas empresariales emprendidas por los graduados de los diversos programas. Con todo esto se dara cobertura a los requerimientos 1.3., 1.4. (2.3 y 2.4) de los TDR proporcionados por la Corporacin Marista. Finalmente, se elaborara una propuesta que contemple un plan de objetivos de los Diplomados que se propongan implementar como nuevas iniciativas, as como la secuencia de contenidos que debern impartirse , los mdulos y el tiempo estipulado para llevarse a cado, en concordancia con los requerimientos especificados en el numeral 1.5 (2.5) de los TDR.
1.2. Implementacin y gestin La etapa de implementacin debe estar anclada en una serie de requisitos que, junto a la conviccin por parte de todos los involucrados de que la evaluacin es una instancia de aprendizaje, permiten gestionar una evaluacin de buena calidad que genere conclusiones transparentes. Ellos son: La evaluacin debe ajustarse a los trminos de referencia; El diseo metodolgico debe ser apropiado para el tipo de programa implicado, segn los objetivos propuestos; Las herramientas para la recoleccin de datos deben hacer que estos sean confiables; Los sistemas de anlisis propuestos deben ser los adecuados para la metodologa utilizada.
Como se mencion al inicio, esta consultora de medicin de impacto tomar en cuenta la metodologa implementada por la OIT. Este modelo organiza el proceso de la implementacin segn cuatro dimensiones y sus correlaciones.
Figura 1. Modelo CIPP (propuesto por Stufflebeam y Shinkfield)
Fuente: ABDALA, E. Manual para la evaluacin de impacto en programas de formacin para jvenes. Montevideo: CINTERFOR, 2004. Pg. 32
a) Contexto: Esta dimensin se nutre de los datos globales socioeconmicos y sociolaborales nacionales y locales, con nfasis especial en las polticas de empleo para jvenes. En esta consultora se tomar en cuenta las caractersticas del mercado laboral en las zonas de Ateos, La Libertad y San Miguel.
b) Input (Insumos): Identifica y valora los recursos disponibles (humanos, materiales y financieros) del programa; los objetivos y las estrategias planteadas segn los recursos disponibles; las estrategias implementadas; los recursos asignados y utilizados, el soporte normativo y las intervenciones realizadas.
c) Proceso: Incluye la interrelacin dinmica entre las estructuras del programa y los diversos actores, generando un sistema vincular: medio ambiente del programa. Se evala especialmente por tcnicas cualitativas.
d) Producto (resultados e impactos en relacin con los objetivos): Los productos (indicadores) se pueden caracterizar segn: Eficacia: medida de los logros en un tiempo determinado; Eficiencia: medida de los logros en un tiempo determinado, Segn los recursos utilizados; Cobertura: proporcin entre los jvenes que accedieron al programa y el total de jvenes carenciados y en situacin de desempleo; Pertinencia: grado de satisfaccin de las necesidades especficas de los jvenes beneficiarios; Adecuacin: correlacin entre los objetivos y los recursos disponibles; Coherencia: grado de correspondencia entre los objetivos y los dispositivos. Las cuatro dimensiones del modelo CIPP se relacionan con cuatro niveles de decisin, que a su vez se corresponden con cuatro etapas de la evaluacin, segn se puede apreciar en la figura no. 2. Figura No. 2 Niveles y etapas de la evaluacin en los cuatro componentes del CIPP
Fuente: Idem . Pg. 34 En cada una de las cuatro etapas de la evaluacin correspondientes a cada nivel de decisin (que se acaban de presentar) se recogen y analizan datos especficos, que se vern reflejados en los diversos instrumentos de investigacin (entrevistas y encuestas) que se implementarn durante el proceso de la medicin de impacto: En la etapa de la Evaluacin de Contexto, es necesario ahondar en los siguientes datos globales que proporcionan los fundamentos para los objetivos del programa: Indicadores socioeconmicos de los beneficiarios, Indicadores sociolaborales de los beneficiarios, Polticas de capacitacin y empleo locales y nacionales. Para el caso de la etapa de Evaluacin de Input o insumos, se necesitarn datos que proporcionan el fundamento para la eleccin del modo de utilizacin de los recursos disponibles para lograr los objetivos (Humanos, Materiales, Financieros). Ser fundamental evaluar cmo los conocimientos y capacidades adquiridas en los Diplomados son pertinentes para su insercin laboral y desarrollo personal. En la etapa de Evaluacin del Proceso, son fundamentales los datos de la marcha del programa. Un registro de la relacin entre lo programado y lo real. Datos sobre la interaccin de todos los actores involucrados y los roles desempeados. Dinmica de grupo del proyecto (decisores, gestores, beneficiarios, poblacin). Y, finalmente, en la etapa de la Evaluacin del Impacto o Productos, se necesitar ahondar en datos sobre logros reales y su relacin en los objetivos del programa. Los logros alcanzados se miden en los beneficiarios, decisores (gobierno-MINED), empresarios, ejecutores, poblacin.
En cuanto a las variables y los agentes sujetos de evaluacin podemos mencionar: El impacto se mide sobre: 1) Los estudiantes de los programas: Segn incremento del bienestar, compuesto por empleo, ingresos y rol ciudadano. 2) Los empresarios: Segn valoracin del compromiso y la participacin en la creacin de empleos; la demanda y el mercado de trabajo, el nivel tcnico, y el grado de reclutamiento de los beneficiarios como mano de obra en la empresa. 3) Las Entidades de Capacitacin (Corporacin Marista): Segn sustentabilidad; nivel de calidad; articulaciones verticales y horizontales para generar empleabilidad.
1.3. Poblacin y muestra
a) Universo de Beneficiarios: Est constituido por todos los y las estudiantes que egresaron y que estudian actualmente los diversos Diplomados de capacitacin.
b) Muestra: La muestra es el grupo en que se realiza el estudio, facilita profundizar en las variables a menor costo y en menor tiempo, dando ms control sobre las variables. Para poder generalizar los resultados alcanzados en la muestra a todo el universo, ella debe ser representativa de esa poblacin. Para eso: Debe reunir los caracteres fundamentales que existen en el universo en relacin con la variable a estudiar; El tamao muestral debe ser proporcional al tamao del universo: a mayor tamao de poblacin, menor porcentaje requiere la muestra, siempre que la variabilidad de la variable no sea excesiva. Con el fin de lograr todo lo sealado se utilizan tcnicas aleatorias, llamadas tipos de muestreo. El tipo de muestra a utilizar en el manual es el probabilstico con un muestreo aleatorio simple, para la seleccin un porcentaje de los beneficiarios. Con este fin se puede usar una tabla de nmeros aleatorios estndar. Asimismo, puede recurrirse dentro de los muestreos probabilsticos, al llamado muestreo sistemtico. De la lista total de beneficiarios (en la que cada estudiante est numerado por su inscripcin) se define el intervalo para un porcentaje del universo siguiendo estrictamente el orden de la lista. La muestra de los beneficiarios debe estar configurada de forma tal, que permita controlar del modo ms riguroso posible las mltiples variables que se relacionan con la insercin laboral.
1.4. Herramientas de la metodologa cuantitativa Bajo esta denominacin se incluyen los instrumentos que posibilitan la recoleccin de los datos cuantitativos. a) Cuestionario Es un mtodo en el que se elabora un formulario impreso que es llenado directamente por el entrevistado, con o sin la presencia del investigador y puede ser entregado por correo electrnico. Este ltimo punto genera una de sus dificultades: la prdida de cuestionarios, su no devolucin. Adems, no jerarquiza las preguntas y no es adaptable a cada caso en particular. Es de bajo costo y lleva poco tiempo recoger datos sobre muchos sujetos. El contenido de las preguntas se orienta segn los objetivos de la evaluacin, el marco terico, las variables seleccionadas y la hiptesis del programa de que las competencias y la empleabilidad mejoran con el curso de capacitacin. La formulacin de las preguntas debe ser clara, dirigida a lo que realmente se quiere saber. Se propone que la tcnica de la encuesta sea utilizada para los estudiantes egresados y matriculados actualmente.
b) Entrevista semi-estructurada La encuesta permite obtener informacin de los actores proporcionada por ellos mismos sobre: conceptos, opiniones, actitudes, prcticas y sugerencias. La entrevista parece ser ms eficaz que el cuestionario, por el juego interpersonal creado, ya que aporta una dinmica ms completa: el entrevistador explica con claridad y detenimiento los motivos de la investigacin y explicita qu tipo de informacin busca. Este aspecto es especialmente til en una poblacin, con dificultades en la comprensin de la lectoescritura. La entrevista estructurada o cerrada est estandarizada en cuanto a la formulacin y el orden de las preguntas, para las que se ofrecen un nmero limitado de respuestas. Las preguntas estn contenidas en un formulario, con respuestas habitualmente codificadas para facilitar el anlisis. Todo ello conduce a que sea una tcnica fcil de implementar para el entrevistador, quien no requiere un entrenamiento exigente. Es de bajo costo, pero la informacin est limitada a lo preestablecido. La propuesta es que la tcnica de la entrevista semi-estructurada sea utilizada con los empresarios y con los estudiantes graduados en los que se quiere detallar el impacto que el diplomado ha tenido en su vida personal y laboral.
1.5. Herramientas de la metodologa cualitativa a) La observacin Es el registro visual del mundo real de la sociologa del cuerpo y del trabajo, con pautas preestablecidas y que al igual que los otros instrumentos de recoleccin, contemple los objetivos, el marco terico y las variables. La observacin debe ser profunda y prolongada buscando la sistematizacin mediante un esquema previamente elaborado y relevando los aspectos ms significativos de la realidad. Segn la integracin del investigador al medio a ser observado, se dividen en participante (participativa) y no participante (no participativa). En la primera, el observador est integrado al programa, total o parcialmente: esto hace que el conocimiento sea mayor, pero que el involucramiento afectivo atente contra la objetividad. En la no participante, el observador es externo al programa y si bien este hecho favorece la valoracin objetiva, se debe estar alerta para detectar las modificaciones de la realidad inducidas por una presencia extraa. Por otra parte, las observaciones pueden considerarse estructuradas (sistemticas, reguladas) o no estructuradas (simples, no reguladas). En forma similar a lo que sucede en las entrevistas: la estructurada guiada por lneas muy pautadas, favorece la recoleccin y el anlisis de los datos, pero el aporte a la comprensin se ve empobrecido si se la compara con las no estructuradas. El observador, al finalizar, debe registrar por escrito los aspectos no contenidos en la indagacin, el contexto detallado en que transcurri la observacin, sus impresiones respecto a la eficiencia del mtodo y su aplicacin concreta. Las puntualizaciones para el cumplimiento estricto de los elementos tcnicos y de la ayuda de otras disciplinas que se presentaron para la entrevista en profundidad, son valederas tambin para la observacin. Se propone la utilizacin de la observacin, mediante lista de cotejo estructurada para realizar un panel o grupo focal con estudiantes graduados para conocer a profundidad si las expectativas han sido cumplidas en relacin con su trabajo actual y el desarrollo del Diplomado. As como para la generacin de ideas sobre nuevas iniciativas de capacitacin.
1.6. Cronograma Se propone que las diversas fases de la consultora se realicen en un perodo de 6 semanas, ya que se trata de 2 sedes distintas y que, de esta manera, se pueda contar con un producto de alta calidad que cumpla con los requisitos tcnicos de una medicin de impacto seria y cientfica, que conlleve a la consecutiva prolongacin de la relacin MINED-Corporacin Marista a favor de la mejora de la calidad de vida de los habitantes de ambas zonas.
FASES FASE I FASE II FASE III FASE IV SEMANA 1 SEMANA 2 SEMANA 3 SEMANA 4 SEMANA 5 SEMANA 6
Fase I: Identificacin, determinacin y contacto de poblacin y muestra (beneficiarios y empresarios) Fase II: Levantamiento de los instrumentos: encuestas a estudiantes (graduados y matriculados) y entrevistas y grupos focales (empresarios y estudiantes graduados) Fase III: Anlisis de los instrumentos del trabajo de campo (programa SPSS) y sistematizacin de las entrevistas y grupos focales. Fase IV: Elaboracin y presentacin del documento final.
1.7. Recursos y materiales a utilizar.
Instalaciones para entrevistas y encuestas: se propone que sea el local de las sedes del Complejo Educativo Catlico Jess Obrero e Instituto Catlico de Oriente. Papelera impresiones y fotocopias de las encuestas y listas de cotejo Computadora porttil, grabadora para entrevistas y grupos focales, programa SPSS Transporte hacia las empresas empleadoras (gasolina, depreciacin de vehculo) Recurso humano capacitado para realizacin de la encuesta, entrevista y grupo focal. As como para el levantamiento, procesamiento y anlisis de los resultados.
2. Propuesta econmica Oferta de consultora sobre el impacto social y laboral en los estudiantes graduados de los Diplomados y Cursos Modulares Tcnicos Vocacionales, impartidos en las sedes del Complejo Educativo Catlico Jess Obrero e Instituto Catlico de Oriente Yo, Marcela Escobar de Melgar, quien suscribe la propuesta, declaro que:
a) He examinado y no tengo reservas a los requisitos solicitados en los trminos de referencia. b) Me comprometo a brindar servicios profesionales de consultora en el rea de medicin de impacto de Diplomados y cursos modulares impartidos por la Corporacin Marista en las sedes de Ateos y San Miguel. c) El precio de mi propuesta es de US$2,400. El detalle de los costos es:
Producto Valor total del producto Honorarios Gastos de viajes, viticos, transporte, papelera e instrumentos. (incluye ambas sedes) FASE I $600 $300 $300 FASE II $900 $500 $400 FASE III $550 $500 $50 FASE IV $350 $300 $50 TOTAL ( costo global)
$2,400
d) Mi propuesta se mantendr vigente por los das que se indican a continuacin, contados a partir de la fecha lmite fijada para la presentacin de propuestas: Del 9 de agosto al 30 de septiembre de 2014 e) Esta propuesta me obliga y podr ser aceptada en cualquier momento hasta antes del trmino de dicho perodo. f) Entiendo que esta propuesta constituir una obligacin contractual, hasta la preparacin y ejecucin del Contrato formal.
Nombre: Marcela Antonieta Escobar de Melgar
El da 9 de agosto de 2014, en Ateos, La Libertad, El Salvador.