Capitulo 4 / evaluación de entrada y planificación del programa – Rebolloso Frente a la visión convencional que identifica la evaluación como una ac tividad que se realiza al final de la intervención , cuando se ha logrado algún tipo de r esultado, la evaluación de entrada enfatiza la necesidad de revisar y mejor ar la propia definición del programa, incluyendo tanto su base lógica como pragmática.
Conceptos clave Planificación: proceso de convertir metas en objetivos, formulando intervenciones específicas y definiendo poblaciones de referencia relevantes. Barreras de la evaluación: dificultades de orden sistémico, político o actitudinal para el desarrollo de la evaluación, que deben ser provistas y afrontadas con e strategias específicas. misión - meta - objetivos : conceptos relacionado en sentido jerárquico. La misión es una afirmación breve y directa que define el sentido se ntido o la razón de ser de una organización. Mata es una afirmación general y abstracta abstracta de un un estado deseado. Los objetivos son afirmaciones especificas y operacionalizadas que detallan las realizaciones o logros deseados de un programa. Gestión por objetivos: modelo racional de planificación y toma de decisiones que utiliza los objetivos operativos del programa para escoger las actividades de la intervención y todo tipo de indicadores relevantes para el control, seguimiento y evaluación de los resultados de programa. Refinamiento: procedimiento de ajuste del programa para aumentar la efectividad en sucesivas implementaciones. Evaluación de entrada: conjunto de actividades evaluativas encaminadas a la evaluación general de la planificación del programa, incluyendo el modelo de impacto, la definición d objetivo y el sistema de implementación. Teoría del programa: conjunto de hipótesis que pone en relación las actividades de intervención, los resultados esperados y las variables intervienen que influyen en el logro de los resultados. Modelo de impacto: conjunto de hipótesis-guía que subyacen a la planificación e implementación de un programa.
Evaluación de la evaluabilidad: evaluabilidad: conjunto de procedimientos para la planificación de evaluaciones, con el fin de maximizar la utilidad de la evaluación, de manera que se tengan en cuenta los interés de las personas que apoyan el programa. Evaluación orientada por la teoría : modelo de evaluación que enfatiza la base teórica de la intervención con el objetivo principal de descubrir como y porque funcionan los programa, examinando las relaciones entre filosofía del programa, implementación y resultados. Sistema de gestión de la información : recogida en un curso de datos y sistema de análisis que permite en el tiempo conveniente el acceso a la información sobre el sistema de servicios y resultados.
Trusted by over 1 million members
Try Scribd FREE for 30 days to access over 125 million titles without ads or interruptions! Start Free Trial Cancel Anytime.
Trusted by over 1 million members
Try Scribd FREE for 30 days to access over 125 million titles without ads or interruptions! Start Free Trial Cancel Anytime.
Programas de intervención social El programa funciona como un marco legal de actuación apoyando y financiando desde la administración pública, pero son las organizaciones locales, públicas o privadas las que asumirán la idea de implementar las acciones a través de la presentación de proyectos para concursar en la adjudicación de los fondos del programa. El proyecto es una propuesta de acciones concretas, que incluye apartados como la definición de objetivos operativos de trabajo, el esquema de actividades, ac tividades, la programación temporal, los medios humanos y materiales que van a utilizar y los mecanismos de evaluación que se dispondrán para asegurar el seguimiento y la r endición de cuentas. A veces el programa se refiere a una ac tividad muy localizada, tal como una intervención planificada en un contexto de un colegio o una aula, o un cambio planificado en los procesos de trabajo de una organización. Podríamos incluso equiparar los conceptos de programa, intervención y proceso en el sentido de que su planificación y evaluación sistemática sigue las mismas orientaciones, métodos y reglas. Mark y Shotland proponen el poder (capacidad del grupo para influir en las decisiones sobre la marcha y continuidad del programa) y la legitimidad (intereses del grupo tienen en el programa y en sus efectos son socialmente aceptables) como características básicas para analizar los grupos participantes.
Marco turbulento de las instituciones de servicio -
-
Contexto social de los programas: el contexto de las instituciones de servicios y de los programas sociales se caracterizan por la existencias de grupos de interés (stakeholders) que tratan de hacerse escuchar y defenderán sus posiciones de poder o sus reclamaciones con independencia de los resultados evaluativos. La organización es el contexto primario del programa y de la evaluación, siendo importantes factores como las dinámicas políticas, las características estructurales o la cultura organizacional. Además el programa esta afectado por el contexto social amplio, incluyendo las normas, valores, apoyos sociales de la comunidad, que revertirán en el apoyo de dicha organización. Finalmente, los propios resultados del programa tendrán impactos de segundo orden, en la organización y la comunidad, que deben ser investigados para comprender las consecuencias amplias de la intervención y de la evaluación. Scheirer aconseja ver la perspectiva de los sistemas sociales a través del programa, los clientes, los responsables de la presentación de servicios, las unidades de trabajo, las estructuras organizacionales generales y las presiones ambientales. Dificultades para la evaluación: las actividades del programa tienden a sufrir modificaciones, son múltiples las causas posibles; problemas de distribución de recursos previos, dificultades en la implementación, problemas en las relaciones entre distintos grupos participantes, etc. Para contrastar este tipo de dificultades se ha sugerido; asignar al evaluador un control
Trusted by over 1 million members
Try Scribd FREE for 30 days to access over 125 million titles without ads or interruptions! Start Free Trial Cancel Anytime.
condicionamientos políticos (cambios de administración) barreras actitudinales (falta de información sobre las implicaciones de la evaluación)
-
-
-
Objetivos de los programas: Misión y objetivos del programa: la misión provee de una perspectiva continua sobre el tipo de actividades que desarrollara la agencia y explicita las razones que justifican su existencia. Especifica población a la que va dirigida dirigida las acciones y una visión sobre sobre el tipo de condiciones sociales. Objetivos suponen los mecanismos que se pondrán en marcha para conseguirlos, el primer objetivo de un programa es el establecimiento de un servicio (recursos humanos financiamientos, etc), que se hará responsable de implementar las actividades del programa (objetivos de procesos) las cueles se supone que servirán para lograr los resultados deseados (objetivos de resultados). Se puede distinguir entre los objetivos de resultados conviven con los objet ivos de sistemas (adquisición de recursos para que la organización desaparezca). Los objetivos múltiples pueden ser complementarios cuando el logro de uno de ellos se necesita conseguir algún otro, o competitivos cuando centra los esfuerzos del programa en conseguir uno sacrificando otros. Objetivos mediatos cuando a largo plazo e inmediatos a corto plazo. Definición de los objetivos del programa: búsqueda de definiciones operacionales para los resultados esperados del programa, teniendo en cuenta el conocimiento disponible para la definición del modelo teórico de impacto y distinguiendo 3; objetivos dirigidos por la política, plausibles y congruentes con el conocimiento disponible, objetivos dirigidos por la política no plausibles y la posibilidad de ser operacionalizados de forma distinta, objetivos derivados de la teoría, que suelen ser plausibles y se derivan del examen de políticas y programas previos. Elementos del programa: imputs o entradas (conjunto variado de recursos necesarios para implementar las actividades o servicios de programa, incluyendo los clientes el personal del programa y los recursos físicos) throughputs o procesos (para definirlos es necesario concretar la misión del servicio, las tareas que desarrollara y los métodos que utilizara para implementar las tareas) outputs o salidas (asegurar que el servicio se está ofreciendo e n su totalidad con la calidad suficiente, y que los usuarios acuden al mismo y realizan las actividades que se les requiere), outcomes o resultados (variables que identifican el nivel de cambio conseguido) Planificación y ajustes de las evaluaciones: conjunto reducido de criterios para determinar cuándo es necesario la evaluación: cuando se puede esperar que sus resultados influyan en las decisiones del programa, no debe iniciarse cuando no sea posible determinarla en el plazo oportuno o no resulte útil, debe realizarse c uando el programa realmente lo requiere. La evaluación de entrada dentro del proceso de i ntervención social: parámetros utilizados por Rebolloso para analizar la calidad y viabilidad del plan de evaluación:
Trusted by over 1 million members
Try Scribd FREE for 30 days to access over 125 million titles without ads or interruptions! Start Free Trial Cancel Anytime.
-
-
-
-
-
-
-
Evaluación de entrada: analizar la planificación para probar la adecuación de la teoría del programa y comprobar que los recursos necesarios para la implementación están disponibles. Algunas actividades evaluativas especificas: análisis de la operativización de los objetivos (traducir declaraciones políticas y legislativas en declaraciones evaluativas) cobertura en la teoría e investigación previa (determinar si el plan es adecuado desde el punto de vista del conocimiento disponible) análisis de la base lógica del programa (congruencia entre definición de los objetivos y la sucesión de actividades previstas) Métodos de investigación útiles para la evaluación de entrada: ensayos piloto o simulaciones que pongan a prueba el procedimiento de evaluación. Evaluación de la evaluabilidad: proceso de evaluación cualitativa que intenta de analizar 4 problemas y entregar sugerencias para resolverlos 1) si están bien definidas las metas y objetivos, efectos colaterales y necesidad de información información 2) si los objetivos del programa programa son plausibles 3) si pueden obtenerse datos relevantes de la eficacia del programa 4) si los principales usuarios de la evaluación se han puesto de acuerdo para sobre como se utilizara la información. Se persiguen los siguientes objetivos: implicar en la evaluación a los responsables del diseño y ejecución del programa, desarrollar y clarificar la teoría de programa, poner a prueba y redefinir el programa, clarificar los usos deseados para los resultados de la evaluación. Evaluación de la evaluabilidad implica los siguientes pasos: implicar a los usuarios interesados en la información evaluativa, clarificar los intenciones del programa desde un punto de vista de los responsables del mismo y de otros stakehorlders clave, explorar la realidad del programa, alcanzar un acuerdo sobre la necesidad de introducir cambios y actividades del programa. Evaluaciones orientadas: señala la necesidad de guiar los diseños de investigación siguiendo directrices teóricas, cruciales para analizar los fenómenos sociales y para entender el significado de los resultados de investigación. Elementos de la teoría del programa: 2 componentes; la teoría de implementación o teoría de normativa (especifica como debería ser la estructura del programa) y la teoría de programa o teoría causativa (indica cuales son los mecanismos causales que relacionan las actividades, operacionales y resultados del programa). Freeman y Sherwood la identifican con el nombre de modelo de impacto que se compone por 3 hipótesis: la hipótesis causal (especifica la influencia hipotética de procesos que puede tener sobre condición o problema social objeto de intervención) hipótesis de intervención (relación que existe entre las actividades del programa y factores causales) hipótesis de acción (especifica las relaciones directas o indirectas existentes entre las actividades del programa y el resultado deseado). Sistema de implementación: incluye las normativas y reglamentos administrativos, la estructura burocrática y el perso nal responsable de la administración del programa.
Trusted by over 1 million members
Try Scribd FREE for 30 days to access over 125 million titles without ads or interruptions! Start Free Trial Cancel Anytime.
3 aproximaciones para la construcción teórica; 1)clarificar y desarrollar la teoría subyacente de las audiencias clave, que es emergente de la realidad del programa. 2)combinar información sobre la ocurrencia actual del programa con la derivada de la teoría existente. 3)las aproximaciones integradas tratan de incluir 2 o + perspectivas en la construcción de la teoría.