Diseño y Evaluacioán de Programas de Servicios Psicológicos PDF

Diseño y Evaluación de Programas de Servicios Psicológicos  Objetivos Conocer, distinguir y aplicar: La noción de necesidad La herramienta del FODA para estudios de necesidades El concepto de misión y vision Metas y objetivos El Modelo Lógico Modelos y Tipos de Evaluació...

Diseño y Evaluación de Programas de Servicios Psicológicos  Objetivos Conocer, distinguir y aplicar: La noción de necesidad La herramienta del FODA para estudios de necesidades El concepto de misión y vision Metas y objetivos El Modelo Lógico Modelos y Tipos de Evaluación  La noción de necesidad La noción de necesidad Es una discrepancia o brecha entre lo que es y lo que debe ser. El estado actual El estado deseado o los resultados esperados  Tipología de las Necesidades (Bradshaw) Normativa: Basada en un Expresada: Uso de los estándar, juicio de expertos (Ejemplo: cuántos clientes servicios disponibles por la puede atender un psicólogo clientela (más que lo que por día). dicen los expertos, lo que Percibida: Se basa en la las personas utilizan con percepción de la persona relación a los servicios). referente a su situación Comparativa: Basada en particular, es cambiante. la ejecución de otro grupo Las personas determinan particular que tiene la cuáles son sus necesidades. necesidad Para qué identificar bien las necesidades El estudio de Dónde se puede necesidades ubicar mejor : establece -dinero prioridades y -personas detrermina los -facilidades criterios para -otros recursos soluciones. de la organización  Primer Paso El Estudio de Entender cuál es el problema que quieres Necesidades resolver. Realizar encuestas, entrevistas, grupos focales y reuniones con los afectados para ver cuáles son los problemas que enfrentan, la magnitud del problema y cuán importante ellos piensan que el problema es. Una vez identificas el problema: Hacer el Árbol de análisis del problema para investigar las causas y los efectos.  Estudio de Necesidades Efectos: Dificultad encontrar trabajo- Consumo de dorgas/alcohol Altas tasas de embarazo Problema: Los adolescentes no terminan la escuela Causas: Padres no los motivan- La escuela no es interesante-Necesidad de trabajar- Bajos ingresos familiares- Padres piensan escuela no es importante  Estudio de Necesidades Una vez tengo el árbol debo investigar si realmente esas son las causas y los efectos reales Análisis de datos cuantitativos Revisión de literatura Qué se ha dicho o hecho Qué funcionó Qué no funcionó  Estudio de Necesidades El problema definido (por usted y los constituyentes), cuáles destrezas y recursos tienes disponibles y quiénes y cómo lo trataron previamente, entonces puedes establecer cuál será la meta de tu programa o Proyecto. Por ejemplo: Adolescentes terminen la escuela=meta Incrementar el ingreso familiar= objetivo Estudio de Necesidades Herramienta F ortalezas O portunidades D ebilidades A menazas  FODA Facilita la discusión grupal En ocasiones las fortalezas y debilidades se observan desde el ambiente interno, mientras que oportunidades y amenazas se ven desde el ambiente externo. En otras ocasiones, fortalezas y debilidades se pueden ver como estado actual y amenazas y oportunidades como factores futuros.  FODA Fortalezas: Se refiere a los Debilidades: Son las atributos de un programa atributos internos que pueden utilizarse para lograr las metas que se han que limitan el establecido. cumplimiento de las Qué tiene la metas u objetivos organización trazados. que facilita el desarrollo del programa.  FODA Oportunidades: Amenazas: son Características del características del ambiente externo que ambiente externo que pueden propiciar el logro inhiben la oportunidad de las metas y se del programa para lograr constituyen en un sus metas. espacio para el desarrollo del programa. Ejemplo: Competencia Ejemplo: Aumento de la población adulta mayor. Vamos a ver qué saben DISEÑO DEL PROGRAMA  DISEÑO DEL PROGRAMA Muchos responden a políticas públicas que se formulan a niveles estatales, federales y hasta municipales. Las políticas públicas se cristalizan en programas y proyectos (se le asignan recursos para ponerlas en práctica) No es un proceso lineal; es objeto de un proceso social y politico Los programas se conforman de un conjunto de proyectos que persiguen los mismos objetivos; son los responsables de establecer las prioridades de la intervención, ya que permiten identificar y organizar los proyectos, definir el marco institucional y asignar los recursos.  Diferencia entre proyectos y programas Los proyectos la unidad minima de Los programas pueden asignación de recursos para el logro de englobar varios uno o más objetivos específicos. proyectos. Pueden tener una población objetivo Greneralmente operan en definida en función de la necesidad un tiempo mayor a los que se pretende satisfacer. proyectos. Una localización especial y particular. Generalmente operan con Tiempo de inicio y finalización más recursos que los predefinidos por lo general. proyectos.  Es una declaración pública del propósito, las creencias, los valores y las aspiraciones de la organización, lo que provee un La misión de un parámetro orientado al éxito. programa Elementos de una misión La filosofía, los valores y las creencias de la organización, programa o proyecto. La identidad que la diferencia de otras organizaciones o  Elementos de la Misión Los parámetros relativamente permanentes dentro de los cuales se desarrollan las metas y los objetivos. Identifica la población a intervenir, los servicios a prestar y las áreas geográficas a servir.  Elementos de la Misión La imagen pública deseada de los servicios o programas a ofrecer. Congruente con las expectativas y los resultados de la organización o programa. Expresa de forma general, no establece tiempo específico.  La Misión Debe reflejar la contestación a las siguientes preguntas: 1. Cuál es el propósito central de la organización. 2. Por qué existe la organización. 3. A qué clientela sirve. 4. Qué servicios ofrece. 5. Qué área geográfica sirve. 6. Qué principios o valores la orientan.  Es el conjunto de sueños de una organización que se convierten en el motor y una guía para todas las actividades que realicen, tanto a nivel interno y externo. Da significado y dirección al presente. La Visión del programa Guías para formular una visión En la mayoría de los casos la visión de éxito no necesariamente mejora la efectividad de la organización. Una visión de éxito debe incluir los resultados deseados y beneficios.  Guías para formular una visión Debe ser inspiradora. Debe ser un proceso normativo. Es deseable lograr un consenso del enunciado de la visión entre los que toman las decisiones y la alta gerencia. Se refiere a una situación futura, una condición que es mejor que la actualmente existente.  Resumen La misión clarifica el propósito de la organización, la visión clarifica lo que la organización debería parecer y cómo debe conducirse para el logro de su misión. Misión: Dirige Visión: Inspira Las Metas: Es el resultado hacia el cual se dirige un esfuerzo Deben ser: Alcanzables Claras. Si son vagas no Relevantes- A lo que proporcionan una dirección es mi misión y Medibles. visión Ej:Reducir gastos-Cómo lo sé cuando lo he SMART obtenido?- Mala meta  SMART S: Specific (Específica).Las metas han de ser claras y centrarse en lo que queremos, pues ayudará a enfocarnos en lo que queremos y lo que tenemos que hacer. M: Measurable (Medible). Si no podemos medirlo, no podemos ver si se produce el cambio que perseguíamos y si lo conseguimos.  SMART A: Attainable (Alcanzable). Establecer metas que podamos alcanzar, o de lo contrario no nos veremos motivados y abandonaremos. A veces será necesario subdividir las metas en otras mas pequeñas o en periodos mas cortos. R: Realistic (Realista). Establecer metas que seamos capaces de conseguir, ser realista. Esto no quiere decir que sean fáciles, pero si que se puedan conseguir. T: Timely (Oportuno). Establecer un tiempo para conseguir la meta, pues esto nos hará tener claros los objetivos y no abandonar  Tienen cuatro componentes Los objetivos Un atributo (una dimensión específica que lo define) Una escala de medida Una norma o un umbral Un horizonte temporal  Ejemplo: Mejorar el aprovechamiento de los estudiantes Los objetivos y sus Atributo: Aprovechamiento académico componentes Escala de Medida: Las notas de los estudiantes en los cursos básicos Umbral: Un 70% en las calificaciones de los cursos básicos Horizonte: Un año  Objetivos Son los logros que un programa o proyecto planea alcanzar en determinado momento. A diferencia de las metas cada objetivo necesita de acciones específicas, factibles y alcanzables.  Relación Metas/Objetivos Metas Objetivos Amplio alcance Específico Intención general Tangible Intangible Se puede medir, No se puede medir fácilmente validar Ejemplo: Lograr ser el mejor Completar la investigador de la disertación doctoral Psicología en el País para mayo de 2025.  Es una forma sistemática y visual de presentar las relaciones entre los recursos que dispone un programa para operar, las actividades que planifica realizar y los cambios o El Modelo resultados que espera lograr. Lógico El modelo lógico utiliza imágenes para describir la secuencia de actividades que usted cree generarán el cambio deseado y además, debe mostrar cómo esas actividades se vinculan con los resultados que espera obtener producto del programa.  El Modelo Lógico Nota: 1 y 2: Su trabajo planificado/ 3, 4 y 5: Sus resultados intencionados Recurso Actividad Producto Resulta Impact s/ es s dos o insumos 1 2 3 4 5  El Modelo Lógico Insumo/recursos: humanos, financieros, organizacionales, comunitarios.Todo lo que el programa tiene disponible para realizar el trabajo planificado. Actividades: Qué el programa va a hacer con esos recursos? Son los procesos, las herramientas, los eventos y las acciones que son una parte intencional de la implantación del programa. Se usan para originar los cambios o producir los resultados del programa.  El Modelo Lógico Productos: son los productos directos de las actividades del programa. Pueden incluir tipos, niveles y metas de servicios que serán prestados por el programa. Ejemplo: cantidad de clases dictadas, número de sesiones de trerapia, materiales producidos, cantidad de horas de servicios prestados, etc. Resultados: Se refiere a los cambios específicos en el comportamiento, conocimiento, aptitudes, condición y nivel de funcionamiento de los participantes del programa.  El Modelo Lógico Resultados: Corto plazo (Dentro 1 a 3 años); Largo plazo (Dentro 4 a 6 años) La progresión lógica desde los resultados de corto plazo a los de largo plazo deberá reflejarse en el impacto ocurriendo dentro de 7 a 10 años aproximadamente. Impacto: El cambio intencionado o involuntario fundamental que ocurre en las organizaciones, las comunidades o los sistemas como resultado de las actividades del programa.  Máxima Ciertos recursos son necesarios para operar un programa… SI tienes acceso a ellos, entonces podrá usarlos para realizar las actividades planificadas… SI realiza las actividades planificadas, entonces podrá suministrar la cantidad de producto/ o prestar la cantidad de servicio intencionado.  Máxima SI realizas las actividades planificadas en la medida intencionada, entonces sus participantes se beneficiarán de maneras específicas. SI se obtienen estos beneficios para los participantes, entonces puede esperarse que ocurran ciertos cambios en las organizaciones, las comunidades o los sistemas bajo condiciones específicas.  El Modelo Lógico El modelo Estructura-Proceso-Resultado es el más simple y útil para construir un modelo lógico. Permite el entendimiento de los diferentes tipos de actividades que fueron implantadas y cómo cada una de ellas afectaron los resultados. El modelo estructura-proceso-resultado puede vincularse a distintas preguntas de Evaluación. Para ello debemos tener claro qué significa cada uno de estos conceptos. 1.  El Modelo Lógico Estructura: Son los elementos de la organización y las intervenciones de prevención o intervención temprana del programa que afectan cómo las actividades serán realizadas. Llevadas. Son recursos qyue facilitarán la implantación del programa. Proceso: Se refiere a lo que es hecho por el programa; es decir, las intervenciones o actividades realizadas. Los procesos son los mecanismos a través de lo cual las estructuras conducen a resultados.  El Modelo Lógico Por ejemplo: Para un currículo de adiestramiento (Estructura)tenga un impacto, los adiestramientos tienen que ser provistos y las personas necesitan perticipar en ellos; por lo tanto, la participación en el adiestramiento es un resultado de proceso. 3. Resultado: Es el efecto del programa. Se puede ver como cambios en actitudes, conductas, conocimiento, o funcionamiento individual que pueden ser atribuidos a los efectos de las actividades del programa.  Advertencia Mientras la evaluación de la estructura y los procesos le pueden ayudar a usted a entender mejor el por qué los objetivos fueron o no alcanzados, las partes interesadas (stakeholders) están primordialmente interesados en conocer si el programa alcanzó los objetivos.  Llegó la hora… !Vamos a ver cuánto saben!  La Evaluación del Programa Un diseño de evaluación es un plan para qué y cómo medir aspectos de la estructura, los procesos y los resultados. Además, para seleccionar qué tipo de herramientas son las más apropiadas, la población a evaluar y cuándo hacerlo.  Desarrollar el plan de recolección de datos Pensar en la recogida de datos de las Resultados:La estructuras, los procesos y resultados. Estructura: Se trata de identificar los información recursos que han contribuido a operar el relacionada a los programa. La mayoría de esa información resultados es cualitativa. Típicamente incluye: primordialmente es de revisión de documentos, informantes claves o grupos focales. naturaleza cuantitativa Procesos: Generalmente la información que puede ser obtenida puede ser cualitativa y cuantitativa. tanto mediante Cualitativos: informantes claves, grupos encuestas o los focales, pueden puede ayudar a poner de relieve los problemas relacionados con la expedientes existentes. implantación del programa.  Preguntas Importantes Preguntas sobre el Contexto (Rol Formativo) Cuáles son las necesidades de alta prioridad del Modelos de programa? Evaluación Cuál es el grupo beneficiario que pretende servir? Cuáles de los problemas y barreras potenciales para el éxito del programa necesitan ser abordadas e intervenidas? En qué medida esta intervención aborda las necesidades de mayor prioridad? En qué medida las metas del programa reflejan las necesidades reales de los beneficiarios?  Preguntas Importantes Preguntas para de insumo El propósito de la evaluación de isumo es identificar y Modelos de evaluar las capacidades del sistema, las estrategias Evaluación alternativas del programa, y las contrataciones externas alterantivas, así como los procedimientos, el presupuesto, personal, y el involucramiento de los diferentes actores en los planes del programa. Cuáles son los acercamientos más prometedores para satisfacer las necesidades de la población servida y lograr las metas establecidas? Cuáles son las barreras predecibles para la implantación efectiva del programa?  Preguntas Importantes Preguntas relacionadas al proceso Modelos de El objetivo de la evaluación de proceso Evaluación es identificar o predecir defectos en el diseño de los procedimientos o su implantación, proveer información para la toma de decisiones de programaciones pre-establecidas, afirmar las actividades que están funcionando bien.  Preguntas Importantes Preguntas relacionadas al proceso Modelos de En qué medida los procedimientos Evaluación establecidos corren a tiempo, con el presupuesto asignado? Qué impedimiento para la implantación exitosa necesita ser abordado? En qué medida (sumativo) el programa corre como fue diseñado? Con qué facilidad el personal identifica problemas en la implantación? En términos generales, cuán bien el programa ejecuta?  Preguntas Importantes Preguntas sobre Evaluación de Modelos de producto Evaluación El propósito es identificar los resultados intentados y no intentados, relacionarlos con las metas establecidas y evaluar las necesidades y la información del contexto, el insumo y el proceso, así como juzgar la calidad, costo efectividad y significancia del programa.  Preguntas Importantes Preguntas sobre Evaluación de producto (Cont.) Modelos de En qué medida el programa aborda Evaluación efectivamente las necesidades de la población? En qué medida el programa alcanza toda la población beneficiaria? En qué medida el programa logra las metas? Qué o cuáles de los problemas inesperados emergen? Existe algún resultado positivo inesperado?  Cómo se clasifican los modelos de evaluación 1. Los que se fijan en el alcance de las metas que un programa se trazó. (Generalmente buscan procesos) 2. Los que basan sus juicios en criterios que son inherentes o intrínsecos al programa: -La Evaluación que hace la MSA de una Universidad -La Evaluación que hace APA para la Acreditación -Las áreas a evaluar son aquellas que el mismo programa ha establecido como criterios  Contexto, insumo, proceso y producto CIPP La información que provee se utiliza para la toma de decisones. Énfasis: Producir informes de Evaluación de los diferentes elementos que componen un programa  CIPP Insumo Producto Inventariar los recursos Juicios acerca de los resultados humanos Relacionar los resultados con los Materiales disponibles objetivos y la información Presupuesto proporcionado por el contexto Facilidades Juicios de los clientes Análisis cuantitativo y cualitativo Proceso Juzgar las actividades Contexto realizadas Población objeto de estudio Procedimientos establecidos Valorar sus necesidades para realizar las actividades Cómo se van a satisfacer sus Interacción recursos necesidades humanos/actividades Objetivos/necesidades valoradas  CIPP Preguntas Importantes Contexto: Hasta qué punto las metas y objetivos del programan están a tono con las necesidades identificadas? Insumo: Son el personal seleccionado, el presupuesto establecido, y otras condiciones materiales pueden satisfacer las necesidades valoradas? Proceso: Hasta qué punto lo planificado se ha realizado? Producto: Qué resultados intencionados se han producido?  Se observa la discrepancia cuando puedes identificar el nivel en que está el programa y donde debería estar. El Modelo de Discrepancia La lógica fundamental consiste en hacer una comparación entre la ejecución del programa contra algún estándar de ejecución previamente establecido.  Conceptos del modelo EL estándar: una descripción o representación de las caracteristicas que debe poseer el programa. El Modelo de La ejecución: proceso de identificar Discrepancia las características que posee el programa. Discrepnacias positivas exceden el estándar Negativas cuando la ejecución es menor al estándar Neutrales: cuando se alcanza el mínimo establecido  Conceptos del modelo El modelo provee información para poder trabajar con las discrepancias negativas. El Modelo de Permite hacer preguntas con relación a la Discrepancia formulación misma del programa, los procesos para ejecutarlo y la pertinencia del programa. Hay estándares que no son realistas: Reformularse No hay un proceso de supervisión sistemático sobre la ejecución Discrepancias con las que no se pueden trabajar es mejor terminar el programa.  Evaluación EVALUACIÓN FORMATIVA EVALUACIÓN SUMATIVA MEJORAMIENTO DEL AVALÚO PROGRAMA DISEÑO PRODUCTO INSUMO ANÁLISIS PROCESO COSTO/BENEFICIO