Evaluación de Programas y Políticas

Podcast

Play an AI-generated podcast conversation about this lesson

Questions and Answers

¿Cuál de las siguientes afirmaciones refleja adecuadamente el concepto de evaluación?

Debe basarse en criterios universales aplicables a todos los casos.

Es un proceso sistemático que determina el valor o mérito de algo. (correct)

Su propósito es únicamente recoger información sin analizarla.

Es un proceso que se puede realizar sin un criterio claro.

¿Qué función de la evaluación está relacionada con la mejora continua de un programa o política?

Rendición de cuentas

Retroalimentación o mejora (correct)

Control de responsabilidades

Ilustración para acciones futuras

Según la evaluación como un proceso, ¿cuál es un aspecto clave que se debe considerar?

Utiliza métodos de investigación para analizar la efectividad. (correct)

Es un proceso que no tiene relación con el pensamiento crítico.

Siempre se basa en visiones subjetivas y no en datos concretos.

La evaluación no requiere de metodologías específicas.

¿Cuál de las siguientes opciones caracteriza a la evaluación como un proceso político?

Involucra la consideración de contextos y valores sociales. Signup and view all the answers

¿Qué elemento es esencial para fijar el valor en una evaluación?

Tener un criterio o patrón determinado para la comparación. Signup and view all the answers

¿Cuál de las siguientes opciones NO es una característica del carácter político en la evaluación?

Flexibilidad Signup and view all the answers

¿Qué función tienen los hallazgos empíricos en el proceso de evaluación?

Recoger hechos, datos e información Signup and view all the answers

La evaluación debe ser práctica y aplicada. Esto significa que debe ser:

Utilizable y pertinente para el contexto específico Signup and view all the answers

Los juicios en el proceso de evaluación se refieren a:

Valoraciones sobre hallazgos e interpretaciones Signup and view all the answers

Una evaluación sensible al contexto implica:

Ajustar la evaluación a las circunstancias específicas Signup and view all the answers

Las recomendaciones en la evaluación se basan en:

Una mezcla de hallazgos, interpretaciones y juicios Signup and view all the answers

La flexibilidad en el proceso de evaluación permite:

Ajustar los informes a circunstancias cambiantes Signup and view all the answers

La capacidad de respuesta en la evaluación se refiere a:

Recoger y aplicar feedback de manera activa Signup and view all the answers

¿Cuál es uno de los objetivos de la comunicación en la evaluación?

Promover el uso de resultados por decisores públicos. Signup and view all the answers

¿Qué función cumple el informe de evaluación en relación a la rendición de cuentas?

Sirve como herramienta de transparencia sobre recursos públicos. Signup and view all the answers

¿Cuál de los siguientes tipos de uso de la evaluación se refiere a movilizar apoyos?

Uso persuasivo. Signup and view all the answers

En la distinción entre uso e influencia, ¿qué aspecto no es considerado un uso?

Influencia a nivel colectivo. Signup and view all the answers

¿Qué no es un resultado del uso de la evaluación según el contenido?

Crear confusión en las políticas existentes. Signup and view all the answers

¿Cuál de las siguientes afirmaciones describe mejor el pensamiento evaluativo?

Se basa en la reflexión y la toma de perspectivas múltiples. Signup and view all the answers

¿Qué paso no forma parte del proceso de evaluación?

Evaluación diagnóstica del rendimiento del alumnado. Signup and view all the answers

En el proceso de evaluación, ¿qué se debe hacer primero?

Motivación para evaluar: diagnóstico del contexto. Signup and view all the answers

¿Cuál es uno de los aspectos que no se considera parte de la evaluación de programas?

Seguimiento o monitoreo. Signup and view all the answers

¿Qué implica la operacionalización en la evaluación?

Elaborar preguntas e indicadores claros. Signup and view all the answers

¿Cuál de los siguientes es un componente crítico del pensamiento evaluativo?

Ofrecer decisiones informadas en preparación para la acción. Signup and view all the answers

¿Cuál es la función principal de los indicadores en una evaluación?

Definir lo que se quiere evaluar Signup and view all the answers

¿En qué fase de la evaluación se realiza la búsqueda de fuentes y diseño de técnicas?

Elección de aproximación evaluativa. Signup and view all the answers

¿Qué tipo de preguntas son esenciales para una evaluación efectiva?

Preguntas que impliquen una valoración sobre la intervención Signup and view all the answers

Al evaluar, ¿qué se debe tener en cuenta respecto a los criterios utilizados?

Es crucial que todos los actores se pongan de acuerdo sobre su significado Signup and view all the answers

¿Qué se busca lograr al hacer preguntas razonadas en el pensamiento evaluativo?

Entrar en un análisis crítico y profundo. Signup and view all the answers

¿Qué tipo de información no debe ser el enfoque principal de las preguntas en una evaluación?

Sucesos o dinámicas sociales Signup and view all the answers

¿Cuál de las siguientes opciones describe mejor un criterio de evaluación?

Un requerimiento de información que implica valoración Signup and view all the answers

¿Qué aspecto es clave para la recolección de información en una evaluación?

Definir las técnicas o fuentes de forma específica Signup and view all the answers

Para que las preguntas de evaluación sean efectivas, deben evitar:

Implica una mera indagación Signup and view all the answers

¿Qué se debe considerar al establecer criterios en una evaluación?

La teoría del programa y las preocupaciones de los stakeholders Signup and view all the answers

¿Qué se busca evaluar con el indicador relacionado con el consumo de marihuana entre los escolares?

Incremento de la percepción del riesgo en el consumo de marihuana Signup and view all the answers

¿Cuál es la diferencia principal entre una rúbrica de gradiente y una rúbrica de ranking?

La rúbrica de ranking clasifica los desempeños en diferentes niveles. Signup and view all the answers

¿Cuál de las siguientes técnicas no se considera una técnica básica de recopilación de datos?

Análisis de videos Signup and view all the answers

¿Qué caracteriza a una fuente primaria en la investigación?

Información obtenida directamente por el investigador Signup and view all the answers

En el enfoque cuantitativo, ¿cómo se representan los datos generalmente?

En números para análisis agregado Signup and view all the answers

¿Cuál de las siguientes opciones describe mejor los métodos combinados en evaluación?

La integración de enfoques cuantitativos y cualitativos Signup and view all the answers

¿Qué tipo de análisis se realiza al utilizar fuentes secundarias?

Indagación a partir de datos recogidos por otros investigadores Signup and view all the answers

Al evaluar el consumo de marihuana, ¿qué aspecto específico se busca medir según el indicador?

La percepción del riesgo asociado al consumo de marihuana Signup and view all the answers

Study Notes

Introducción a las Políticas Públicas

El tema 5 se centra en la evaluación, incluyendo su concepto, funciones y características específicas.
La evaluación implica recoger y analizar sistemáticamente información para determinar el valor o mérito de algo, considerando su importancia y significado.
La evaluación no tiene criterios universales, sino que los indicadores deben servir a las preguntas, no al revés.
La evaluación, en esencia, es fijar el valor de algo a través de un procedimiento de comparación con un criterio o patrón determinado.

Qué es la Evaluación (Parte 1)

La evaluación se basa en métodos de investigación para recoger información sobre la efectividad de un programa o política. (Definición estrecha).
La evaluación considera la evaluación como un proceso que utiliza metodologías específicas, desde un punto de vista amplio para juzgar algo.
La evaluación es sistemática, valorativa y política.

Qué es la Evaluación (Parte 2)

La evaluación es sistemática en todo su proceso.
La evaluación implica valor o juicio sobre algo.
La evaluación tiene una naturaleza política.

Las Funciones de la Evaluación

Una función de la evaluación es la retroalimentación o mejora (improvement).
Otra función de la evaluación es el control de responsabilidades y rendición de cuentas (accountability).
Otra función de la evaluación es la ilustración para acciones futuras (enlightenment).

Características Específicas: El Carácter Político y Contexto

Las políticas y programas que se evalúan son resultado de decisiones políticas.
La evaluación se utiliza para alimentar el proceso de toma de decisiones.
La evaluación, por su propia naturaleza, asume una postura política.
La evaluación requiere capacidad de respuesta, sensibilidad social y política, credibilidad y aceptación (participación), temporalidad, flexibilidad y realismo.

Características Específicas: Valorativo y Sistemático

El análisis se realiza a través de cuatro niveles: hallazgos empíricos, interpretaciones de los hechos y datos, juicios basados en valoraciones y recomendaciones con sugerencias para futuras acciones.
Esta metodología implica la consideración sistemática como elemento central en el proceso de evaluación.

Características Específicas: Carácter Práctico y Aplicado

La evaluación debe ser útil y práctica, proporcionando información pertinente y fácilmente aplicable.
Debe estar orientada hacia la acción, utilizando la información recolectada para la toma de decisiones.
Se debe considerar el contexto específico, implicar a los actores clave (“stakeholders”) y usar diferentes formatos para presentar los resultados.

Pensamiento Evaluativo

El pensamiento evaluativo es un pensamiento crítico que aplica al contexto de evaluación.
Está motivado por la curiosidad y la creencia en la evidencia, e implica identificar asunciones, hacer preguntas razonadas, perseguir comprensiones profundas y ofrecer decisiones informadas.

Lo que no es Evaluación

La evaluación no es investigación, seguimiento, monitoreo, observatorio, evaluación diagnóstica ni memoria.

La Evaluación Paso a Paso

Etapas para realizar una evaluación: motivación para evaluar mediante el diagnóstico, delimitación del conocimiento, identificación de “stakeholders”, definición de criterios y preguntas, elección de métodos y técnicas, análisis, interpretación, enjuiciamiento, recomendaciones, comunicación y difusión.

Fases de la Evaluación (Diagrama)

Movilizar para evaluar
Definición de unidad y contexto
Elección de aproximación evaluativa
Operacionalización de preguntas
Búsqueda de fuentes y diseño de técnicas
Diseño metodológico
Trabajo de campo
Análisis de datos
Interpretacion y juicios
Recomendaciones
Comunicación de resultados

El Diagnóstico del Contexto y Situación Evaluativa

Existe un contexto político y la necesidad de responder ante él, presentando la capacidad de respuesta.
Variables situacionales. Patton identifica las variables para considerar el contexto:
Numero de responsables
Historia del programa
Actitud del staff frente a la evaluación
Conocimiento de evaluación del staff
Patrones de interacción
Historia evaluativa del programa
Nivel educativo
Homogeneidad
Localización
Recursos
Número de financiamiento
Naturaleza
Tipo de actuaciones
Estructura
Claridad/Ambigüedad
Datos existentes
Enfasis
Tiempo disponible

El Objeto y Unidad de Evaluación

¿Qué se quiere evaluar y cuál es la unidad de evaluación?
La clave es la teoría del programa, el análisis de los marcos y la delimitación y alcance temporal.
El objeto de la evaluación se compone de planes, programas, proyectos, medidas, servicios, estrategias y campañas.

Identificación de Stakeholders

¿Quiénes son y cuál es su papel en el programa?
Preocupaciones y necesidades informativas de cada uno de los stakeholders.
Papel del evaluador.

Audiencias en la Evaluación (Stakeholders)

Gente con autoridad y responsabilidad para tomar decisiones.
Autoridad y responsabilidad para la gestión y ejecución del programa.
Beneficiarios directos y el público en general.

Fases para el Diseño de Criterios de Evaluación

Identificación de fuentes y actores claves.
Extracción de las necesidades informativas. (trabajo divergente y convergente).
Operacionalización de criterios y preguntas (vertical y horizontal).

Operacionalización: Indicadores

Definición de preguntas.
Identificación de indicadores para cada pregunta.
Técnicas o Fuentes para recopilar la información.

Criterios y Preguntas de Evaluación

Definir qué se quiere evaluar.
Usar una base lógica que justifique las perspectivas de valoración.
Utilizar fuentes como el contexto evaluativo, el estado actual de la cuestión, el programa o política, la teoría del programa, documentos, objetivos y preocupaciones de los stakeholders.

Preguntas / Criterios de Evaluación

Las preguntas deben implicar una valoración.
Son requisitos de información para evaluar los efectos de la intervención.
Se centran en la adquisición de conocimientos, en la adecuación de metodologías y la cualificación del personal.

Ponerse de Acuerdo sobre el Valor de las Palabras

Es crucial que todos los involucrados en la evaluación compartan la misma comprensión de los criterios.
Se deben definir los conceptos y cómo se están utilizando en el análisis.

Criterios CAD (OCDE) Revisados

Pertinencia
Coherencia
Eficacia
Eficiencia
Impacto
Sostenibilidad

Criterios y Preguntas de Evaluación (Adaptación de Stufflebeam y Shinkfield, 1987)

Respuesta a las expectativas de la ciudadanía y la clientela.
Mérito del programa, política o servicio
Necesidad y validez (adecuación al contexto)
Viabilidad (recursos, problemas)
Equidad (participación/acceso para todos)

Otros Criterios de Valor

Cobertura (alcance de la población beneficiaria)
Visibilidad (conocimiento por parte de agentes/población)
Equidad/Igualdad (distribución igualitaria de beneficios)
Participación
Ética en desarrollo y ejecución del programa
Satisfacción de clientes/beneficiarios
Esfuerzo (evidencia de acciones)
Suficiencia (adecuación al objetivo propuesto)
Coherencia (coherencia de la intervención)
Homogenización (uniformidad de servicios)
Transparencia (acceso a información/decisiones)
Rapidez en implementación
Utilización (eficacia y efectividad de las intervenciones)
Productividad (rentabilidad)
Desempeño (correcta ejecución de actividades)

Operacionalización: Indicadores (Continuación)

Formulación
Los indicadores deben ser redactados como condiciones lógicas.
Deben ser medibles, observables, registrables.
Ejemplo: Disminución del consumo de marihuana entre los escolares (incremento de percepción del riesgo).

Operacionalización: Rúbricas

Una rúbrica es una herramienta que describe un desempeño en varios niveles.
Existen rúbricas de gradiente (valor absoluto) y de ranking (valor relativo). Ejemplos de rúbricas: ejemplos de rúbrica para evaluar el desempeño de los estudiantes.

Elección de Métodos y Técnicas

Naturaleza de la información (cuantitativa, cualitativa).
Métodos combinados, incluyendo tipos de combinación.
Tiempo y recursos.
Credibilidad y confianza.
Técnicas (documentos, observación, encuestas, cuestionarios, entrevistas).

Relación de Técnicas

Ejes de clasificación (primarias vs. secundarias, cualitativo vs. cuantitativo, estructurado vs. no estructurado).
Técnicas usuales (encuesta, observación, entrevistas, grupos de discusión, historia de vida, análisis documental).
Fuentes primarias y secundarias.
Enfoque cuantitativo/cualitativo
Técnicas estructuradas/semiestructuradas/abiertas

El Análisis en Evaluación

Cuatro niveles de análisis en evaluación: hallazgos empíricos, interpretaciones, juicios y recomendaciones. (adaptado de Patton, 1986).

El Análisis: Las Recomendaciones

Importancia de las recomendaciones.
Vínculo formal entre evaluación y uso.
Secuencia lógica y sistemática de los análisis previos.
Elementos a considerar en las recomendaciones (quienes participan, realismo, tiempo para la elaboración, Categorización y clasificación, costes).

El Informe y la Comunicación sobre la Evaluación/Meta-Evaluación

Informes de evaluación deben ser claros y comprensibles.
Necesidad de comunicación oportuna para distintas audiencias.
Normas de responsabilidad en las evaluaciones.
Documentación completa de los procedimientos.

Comunicación y Difusión de la Evaluación (Informe)

Objetivo: facilitar el uso de los resultados de la evaluación por parte de los decisores.
Importancia de la comunicación y difusión (utilidad, debate, transparencia, rendición de cuentas).

Uso e Influencia de la Evaluación

Cuatro tipos de uso: instrumental, conceptual, persuasivo e influencia en otras instituciones.
Evaluación para tomar decisiones, cambiar la comprensión del programa.
Influencia en otros contextos y agenda política.

Del Uso a la Influencia

El uso de las evaluaciones debe ser responsable y adaptar a la posible influencia.
Distintos usos (instrumental, conceptual, simbólico).
El impacto de la evaluación puede influir en el cambio a nivel individual, interpersonal, colectivo.

Studying That Suits You

Use AI to generate personalized quizzes and flashcards to suit your learning preferences.

Description

Este cuestionario explora los conceptos fundamentales de la evaluación, incluyendo su función en la mejora continua y su carácter político. Se abordan aspectos clave del proceso de evaluación, así como la importancia de los hallazgos empíricos y las recomendaciones que surgen de este proceso. Ideal para estudiantes y profesionales interesados en la evaluación de programas y políticas.