Evaluación según Stufflebeam y Shinkfield
45 Questions
0 Views

Choose a study mode

Play Quiz
Study Flashcards
Spaced Repetition
Chat to lesson

Podcast

Play an AI-generated podcast conversation about this lesson

Questions and Answers

¿Cuál es el propósito fundamental de la evaluación según Stufflebeam y Shinkfield?

  • Determinar el valor o mérito de algo. (correct)
  • Comparar sin un criterio definido.
  • Recoger información sin análisis.
  • Establecer criterios universales para todos.

    • ¿Cómo se describe la naturaleza de la evaluación en el documento?

  • Es exclusiva para programas educativos.
  • Es sistemática y política. (correct)
  • Es indefinida y subjetiva.
  • Es un proceso aleatorio.

    • ¿Qué función de la evaluación se relaciona con la mejora de procesos?

  • Retroalimentación o mejora. (correct)
  • Evaluación de cumplimiento.
  • Control de responsabilidades.
  • Ilustración para acciones futuras.

    • Según la definición estrecha de evaluación, ¿qué se busca analizar?

    <p>Cómo funciona un programa o política y su efectividad.</p> Signup and view all the answers

    ¿Qué aspecto NO está incluido entre las funciones de la evaluación?

    <p>Evaluación del desempeño económico.</p> Signup and view all the answers

    ¿Cuál es un componente esencial del pensamiento evaluativo?

    <p>Hacer preguntas razonadas</p> Signup and view all the answers

    ¿Qué proceso no forma parte de la evaluación de programas?

    <p>Evaluación diagnóstica</p> Signup and view all the answers

    ¿Cuál es la primera fase en el proceso de evaluación?

    <p>Motivación para evaluar</p> Signup and view all the answers

    ¿Qué aspecto no debe considerarse en la definición de criterios de evaluación?

    <p>Estándares de rendimiento académico</p> Signup and view all the answers

    ¿Cuál es un objetivo clave de la comunicación de resultados en la evaluación?

    <p>Utilizar diversos formatos para presentar resultados</p> Signup and view all the answers

    ¿Cuál es el último paso del proceso de evaluación?

    <p>Comunicación de resultados</p> Signup and view all the answers

    ¿Qué implica la operacionalización en el proceso de evaluación?

    <p>Concretar preguntas, indicadores o sistemas de medida</p> Signup and view all the answers

    ¿Cuál de las siguientes opciones es un error común en la evaluación de programas?

    <p>Confundir la evaluación con la investigación</p> Signup and view all the answers

    ¿Cuál de las siguientes variables NO es considerada por Patton en el diagnóstico situacional?

    <p>Costo económico del programa</p> Signup and view all the answers

    ¿Qué elemento es esencial para determinar el objeto de evaluación según el contenido?

    <p>Análisis de marcos</p> Signup and view all the answers

    En el contexto de la evaluación, ¿que identifica a un stakeholder?

    <p>Un actor social afectado o que afecta al programa</p> Signup and view all the answers

    ¿Cuál de las siguientes es una variable relacionada con la naturaleza del programa?

    <p>Número de fuentes de financiación</p> Signup and view all the answers

    ¿Qué se entiende como 'cristalización' de una política pública?

    <p>Los servicios y programas creados</p> Signup and view all the answers

    ¿Qué aspecto es crucial al considerar el tiempo disponible para la evaluación?

    <p>La flexibilidad del tiempo límite</p> Signup and view all the answers

    ¿Qué variable se refiere a la historia evaluativa del programa?

    <p>Datos existentes sobre el programa</p> Signup and view all the answers

    ¿Cuál de las siguientes afirmaciones es cierta respecto a la toma de decisiones en un programa?

    <p>Puede ser horizontal o vertical</p> Signup and view all the answers

    ¿Cuál de los siguientes criterios se refiere a la adecuación de un servicio a las expectativas de la comunidad a la que se dirige?

    <p>Pertinencia</p> Signup and view all the answers

    El criterio de 'coherencia' se refiere a:

    <p>La lógica y el marco teórico que sustenta la intervención.</p> Signup and view all the answers

    ¿Cuál de los siguientes aspectos no se menciona como parte del criterio de 'sostenibilidad'?

    <p>La necesidad de adecuarse a las normativas legales vigentes.</p> Signup and view all the answers

    ¿Qué criterio evalúa la perspectiva ética en la ejecución de un programa?

    <p>Ética</p> Signup and view all the answers

    La 'cobertura' de un programa se relaciona con:

    <p>El alcance del programa hacia la población beneficiaria.</p> Signup and view all the answers

    ¿Cuál de estos criterios hace énfasis en la participación activa de los beneficiarios en el proceso del programa?

    <p>Participación</p> Signup and view all the answers

    El criterio de 'satisfacción del cliente' se refiere a:

    <p>El juicio sobre el programa basado en la experiencia de los beneficiarios.</p> Signup and view all the answers

    ¿Qué criterio evalúa si un programa es accesible para todos y distribuye sus efectos equitativamente?

    <p>Equidad</p> Signup and view all the answers

    ¿Qué se busca evaluar con la pregunta sobre el consumo de marihuana entre los escolares?

    <p>El incremento de la percepción del riesgo en el consumo de marihuana.</p> Signup and view all the answers

    ¿Cuál de las siguientes afirmaciones describe mejor una rúbrica de gradiente?

    <p>Sirve para clasificar la calidad de un desempeño en términos absolutos.</p> Signup and view all the answers

    ¿Qué técnica de recopilación de datos está indicada como una de las más usuales?

    <p>Encuesta.</p> Signup and view all the answers

    En el análisis de fuentes primarias, ¿qué tipo de información se utiliza?

    <p>Datos que el investigador obtiene directamente.</p> Signup and view all the answers

    ¿Cuál de las siguientes definiciones describe mejor el concepto de trazabilidad?

    <p>La identificación de la secuencia de una persona u objeto a través de diferentes procesos.</p> Signup and view all the answers

    ¿Qué se entiende por el coeficiente de utilización?

    <p>El uso efectivo de un recurso en comparación con el total disponible.</p> Signup and view all the answers

    ¿Cuál es una característica del enfoque cuantitativo?

    <p>Expresa los datos en números y los analiza de forma agregada.</p> Signup and view all the answers

    ¿Cuál es la principal función de los indicadores en un proceso de evaluación?

    <p>Reflejar la realidad de fenómenos similares al concepto buscado.</p> Signup and view all the answers

    ¿Qué es una rúbrica de ranking?

    <p>Un método para clasificar los niveles de calidad en términos relativos.</p> Signup and view all the answers

    La productividad se relaciona con:

    <p>La eficiencia medida como insumos sobre productos obtenidos.</p> Signup and view all the answers

    Al considerar la naturaleza de la información en la elección de métodos y técnicas de evaluación, ¿qué tipos se deben tener en cuenta?

    <p>Cuantitativa y cualitativa.</p> Signup and view all the answers

    ¿Qué aspecto evalúa el desempeño en un programa?

    <p>Si las actividades se han realizado de manera correcta.</p> Signup and view all the answers

    ¿Qué tipo de indagación implica el uso de datos previamente recopilados por otros investigadores?

    <p>Análisis de fuentes secundarias.</p> Signup and view all the answers

    Para redactar indicadores de evaluación, se deben formular como:

    <p>Condiciones lógicas que responden afirmativa o negativamente a las preguntas.</p> Signup and view all the answers

    ¿Qué significado tiene la rapidez en una intervención?

    <p>La velocidad con la que se cubren las necesidades de la población.</p> Signup and view all the answers

    ¿Cuál de las siguientes opciones NO se considera un principio de evaluación según el contenido?

    <p>Sostenibilidad</p> Signup and view all the answers

    Study Notes

    Políticas Públicas: Evaluación

    • Tema 5: Evaluación: concepto, funciones y características específicas. Pasos a seguir (María Bustelo, Universidad Complutense).

    ¿Qué es la evaluación? (Parte 1)

    • La evaluación implica recoger y analizar sistemáticamente información para determinar el valor o mérito de algo (Stufflebeam y Shinkfield, 1987).
    • La evaluación considera el valor y el significado (importancia), no solo el mérito, por lo que no hay criterios universales e iguales para todos.
    • Los indicadores deben estar al servicio de las preguntas, no al revés.
    • Evaluar es determinar el valor de algo comparándolo con un criterio o patrón determinado (Franco, 1971).

    ¿Qué es la evaluación? (Parte 2)

    • La evaluación es un proceso basado en métodos de investigación para recopilar información sobre la efectividad de un programa o política (Definición estrecha, Schwandt, 2015).
    • La evaluación es una forma de pensamiento crítico que utiliza metodologías específicas para juzgar algo (Definición amplia, Schwandt, 2015).

    ¿Qué es la evaluación? (Parte 3)

    • La evaluación es sistemática.
    • La evaluación valora o juzga algo.
    • La evaluación es política (Donna Podems, 2019).

    Funciones de la evaluación

    • Retroalimentación o mejora (improvement)
    • Control de responsabilidades y rendición de cuentas (accountability)
    • Ilustración para acciones futuras (enlightenment)

    Características específicas: Carácter político y contexto

    • Las políticas y programas evaluados son resultado de decisiones políticas.
    • La evaluación se utiliza para alimentar el proceso de toma de decisiones.
    • La evaluación, por naturaleza, adopta una postura política.
    • Implica capacidad de respuesta, sensibilidad social y política, credibilidad y aceptación (participación), temporalidad, flexibilidad y realismo (Carol H. Weiss, 1987).

    Características específicas: Carácter valorativo y enjuiciamiento sistemático

    • Los 4 niveles de análisis incluyen hallazgos empíricos, interpretaciones, juicios y recomendaciones (Patton, 1986).
    • La evaluación implica comprender los datos, interpretarlos, evaluar y justificar las perspectivas de valoración para interpretar y valorar los resultados.

    Características específicas: Carácter práctico y aplicado (Parte 1)

    • La evaluación debe ser útil y práctica, con información pertinente y fácilmente aplicable.
    • La evaluación debe estar orientada a la acción.
    • Se debe tener en cuenta el contexto, identificar y implicar a los stakeholders, ajustar los informes a los destinatarios y presentar los resultados a tiempo (página 8 del documento).

    Pensamiento evaluativo

    • Es pensamiento crítico aplicado al contexto de evaluación, motivado por la curiosidad y la creencia en el valor de la evidencia (Buckley, Archibald, Hargraves & Trochim, 2015).
    • Implica identificar supuestos, hacer preguntas razonadas, perseguir una comprensión profunda a través de la reflexión y la toma de perspectivas múltiples, y ofrecer decisiones informadas.

    Lo que no es evaluación

    • Investigación
    • Seguimiento o monitoreo
    • Observatorio
    • Evaluación del rendimiento del alumnado
    • Evaluación diagnóstica
    • Memoria

    La evaluación paso a paso

    • Motivación para evaluar (diagnóstico del contexto y la situación evaluativa).
    • Delimitación del conocimiento de lo que se quiere evaluar (unidad de evaluación y tipos de evaluación a realizar).
    • Identificación de stakeholders y su diagnóstico de necesidades informativas.
    • Definición de criterios y preguntas de evaluación (operacionalización en aspectos o indicadores).
    • Elección de métodos y técnicas de recolección de información.
    • Análisis, interpretación, enjuiciamiento y recomendaciones.
    • Comunicación y el uso de los resultados (informe y su difusión).

    Fases de la evaluación

    • Motivación para evaluar y encargo
    • Definición de unidad y análisis de contexto
    • Elección de aproximación evaluativa
    • Operacionalización (preguntas, indicadores o sistemas de medida)
    • Búsqueda de fuentes y diseño de técnicas
    • Diseño metodológico
    • Trabajo de campo
    • Análisis de datos
    • Interpretaciones
    • Juicios
    • Recomendaciones
    • Comunicación de resultados

    Diagnóstico del contexto y situación evaluativa

    • El contexto político y la necesidad de responder ante el mismo: capacidad de respuesta.
    • Variables situacionales (Patton).

    Variables situacionales de Patton (Parte 1)

    • Número de responsables a tratar.
    • Historia del programa.
    • Actitud de los profesionales ante la evaluación.
    • Conocimiento de evaluación de los profesionales.
    • Patrones de interacción en el programa.
    • Historia evaluativa del programa.
    • Nivel educativo y cultural de los profesionales y beneficiarios.
    • Homogeneidad-heterogeneidad de profesionales y beneficiarios.
    • Localización del programa.

    Variables situacionales de Patton (Parte 2)

    • Recursos para la evaluación.
    • Número de fuentes de financiación.
    • Naturaleza del programa (simple o multidimensional).
    • Tipo de actuaciones o tratamiento.
    • Estructura de la toma de decisiones en el programa.
    • Claridad/ambigüedad sobre el fin y la función de la evaluación.
    • Datos existentes sobre el programa.
    • Énfasis en la evaluación (voluntaria o impuesta).
    • Tiempo disponible para la evaluación.

    El objeto y la unidad de evaluación

    • ¿Qué se quiere evaluar y cuál es la unidad de evaluación?
    • Para conocerlo, se utiliza la teoría del programa y el análisis de marcos.
    • Delimitación y alcance temporal.

    El objeto de evaluación

    • Se busca cristalizar una política pública a través de planes, programas, proyectos, medidas, servicios y otros.

    Identificación de stakeholders

    • ¿Quiénes son y cuál es su papel en el programa?
    • ¿Cuáles son sus preocupaciones y necesidades informativas?
    • ¿Cuál es el papel del evaluador?

    Audiencias (Stakeholders)

    • Gente con autoridad para tomar decisiones sobre el programa.
    • Gente con autoridad para la gestión y ejecución del programa.
    • Beneficiarios directos y público en general.

    Fases para el diseño de criterios de evaluación

    • Identificación de fuentes y actores clave.
    • Extracción de las necesidades informativas (fase divergente y convergente).
    • Operacionalización de criterios y preguntas: trabajo vertical y horizontal.

    Operacionalización (Indicadores)

    • Preguntar con los aspectos que definen la pregunta.
    • Indicadores para cada pregunta.
    • Fuentes o técnicas.

    Criterios y preguntas de evaluación

    • Definir aquello que se quiere evaluar.
    • Proporcionar una base lógica para la justificación de las perspectivas de valoración.
    • Utilizar fuentes para establecer los criterios (contexto evaluativo, propósitos de la evaluación, estado de la cuestión, programa, política, documentos, objetivos y preocupaciones de los stakeholders).

    Preguntas/Criterios de evaluación

    • Enfocan una valoración de la intervención y sus efectos.
    • Deben implicar una valoración y no solo indagación.
    • Se enfocan en el programa o la relación con las necesidades sociales, no en sucesos o dinámicas sociales.
    • No deben ser indicadores.

    Ponerse de acuerdo sobre el valor de las palabras

    • Importante que todos los actores implicados con la evaluación se pongan de acuerdo en el significado de los criterios.
    • Es conveniente incluir una definición de cómo se están utilizando los criterios.

    Criterios CAD (OCDE) Revisados

    • Pertinencia.
    • Coherencia.
    • Eficacia.
    • Eficiencia.
    • Impacto.
    • Sostenibilidad.

    Criterios y preguntas de evaluación (Adaptación de Stufflebeam y Shinkfield, 1987)

    • Respuesta a las expectativas de la ciudadanía y la clientela.
    • Mérito/excelencias del servicio, programa o política.
    • Necesidad y adecuación del servicio, programa o política.
    • Viabilidad del servicio, programa o política.
    • Equidad en el acceso y utilización del servicio, programa o política.

    Otros criterios de valor

    • Cobertura.
    • Visibilidad.
    • Equidad/Igualdad.
    • Participación.
    • Ética.
    • Satisfacción del cliente/expectativas del cliente.
    • Esfuerzo.
    • Suficiencia del trabajo.
    • Coherencia.
    • Homogeneización.
    • Trazabilidad.
    • Transparencia.
    • Rapidez.
    • Utilización.
    • Productividad.
    • Desempeño.

    Operacionalización (Indicadores)

    • Las preguntas de evaluación no requieren ser medibles.
    • Los indicadores buscan acercarse al concepto o criterio a medir, si bien a veces solo pueden ofrecer una aproximación.
    • Los indicadores deben estar al servicio de las preguntas, no al revés.

    Formulación de indicadores

    • Los indicadores deben estar redactados como condiciones lógicas.
    • Deben permitir una respuesta afirmativa o negativa a la pregunta formulada.

    Operacionalización (Rúbricas)

    • Las rúbricas describen el desempeño de algo en diferentes niveles.
    • Las rúbricas de gradiente determinan el valor o calidad absoluta, mientras que las de ranking lo hacen en términos relativos.

    Elección de métodos y técnicas

    • Naturaleza de la información (cuantitativa, cualitativa).
    • Métodos combinados.
    • Tiempo y recursos disponibles.
    • Credibilidad y comanditarios de la evaluación.
    • Técnicas básicas: recopilación documental, observación, encuesta, cuestionario, entrevista.

    Relación de técnicas

    • Ejes de clasificación (fuentes primarias/secundarias, cuantitativo/cualitativo, estructurada/abierta).
    • Listado de técnicas (encuesta, observación, entrevistas, grupos de discusión, historia de vida, análisis documental).

    Eje: Fuentes primarias/secundarias

    • Análisis fuentes primarias: recolección de datos por el investigador.
    • Análisis fuentes secundarias: utilización de datos ya recolectados por otros investigadores.

    Eje: cuantitativo/cualitativo

    • Enfoque cuantitativo: se basan en números y análisis agregado, utilizando procedimientos estadísticos.
    • Enfoque cualitativo: analizan categorías, valoraciones, motivaciones, estructuras y disposiciones de personas y grupos.

    Eje: estructurado/abierto

    • Técnicas estructuradas: preguntas predefinidas, respuestas cerradas.
    • Técnicas semiestructuradas: preguntas predefinidas, respuestas abiertas.
    • Técnicas abiertas: temas a indagar, dejando a los informantes la estructuración de la información.

    El análisis en evaluación

    • Los 4 niveles de análisis: hallazgos empíricos, interpretaciones, juicios y recomendaciones (Patton, 1986).

    El análisis: las recomendaciones

    • Importancia de las recomendaciones como "vínculo formal" entre la evaluación y su uso (Torres, Preskill y Piontek, 1996).
    • Las recomendaciones deben seguir una secuencia lógica y sistemática basada en los análisis previos.
    • Se debe considerar a quienes participan en la elaboración de las recomendaciones, asegurarse de que sean realistas y posibles, calcular el tiempo para su elaboración y categorizarlas y clasificarlas.
    • Se deben considerar los costos.

    El informe y la comunicación sobre la evaluación

    • Los informes deben describir claramente el programa, su contexto y los resultados, con información esencial y comprensible.
    • Las evaluaciones deben atender a las necesidades de información de múltiples audiencias.
    • Se deben asegurar la transparencia y la rendición de cuentas.

    Comunicación y difusión de la evaluación (informe)

    • Objetivo: presentar resultados y promover su uso por los decisores públicos, el aprendizaje organizativo y el desarrollo de una cultura de evaluación.
    • Importancia para la toma de decisiones, el debate social y la transparencia.

    Uso e influencia de la evaluación

    • Los cuatro tipos de uso de la evaluación: instrumental, conceptual, persuasivo e influencia en otras instituciones (Weiss, 1998).

    Del uso a la influencia

    • Preocupación por las consecuencias y la influencia: Adaptación y uso responsable de los resultados de la evaluación.
    • Distinción entre uso e influencia (Henry & Mark, 2003): Uso instrumental, conceptual, simbólico y la influencia a nivel individual, interpersonal y colectivo.

    Studying That Suits You

    Use AI to generate personalized quizzes and flashcards to suit your learning preferences.

    Quiz Team

    Related Documents

    Evaluación 2024 PDF - Políticas Públicas

    Description

    Este cuestionario examina los conceptos fundamentales de la evaluación según Stufflebeam y Shinkfield. Se abordan aspectos como la naturaleza de la evaluación, sus funciones, y los errores comunes en la evaluación de programas. Ideal para estudiantes y profesionales que desean profundizar en la evaluación educativa y de programas.

    More Like This

    Use Quizgecko on...
    Browser
    Open
    Browser
    Browser