Diseño y Elaboración de Ítems PDF

Bloque II: Diseño y análisis de ítems. Tema 3: Diseño y Elaboración de Ítems. 1. Introducción. Un ítem es cada una de las partes o unidades de información de que se compone un test psicológico. Sus propiedades psicométricas repercuten en las del test. Consta de: a. Instrucciones. b. Enunciado o e...

Bloque II: Diseño y análisis de ítems. Tema 3: Diseño y Elaboración de Ítems. 1. Introducción. Un ítem es cada una de las partes o unidades de información de que se compone un test psicológico. Sus propiedades psicométricas repercuten en las del test. Consta de: a. Instrucciones. b. Enunciado o estímulo. c. Alternativas u opciones de respuesta/respuesta abierta. TIPOS DE ÍTEMS. Según la forma de puntuación Según su formato de respuesta 1. 2. 1. 2. 3. 4. 5. Dicotómicos: solo tienen dos opciones de respuesta Politómicos: tienen más de dos opciones de respuesta Cerrado o de elección de respuesta. (Al sujeto se le dan una serie de opciones y la persona debe elegir una de ellas). Binarios. Elección múltiple. Escalas graduadas tipo Likert o ratings. Diferencial semántico de Osgood. Escalas de adjetivos. Abierta o de elaboración de respuesta. Ordenación de estímulos. Emparejamiento de estímulos. Comparación y valoración de estímulos 2. Construcción de Ítems. PAUTAS GENERALES. - Verificar que el ítem corresponda con los propósitos de la evaluación, la estructura de la prueba y con las dimensiones disciplinares. - Todas las preguntas de una prueba deben ser independientes entre se. La información de un ítem no debe servir de pauta para contestar otro, ni la respuesta a un ítem debe depender de tener encontrada primero la de otro ítem anterior. - Evitar los ítems que pueden contestarse por sentido común y aquellos cuya respuesta dependa únicamente de recordar un término, símbolo, dato o fecha en la que ocurrió un evento. - Evitar expresiones rebuscadas que podan confundir. Se recomienda emplear un lenguaje directo, sencilla y comprensible. - Los ítems no deben tener juicios de valor explícitos o implícitos. Tema 3: Diseño y elaboración de ítems. 1 Bloque II: Diseño y análisis de ítems. PAUTAS PARA LOS ENUNCIADOS. - Los enunciados deben ser afirmativos, en caso de ser necesaria el no, se debe resaltar para llamar la atención hacia el planteamiento negativo. El doble no afecta a la comprensión (“No es cierto que no existan los recursos necesarios”). - Evitar enunciados demasiado extensos y poco atractivos ya que desmotivan la lectura, disminuyen el tiempo de respuesta y fatigan. - Garantizar la coherencia interna del enunciado y de este con las opciones de respuesta. - Expresar una única idea en el enunciado. - Evitar la ambigüedad en la redacción. - Evitar enunciados que provoquen respuestas sesgadas. PAUTAS PARA LAS RESPUESTAS. - Las opciones de respuesta deben pertenecer al mismo campo semántico. - Las opciones de un ítem no deben dar indicaciones sobre la respuesta correcta por ofrecer un cierto contraste evidente de: - a. longitud precisión / imprecisión. b. uso común / técnico. c. generalización / particularización. No se deben repetir expresiones en las opciones de respuesta, se pueden incluirse en el enunciado del ítem. Repetir la misma palabra del enunciado en cualquiera de las opciones lleva la que sea elegida como respuesta correcta, sin sello necesariamente. - Debe evitarse en las opciones las expresiones “todas o ninguna de las anteriores”. En su lugar es necesario construir alternativas de respuesta plausibles para las personas que no tengan el dominio conceptual que exige el ítem. - Realizar una revisión gramatical y ortográfica de cada uno de los ítems. SESGOS DE RESPUESTA. Los principales son los siguientes: 1. Sesgo de aquiescencia, consentimiento, o “siempre dice que sí” Aparece cuando los encuestados tienden a estar de acuerdo con todas las preguntas, independientemente de su contenido. Para evitarlo intercala (especialmente al principio del test) ítems con enunciados directos e inversos y formula los ítems de manera que se les “obligue” a escoger la opción negativa como la más idónea, con el fin de estimular el juicio crítico de los entrevistados. Para esto se utilizan las preguntas inversas. Tema 3: Diseño y elaboración de ítems. 2 Bloque II: Diseño y análisis de ítems. 2. Sesgo de aceptación o deseabilidad social Tendencia a elegir respuestas socialmente aceptadas y no optar por características poco atractivas. Responder a un cuestionario dando una imagen de si misma más favorable del normal. Para evitar este sesgo, es fundamental garantizar el anonimato con el fin de fomentar respuestas honestas. Redacta tus ítems de manera que las opciones aparezcan neutras o igualmente aceptables, intentando evitar “alternativas socialmente correctas”. En temas políticos/controversiales. Para evitar los sesgos utilizan enunciados "asépticos" y también realizando preguntas con entradas "normalizando" la pregunta. P. ej: "Como sabes mucha gente roba en supermercados, ¿lo has hecho alguna vez? 3. Sesgo de orden. Tendencia a elegir la respuesta que se dio en el ítem anterior, por los motivos que sean (escasa atención a los ítems del test, aquiescencia, aceptación social, etc.). El mejor para evitar este sesgo es redactar una buena introducción que especifique claramente que los respondientes deben mostrar especial atención al enunciado de cada ítem, combinado con la elaboración de más de una versión del test (4 versiones estarían bien), con los ítems ordenados aleatoriamente en cada una de las versiones, y aplicar equitativamente cada una de las versiones a nuestra muestra. Ten en cuenta que existen otras dos fuentes de potenciales sesgos en una investigación con sujetos: - Sesgos referidos al muestreo: Idónea selección de los participantes: representativos de la población de la referencia o por lo menos escogidos “con tino”. - Sesgos relacionados con el entrevistador: Utilización de varios entrevistadores, instrucciones claras a todos ellos, etc. 3. Formatos de respuesta. FORMATOS DE RESPUESTA DE TEST DE EJECUCIÓN MÁXIMA. 1. Elección binaria. P.ej: Los test psicométricos siguen normas de valoración cuantitativa. V/F 2. Elección múltiple. P.ej: El coeficiente de correlación de Pearson puede tomar valores entre: 3. a. 0y1 b. +1 y -1 c. +3 y -3 d. 0 y -1 Emparejamiento: formar parejas entre dos conjuntos de palabras o frases. FORMATOS DE RESPUESTA DE TEST DE EJECUCIÓN TÍPICA. 1. Elección binaria: De acuerdo / En desacuerdo 2. Categorías ordenadas (Likert): Continuo de (comúnmente cinco) alternativas de respuesta, cada una de ellas con una etiqueta. Posible sesgo de tendencia central. Permiten evaluar frecuencia, cantidad, grado de acuerdo… Conviene elegir muy bien las expresiones lingüísticas utilizadas para Tema 3: Diseño y elaboración de ítems. 3 Bloque II: Diseño y análisis de ítems. las categorías. Puede que las distancias entre los items no sean la misma. Las expresiones lingüísticas que utilicemos van a determinar la distancia percibida entre los items. 3. Adjetivos bipolares (Osgood): Dos adjetivos o adverbios contrarios nos extremos de una escala de (normalmente siete) alternativas. Requieren un mayor esfuerzo cognitivo. 4. Escala de 0-10: En vez de etiquetas verbales, muestran un número por encima de cada alternativa de respuesta. Recoge más matrices pero mayor esfuerzo cognitivo. 4. Cuantificación de respuestas. Test de ejecución máxima Test de ejecución típica Elección binaria. La puntuación total de cada sujeto en el test será igual a la suma de aciertos en los diferentes ítems. Acierto: 1/ Error: 0. Elección múltiple. Para corregir los efectos de los aciertos por azar la puntuación total se obtiene: La respuesta que indique mayor nivel del trazo que estamos midiendo, tendrá la puntuación más alta. Para evitar sesgos de aquiescencia y habituación, conviene intercalar ítems con puntuación directa y puntuación indirecta. La puntuación total del sujeto en el test será la suma de las puntuaciones obtenidas en los diferentes ítems. *Recordar escala tipo Likert. - Tema 3: Diseño y elaboración de ítems. 4