UNIDAD II DISEÑO Y ELABORACIÓN DE UN TEST PSICOMÉTRICO.pdf

CONSTRUCCIÓN DE PRUEBAS PSICOLÓGICAS: GENERALIDADES. Dr. Efraim G. García Valles  CONTRUCCIÓN DE PRUEBAS PSICOLÓGICAS. Especificaciones de la finalidad. Traduc...

CONSTRUCCIÓN DE PRUEBAS PSICOLÓGICAS: GENERALIDADES. Dr. Efraim G. García Valles  CONTRUCCIÓN DE PRUEBAS PSICOLÓGICAS. Especificaciones de la finalidad. Traducción de la finalidad en términos operacionales. Delineación del Análisis de puestos. contenido y las Identificación de los habilidades Definición del criterios y los rasgos rasgo componentes Elaboración de los reactivos. Revisiones.  Comprobación y análisis de los reactivos. Discriminación. Dificultad. Alternativas Apropiadas. Validación cruzada. Estructuración de la forma final de la prueba. Estandarización Análisis técnicos de la Aplicación. prueba. Límites de tiempo. Confiabilidad. Calificaciones. Validez. Normas. Prueba lista para utilizarse LO QUE REPRESENTAN LAS PRUEBAS PSICOLÓGICAS. Una prueba psicológica es una representación cuando sus reactivos son similares a las conductas que nos interesa medir y predictor, cuando se enfoca en alguna conducta no considerada en la prueba que deseamos predecir. La exactitud de nuestra inferencia dependería de lo bien que hiciéramos el muestreo de los reactivos incluidos en la prueba psicológica. La muestra de reactivos incluida en la prueba representa, por lo tanto el dominio o universo de reactivos posibles. Podríamos dejar que el niño corrigiera su propia hoja de exámenes. Permitirle ver las respuestas para un examen inminente o darle oportunidad de sacar a escondidas de la clase algún objeto valioso. Al observar la conducta en esta muestra de situaciones, podríamos hacer inferencias respecto a su honestidad.  Se clasifico como muestras y signos.  Un signo, cuando el universe es abierto y no está definido claramente.  Las pruebas que son muestra se considera que describen el universo, mientras que las de signos, lo explican  REPRESENTACIÓN POR PREDICCIÓN  Si los reactivos de la prueba y la conducta relevante, no contenida en ella son similares o diferentes. Si la prueba y la conducta no contenida en ella son esencialmente similares, se dice que la prueba representa la conducta relevante; si son diferentes la prueba es de predicción.  FINALIDAD DE LA PRUEBA  Determinar el contenido de la prueba y su formato. ¿ para que fines servirá la prueba? Y ¿ en que grupos de sujetos serán sometidos al examen?.  Comúnmente se desarrolla una sola prueba para alguna combinación de usos y finalidades, más que para un solo propósito.  El constructor de una prueba debe tomar en consideración variables tales como: la edad de quienes lo tomarán, nivel intelectual, educación, orígenes socioeconómicos, culturales y nivel de lectura.  CONTENIDO DE LAS PRUEBAS  Esta especificación cubre una vez más dos grandes áreas: contenido y formato.  Pruebas representativas: Además de especificar el contenido, el constructor de una prueba debe especificar también las habilidades que se van a medir.  Si la prueba psicológica se desarrolla para medir algún rasgo o alguna característica psicológica dada, la tarea del constructor será distinta. En primer lugar deberá definir, de modo tan explicito como sea posible el rasgo que se medirá. A continuación tendrá que indicar las conductas a través de las cuales se manifiesta el rasgo.  PRUEBAS DE PREDICCIÓN  La etapa consiste en efectuar un análisis sistemático de la ejecución que se trata predecir.  Los resultados de ese análisis debe indicar una medida apropiada de criterio e identificar los rasgos y las conductas que se necesitan para que la ejecución sea satisfactoria.  Un criterio es una medida del éxito, osea, la conducta que se debe predecir. Las finalidades del análisis de puestos es identificar las conductas y por ende, los rasgos que parezcan tener relación con el éxito en el trabajo.  LOS PLANES DE UNA PRUEBA PSICOLOGICA  El vehículo utilizado para especificar la amplitud de una prueba, es el plan de la misma que se cubren y las habilidades que se medirán en la prueba, junto con la importancia relativa que se atribuye a cada categoría de contenido de habilidades. Esas proporciones deben reflejar la importancia relativa de cada área. Formato de la  El modo en que se prueba presentarán los reactivos. ALGUNAS DIMENSIONES COMUNES DE FORMATOS DE PRUEBAS  Respuesta alternativa vs libre: escoge la respuesta apropiada de entre varias alternativas. Proporciona una respuesta como en complemento de frases, respuestas cortadas o preguntas de ensayo.  Pruebas de velocidad vs pruebas de poder: los reactivos suelen ser muy sencillos, un tiempo limite estricto, la calificación es un índice de velocidad de las respuestas. Una prueba de poder se compone de reactivos de dificultad variable y tiene un limite de tiempo que permite dar respuesta a todos ellos. La calificación refleja el nivel de dificultad de los reactivos a los que pueden responder el sujeto. Ejecución máxima vs ejecución típica  El sujeto recibe instrucciones de tratar de obtener la mejor calificación que pueda. Nos interesa conocer su comportamiento habitual o normal. Las pruebas de rendimiento y de aptitudes son medidas de ejecución máxima y las de personalidad son medidas de ejecución típica.  Papel y lápiz vs ejecución: Esta distinción se refiere al modo en que se presentan los reactivos de una prueba y como sedan las respuestas. Las pruebas de ejecución implican, con frecuencia la manipulación de algún aparato u objeto.  Aplicación colectiva vs individual: Las pruebas colectivas se pueden aplicar a más de un solo individuo a la ves, por lo que suelen ser de papel y lápiz. Las pruebas individuales se pueden aplicar solo a una persona cada ves y pueden ser de ejecución o verbales.  Pruebas estructuradas vs proyectivas: En una prueba estructurada se especifica con claridad los estímulos y las tareas del sujeto. En una prueba proyectiva las pruebas estructuradas se les llaman objetivas.  Una prueba de velocidad de papel y lápiz, utilizando reactivos de reconocimiento. Puede incluir tipos diferentes de reactivos ej.:  Los exámenes de clase incluye con frecuencia preguntas con elección alternativas, como de respuestas libres.  Hay dos consideraciones que ayudan a tomar una decisión entre formatos posibles; las características de sujetos que han de tomar la prueba y ciertos factores prácticos. El uso de las pruebas con un contenido verbal mínimo para las personas con deficiencia en el lenguaje. Las pruebas aplicadas en donde el único método factible de calificarlas es el de utilizar maquinas electrónicas.  CONSTRUCCIÓN DE LA PRUEBA ELABORACIÓN DE LOS REACTIVOS.  Después de tomar esas decisiones preliminares, la prueba estará lista para comenzar a redactar los reactivos. Para un examen de clase Existe un contraste de las pruebas de rendimiento desarrolladas para usarse en diversas escuelas. Las preguntas o reactivos de los inventarios de personalidad e incluso las preguntas o los reactivos de otros inventarios de personalidad.  El proceso de desarrollo de buenos reactivos es la redacción, corrección, prueba y revisión. Al principio se describen muchos más reactivos de lo que se necesitarán. A continuación se revisan y corrigen las primeras redacciones de las preguntas. La corrección implica la eliminación de la redacción ambigua, el fortalecimiento de las alternativas débiles y la exclusión de reactivos duplicados y por ende inútiles. ANALISIS Y COMPROBACIÓN DE REACTIVOS  Los reactivos que sobreviven a la selección inicial se combina a continuación, en una o más formas de pruebas previas. Estas pruebas previas se aplican a una muestra de personas similares a las que se examinará con la prueba terminada.  La meta de la comprobación previa es obtener información sobre como reaccionan los alumnos ante los reactivos. Está prueba consistirá en comentarios cualitativos, los de ambigüedades percibidas en los reactivos, e índices cuantitativos de la dificultad y el poder de discriminación de los reactivos.  La dificultad de los reactivos es el porcentaje de personas que responden a ellos correctamente. El conocer la dificultad de ellos es importante para que el constructor de la prueba, pueda estructurar una prueba de cierto nivel de dificultad. El concepto de dificultad tiene sentido.  El índice más importante es el del poder discriminativo de los reactivos. Este análisis estadístico indica amplitud, mide lo que debe medir. Idealmente deberá disponerse de un criterio externo de medida, con el fin de que se pueda determinar empíricamente si las personas que respondieron correctamente a un reactivo obtuvieron también calificaciones elevadas en el criterio. En la practica, esas medidas externas no se encuentran disponibles.  Como substituto de ellas, se utiliza la calificación total en la prueba como medida de criterio y se compraran las respuestas a los reactivos individuales con las calificaciones, con el fin de determinar si las personas que obtuvieron calificaciones elevadas en la prueba respondieron a un reactivo de forma correcta con mayor frecuencia que las obtuvieron calificaciones muy bajas. Cuando esto ocurre se dice que el reactivo discrimina.  La discriminación se refiere al hecho de efectuar distinción entre personas que tengan conocimiento o habilidades mayores o menores en el área medida por las pruebas.  La ejecución típica, el procedimiento analógico determina si las respuestas están de acuerdo con las respuestas del grupo designado como criterio, los reactivos en una medida de “dominancia”. Mediante un análisis de reactivos es el numero de personas que seleccionan cada una de las respuestas alternativas para un reactivo. En situaciones específicos se pueden realizar otro análisis.  Los análisis de reactivos se llevan acabo con frecuencia en dos muestras independientes. Este proceso denominado de validación cruzada, hacen que se reduzcan las probabilidades de verdaderas diferencias.  ENSAMBLAJE DE LA PRUEBA  La etapa que sigue es la de preparar la o las formas finales de la prueba. Los resultados de los análisis de reactivos se utilizan para seleccionar los reactivos que proporcionen la mejor discriminación.  ANALISIS DE LA PRUEBA ESTANDARIZACIÓN  Presentados los mismos reactivos ( o equivalentes) y que existan reglas especificas para la administración y la calificación de pruebas.  La estandarización se referirá a los procedimientos para obtener calificaciones y no a los requisitos necesarios para interpretar los datos.  Contenido: es el conjunto de reactivos comunes que se aplican a todos los sujetos que se someten a la prueba.  Aplicación: Por lo común se requieren dos conjuntos de instrucciones: uno para quien se somete a la prueba y otro para quien la aplica. El primero se debe explicar en una forma clara y simple como resulte posible, el modo en el que el sujeto debe de responder a los reactivos. Las indicaciones dadas a los sujetos deben indicar el modo en que se elegirá una respuesta.  Las indicaciones para quien aplica la prueba se imprime en un manual por separado. Estas direcciones incluyen las que se dan al sujeto con una explicación más amplia sobre sus derivaciones. Incluyen también detalles sobre la disposición del salón de exámenes, la distribución de materiales, el registro del tiempo y de las calificaciones. También se deberá de dar instrucciones sobre como manejar los problemas y las preguntas que se presenten durante la sesión de un examen.  Calificaciones: El tercer elemento de la estandarización es el de las calificaciones objetivas. La objetividad implica un acuerdo entre dos o mas calificadores competentes (preparados). En la practica en el caso de reactivos de respuestas libres, dichos acuerdos serán mucho menos completos.  Una regla empírica consiste en considerar calificaciones como objetiva, si el acuerdo promedio entre pares de calificadores competentes es de 90% o más. Solo en el caso de que las calificaciones sean objetivas se podrán atribuir las diferencias entre las calificaciones a las diferencias existentes entre los sujetos examinados. Los requerimientos de la calificación objetiva se pueden reducir a tres etapas básicas:  La del registro inmediato. Y carente de ambigüedades de la respuesta.  El segundo es una lista de respuestas estándar o correctas, ósea una clave de calificación.  Procedimiento para comparar las respuestas dadas por el sujeto con las que figuran en las claves, esto es procedimiento para calificar objetivamente las respuestas. En los reactivos de selección de alternativas, tales como los de elección múltiple, este procedimiento es directo y evidente. El buen juicio del calificador puede ser uno de los factores importantes como sucede al calificar exámenes o ensayos.  ANÁLISIS PSICOMÉTRICO  La aplicación de los procedimientos analizados antes, solo asegura una cosa: que la calificación dada a un individuo refleje sus capacidades o sus características de personalidad y no las peculiaridades o vicisitudes de la situación de prueba.  CONFIABILIDAD  A menos de que una prueba proporcione medidas consistentes, se podrá tener muy poca fe en la exactitud de sus calificaciones. Es decir un individuo deberá obtener, aproximadamente las mismas calificaciones en cada aplicación de una prueba.  Sin consistencia, estas mediciones son análogas ala medición de distancias, con una regla de caucho. Se obtendrían resultados diferentes en cada ocasión ( medición), dependiendo de lo que se estirara la regla. La estimación de confiabilidad de una prueba requiere ya sea la aplicación de la prueba dos veces, la aplicación de formas equivalentes de la prueba o el análisis de su estructura interna.  VALIDEZ  Las características más importantes de una prueba es su validez; ósea la extensión con la que la prueba debe medir. Sin pruebas la validez de una prueba no sabremos lo que mide en realidad ; así no será posible interpretar o dar un significado a las calificaciones.  DATOS NORMATIVOS  Los resultados de las pruebas tiene por si mismo poco significado. Solo alcanzan un significado cuando se compara una calificación individual con los resultados obtenidos por otras personas en la misma prueba. Al comparar las calificaciones de un individuo con las de otras personas en una población especifica( grupo normativo), obtendremos una indicación de su desempeño relativo en comparación a la de otros de la misma población.  En la mayoría de los casos, deseamos comparar calificaciones de los individuos con las de varios grupos diferentes, el que desarrolla la prueba debe proporcionar datos útiles para varios grupos normativos. ELEMENTOS ESTADÍSTICOS BÁSICOS La estadística descriptiva resume y describe un conjunto de datos en términos cuantitativos. El uso de esos índices tienen varias ventajas:  Las observaciones son más objetivas.  Los resultados se pueden señalar de manera más precisa.  Facilitan la comunicación. Además el uso de la estadística sintetizada es más económico que el presentar informes de masas de datos.  CALIFICACIONES BRUTAS Y TRANSFORMADAS  Las calificaciones que se obtienen directamente de la ejecución de una prueba, se llaman calificaciones brutas ( y lo representaremos mediante una X). En las pruebas de ejecución máxima la calificación bruta suele ser el número de reactivos a los que responda correctamente; sin embargo se pueden utilizar otras medidas, tales como el numero de errores, la suma de puntos en varias preguntas, el tiempo necesario para contestar la prueba, o un registro.  En la prueba de ejecución típica como los inventarios de personalidad, las calificaciones brutas se obtienen de una manera ligeramente diferente. En este caso los reactivos se agrupan según estén relacionados para representar la respuesta dominante de algún grupo definido. GRACIAS!!!!  Bibliografía  Aiken, R. (2003). Tests psicológicos y Evaluación. Undecima edición. Ed. Pearson educación. México.  Anastasi, A. Urbina, S. (1998). Tests psicológicos. Séptima edición. Ed. Prentice Hall. México.  Brown, F. (1986). Principios de la medición en Psicología y Educación. Ed. Manual Moderno. México