Test Construction

Tipos de Pruebas

• Pruebas de ejecución: miden la habilidad de alguien que no ha sido adiestrado
• Observaciones de comportamiento: evalúan el comportamiento en un entorno específico
• Autoinformes individuales: información provista por la persona evaluada
• Autoinformes grupales: información provista por un grupo de personas
• Instrumentales: utilizan instrumentos como computadoras para evaluar habilidades
• Aptitudes: miden la habilidad de alguien que no ha sido adiestrado
• De perfección: miden lo que la persona conoce en un momento específico

Evaluación

• Proceso que consiste en obtener información sistemática y objetiva acerca de un fenómeno y en interpretar dicha información a fin de seleccionar entre distintas alternativas de acción
• Proceso subjetivo mientras que la prueba es objetiva
• Proceso sistemático para comprobar cuan adiestrado está un grupo luego de un adiestramiento
• Juicio subjetivo de la calidad de la ejecución

Intervalos de Confianza

• Rango de valores que se utiliza para estimar un parámetro poblacional desconocido con determinado nivel de confianza
• Forma de expresar la incertidumbre en torno a una estimación de un parámetro poblacional, como la media
• Se calcula a partir de las estadísticas de la muestra y el nivel de confianza deseado
• Proporciona un intervalo de valores probablemente incluya el parámetro poblacional verdadero con un cierto nivel de confianza

Confiabilidad

• Se refiere a la consistencia de puntuaciones obtenidas por la misma persona cuando es reexaminado con la misma prueba en ocasiones diferentes, o diferentes grupos de reactivos equivalentes, o bajo otras condiciones de examinación
• Formas de establecer confiabilidad:
  • Confiabilidad a través del tiempo: método prueba-reprueba
  • Confiabilidad a través de los elementos de la prueba: método de división en mitades
  • Consistencia interna: método Kuder-Richardson, coeficiente Alfa de Cronbach
  • Método entre evaluadores: coeficiente Producto Momento de Pearson, Kappa de Cohen

Validez

• Uno valida la interpretación de los datos
• Definiciones:
  • Tradicional: mide la prueba aquello para lo que fue diseñada a medir
• Funciones:
  • Validez de contenido: representa un universo de contenido específico
  • Validez relacionada al criterio: establecimiento de una relación estadística con una variable
  • Validez de constructo: medición de teorías o rasgos psicológicos

Validez de Contenido

• Medida adecuada o representativa de lo que se supone que mida
• El contenido es representativo del universo que pretende medir
• Técnicas:
  • Shapiro & Fitzgerald: se seleccionan aquellas con 4 o 5
  • Técnica de Lawshe: panel de jueces realiza un análisis de contenido de cada reactivo y se señala si es esencial o no esencial

Validez Relacionada al Criterio

• Cuando las puntuaciones de una variable “X” correlacionan con las puntuaciones de una variable “Y”
• Requisito de una prueba en tener una asociación con un criterio
• Se determina la fuerza de la relación entre las puntuaciones de las pruebas y el desempeño del criterio
• Tipos:
  • Validez predictiva: grado en el cual las puntuaciones de una prueba predicen un comportamiento o ejecución futura
  • Validez concurrente: relación entre las puntuaciones de la prueba y las medidas del criterio tomadas al mismo tiempo