PSY2003: Technique Pomodoro et Groupes de Travail

• PSY2003 : Introduction à la psychométrie
• Cours 2 : Modèle de la cible et usage anticipé

Capsule Boîte à outils

• La technique Pomodoro

Technique Pomodoro

• Décider de la tâche à effectuer.
• Régler le pomodoro (minuteur) pour une période donnée (25 ou 50 minutes).
• Travailler sur la tâche jusqu'à ce que le minuteur sonne.
• Prendre une courte pause (5-10 minutes).
• Recommencer, en prenant une pause plus longue après quelques cycles.
• Un conseil professionnel est de le faire avec autrui pour l'aspect motivant et l'engagement.
• Consulter Thèsez-vous? pour des séances organisées.
• La technique a été développée par Francesco Cirillo.

Petit mot sur le travail

• Retour sur la formation des groupes de travail.

• Les groupes sont attribués à l'un des deux auxiliaires : Laurianne Rioux (groupes 01-12) et William Mayer (groupes 13-21).

• Les adresses courriel de Laurianne Rioux et William Mayer sont respectivement [email protected] et [email protected].

• Réflexion sur la méthode d'étude : méthode qualitative ou méthode quantitative?

• La méthode qualitative est utilisée pour effectuer l'analyse d'une entrevue et permet de capturer plus de nuance et de richesse.

• La méthode quantitative démontre le plus de rigueur scientifique.

• Question : Seuls les chercheurs en psychologie utilisent la psychométrie : Faux.

Plan de la séance

• Présentation du modèle de la cible.
• Étape 1 : usage anticipé.
• Exercice #1.
• Jalon.

Le modèle de la cible

• Décrit un processus pour construire/modifier un instrument psychométrique.
• Sert à vérifier les qualités psychométriques d'un instrument.
• Trois éléments : Utilité, Validité, Fiabilité (fidélité)

Trois concepts

• Fidélité ou Fiabilité : Quel niveau d'erreur de mesure l'instrument contient-il?
• Validité : À quel point l'instrument mesure-t-il ce qu'il est censé mesurer?
• Utilité : Est-ce que l'instrument sert à quelque chose?
• Le modèle de la cible se compose de deux phases: préparation et vérification.
• Le modèle de la cible se fait en six (6) étapes.
• Les six (6) étapes du modèle sont usage anticipé, conceptualisation, élaboration, stabilité, congruence, et usage recommandé.

Deux tâches

• Objectifs
• Moyens

Vue d'ensemble

• Il y a six étapes : usage anticipé, conceptualisation, élaboration, stabilité, congruence et usage recommandée

• Quel concept fait référence au niveau d'erreur de mesure de de l'instrument? : La fidélité.

• Quelle étape correspond à la phase de vérification de l'utilité de l'instrument?: Usage recommandé

Étape 1 : L'usage anticipé

• Objectifs:
• Buts de l'instrument
• Population visée
• Contexte d'utilisation
• Moyens:
• Analyse d'instruments
• Lectures
• Consultations
• Exemple: Scholastic Aptitude Test (SAT)

Scholastic Aptitude Test (SAT)

• Instrument utilisé dans le système scolaire américain
• S'intéresse à ce qui a été appris au secondaire.
• Ne prétend pas mesurer l'intelligence.
• Prédit le succès scolaire d'élèves du secondaire une fois à l'université.
• Population: étudiants au secondaire
• Contexte: Supervision en classe
• Constaté qu'il n'y avait pas de test utilisé de manière généralisée aux USA

Étape 2 : La conceptualisation

• Objectifs:
• Définir, catégoriser et organiser les composantes des phénomènes à mesurer
• Positionnement avec autres concepts
• Moyens:
• Synthèse des aspects conceptuels des instruments
• Lectures théoriques et empiriques
• Consultations

Scholastic Aptitude Test (SAT)

• Aptitudes de deux type :
• Verbales (SAT-V) : antonymes, analogies
• Mathématiques (SAT-M) : questions numériques, comparaisons de quantités

Étape 3 : L'élaboration

• Objectifs:
• Prévoir les sources d'erreur de manière à les minimiser
• Choix du format de l'instrument
• Construire les items
• Choisir la méthode de correction
• Version préliminaire des consignes de passation
• Moyens:
• Lectures psychométriques
• Inventaire des stratégies employées

Exampe du SAT (Scholastic Aptitude Test)

• Questions à choix multiples élaborées par des professeur de 'high-school' et du 'college'
• SAT-V: 85 questions de simple à difficile : antonymes (5 choix), analogies (5 choix), compléter phrases (5 choix), compréhension de lecture (5 choix)
• SAT-M: 60 questions de simple à difficile : questions numériques (5 choix), comparaisons de quantités (4 choix)
• Durée : deux heures
• Passation en groupe
• Le score varie de 200 à 800, avec la moyenne ajustée à 500 et l'écart-type ajusté à 100
• Une vingtaine d'administrations simultanées

Étape 4 : La stabilité

• Objectifs:
• Vérifier la nature et l'ampleur de l'erreur
• Établir la stabilité interne et temporelle
• Moyens:
• Approache hypothético-déductive
• Erreur-type de mesure
• Analyses d'items et corrélationnelles
• Accord inter-juges

Scholastic Aptitude Test (SAT)

• Erreur-type de mesure: SAT-V : 31, SAT-M : 33
• Consistance interne: SAT-V: Alpha de Cronbach de a = 0,92, SAT-M: Alpha de Cronbach de a = 0,91
• Stabilité temporelle (intervalle de 7 mois) : r = 0,88

Étape 5 : La congruence

• Objectifs:
• Vérifier les quantifications et/ou organisation des concepts
• Moyens:
• Approache hypothético-déductive
• Analyses corrélationnelles et factorielles
• Équations structurelles

Scholastic Aptitude Test (SAT)

• Validité de contenu : Les questions posées représentent les domaines enseignés au « high-school ».
• Validité prédictive (résultats partiels – les meilleurs élèves seulement) : corrélation entre le SAT-V et les note au « college » : r = 0.54
• Corrélation entre le SAT-M et les notes au « college » : r = 0,48. Entre les notes au high school et college : 0,67

Étape 6 : L'usage recommandé

• Objectifs:
• Préciser buts, population visée, circonstances d'utilisations, etc.
• Guider l'interprétation
• Moyens:
• Article et normes scientifiques

Scholastic Aptitude Test (SAT)

• Objectifs : prédire le succès scolaire.
• Population : tous les types d'élèves du "high school".
• Semble pouvoir atteindre ce but, mais la mesure n'est pas parfaite.

Processus décisionnel

• Lors de la construction et de la validation d'un instrument psychométrique, il faut détecter les problèmes et apporter des correctifs.

• Si tout va bien : Contrôle

• Ordre des étapes si j'ai un problème de fiabilité : je détermine ou est le problème et une fois réglé, je peux reprendre!

Principe général

• Si un problème est détecté dans la phase de vérification, il faut retourner à l'étape correspondant à ce concept dans la phase de la préparation
• Problème détecté à l'étape de la stabilité: retourner à l'étape à l'étape d'élaboration
• Problème détecté à l'étape de la congruence: retourner à l'étape de conceptualisation.
• Problème détecté à l'étape de l'usage recommandé: Retour à l'étape de l'usage anticipé

Problématiques auxquelles le modèle de la cible aide à répondre

1. Mauvaise connaissance des autres instruments
2. Utilisation d'instruments désuets
3. Concepts mal définis
4. Type de mesure peu approprié à la situation
5. Techniques statistiques mal utilisées
6. Mauvaise interprétation des indices statistiques

Étape 1 : L'usage anticipé

• Concept de L'utilité (en rouge), phase de préparation (à gauche de la ligne verticale)
• Objectifs:
• Déterminer ce que mesurera l'instrument (1.construit ) et à quoi serviront les résultats qui en émaneront (buts fondamental et psychométrique)
• Déterminer qui seront les bénéficiaires (2. population),les utilisateurs et les administrateurs (acteurs à identifier)
• Déterminer le contexte d'utilisation (3.contexte)
• Moyens:
• Survol analytique des instruments existants et lecture des articles de recherches sur le domaine

Concepts de base

• Les résultats d'un instrument doivent obligatoirement être interprétés en fonction du construit, de la population et du contexte.

Le construit

• C'est le concept qu'on va mesurer avec notre instrument (ex: dépression, engagement, etc.)
• La dépression ne doit pas être utilisée pour mesurer l'anxiété ou l'épuisement professionnel. L'identification à l'organisation ne doit pas être utilisée pour mesurer l'engagement affectif envers l'organisation.

La population

• Ce sont des gens qui vont passer le test
• Binet : identifier enfant à assigner à des classes spéciales
• Stranford-Binet : adapter le Binet aux besoins des états unis
• Wechsler Adult Intelligence Scale (WAIS) : Évaluer l'intelligence des adultes

Le contexte

• Les conditions dans lesquelles les participants vont passer le test
• Temps de passation. Connaissances préalables. Modalités de passation (Ex : en ligne)
• Bénéficiaires : identifier les bénéficiaires
• ** But psychométrique** : Quel est la valeur ajoutée de l'instrument par rapport au autres instruments
• But fondamentale : Quel est l'objet de l'évaluation et pourquoi?
• Pour mieux correspondre aux avancées théoriques et cliniques

Nouvelle instrument pourquoi?

• Procéder à une évaluation plus courte : afin de réduire la fatigue
• Changer la modalité d'évaluation.
• Traduire avec ou sans adaptation culturelle.
• Préciser le construit. Cible plus précisément un pan de la population

Acteurs identifiers

• Mandataires
• Correcteurs
• Concepteur
• Administrateur
• Bénéficiaire
• Utilisateurs
• Ne pas confondre les acteurs impliqués dans validation du test avec ce impliqués dans l'utilisation du test.
• À l'usage anticipé, ce sont ces acteurs que nous identifions !

Exercice

• Vous avez été engagé pour réaliser une étude sur la santé psychologique.

• But fondement : faire un portrait des niveaux d'anxiété des étudiants pour voir ou on peut situer les besoins

• But psychométrique : adapter les items pour correspondre aux contexte

• Conpteurs : nous-même

• Bénéficiaires : les etudiant-es

• Administateurs : l'université

• Faire la Question 1 (a et b)

• Relire le document sur StudIUM

• Chapitre 1 p.4-14 (facultatif)

• Parmi la liste suivante, veuillez choisir une facette de personnalité.

• Veuillez décrire l'usage anticipé de votre instrument.

Cours sur la technique Pomodoro de Francesco Cirillo pour améliorer la concentration et la gestion du temps. Information sur les groupes de travail de PSY2003, avec les contacts des auxiliaires Laurianne Rioux et William Mayer.