Fiche de révision : Conception et analyse des questionnaires

📋 Plan du Cours

1. Questionnaire et construits latents
2. Choisir un questionnaire adapté
3. Fidélité et validité psychométriques
4. Adapter l’outil à la population
5. Formats et types de questions
6. Préparer les données du questionnaire
7. Calculer et analyser les scores
8. Choisir un questionnaire validé
9. Modalités de passation
10. Intérêts et biais des questionnaires

📖 1. Questionnaire et construits latents

🔑 Notions clés & Définitions

• Questionnaire : Instrument standardisé de recueil de données constitué de questions ou d’items permettant de mesurer une ou plusieurs caractéristiques chez un individu.
• Construit latent : Caractéristique qui ne peut pas être observée directement et que l’on cherche à mesurer à partir d’indicateurs observables.

★ À maîtriser

📌 Une variable observable peut être mesurée ou constatée directement, comme l’âge, la taille ou le nombre d’heures de kinésithérapie par semaine, tandis qu’une variable latente, comme la motivation, l’anxiété ou l’estime de soi, ne l’est pas directement.

Compléments

• L’anxiété d’un patient peut être approchée par plusieurs indicateurs observables :
  • une augmentation de la fréquence cardiaque
  • une tension musculaire
  • un discours anxieux
  • l’évitement de certains mouvements
  • des hésitations

💡 Astuce mémo

Le construit est invisible ; ses indicateurs sont observables.

📖 2. Choisir un questionnaire adapté

★ À maîtriser

• 🔄 Le choix d’un questionnaire passe par ces étapes : définir précisément le construit étudié, identifier ses dimensions, distinguer ce qui est observable de ce qui est latent, vérifier que l’outil couvre toutes les dimensions visées

📌 Un construit unidimensionnel correspond à une seule dimension, tandis qu’un construit multidimensionnel est composé de plusieurs dimensions complémentaires.

Compléments

📌 Le questionnaire doit être choisi en fonction du construit étudié, et non l’inverse.

📌 La littérature scientifique doit être utilisée pour définir le concept étudié avant de rechercher un questionnaire adapté.

💡 Astuce mémo

Définir le construit, repérer ses dimensions, puis choisir l’outil.

📖 3. Fidélité et validité psychométriques

🔑 Notions clés & Définitions

• Fidélité : Fiabilité et cohérence d’un test, notamment vérifiées par la cohérence interne de ses items.
• Validité de contenu : Vérification que les items représentent bien le construit mesuré et ses différentes facettes.
• Cohérence interne : Vérification que les items d’un questionnaire censés mesurer le même construit vont dans le même sens.
• Validité de construit : Vérification que l’outil mesure le concept théorique qu’il est censé mesurer et fournit une mesure adéquate du modèle théorique sur lequel il s’appuie.
• Validité de critère : Vérification que les résultats du test sont liés à un résultat réel qu’ils sont censés prédire ou mesurer, ou cohérents avec une mesure de référence.

★ À maîtriser

• Une cohérence interne est considérée comme acceptable lorsque α/ω ≥ .70.

Compléments

• L’alpha de Cronbach (α) et l’oméga de McDonald (ω) évaluent dans quelle mesure les items d’une même échelle sont corrélés entre eux.

📌 La validité concourante compare le test à d’autres mesures réalisées en même temps, tandis que la validité prédictive vérifie si le test peut prédire un résultat futur.

• Richard et Kubany proposent sept règles pour déterminer la validité de contenu :
  • définir clairement le construit et ses facettes
  • impliquer des experts et la population cible
  • valider le contenu et la forme de l’outil
  • faire évaluer les items par plusieurs experts
  • vérifier l’équilibre entre les facettes
  • présenter les résultats de validation
  • réajuster l’outil selon les analyses ultérieures

💡 Astuce mémo

Fidélité : cohérence ; validité : mesure adéquate.

📖 4. Adapter l’outil à la population

★ À maîtriser

📌 Un questionnaire peut être scientifiquement valide sans être pertinent pour toutes les populations auxquelles il pourrait être destiné.

• L’adéquation à la population dépend de :
  • l’âge des participants
  • leur niveau de compréhension
  • leurs caractéristiques
  • le contexte de passation
  • leurs capacités particulières

Compléments

• L’adaptation peut notamment porter sur : le vocabulaire et la longueur du questionnaire, la culture et la langue, le niveau d’études et la situation sociale, le contexte professionnel, les difficultés cognitives, sensorielles ou motrices

📖 5. Formats et types de questions

🔑 Notions clés & Définitions

• Échelle dichotomique : Échelle qui propose deux possibilités de réponse.
• Échelle de Likert : Échelle qui mesure le degré d’accord ou de désaccord avec une affirmation.
• Échelle de fréquence : Mesure à quelle fréquence un comportement se produit.
• Échelle d’intensité : Mesure le degré ou la force d’une sensation, d’un état ou d’une expérience.
• Échelle numérique : Demande au participant de donner une valeur chiffrée, par exemple son niveau de stress sur une échelle de 1 à 10.
• Échelle visuelle analogique : Demande au participant de se positionner sur une ligne continue, par exemple pour indiquer l’intensité de sa douleur.

★ À maîtriser

📌 Un questionnaire à item unique mesure un construit à l’aide d’une seule question, tandis qu’un questionnaire multi-items le mesure au moyen de plusieurs questions ou affirmations dont les réponses sont généralement combinées en un score global.

📌 Une question ouverte laisse le participant répondre avec son propre vocabulaire, tandis qu’une question fermée lui propose des modalités de réponse prédéfinies.

Compléments

• Selon Bergkvist et Rossiter (2007), l’item unique est rapide à remplir, facile à comprendre et réduit la fatigue, mais il mesure moins précisément, ne prend pas en compte les différentes dimensions d’un construit et est davantage sensible aux erreurs de mesure. - Bergkvist & Rossiter

• Selon Bergkvist et Rossiter (2007), le format multi-items offre une meilleure précision et fiabilité et mesure un construit de manière plus complète, mais il allonge le questionnaire, peut entraîner fatigue ou baisse d’attention et demande davantage de temps pour la passation et l’analyse. - Bergkvist & Rossiter

• Berthier (2023) indique que peu de répondants utilisent la modalité « autre » et que les réponses obtenues sont moins comparables ; une question ouverte est préférable pour recueillir une réponse développée, tandis que « autre » sert surtout à couvrir des réponses rares ou imprévues.

• Les questions ouvertes donnent des informations riches et diversifiées et renseignent sur le niveau d’information des répondants et leur compréhension des questions, mais elles peuvent susciter des réponses vagues ou hors sujet, des non-réponses, l’oubli d’aspects inavouables et une analyse lourde.

📌 Une question ouverte doit éviter les généralités ou les grands problèmes, qui peuvent effrayer la personne interrogée.

• Les questions fermées comprennent :

  • les questions dichotomiques
  • les questions à réponse unique
  • les questions à réponse multiple
  • les questions de classement
  • les questions avec échelle

• Les questions fermées facilitent les comparaisons, l’administration et le traitement, mais risquent d’introduire des choix peu réfléchis et entachés de désirabilité sociale.

💡 Astuce mémo

Ouverte : vocabulaire libre ; fermée : modalités proposées.

📖 6. Préparer les données du questionnaire

★ À maîtriser

• La préparation des données consiste à : vérifier les réponses manquantes, vérifier les incohérences dans les réponses, transformer les réponses en données exploitables, vérifier le sens des items

📌 Un item positif exprime directement la capacité ou l’accord visé, tandis qu’un item inversé exprime le doute ou l’opposition et nécessite un recodage avant le calcul des scores.

Compléments

• Pour une échelle allant de 1 à 5, le recodage d’un item inversé échange 1 et 5, échange 2 et 4 et laisse 3 inchangé.

• Les cinq modalités sont :

  • 1 = très peu ou pas du tout
  • 2 = peu
  • 3 = modérément
  • 4 = beaucoup
  • 5 = énormément

💡 Astuce mémo

Vérifier, repérer, transformer, recoder : les réponses deviennent des scores exploitables.

📖 7. Calculer et analyser les scores

★ À maîtriser

• Pour obtenir un score d’affect positif, il faut calculer la moyenne des cinq scores correspondants. - Boiroux, 2024

📌 Les modalités de calcul prévues par les auteurs du questionnaire doivent toujours être respectées.

Compléments

• Les scores obtenus peuvent servir à produire un score global ou des scores par dimensions.

• L’analyse statistique peut servir à :

  • comparer des groupes
  • comparer deux temps
  • rechercher une relation entre variables
  • prédire un comportement

• Un test t ou une ANOVA peut servir à comparer le niveau de confiance en soi de sportifs et de non-sportifs.

📖 8. Choisir un questionnaire validé

★ À maîtriser

📌 Un questionnaire validé scientifiquement n’est pas automatiquement adapté à toutes les populations : il faut vérifier son adéquation à la population, à l’objectif et au contexte de l’étude.

• La fiabilité d’un questionnaire validé signifie que ses résultats sont suffisamment cohérents et reproductibles.

• La validité d’un questionnaire indique qu’il mesure bien le construit qu’il est censé mesurer.

Compléments

• Un questionnaire validé réduit les erreurs de mesure liées à un outil mal construit.

• Un questionnaire validé facilite la comparaison avec d’autres études utilisant le même outil et permet d’interpréter les scores à partir de recherches antérieures.

• Les qualités psychométriques étudiées d’un questionnaire renforcent la crédibilité des conclusions de l’étude.

📖 9. Modalités de passation

🔑 Notions clés & Définitions

• Passation papier-crayon : Présente le questionnaire sur papier et le participant inscrit directement ses réponses sur le document.
• Passation en ligne : Présente le questionnaire sous forme numérique, accessible sur ordinateur, tablette ou téléphone, par exemple via un QR code.

★ À maîtriser

📌 Lors d’une passation supervisée, un chercheur, un professionnel ou un enquêteur est présent pendant que le participant répond, tandis qu’en passation non supervisée le participant remplit seul le questionnaire.

Compléments

• La passation papier-crayon est simple à mettre en place, ne nécessite pas de matériel numérique et peut être proposée dans une structure de soin ou une association sportive.

• La passation papier-crayon exige une saisie des données avant l’analyse statistique et comporte un risque d’erreur de retranscription, ainsi que des contraintes de gestion et de stockage du papier.

• La passation en ligne permet une diffusion rapide auprès de nombreux participants, enregistre directement les réponses dans une base de données et facilite la collecte et le traitement des données.

• La passation en ligne nécessite un accès à internet et un dispositif numérique, peut exclure les participants moins à l’aise avec le numérique et ne permet pas de contrôler directement les conditions de réponse.

• La passation supervisée permet de clarifier immédiatement les incompréhensions, de mieux faire respecter les consignes, de réduire les non-réponses et de contrôler les conditions de passation.

• La passation supervisée peut entraîner un risque d’influence de l’enquêteur et de désirabilité sociale, mobilise un enquêteur et est moins adaptée aux grands échantillons en raison des coûts et de l’organisation.

• La passation non supervisée offre au participant plus d’autonomie et le choix de son environnement, tout en mobilisant moins le chercheur ou le professionnel.

• En passation non supervisée, le chercheur ne peut vérifier les conditions de réponse ; le participant peut mal comprendre une consigne, être distrait ou interrompu, et l’identité de la personne qui remplit le questionnaire ne peut pas être totalement contrôlée.

💡 Astuce mémo

Le papier exige une saisie ultérieure ; le numérique enregistre directement les réponses.

📖 10. Intérêts et biais des questionnaires

★ À maîtriser

• Les questionnaires permettent de recueillir rapidement beaucoup de données, de standardiser les réponses, de comparer les participants, de quantifier et analyser statistiquement des réponses et de mesurer des opinions, attitudes ou croyances difficilement observables.

• Les questionnaires peuvent susciter la désirabilité sociale, des réponses inexactes liées à la mémoire, l’acquiescement, les tendances centrale ou d’extrémité, ainsi que des erreurs dues à une mauvaise compréhension ou à une formulation biaisée.

📌 Un questionnaire doit être choisi, construit, administré et analysé avec rigueur afin que les données recueillies permettent de répondre à la question de recherche.

Compléments

• Les questionnaires sont rapides et peu coûteux, surtout lorsqu’ils sont administrés en ligne.

• Les questionnaires donnent souvent des réponses moins riches et nuancées qu’un entretien et dépendent de la sincérité et de la motivation des participants.

• Pour limiter le biais de mémoire, on peut : (Berthier, 2023) : permettre de consulter des sources d’information plutôt que de demander de mémoriser, demander de reconnaître une réponse parmi des choix, fournir des aides au rappel fiable des événements passés

• Pour limiter la désirabilité sociale, il faut : (Gnambs & Kaspar, 2017) : éviter de juger et normaliser les comportements, garantir l’anonymat et la confidentialité, éviter les formulations culpabilisantes ou trop directes, proposer des réponses variées et nuancées

• Pour limiter les biais d’acquiescement, de tendance centrale et d’extrémité, on peut formuler certaines questions dans les deux sens et proposer une échelle comportant un nombre adapté de réponses aux modalités clairement définies.

📌 Pour limiter le biais lié à la formulation, les questions doivent être claires, neutres et ne pas suggérer de réponse.

📊 Tableaux de synthèse

Formats de questionnaire

Modes de passation