Fiche de révision : Questionnaire et observation

📋 Plan du Cours

1. Élaboration et objectifs du questionnaire
2. Usages du questionnaire en recherche
3. Questions fermées et choix des réponses
4. Échelles de mesure des attitudes
5. Conception et réglage des échelles
6. Questions fermées et échelles
7. Questions ouvertes et semi-ouvertes
8. Fiabilité des questions
9. Traitement des réponses
10. Organisation du questionnaire
11. Modes d’administration
12. Échantillonnage et population
13. Biais dans les questionnaires

📖 1. Élaboration et objectifs du questionnaire

★ À maîtriser

• 🔄 L’élaboration d’un questionnaire suit ces étapes :
  1. Formuler une question de départ empiriquement testable.
  2. Poser une ou plusieurs hypothèses.
  3. Opérationnaliser les variables à mesurer.
  4. Choisir le type d’items et rédiger les questions.
  5. Organiser le questionnaire, notamment l’ordre des questions et des consignes.
  6. Sélectionner un échantillon de la population cible.
  7. Pré-tester le questionnaire et l’ajuster.

📌 La précision de l’objectif de recherche conditionne la qualité du questionnaire, la qualité des données recueillies et, par conséquent, la fiabilité des résultats.

Compléments

• Le questionnaire est une technique de recueil de données utilisable avec des méthodes descriptives, corrélationnelles ou expérimentales.

💡 Astuce mémo

De la question de départ au pré-test : objectif, variables, items, échantillon, ajustements.

📖 2. Usages du questionnaire en recherche

🔑 Notions clés & Définitions

• Enquête : Processus de description de certains aspects d’une population à partir d’un échantillon de cette population.

★ À maîtriser

📌 Le questionnaire est l’instrument qui recueille les données, tandis que l’enquête est le processus qui décrit des aspects d’une population à partir d’un échantillon.

Compléments

• Dans une enquête, les aspects étudiés peuvent concerner les habitudes de vie, l’état de santé, les attitudes, les croyances, les valeurs, les intentions comportementales et les comportements passés des individus, ou être rapportés à propos d’autres individus.

• Pour élaborer les questions d’une enquête, on peut étudier les sources d’information existantes et mener des entretiens faiblement structurés auprès de personnes de la population cible afin de se familiariser avec son vocabulaire.

📌 Lorsqu’une enquête repose sur un modèle théorique, les variables sont prédéterminées par ce modèle et le questionnaire les opérationnalise au moyen de différentes questions.

• Dans une recherche corrélationnelle ou expérimentale, un questionnaire peut recueillir une mesure pertinente pour tester une hypothèse sans viser l’exhaustivité de cette mesure.

• Dans une recherche corrélationnelle ou expérimentale, un questionnaire peut servir à sélectionner des participants selon une ou plusieurs dimensions, par exemple en retenant des personnes ayant un niveau élevé de préjugés ou une caractéristique sociodémographique donnée.

• Un questionnaire peut mesurer une variable de contrôle, par exemple le sexe biologique, pour vérifier si les résultats restent les mêmes indépendamment de cette dimension.

📖 3. Questions fermées et choix des réponses

🔑 Notions clés & Définitions

• Question fermée : Question qui propose à l’avance toutes les modalités de réponse possibles et demande au répondant de choisir celle qui lui convient.
• Question ordonnée : Question qui permet au répondant d’établir un ordre de préférence parmi plusieurs propositions et de nuancer une réponse binaire.

★ À maîtriser

📌 Une question à réponse unique n’admet qu’une réponse, tandis qu’une question à réponses multiples autorise plusieurs choix.

📌 Dans un QCM à réponse unique, les modalités doivent être mutuellement exclusives, de sorte qu’en choisir une exclut les autres, et exhaustives, de sorte qu’elles couvrent tous les choix possibles.

Compléments

• Une question à branchement, aussi appelée question conditionnelle ou filtre, oriente directement les répondants vers une partie du questionnaire selon leur réponse.

📌 Dans un QCM de connaissance, la réponse exacte est proposée avec des distracteurs vraisemblables et aucun indice de longueur ou de formulation ne doit distinguer la bonne réponse.

📌 Quand les modalités d’un QCM à réponse unique ne couvrent pas tous les choix possibles, l’ajout d’une catégorie « autre » peut compléter la liste sans garantir que les catégories soient mutuellement exclusives.

• Une question semi-ouverte propose des modalités prédéfinies et une réponse « autre » à préciser.

📖 4. Échelles de mesure des attitudes

🔑 Notions clés & Définitions

• Échelle de Likert : Échelle qui mesure les attitudes selon des degrés d’accord avec un énoncé et utilise une échelle ordinale, typiquement en 5 points.
• Échelle de Guttman : Échelle, dite hiérarchique ou cumulative, qui présente généralement 4 à 7 énoncés ordonnés de telle sorte que l’approbation d’un énoncé implique l’approbation des énoncés précédents.
• Échelle d’Osgood : Osgood, Suci & Tannenbaum, 1957 - Échelle sémantique différenciatrice qui oppose deux termes antithétiques sur une seule dimension, et qui comportait initialement 7 points.

★ À maîtriser

• 🔄 La construction d’une échelle de Thurstone suit ces étapes :
  1. Définir le thème.
  2. Recenser des énoncés allant de très favorables à très défavorables.
  3. Faire évaluer les énoncés par des juges.
  4. Calculer pour chaque énoncé le score moyen et l’écart interquartile des évaluations.
  5. Demander à la population d’étude quels énoncés elle approuve.
  6. Calculer pour chaque participant la moyenne des valeurs des énoncés cochés.

Compléments

• Les principaux types d’échelles présentés sont : l’échelle de Likert, l’échelle de Guttman, l’échelle sémantique différenciatrice d’Osgood, l’échelle de Thurstone

📌 Dans une échelle d’Osgood, « petit » et « grand » peuvent former les deux pôles d’un continuum, tandis que « sucré » et « salé » ne forment pas les pôles d’une même dimension.

• Dans l’échelle de Thurstone, l’écart interquartile des évaluations sert d’indice de consensus entre les juges ; plus il est faible, plus leur accord est élevé.

📖 5. Conception et réglage des échelles

★ À maîtriser

• Une échelle unipolaire mesure l’intensité d’un phénomène depuis zéro vers un seul pôle, tandis qu’une échelle bipolaire va d’un pôle négatif à un pôle positif, avec ou sans point médian.

• Le choix du format d’échelle doit être adapté à la population visée, au contexte de passation et aux objectifs de la recherche, et les modalités de réponse doivent être clairement expliquées.

• Le nombre de points d’une échelle est généralement choisi entre 5 et 9, car trop de points peuvent accroître les non-réponses, les abandons et les réponses invalides, tandis que trop peu de points réduisent la sensibilité de mesure. - Cox, 1980

Compléments

• Les points d’une échelle doivent correspondre à des écarts réels identiques, et le type d’échelle doit rester constant entre les items d’un même questionnaire.

• Les échelles de fréquence fondées sur des adverbes comme « beaucoup » sont interprétées différemment selon les personnes ; des modalités numériques sont à privilégier si possible.

• Une échelle impaire offre un point médian aux participants indécis et réduit les non-réponses, mais rend les réponses médianes difficiles à interpréter ; une échelle paire force un choix plus contrasté mais peut augmenter les non-réponses.

• La littérature citée semble préconiser l’absence de point médian dans les échelles, tout en laissant ce choix dépendre du questionnaire. - Saris and Gallhofer, 2007a, 2007b

💡 Astuce mémo

L’échelle unipolaire part de zéro vers un pôle ; la bipolaire relie un pôle négatif à un pôle positif.

📖 6. Questions fermées et échelles

★ À maîtriser

• Les questions fermées fournissent une base de comparaison invariante pour des observations répétées dans le temps.

📌 Les questions fermées conviennent mal aux questions dont le champ de réponses est large, notamment celles portant sur des opinions, des comportements, des attitudes ou des valeurs.

Compléments

• Les exemples de codage d’une échelle en 7 points comprennent : une numérotation de 0 à 6, une numérotation de 1 à 7, une échelle de −3 à 3 avec un point central à 0, des symboles gradués de −−− à +++, des cases à cocher

• Le précodage des réponses aux questions fermées facilite leur saisie directe et l’exploitation des données.

📖 7. Questions ouvertes et semi-ouvertes

🔑 Notions clés & Définitions

• Question ouverte texte : Question qui n’impose aucune contrainte de réponse.
• Question semi-ouverte : Question qui propose une liste suivie d’une réponse libre, souvent courte.
• Question ouverte numérique : Question qui demande une réponse chiffrée libre.

★ À maîtriser

• Une question semi-ouverte permet de recueillir des réponses non prévues par le chercheur ou d’obtenir des précisions, ce qui pallie le manque d’exhaustivité d’une liste.

Compléments

• Les réponses aux questions ouvertes « texte » nécessitent une analyse de contenu codée par une personne connaissant bien les méthodes qualitatives.

• Les questions ouvertes « texte » peuvent aider à mettre au point un questionnaire et sont utiles pour interroger les attitudes ou les besoins.

📌 Pour une question ouverte numérique, il faut préciser l’unité de mesure et décider si les réponses seront arrondies ou tronquées.

• Les questions ouvertes numériques peuvent servir à recueillir une note d’examen ou une grandeur sensible à la désirabilité sociale, comme le temps passé devant la télévision ou la quantité d’alcool consommée.

• Les questions ouvertes peuvent produire des réponses plus riches et évitent d’influencer les participants par des modalités de réponse proposées.

• Les réponses ouvertes sont difficiles à exploiter en raison du travail d’analyse de contenu et peuvent dérouter les personnes ayant des difficultés d’expression écrite ou orale.

📌 Les questions ouvertes sont à éviter impérativement au tout début du questionnaire et leur nombre doit être limité pour éviter qu’elles restent inexploitées faute de temps.

• Les formulations courantes comprennent :
  • « Autres »
  • « Précisez »
  • « Lequel ? »

📌 Les questions semi-ouvertes ne sont à utiliser que si nécessaire, car elles allongent le temps de codage.

💡 Astuce mémo

La question ouverte laisse répondre librement ; la semi-ouverte complète une liste.

📖 8. Fiabilité des questions

★ À maîtriser

📌 Les questions unipolaires produisent des réponses plus fiables que les questions bipolaires (Alwin, 2007 ; Saris and Gallhofer, 2007a, 2007b ; Alwin et al., 2018). - Alwin (2007), Saris and Gallhofer (2007a, 2007b), Alwin et al. (2018)

Compléments

• Les questions factuelles, en particulier sociodémographiques, produisent des réponses plus fiables que les questions subjectives (Smith, 1980 ; Alwin, 2007 ; Hout and Hastings, 2016). - Smith (1980), Alwin (2007), Hout and Hastings (2016)

• Les items placés plus tard dans le questionnaire produisent des réponses plus fiables (Saris and Gallhofer, 2007a, 2007b).

• Les questions plus courtes produisent des réponses plus fiables (Alwin, 2007).

• Les questions comportant moins de propositions subordonnées, voire aucune, produisent des réponses plus fiables (Saris and Gallhofer, 2007a, 2007b).

📌 Pour les items factuels, les réponses ouvertes numériques produisent des réponses plus fiables que les catégories fermées utilisant des quantificateurs vagues, comme les échelles de fréquence (Alwin, 2007).

• Un nombre plus faible d’options de réponse produit des réponses plus fiables (Revilla, Saris, and Krosnick, 2014 ; Alwin et al., 2018). - Revilla, Saris, and Krosnick (2014), Alwin et al. (2018)

• Les questions sans option intermédiaire produisent des réponses plus fiables (Saris and Gallhofer, 2007a, 2007b ; Alwin et al., 2018). - Saris and Gallhofer (2007a, 2007b), Alwin et al. (2018)

• Les questions dont chaque option est étiquetée verbalement produisent des réponses plus fiables (Alwin and Krosnick, 1991 ; Alwin, 2007 ; Saris and Gallhofer, 2007a, 2007b). - Alwin and Krosnick (1991), Alwin (2007), Saris and Gallhofer (2007a, 2007b)

📌 Les échelles spécifiques à l’item produisent des réponses plus fiables que les échelles d’accord-désaccord (Saris et al., 2010).

• Les échelles ordinales tendent à produire des réponses moins fiables que d’autres types d’items, probablement en raison de l’effort cognitif nécessaire pour hiérarchiser les réponses (Tourangeau et al., 2020).

📌 Les questions portant sur des sujets saillants ou centraux produisent des réponses plus fiables que celles portant sur des sujets moins saillants (Saris and Gallhofer, 2007a, 2007b).

📖 9. Traitement des réponses

🔑 Notions clés & Définitions

• Hypothèse d’égalité entre les points : L’hypothèse d’égalité entre les points d’une échelle considère comme équivalents les écarts subjectifs entre deux points successifs.

★ À maîtriser

📌 Le tri à plat calcule les fréquences de réponse pour chaque variable indépendamment des autres variables, tandis que le tri croisé calcule les fréquences en croisant au moins deux variables.

• Les moyennes sont couramment calculées pour les échelles, même lorsque celles-ci sont ordinales, notamment pour comparer les réponses de deux groupes de participants.

• L’analyse de contenu ramène l’ensemble des réponses ouvertes ou semi-ouvertes à un nombre fini de catégories au moyen d’un codage approprié, notamment par des analyses lexicales ou thématiques.

📌 Les variables d’intervalle ou de rapport sont numériques et permettent des calculs comme les sommes et les moyennes, tandis que les variables nominales ou ordinales sont catégorielles et permettent de compter les individus par catégorie et de calculer des pourcentages.

📌 Pour calculer une moyenne sur plusieurs items mesurant une même dimension, ces items doivent être codés de la même façon et dans le même sens.

Compléments

• La taille, l’âge et une note à un test sont des exemples de variables d’intervalle ou de rapport ; le sexe biologique, la catégorie socioprofessionnelle et l’appréciation sont des exemples de variables nominales ou ordinales.

• Lorsque certains items sont formulés dans le sens inverse, leur codage doit être renversé avant de calculer une moyenne commune.

• Seuls des tests statistiques permettent de déterminer si la différence entre deux moyennes est significative.

💡 Astuce mémo

Les réponses fermées se comptent ; les réponses libres se codent.

📖 10. Organisation du questionnaire

🔑 Notions clés & Définitions

• Validité apparente : Impression de sérieux, de validité ou de crédibilité que les participants se font de l’étude et de ses initiateurs.

★ À maîtriser

• L’organisation générale du questionnaire dépend de l’objectif de recherche, des caractéristiques de la population et des conditions de passation.

• Une bonne question doit être claire, intelligible, unidimensionnelle, pertinente au regard de l’objectif et applicable à la personne interrogée.

📌 Il faut éviter les questions à double détente, les questions orientées ou suggérant une réponse, les exemples spécifiques lorsque l’on cherche une réponse générale, ainsi que les termes extrêmes, absolus ou trop généraux.

📌 Les questions doivent progresser du général au particulier et du moins au plus impliquant, en commençant par des questions fermées, faciles à comprendre et liées au thème annoncé.

Compléments

📌 Les questions doivent employer un vocabulaire simple, précis et adapté à la population et au contexte, des phrases courtes et explicites, sans ambiguïté, ellipse ni double négation.

• Les formulations positive et négative d’une même question sur l’interdiction de fumer dans les jardins publics peuvent produire des résultats différents ; une formulation neutre suivie des choix « Interdit » et « Autorisé » est préférable.

• La plupart des refus de répondre surviennent au début du questionnaire (Czaja & Blair, 1996).

📌 Les questions signalétiques, comme l’âge, la catégorie socioprofessionnelle et le genre, doivent figurer à la fin afin de limiter le risque d’activer des identités groupales susceptibles d’influencer les réponses.

📌 Toute question qui n’est reliée à aucun objectif ou qui ne joue aucun rôle dans l’analyse doit être retirée ou reformulée.

• Plusieurs items mesurant une même dimension devraient être corrélés entre eux, ce qui peut être évalué par un indice statistique comme l’alpha de Cronbach.

📌 Les items peuvent être regroupés en blocs thématiques ou selon leur type, et les modalités de réponse doivent rester identiques au sein d’un même bloc.

📌 Il ne faut pas inverser la polarité des échelles au fil du questionnaire ; seule l’orientation de la question peut changer, auquel cas le codage des items concernés doit être renversé.

• L’effet de primauté désigne l’influence du traitement des premiers éléments sur l’interprétation des suivants ; dans l’exemple d’Asch, une personne est jugée plus aimable lorsque la liste de traits commence par « intelligente » que lorsque la même liste est présentée en ordre inverse (Asch, 1946).

• Dans un exemple, les personnes exposées à une échelle de temps passé devant la télévision allant de « moins de 30 min » à « plus de 2h30 » se déclarent moins satisfaites de leurs loisirs que celles exposées à une échelle allant de « moins de 2h30 » à « plus de 4h30 ».

• Demander le rappel d’événements négatifs conduit les individus à juger leur vie présente plus heureuse que lorsqu’ils rappellent d’abord des événements positifs ; cet effet est appelé effet de contraste (Schwarz et al., 1985).

💡 Astuce mémo

Formuler les items, ordonner les questions, donner les consignes, soigner la présentation.

📖 11. Modes d’administration

★ À maîtriser

📌 Un questionnaire auto-administré est lu et rempli par les participants eux-mêmes, tandis que dans un questionnaire hétéro-administré, autrui présente les questions et enregistre les réponses.

📌 Les modes d’administration avec peu d’interactions limitent le biais de désirabilité sociale, mais offrent moins de contrôle sur les conditions de réponse.

Compléments

• Un questionnaire peut être administré en laboratoire, par ordinateur sur place ou sur Internet, par courrier ou distribution, par téléphone, ou lors d’un entretien en face à face individuel ou en groupe.

• Le choix du mode d’administration dépend aussi du coût de l’étude et de l’échantillon de population souhaité.

💡 Astuce mémo

Auto-administré : le participant répond ; hétéro-administré : autrui enregistre ses réponses.

📖 12. Échantillonnage et population

🔑 Notions clés & Définitions

• Enquête : Méthode descriptive qui vise à décrire correctement des caractéristiques d’une population-cible et à estimer le niveau d’une ou plusieurs variables dans cette population à un moment donné, sans hypothèse explicite comme dans les autres méthodes de recherche.
• Population parente : Ensemble des personnes auxquelles les résultats de l’étude doivent s’appliquer.
• Échantillonnage probabiliste : Méthode où chaque individu de la population a la même probabilité a priori d’être choisi.
• Échantillonnage empirique : Méthode constituant un échantillon jusqu’à atteindre un nombre fixé de personnes à enquêter, en choisissant les individus selon certaines caractéristiques plutôt qu’au hasard.
• Unité : Élément étudié, individuel comme un sujet ou collectif comme un foyer ou un hôpital.
• Estimateur : Résultat calculé à partir des données observées dans l’échantillon qui représente, avec un certain degré d’incertitude, la valeur vraie du phénomène dans la population.

★ À maîtriser

📌 L’échantillonnage empirique ne nécessite ni base de sondage ni connaissance des probabilités d’inclusion ; il est plus rapide et moins coûteux, mais n’est pas représentatif au sens statistique et permet moins de généraliser les résultats que l’échantillonnage probabiliste.

Compléments

📌 Un recensement interroge tous les sujets de la population, tandis qu’un échantillon est un sous-groupe issu de la population parente.

📌 L’échantillonnage probabiliste comprend les méthodes aléatoire simple, aléatoire systématique, stratifiée et par grappes, tandis que l’échantillonnage empirique comprend les méthodes par quotas, par convenance, délibérément hétérogène et par boule de neige.

• Avec un effectif suffisant, l’échantillonnage probabiliste permet de construire des échantillons représentatifs de la population parente et de généraliser les résultats à celle-ci selon un risque calculable.

📌 L’échantillonnage probabiliste nécessite une base de sondage complète et à jour, où chaque unité de la population figure une seule fois et où aucune unité extérieure à la population ne figure.

• La méthode des quotas est la technique d’échantillonnage empirique la plus fréquente : des variables sont sélectionnées selon la population parente et le phénomène étudié, puis les individus présentant les caractéristiques correspondantes sont choisis sans tirage aléatoire.

• La qualité d’une estimation dépend de la technique d’échantillonnage choisie et de la taille de l’échantillon.

📌 Dans une enquête, l’échantillonnage sert à décrire une dimension d’une population, tandis que dans une expérimentation, il sert à comparer les réponses entre des groupes ou des conditions.

• L’échantillonnage a des conséquences sur la validité externe de l’étude.

💡 Astuce mémo

Probabiliste : sélection aléatoire et généralisation ; empirique : sélection non aléatoire et généralisation limitée.

📖 13. Biais dans les questionnaires

📝 Points essentiels

• Les biais peuvent être liés : au format des items, à la formulation des questions et des consignes, à l’ordre des items, au contexte du questionnaire, notamment au mode d’administration, à l’échantillonnage

📊 Tableaux de synthèse

Échantillonnages probabiliste et empirique