Validité et fiabilité dans les sondages de recherche : un guide

Lorsque vous construisez un sondage, chaque réponse que vous collectez n'est digne de confiance qu'autant que l'instrument qui l'a produite. Deux propriétés déterminent cette fiabilité : la validité (mesurez-vous ce que vous avez l'intention de mesurer ?) et la fidélité (votre instrument le mesure-t-il de façon constante ?). Un questionnaire peut être fidèle sans être valide, mais il ne peut jamais être véritablement valide sans être d'abord fidèle. Comprendre les deux fait la différence entre des données que vous pouvez défendre devant des examinateurs et des données qui sapent silencieusement vos conclusions.

Ce que la validité signifie vraiment

La validité porte sur l'exactitude du sens. Elle interroge la pertinence des inférences que vous tirez des scores pour un objectif et une population spécifiques. La validité n'est pas un chiffre unique que vous calculez une fois ; c'est un argument que vous construisez à partir de plusieurs types de preuves.

Validité de contenu

La validité de contenu concerne la question de savoir si vos items couvrent l'ensemble du domaine conceptuel du construit. Si vous mesurez la « satisfaction au travail » mais que chaque item porte sur la rémunération, vous avez ignoré les relations avec les collègues, l'autonomie, la reconnaissance et la charge de travail. La validité de contenu est généralement établie avant la collecte des données en faisant examiner chaque item par des experts du domaine quant à sa pertinence et sa représentativité. Un outil quantitatif courant est l'Indice de Validité de Contenu (IVC), dans lequel les experts évaluent la pertinence des items et on calcule la proportion jugée pertinente.

Validité de construit

La validité de construit est le degré auquel votre instrument capture réellement le concept théorique abstrait qu'il prétend mesurer, comme l'anxiété, la motivation ou la fidélité à la marque. Elle est étayée par deux formes de preuves complémentaires :

• Validité convergente : les scores sont fortement corrélés avec d'autres mesures du même construit ou de construits connexes.
• Validité discriminante : les scores ne sont pas fortement corrélés avec des mesures de construits non liés.

Les chercheurs examinent souvent la validité de construit par l'analyse factorielle (exploratoire ou confirmatoire) pour vérifier que les items se regroupent dans les dimensions prédites par la théorie.

Validité de critère

La validité de critère évalue dans quelle mesure les scores sont liés à un résultat externe observable appelé critère. Elle se présente sous deux formes : la validité concomitante, où le sondage et le critère sont mesurés en même temps (par exemple, une échelle de stress comparée à l'évaluation actuelle d'un clinicien), et la validité prédictive, où le sondage prédit un résultat futur (par exemple, un test d'aptitude prédisant la performance professionnelle ultérieure). Une validité de critère solide se manifeste par une corrélation significative entre l'instrument et le critère.

Ce que la fidélité signifie vraiment

La fidélité porte sur la cohérence. Si les mêmes personnes répondaient à nouveau à votre sondage dans des conditions similaires, obtiendraient-elles des scores similaires ? Plusieurs types importent selon votre design :

• Cohérence interne : si les items censés mesurer un seul construit sont en accord entre eux.
• Fidélité test-retest : la stabilité des scores entre deux moments pour les mêmes répondants.
• Fidélité inter-juges : l'accord entre différents observateurs qui évaluent les mêmes réponses.

L'alpha de Cronbach : ce qu'il est et ce qu'il n'est pas

L'alpha de Cronbach est l'indice de cohérence interne le plus souvent rapporté. Conceptuellement, il estime dans quelle mesure un ensemble d'items est lié en tant que groupe, sur la base de la corrélation inter-items moyenne et du nombre d'items. Il varie (en pratique) de 0 à 1.

Les seuils couramment cités traitent les valeurs autour de 0,70 ou plus comme acceptables, 0,80 et plus comme bonnes, et 0,90 et plus comme excellentes. Cependant, ce sont des conventions, pas des lois. Deux mises en garde importantes :

• L'alpha augmente simplement en ajoutant plus d'items, donc un alpha élevé peut masquer des items individuels faibles.
• Un alpha très élevé (supérieur à environ 0,95) peut signaler une redondance, c'est-à-dire que plusieurs items posent essentiellement la même question.

Fondamentalement, l'alpha mesure la cohérence, pas la validité. Une échelle peut avoir un alpha de 0,90 et mesurer quand même la mauvaise chose. Rapportez l'alpha pour chaque sous-échelle séparément plutôt que pour l'ensemble d'un questionnaire qui couvre plusieurs construits.

Comment améliorer la validité et la fidélité

Ces deux propriétés sont intégrées dans votre design bien avant l'analyse. Des étapes pratiques incluent :

• Définir le construit avec précision et rédiger des items qui correspondent directement à cette définition.
• Réaliser une révision par des experts pour la validité de contenu et la clarté avant le lancement.
• Tester pilote avec un petit échantillon pour déceler les formulations ambiguës et calculer une fidélité préliminaire.
• Rédiger des items clairs, portant sur une seule idée ; éviter les questions doubles et le langage orienté.
• Utiliser suffisamment d'items par construit (en général plusieurs) afin que la fidélité soit stable.
• Équilibrer soigneusement les items formulés positivement et négativement, et penser à inverser leur cotation.
• Examiner les corrélations item-total et supprimer les items qui affaiblissent l'échelle.

Lorsque vous êtes prêt à tester ces propriétés, MSN Forms vous permet de construire le sondage, de le tester dans six langues avec prise en charge complète de l'écriture de droite à gauche, et d'explorer vos résultats au niveau des items grâce aux analyses intégrées et aux tableaux de résultats académiques exportables vers Word ou PDF pour vos rapports de fidélité et de validité. L'objectif est simple : des instruments en lesquels vos lecteurs, et vos examinateurs, peuvent avoir confiance.