En études et en statistique, la validité est le degré auquel une mesure, un instrument ou un protocole d’étude mesure réellement ce qu’il prétend mesurer et autorise les conclusions qu’on en tire.
La notion s’applique à deux niveaux. Au niveau de la mesure, elle porte sur un questionnaire, une échelle d’attitude ou un indicateur. Les recommandations techniques de l’Association américaine de psychologie, présentées par Lee J. Cronbach et Paul E. Meehl (Psychological Bulletin, 1955), distinguent quatre types de validation. La validité de contenu vérifie que les questions couvrent tout le domaine visé. La validité prédictive et la validité concourante comparent la mesure à un critère externe, relevé plus tard ou au même moment. La validité de construit s’impose lorsqu’aucun critère ni aucun domaine de contenu n’est jugé pleinement satisfaisant, par exemple pour l’attachement à une marque.
Au niveau du protocole, Donald T. Campbell et Julian C. Stanley (1963) opposent la validité interne et la validité externe. La validité interne indique si l’effet observé est bien dû à la cause étudiée. Les auteurs la décrivent comme le minimum sans lequel une expérience est ininterprétable. La validité externe pose la question de la généralisation des résultats à d’autres personnes, lieux ou périodes.
La validité se distingue de la fiabilité, qui désigne la stabilité des résultats d’une mesure répétée : une mesure peut être fiable sans être valide. Elle se distingue aussi de la précision statistique, exprimée par la marge d’erreur. En marketing, elle concerne les études de satisfaction, les baromètres de marque, les tests de concepts et les expérimentations en ligne.
Un indicateur marketing est presque toujours un substitut. Le taux de clic sert à approcher l’intérêt, la note de satisfaction la fidélité future, l’intention d’achat déclarée l’achat. La validité mesure l’écart entre le substitut et ce qu’il représente. Notre lecture : les erreurs de décision viennent plus souvent d’un indicateur mal choisi que d’un échantillon trop petit. Pourtant, les notes de méthode détaillent souvent la marge d’erreur et passent la validité sous silence.
Dans un test A/B, l’affectation aléatoire des visiteurs protège la validité interne. Elle ne garantit pas la validité externe. Un test mené pendant une période de soldes, sur les seuls visiteurs d’une campagne, peut ne pas se reproduire le reste de l’année. Les deux exigences se contrarient souvent : plus le test est contrôlé, moins il ressemble aux conditions réelles. Nous recommandons de décider à l’avance laquelle prime, selon la décision à prendre.
La validité de critère s’exprime en général par un coefficient de corrélation entre la mesure et le critère. Aucun seuil universel ne s’applique. Une corrélation modeste peut suffire pour trier des prospects, pas pour fixer un objectif de rémunération. La validité de contenu et la validité de construit se jugent sur un faisceau d’indices plutôt que sur un seul chiffre.
Le livre blanc gratuit d’Advalians recense onze erreurs de mesure courantes et propose un test de fiabilité en 12 points, pour décider sur des données solides.
Advalians, cabinet de conseil indépendant en marketing et communication, vous aide à clarifier vos choix et à décider.
La validité dit si la mesure porte sur le bon objet ; la fiabilité dit si elle donne des résultats stables quand on la répète. Une question mal comprise par tous, de la même façon, est fiable mais pas valide. À l’inverse, une mesure instable ne peut pas être valide, car son résultat dépend du hasard.
En pratique, testez les deux, dans cet ordre : la stabilité d’abord, par un test-retest ou un indice de cohérence, puis la validité, par la comparaison avec un comportement observé. Un indicateur qui échoue au premier test ne mérite pas le second.
Combinez une revue du contenu et un pré-test. Rédigez d’abord en une phrase ce que chaque bloc de questions doit mesurer. Faites ensuite relire le questionnaire par deux ou trois experts du sujet, qui signalent les dimensions oubliées.
Conservez la trace de ces corrections dans la note de méthode.
Rapprochez le score individuel du comportement observé ensuite chez les mêmes clients. Il faut pour cela relier les réponses à l’enquête aux données de la base de données clients, dans le respect du cadre de protection des données.
Mesurez, sur six à douze mois, le réachat ou la résiliation selon le niveau de score. Si les clients les plus satisfaits ne rachètent pas davantage, le score a une faible validité prédictive pour cet usage. Comparez enfin plusieurs formulations : la meilleure question est celle qui sépare le mieux les comportements futurs.
Les principaux risques touchent la validité interne quand les groupes ne sont plus comparables, et la validité externe quand la période ou le public sont atypiques. Une affectation non aléatoire, un groupe pollué par un autre test ou un arrêt anticipé faussent la comparaison.
Vérifiez que la répartition entre versions correspond à celle prévue. Écartez les tests qui chevauchent une promotion ou une campagne exceptionnelle. Fixez la durée à l’avance, sur au moins un cycle hebdomadaire complet. Avant de généraliser, reproduisez le résultat sur une autre période ou un autre segment.
Non. Concentrez l’effort sur les indicateurs qui pilotent des décisions récurrentes ou coûteuses : un baromètre suivi par la direction, un score qui déclenche des actions commerciales, un objectif lié à la rémunération. Pour une étude ponctuelle et exploratoire, une revue de contenu et un pré-test suffisent en général.
Critère de choix : plus l’indicateur engage de budget ou d’actions automatiques, plus la validation prédictive s’impose. Si les données de comportement ne sont pas disponibles, assumez la limite et signalez-la explicitement dans le rapport.
Modèles, grilles et guides prêts à l’emploi pour vos projets marketing et communication.
