Il est indéniable que les réponses à votre sondage constituent une source de données précieuse.
Les informations que vous en retirez peuvent vous aider à prendre des décisions concernant votre entreprise ou à mieux connaître votre population cible.
Mais savez-vous qu'il existe des indicateurs dans les résultats de votre sondage qui permettent d'identifier ses problèmes de conception ? Ainsi, en examinant vos réponses pour repérer d'éventuels dysfonctionnements, vous améliorerez la qualité de vos prochains sondages.
Nous allons vous montrer comment faire le lien entre les réponses et les erreurs de sondage. Vous apprendrez ainsi à créer des sondages qui impliquent plus les participants et génèrent des réponses plus pertinentes.
Votre branchement conditionnel est-il logique ?
Un branchement conditionnel mal utilisé est peut-être l'erreur la plus fréquente dans la conception des sondages.
Le branchement conditionnel est une fonctionnalité qui renvoie les participants sur une page ou une question particulière en fonction de la réponse qu'ils ont donnée à une question précédente.
Au mieux, le branchement conditionnel vous permet de proposer une expérience de sondage plus personnalisée et d'obtenir des informations détaillées, au pire, il plonge les participants dans la confusion, les frustre et biaise vos résultats.
Par exemple, si un participant vous répond qu'il est végan et qu'il est renvoyé à une question demandant quel type de viande il préfère, il y a fort à parier qu'il va quitter le sondage.
Pour repérer les erreurs de branchement conditionnel, examinez les points suivants :
1. Un pic du nombre d'abandons du sondage après que les participants ont répondu à une question avec branchement conditionnel
Il est facile de repérer les abandons avec SurveyMonkey Analyze. Dans la section Résumé par question de votre sondage, vous pouvez voir le nombre de participants qui ont répondu à une question donnée et le nombre de participants qui l'ont ignorée.
Précision terminologique : Dans le contexte d'une analyse, « ignorer » signifie simplement qu'un participant ne répond pas à une question. Cela étant dit, poursuivons.
Lorsqu'une question est signalée comme ignorée dans Analyze, il y a deux raisons possibles : soit le participant a juste sauté la question et poursuivi le sondage, soit il a carrément quitté le sondage. Lorsque que le nombre de fois où une question est ignorée augmente sans jamais se rétablir, cela signifie que les participants ont abandonné le sondage.
Il faut toujours vous attendre à ce que certaines personnes abandonnent votre sondage en cours de route, mais un nombre trop important d'abandons, en particulier après une question avec branchement conditionnel, doit attirer votre attention.
2. Des résultats qui n'ont pas de sens
Reprenons notre exemple végan/viande. Que faire si les participants répondent qu'ils aiment un type de viande particulier alors qu'ils avaient mentionné plus haut dans le sondage qu'ils étaient végans ?
Vous pouvez utiliser des filtres dans Analyze pour repérer les résultats qui n'ont pas de sens. Voici comment procéder :
- Sélectionnez Filtrer par question et réponse dans le menu Filtre à gauche de l'écran.
- Sélectionnez une question avec branchement conditionnel et un choix de réponse test.
- En fonction de votre filtre, regardez si les réponses aux questions de suivi semblent logiques.
Par exemple, vous pouvez filtrer selon les participants ayant répondu qu'ils étaient végans à la question avec branchement conditionnel et regarder les réponses en rapport avec la viande plus loin dans le sondage. Si vous en trouvez beaucoup, il y a probablement un problème avec votre branchement conditionnel.
Il est important de préciser qu'il peut y avoir d'autres raisons qui incitent les participants à abandonner un sondage.
Vos questions ont-elles biaisé les résultats ?
Les questions pour lesquelles une option de réponse se démarque nettement des autres sont souvent les plus intéressantes et les plus instructives. Mais si cette prédominance est excessive ou suspecte, cela peut traduire un biais dans la façon dont vous avez formulé la question.
Nous avons rédigé un guide qui explique comment repérer et éviter les erreurs courantes dans la formulation des questions. Voici quelques notions de base :
- Votre question reflète-t-elle un jugement ou une opinion ? Si tel est le cas, votre question est peut-être biaisée
- Votre question ou les options de réponse sont-elles orientées ? Les questions déséquilibrées peuvent influencer les participants.
- Votre question se présente-t-elle sous la forme D'accord/Pas d'accord ? Elle peut induire un biais d'acquiescement.
Si vous avez vérifié sa formulation et n'avez identifié aucun des problèmes mentionnés ci-dessus, votre question est probablement sans faille. Elle aborde juste un thème sur lequel la majorité des gens sont d'accord.
Votre sondage en demande trop aux participants ?
Pour tous les participants, la patience a ses limites. Et lorsque cette patience est mise à l'épreuve par un sondage (trop) long, ils sont tentés d'abandonner le sondage ou d'adopter un comportement « suffisfaisant ». « Suffisfaisant » est la contraction des mots « suffisant » et « satisfaisant » et, dans le contexte des sondages, les participants sélectionnent des réponses qui ne correspondent pas vraiment à leur opinion pour pouvoir arriver plus vite à la fin du sondage.
Pour localiser le point de rupture des participants, à savoir le point où ils quittent le sondage, examinez le nombre de réponses pour chaque question. Quand ce nombre chute brutalement et ne remonte jamais, il est très vraisemblable que beaucoup de participants ont abandonné en cours de route.
Repérer les participants « suffisfaisants » n'est pas facile, mais voici quelques signes pour vous y aider :
- Des différences suspectes au niveau du temps moyen consacré à votre sondage. Plus précisément, soit un participant passe beaucoup de temps sur votre sondage, soit il le termine très rapidement.
Vous pouvez voir les temps de réponse en consultant les Réponses individuelles dans SurveyMonkey Analyze. Le temps passé à répondre à votre sondage est indiqué pour chaque participant.
- Un participant sélectionne la même option de réponse pour chaque question.
Pour repérer cette tendance chez un participant donné, consultez ses réponses pour l'ensemble du sondage dans l'onglet Réponses individuelle. S'il a sélectionné l'option C pour chaque question, on peut s'interroger sur la pertinence de ses réponses.
- Les participants ignorent les questions ouvertes ou y répondent très brièvement.
Il est facile de repérer les questions ouvertes ignorées en appliquant les méthodes précédemment évoquées dans cet article. Toutefois, décider si une réponse est « bonne » ou non vous revient en dernier lieu.
Le nombre de questions ouvertes ignorées est en général relativement élevé. Sans surprise, car elles font partie des questions qui demandent le plus de réflexion aux participants. Évitez donc dans la mesure du possible d'inclure plus de deux questions ouvertes dans vos sondages.
La présence dans votre sondage des indicateurs que nous venons de décrire ne signifie pas nécessairement qu'il y a un problème. Ils peuvent toutefois s'avérer utiles pour diagnostiquer d'éventuels dysfonctionnements qui nécessitent votre attention.
