Méthodologie
Les règlements suivants s'appliquent essentiellement aux études dont les résultats sont extrapolés à l'ensemble de la population étudiée. Toute dérogation aux normes présentées devra être expliquée dans le rapport par l'auteur.
Échantillon
L'échantillon devra être représentatif de tout l'univers auquel s'appliqueront les données extrapolées. Il sera suffisamment grand pour pouvoir respecter les critères de précision énoncés dans les objectifs de l'étude (voir le tableau d'intervalles de confiance présenté plus loin).
Pondération des résultats
On n'attribuera pas à une réponse un coefficient de pondération supérieur à trois en sus de la pondération par ménage déjà effectuée.
Taux de réponse
Tous les efforts raisonnables seront faits pour maximiser les taux de réponse. À titre de paramètre, le taux de réponse visé pour un sondage téléphonique sur un échantillon probabiliste proportionnel auprès des résidents du Québec, âgés de 18 ans et plus, ne sera pas inférieur à 50 %, calculé selon les normes de l'AIRMS.
Validation
Lorsqu'il n'y aura pas de supervision sur les lieux de l'entrevue, un minimum de 10 % du travail de chaque intervieweur sera validé. Lorsqu'il y aura supervision sur les lieux de l'entrevue, un minimum de 10 % de toutes les entrevues sera directement validé. La preuve d'une telle validation sera conservée pendant un minimum de six mois.
Dans le cas où la validation démontrerait la présence d'irrégularités dans le travail d'un intervieweur, 100 % du travail de celui-ci doit être rejeté ou remplacé. La méthode de validation, la proportion du travail validé ainsi que les personnes responsables de la validation doivent être consignées au rapport.
Rapport méthodologique
Le rapport méthodologique devra minimalement inclure:
- Une description complète de l'échantillon, y compris sa composition, son exécution et sa pondération, de sorte que le lecteur puisse juger si les résultats sont raisonnablement représentatifs de l'univers sous étude (incluant les facteurs de pondération);
- Les résultats du dernier contact avec le répondant ou son ménage, présentés selon les normes de l'AIRMS dans le rapport administratif des contacts et des taux de réponse;
- Une copie du questionnaire utilisé;
- Une copie ou une description de tout autre matériel présenté ou utilisé pour mener l'entrevue.
- Une description de toutes les sources de données secondaires utilisées;
- La firme doit indiquer au client: quand, comment, où la firme a réalisé les entrevues; qui a exécuté l'entrée de données; qui a exécuté le traitement statistique.
Dans les cas de sous-traitance
La validation ainsi que les procédures doivent toujours être suivies par un membre de l'AIRMS à moins d'entente contraire avec le client. Dans ce dernier cas, un manquement aux normes de l'AIRMS sera clairement souligné dans le rapport.
Identification des intervieweurs
Entrevues en face à face :
l'intervieweur devra porter l’identification de la compagnie avec une date d'expiration.
Entrevues téléphoniques :
l'identité de la firme de recherche devra être mentionnée au début de l'entrevue.
Enregistrement des entrevues
Interdit sans que le répondant ne le sache. Ce dernier pourra exiger de ne pas être enregistré.
Confidentialité
Pour le répondant, nous garantissons son anonymat et la confidentialité de ses réponses. Pour le client, nous garantissons la confidentialité de l'étude et des résultats.
Conservation des documents
La firme de recherche pourra détruire les questionnaires originaux 12 mois après la fin des entrevues et les autres supports de données 24 mois après la fin des entrevues sans préavis au client. Si le client désire qu'il en soit autrement, il devra prendre arrangement avec la firme de recherche.
Normes de publication de la méthodologie
L'objectif fondamental de l'AIRMS est d'assurer les normes méthodologiques les plus élevées dans la pratique des sondages.
Voici les 13 points que l'AIRMS considère essentiels d’être publiés sur la méthodologie des sondages rapportés par la presse écrite :
- Nom de la firme qui a été le maître d’œuvre (conception du sondage). Si la collecte a été effectuée par un sous-contractant ou une autre entité, son nom devrait aussi être publié.
- Nom du directeur du sondage (individu) et son statut dans la firme responsable.
- Nom du commanditaire du sondage et du service ou département qui l'a commandé, s'il y a lieu.
- La population étudiée avec toutes les précisions qui s'y rattachent (ex.: adultes, citoyenneté canadienne, langue d'usage, régions ou territoires, etc.).
- La méthode d'échantillonnage et le type d'échantillon (base de sondage, mode de sélection des ménages et des individus, nombre de rappels possibles, avec ou sans substitution, avec ou sans stratification, type de stratification).
- Le taux de réponse obtenu selon les normes de l'AIRMS.
- Un contrôle de la représentativité de l'échantillon pondéré (ex.: le sexe, l'âge, la région, la langue maternelle et autres variables pertinentes aux objectifs).
- Les procédures de pondération, s'il y en a (ex.: redressements régionaux, pondération selon la taille du ménage etc.).
- La méthode de collecte des données. Dans le cas d’un sondage téléphonique, il faut préciser le nombre et la localisation des centres d’appels utilisés pour la collecte, le taux de validation ainsi que le mode utilisé. Si la collecte a été assistée par ordinateur, l'indiquer et préciser la proportion d'entrevues écoutées.
- La période de collecte des données.
- La durée de l'entrevue typique et l'inventaire des sections importantes du questionnaire selon leur séquence de déroulement.
- La marge maximum de l'erreur d'estimation selon l'intervalle de confiance de 95 %.
- Les notes d'avertissement pertinentes (ex.: une intention de vote n'est pas une prévision ...) indiquées par le sondeur.
- La section méthodologique devrait faire l'objet d'un encart, distinct de l'interprétation des résultats.
Intervalles de dispersion
Niveau de confiance : 95 % (Échantillon aléatoire simple non pondéré)
| taille de l'échantillon | Marge d'erreur pour un résultat de : |
| 2 % ou 98 % |
4 % ou 96 % |
6 % ou 94 % |
8 % ou 92 % |
10 % ou 90 % |
12 % ou 88 % |
15 % ou 85 % |
20 % ou 80 % |
25 % ou 75 % |
30 % ou 70 % |
35 % ou 65 % |
40 % ou 60 % |
45 % ou 55 % |
50 % | |
| 100 | 3,8 | 4,7 | 5,3 | 5,9 | 6,4 | 7,0 | 7,8 | 8,5 | 9,0 | 9,3 | 9,6 | 9,8 | 9,8 | |
| 150 | 3,1 | 3,8 | 4,3 | 4,8 | 5,2 | 5,7 | 6,4 | 6,9 | 7,3 | 7,6 | 7,8 | 8,0 | 8,0 | |
| 200 | 2,7 | 3,3 | 3,8 | 4,2 | 4,5 | 4,9 | 5,5 | 6,0 | 6,4 | 6,6 | 6,8 | 6,9 | 6,9 | |
| 250 | 1,7 | 2,4 | 2,9 | 3,4 | 3,7 | 4,0 | 4,4 | 5,0 | 5,4 | 5,7 | 5,9 | 6,1 | 6,2 | 6,2 |
| 300 | 1,6 | 2,2 | 2,7 | 3,1 | 3,4 | 3,7 | 4,0 | 4,5 | 4,9 | 5,2 | 5,4 | 5,5 | 5,6 | 5,7 |
| 400 | 1,4 | 1,9 | 2,3 | 2,7 | 2,9 | 3,2 | 3,5 | 3,9 | 4,2 | 4,5 | 4,7 | 4,8 | 4,9 | 4,9 |
| 500 | 1,2 | 1,7 | 2,1 | 2,4 | 2,6 | 2,8 | 3,1 | 3,5 | 3,8 | 4,0 | 4,2 | 4,3 | 4,4 | 4,4 |
| 600 | 1,1 | 1,6 | 1,9 | 2,2 | 2,4 | 2,6 | 2,9 | 3,2 | 3,5 | 3,7 | 3,8 | 3,9 | 4,0 | 4,0 |
| 800 | ,97 | 1,4 | 1,6 | 1,9 | 2,1 | 2,3 | 2,5 | 2,8 | 3,0 | 3,2 | 3,3 | 3,3 | 3,4 | 3,5 |
| 1000 | ,87 | 1,2 | 1,5 | 1,7 | 1,9 | 2,0 | 2,2 | 2,5 | 2,7 | 2,8 | 3,0 | 3,0 | 3,1 | 3,1 |
| 1200 | ,79 | 1,1 | 1,3 | 1,5 | 1,7 | 1,8 | 2,0 | 2,3 | 2,5 | 2,6 | 2,7 | 2,8 | 2,8 | 2,8 |
| 1500 | ,71 | 1,0 | 1,2 | 1,4 | 1,5 | 1,6 | 1,8 | 2,0 | 2,2 | 2,3 | 2,4 | 2,5 | 2,5 | 2,5 |
| 2000 | ,61 | ,86 | 1,0 | 1,2 | 1,3 | 1,4 | 1,6 | 1,7 | 1,9 | 2,0 | 2,1 | 2,1 | 2,2 | 2,2 |
Clé d'interprétation : pour un échantillon de 500, un résultat de 4 % sera précis à plus ou moins 1,7 point de pourcentage 19 fois sur 20. |
Rapport administratif des contacts et des taux de réponse(1)
| Numéros générés | FRÉQUENCE | Total |
|
||||
|
||||
|
||||
|
||||
|
| Calcul du taux de réponse |
 |
(1) Présenté selon les normes de l'AIRMS. (2) Pour qu’un numéro puisse être considéré comme « Pas de réponse », il doit correspondre à un numéro qui a toujours été sans réponse tout au long de la collecte des données. Par exemple, un rendez-vous non complété pour lequel il n’y a pas de réponse au moment du rappel doit être considéré comme « Rendez-vous non complété » et non pas comme « Pas de réponse ».
|
