Que savons-nous vraiment des sondages téléphoniques dans les pays à revenu faible ou intermédiaire ?

Que savons-nous vraiment des sondages téléphoniques dans les pays à revenu faible ou intermédiaire ?

Blocs de contenu du modèle G
Sous-éditeur

Les enquêtes téléphoniques font depuis longtemps partie de la recherche en sciences sociales dans les pays à revenu élevé. Dans les pays à revenu faible et intermédiaire (PRFI), les chercheurs qui étudient la pauvreté dans le monde se sont historiquement appuyés sur des enquêtes en face à face. Alors que la possession d'un téléphone portable continue de devenir plus omniprésente dans ces contextes, les chercheurs ont provisoirement commencé à utiliser les enquêtes par téléphone. La pandémie ayant interrompu presque toutes les collectes de données en personne, il y a soudainement une demande intense de la part des chercheurs pour en savoir plus sur les méthodes d'enquête téléphonique. 

Certaines questions sont particulièrement pertinentes pour la mise en œuvre : Quel mode dois-je choisir ? Où puis-je obtenir des listes de numéros de téléphone ? À quel type de taux de réponse puis-je m'attendre ? Combien coûtera la conversion aux téléphones ? Quelle est la représentativité des échantillons qui ciblent les populations vulnérables qui ne possèdent peut-être pas de téléphone portable ou qui n'ont pas les moyens de maintenir leurs plans, leur connectivité et leur électricité ? 

En collaboration avec le Global Poverty Research Lab de Northwestern, l'IPA a construit NUMÉRIQUES pour aider les chercheurs à répondre à des questions comme celles-ci et plus encore. Dans le cadre de cet effort, nous avons examiné la littérature récente sur les enquêtes par téléphone mobile dans les PRITI, produisant une synthèse des preuves et des mémoires plus courts sur contacts avant l'enquête ainsi que Incitations financières.

Il existe trois approches pour obtenir des listes de numéros de téléphone (bases de sondage) pour les enquêtes à distance :

  1. Composition aléatoire de chiffres (RDD) génère aléatoirement des numéros correspondant aux formations de numéros mobiles des pays cibles.
  2. Un opérateur de réseau mobile (MNO), obtient une liste de numéros actifs, dont l'activité est ensuite vérifiée et échantillonnée au hasard parmi tous les clients de télécommunications. 
  3. Échantillons existants peut être utilisé ou créé à partir d'un échantillonnage à partir d'enquêtes en face à face et étendu en fournissant des combinés et des cartes SIM pour augmenter la possession de téléphones portables.

La collecte en face à face des ménages n'est pas réaliste pendant une pandémie mondiale comme la COVID-19, donc à la place, en fonction de la CISR et du consentement, une liste de chiffres d'une enquête ou d'un programme précédent peut être utilisée. Les cadres d'échantillonnage ont des effets spectaculaires sur les protocoles de recherche, la représentativité et les taux de réponse, comme en témoignent les différences significatives dans la proportion de numéros de téléphone connectés. En examinant plusieurs études, nous avons constaté que les enquêteurs étaient en mesure de se connecter avec 63 % des numéros composés à partir d'échantillons existants, en moyenne, mais seulement 19 % des numéros provenant d'échantillons d'"appels à froid" (RDD et MNO) - voir la figure 1.

Figure 1 : Proportion moyenne de numéros connectés par numéro unique tenté par base de sondage

Figure 1—Proportion moyenne
 
Remarque : Nous limitons ce chiffre aux études qui ont rapporté les codes de disposition AAPOR 4.30, 4.31 et/ou 4.32 (numéro non fonctionnel/déconnecté, numéro non fonctionnel, numéro déconnecté) à l'exception de Australie, qui a été exclu car les modèles d'utilisation du téléphone dans les pays à revenu élevé peuvent ne pas s'appliquer aux PRITI.

Liban; Libéria (a, b)
Bengladesh (a, b); Ghana; Libéria; Mozambique; Philippines; Tanzanie; Ouganda; Zambie

Bien que l'enquête à distance soit utile dans les situations d'urgence, telles que la crise du COVID-19, il y a une raison pour laquelle l'enquête en face à face (F2F) reste la norme pour la collecte de données dans les PRITI. Les enquêtes F2F, telles que l'Enquête Démographique et de Santé (DHS ) programme ont rarement taux de réponse moins de 90 % et sont représentatifs de l'ensemble du pays. En comparaison, les taux de réponse pour les enquêtes à distance peuvent varier de 4.5 % à 56 %, selon le mode et le type d'échantillon :

Figure 2 : Taux de réponse par mode et type d'échantillon

Figure 2—Taux de réponse
Remarque : Nous rapportons une moyenne non pondérée entre les protocoles d'étude (par exemple, une étude qui variait expérimentalement le contact de pré-notification compterait comme deux observations) avec l'écart type entre parenthèses. Nous ne contrôlons pas les diverses différences dans les protocoles d'étude qui affectent probablement les taux de réponse. Nous excluons les études qui ne fournissent pas de chiffres exacts pour calculer les taux de réponse. Les études rapportant des taux de réponse pour plusieurs traitements ne sont citées qu'une seule fois ci-dessous.
 
Ghana; Kenya; Liban; Libéria (a, b); Pérou; Sierra Leone; Turquie
Australie; Bangladesh; Libéria; Mozambique; Nigéria; Tanzanie
Inde; Ghana; Malawi; Nigéria; Pérou
Afghanistan; Bengladesh (a, b); Éthiopie; Ghana (a, b, c); Libéria; Mozambique; Nigéria; Tanzanie; Ouganda; Zambie; Zimbabwe.
Kenya; Pérou
Ghana; Kenya; Nigeria (a, b); Philippines; Ouganda.

Au mieux, les enquêtes à distance sont représentatives de la population qui possède ou a accès à un téléphone mobile connecté en état de marche. Au cours des 10 dernières années, abonnements de téléphonie mobile pour 100 personnes ont augmenté de 55 % dans les pays IAP, mais sont inférieurs de 29 % à ceux des pays de l'OCDE. De vastes améliorations de la représentativité des enquêtes à distance peuvent encore dépendre de l'évolution des modèles de pénétration et de propriété de la téléphonie mobile. Bien qu'il existe un écart entre les sexes dans la possession actuelle de téléphones portables, il s'agit d'une réduction par rapport aux années précédentes et il y a eu des réductions régionales importantes de la possession et de l'utilisation de l'Internet mobile.

Historiquement, ces disparités se sont reflétées dans la composition des échantillons des enquêtes téléphoniques. Les preuves issues de 15 études dans les PRFM menées entre 2014 et 2019 dans tous les modes éloignés ont révélé que les échantillons surreprésentent les répondants urbains, instruits, jeunes (moins de 35 ans) et masculins. La figure 3 ci-dessous montre ces différences.

Figure 3 : Représentativité des enquêtes à distance par rapport aux enquêtes représentatives à l'échelle nationale

Figure 3—Représentativité des enquêtes à distance
Remarque : Cela reflète la différence entre les enquêtes à distance et les enquêtes auprès des ménages représentatives au niveau national. Les différences sont signalées ici dans quatre domaines communs aux enquêtes déclarées. Nous limitons ce graphique aux études qui rapportent l'une de ces données à l'exception de Australie, qui a été exclu car les données de représentativité pour les pays à revenu élevé peuvent ne pas s'appliquer aux PRITI.
 
1  Libéria; Nigéria
2  Afghanistan; Éthiopie; Ghana; Mozambique; Nigéria; Zambie; Zimbabwe
3  Ghana; Kenya; Nigeria (a, b); Philippines; Ouganda

Bien que les enquêtes puissent présenter un biais de couverture, les enquêtes à distance sont généralement nettement moins coûteuses que les enquêtes en face à face. Un étude ont constaté que les enquêtes en face à face représentaient 161% du coût des enquêtes CATI en contrôlant le nombre d'éléments dans le questionnaire. Autre estimations ont constaté qu'une enquête en face à face coûtait en moyenne plus de 10 fois le coût par ménage d'une enquête à distance. Dans la littérature existante, les coûts estimés varient considérablement selon le mode, l'IVR étant le mode le moins cher et l'ITAO le plus coûteux par enquête complétée. 

Bien que les preuves historiques puissent nous aider à mettre en œuvre des enquêtes par téléphone, de nouvelles preuves sur la composition de l'échantillon sont nécessaires en raison de l'évolution rapide des tendances en matière de possession et d'utilisation de téléphones mobiles. C'est pourquoi le GPRL-IPA Initiative sur les méthodes de recherche s'est efforcé de favoriser la diffusion des enseignements tirés de la mise en œuvre des enquêtes. Alors même que nous revenir à l'entretien en face à face, l'accélération des nouvelles connaissances et de l'expertise sur les enquêtes téléphoniques dans les PRITI acquises pendant la pandémie encouragera probablement l'utilisation des enquêtes téléphoniques et multimodales dans la recherche sur la pauvreté dans le monde.

18 août 2020