Ressources pour la réalisation d’enquêtes à distance
Summary
Tout comme les enquêtes en face à face, la réalisation d’enquêtes à distance nécessite la prise en compte d’un certain nombre de considérations à chaque étape du cycle de vie du projet. Dans cette ressource, nous présentons les aspects essentiels de la mise en place d’une enquête à distance, en citant le cas échéant les ressources publiques de J-PAL dans lesquelles vous trouverez des conseils plus détaillés.
Dans la mesure où cette page se concentre sur les ressources de J-PAL, elle ne recense pas l’ensemble des outils utiles pour réaliser une enquête à distance, comme ceux qui ont été mis au point par Innovations for Poverty Action (IPA) et d’autres organismes. Les ressources d’IPA, y compris le manuel Remote surveying in a pandemic, sont accessibles sur la page Phone survey methods de leur plate-forme RECOVR
Ressources générales
Articles de blog
- Bonnes pratiques pour la conduite d’enquêtes par téléphone
- Ressources pour le passage aux enquêtes par téléphone dans le cadre de la pandémie de COVID-19
- Principes fondamentaux pour une collecte de données éthique et de qualité pendant la pandémie de COVID-19
- Considérations relatives à la collecte de signatures électroniques
Manuels
- Check-list pour le passage aux enquêtes CATI
- Établir un budget pour les enquêtes téléphoniques avec suivi à distance
- Formation à distance du personnel de terrain
- Assurance qualité pour les enquêtes CATI
- Exemples de protocoles d’enquête par téléphone
Webinaires
- Adaptations for phone surveys (webinaire avec Tavneet Suri)
- Rich remote data (webinaire organisé par le Busara Center for Behavioral Economics en collaboration avec IPA et IDinsight)
Planification du projet
Dans la mesure où la décision d’effectuer l’enquête par téléphone plutôt qu’en face à face a des conséquences sur le budget, la stratégie d’échantillonnage et la procédure de l’IRB, le processus de planification d’une enquête téléphonique doit intervenir le plus tôt possible dans le cycle de vie du projet. Si l’étude utilise des données administratives (par exemple pour construire la base d’échantillonnage), il est par ailleurs important de s’assurer dès le début que les accords nécessaires pour accéder aux données administratives contenant les numéros de téléphone sont bien en place.
IRB
Pour mettre en place une enquête par téléphone, il est nécessaire d’obtenir l’approbation d’un IRB pour remplacer le consentement écrit par un consentement oral (comme pour toute autre procédure de consentement, quel qu’en soit le format). Il faut également décrire à l’IRB les procédures de sécurité des données, qui sont parfois différentes pour les enquêtes téléphoniques. Toute modification apportée aux modalités de contrôle de la qualité des données, comme l’utilisation d’enregistrements audio à la place des contrôles inopinés ou l’écoute des appels par une tierce personne, doit également être approuvée par l’IRB. Vous trouverez ci-dessous de plus amples informations sur l’adaptation des procédures de recueil du consentement, des procédures de sécurité des données, de l’échantillonnage et du contrôle de la qualité des données.
Budgeting
Par rapport aux enquêtes en face à face, les enquêtes à distance nécessitent généralement de prévoir un budget pour recruter davantage de superviseurs et fournir aux enquêteurs des formations et des équipements supplémentaires. À l’inverse, ce type d’enquêtes permet généralement d’éviter d’autres dépenses, comme les frais de transport ou d’hébergement. Pour plus d’informations, voir la section correspondante dans la ressource sur les demandes de subvention ainsi que le guide sur la budgétisation des enquêtes téléphoniques.
- Personnel et formation du personnel : Envisagez de budgétiser des heures de travail supplémentaires pour le chef de projet afin de superviser le recrutement du personnel. Il est également judicieux de prévoir un temps de formation supplémentaire, dans la mesure où les enquêteurs devront être formés à effectuer le suivi des appels et des rendez-vous, à conduire les enquêtes par téléphone et à gérer les équipements.
- Productivité des enquêtes : Bien que les enquêtes téléphoniques soient généralement assez courtes (pas plus de 30 minutes), cela ne signifie pas pour autant que les enquêteurs vont pouvoir mener un grand nombre d’entretiens au cours d’une même journée. Gardez à l’esprit qu’ils risquent de passer l’essentiel de leur temps à tenter de joindre les répondants potentiels plutôt qu’à conduire des entretiens. Il est donc important de faire preuve de prudence dans vos estimations de la productivité. Par exemple, pour une enquête de 30 minutes, J-PAL Asie du Sud recommande de prévoir 4 à 8 enquêtes par jour et par enquêteur.
- Équipement : Les chercheurs doivent prévoir un budget pour l’ensemble des appareils, des ressources et des logiciels nécessaires à la réalisation des enquêtes par téléphone (écouteurs, crédit téléphonique, plateformes de masquage des numéros, forfaits de données ou abonnement Internet, etc.). Pour plus d’informations, voir le modèle de budget pour les enquêtes téléphoniques de J-PAL Asie du Sud.
- Temps de communication : Le paiement de crédits de communication (à la fois pour les enquêteurs et en guise d’incitation pour les participants) doit être budgétisé et suivi avec soin. Le bureau de J-PAL Afrique utilise des outils comme flickswitch pour gérer ces paiements.
Protocole de recherche
Les enquêtes par téléphone peuvent être confrontées à un certain nombre de problèmes logistiques qui doivent être pris en compte lors de la conception du protocole de recherche. Tout d’abord, afin de maintenir un haut niveau de qualité des données et d’éviter des problèmes comme le déchargement de la batterie des téléphones, les enquêtes ne doivent pas durer plus de 30 minutes (ou doivent faire l’objet d’une série de plusieurs appels de 30 minutes, si nécessaire). Pour respecter cette limite de durée, il est souvent nécessaire de réduire considérablement la longueur des enquêtes en ne se concentrant que sur les variables de résultat clés. En outre, si l’on ne dispose d’aucune liste préexistante de participants avec leurs coordonnées (établie par exemple lors de l’enquête initiale), une telle liste peut s’avérer difficile à obtenir. Enfin, comme mentionné ci-dessus, les procédures de recueil du consentement doivent être adaptées pour pouvoir être effectuées par téléphone. Pour plus d’informations, voir les ressources ci-dessous
Conception de l’enquête
Outre les modifications décrites plus haut, il convient d’éliminer autant que possible les questions sensibles (et, si ce n’est pas possible, de définir des protocoles clairs permettant aux enquêteurs de poser ces questions en toute sécurité). Lorsque vous programmez votre enquête, envisagez d’inclure une option permettant de sauvegarder et de quitter l’enquête à la fin des principaux modules, au cas où le répondant aurait besoin d’interrompre l’entretien pour le reprendre plus tard. Pour plus d’informations, voir la section correspondante de la ressource sur la conception des enquêtes.
Procédure d’admission et de recueil du consentement
Bien que le texte utilisé par les enquêteurs pour recueillir le consentement éclairé des participants doive être simple et clair quel que soit le format de l’enquête, cette exigence est particulièrement importante pour les enquêtes par téléphone, l’enquêteur ne pouvant pas s’appuyer sur le langage corporel du répondant pour évaluer sa compréhension et ses réactions. Le texte de consentement doit inclure des informations sur l’objet de l’appel, l’identité de l’appelant (à la fois l’organisme et l’individu) et le caractère confidentiel des résultats, ainsi que sur la durée estimée de l’enquête (qui pourra être déterminée lors du pilotage de l’enquête). Si possible, envisagez de recueillir la signature électronique des participants plutôt que leur consentement verbal. Si l’équipe de recherche prévoit d’utiliser des enregistrements audio, les répondants doivent en être informés au cours de la procédure de consentement.
Échantillonnage et randomisation
Si aucune liste préexistante de répondants potentiels n’est disponible, envisagez d’utiliser des méthodes comme la génération aléatoire de numéros, l’échantillonnage en boule de neige ou la combinaison d’échantillons (c’est-à-dire l’utilisation de listes provenant d’autres études, avec l’approbation des IRB concernés) pour construire votre base d’échantillonnage, en sachant toutefois que toutes ces méthodes ont des conséquences sur la représentativité de l’échantillon1. Dans le cas de la combinaison d’échantillons, il faut également tenir compte du risque de recoupement avec d’autres interventions récentes. Pour vous assurer que les répondants restent dans l’étude, demandez-leur de fournir des coordonnées supplémentaires (comme le numéro de téléphone d’un membre de la famille ou d’un ami). Pour plus d’informations sur la combinaison de plusieurs bases d’échantillonnage, voir aussi la ressource sur la randomisation ainsi que l’article de blog sur les bonnes pratiques en matière d’enquêtes téléphoniques.
Collecte des données
La mise en œuvre des enquêtes téléphoniques présente également un certain nombre de différences par rapport aux enquêtes en face à face. Dans la mesure où certaines mesures de contrôle de la qualité, comme les contrôles inopinés ou les mesures d’accompagnement, sont logistiquement plus difficiles à mettre en œuvre, il est important de mettre en place des mesures alternatives comme des contrôles audio et d’augmenter le nombre de contrôles à haute fréquence et de back-checks. Dans le cadre d’une enquête téléphonique, le travail de suivi des répondants consiste à programmer les appels, à noter les différentes tentatives d’appel et, dans certains cas, à mettre en contact les répondants avec un enquêteur compétent en fonction de la langue dans laquelle ils s’expriment. Les chercheurs peuvent par ailleurs envisager d’ajouter une question ouverte facultative adressée à l’enquêteur pour lui permettre de consigner tout détail inhabituel ou qui mérite d’être mentionné à propos de l’appel (problèmes de qualité de l’appel, inquiétudes concernant certaines questions, etc.).
Dans certaines situations, comme lors du confinement de 2020, il n’est pas pratique, voire impossible, de dispenser une formation en présentiel aux enquêteurs ou de leur remettre des appareils pour passer les appels. Il faut alors trouver des solutions créatives pour recruter et former les enquêteurs, sans oublier de prendre des mesures supplémentaires de sécurité des données pour protéger les informations des participants. Nous résumons ci-dessous les principales adaptations propres aux enquêtes à distance. Pour plus d’informations, consultez les ressources indiquées en lien.
Contrôle de la qualité des données
Si les principes fondamentaux du contrôle de la qualité des données restent les mêmes pour les enquêtes à distance, il existe malgré tout plusieurs différences d’ordre logistique avec les enquêtes en face à face. Vous trouverez ci-dessous quelques considérations supplémentaires à prendre en compte pour la mise en œuvre de ce type d’enquêtes. Pour plus d’informations, consultez la section sur les enquêtes à distance de la ressource sur les contrôles de la qualité des données.
- Contrôles audio : Les équipes de recherche peuvent envisager d’intégrer des contrôles audio à leurs pratiques de vérification de la qualité des données. Notez que cela nécessite l’approbation de l’IRB et que les répondants doivent en être informés lors du recueil de leur consentement. Les appareils de collecte de données n’offrent pas tous les mêmes fonctionnalités en matière d’enregistrement audio (par exemple, certaines versions des systèmes d’exploitation Android ne peuvent enregistrer que l’enquêteur, tandis que d’autres permettent d’enregistrer les deux côtés de la conversation téléphonique). Certaines plateformes, comme SurveyCTO, peuvent effectuer des contrôles automatiques de la qualité des données audio, en contrôlant par exemple la quantité de silences au cours d’un appel.
- Les chercheurs qui envisagent de mettre en place des contrôles audio doivent réfléchir attentivement aux problèmes logistiques suivants : 1) les fichiers multimédias des contrôles audio sont parfois volumineux, ce qui rallonge le temps de téléchargement des données ; et 2) la mise en place de contrôles audio nécessite très souvent de recruter (et de former) du personnel supplémentaire pour transcrire et écouter les enregistrements, ce qui occasionne des coûts additionnels.
- Accompagnement des appels : Tous les enquêteurs doivent être accompagnés par un membre expérimenté de l’équipe de recherche sur une partie de leurs entretiens. Pour ce faire, le superviseur peut se joindre directement à l’appel ou écouter les enregistrements audio après coup (notez toutefois que la participation d’une tierce personne à l’entretien téléphonique nécessite l’approbation de l’IRB et doit être mentionnée dans le formulaire de consentement). Élaborez des directives précises à l’intention des enquêteurs et du personnel chargé de les accompagner concernant la collecte des données générées pendant l’accompagnement et les mesures à prendre en réponse à ces données. Pour plus d’informations, voir également le guide de J-PAL sur l’assurance qualité pour les enquêtes CATI.
Logistique des enquêtes
La nature décentralisée des enquêtes à distance soulève des problèmes logistiques auxquels les enquêtes en face à face ne sont pas confrontées, tout en limitant par ailleurs d’autres types de problèmes posés par ces dernières. Les principales adaptations en matière de logistique des enquêtes sont résumées ci-dessous et abordées plus en détail dans la ressource sur la logistique des enquêtes.
- Gestion du matériel : Pour mener des enquêtes par téléphone, les enquêteurs ont souvent besoin de matériel et de ressources supplémentaires, comme des écouteurs, des plateformes de masquage des numéros, des tablettes, etc. Cette augmentation du nombre d’appareils, associée à la décentralisation éventuelle des équipes de recherche, nécessite d’adapter les fiches de suivi des appareils. Pour plus d’informations, consultez le guide sur la budgétisation des enquêtes téléphoniques.
- Suivi des répondants : Le protocole de suivi des répondants doit imposer aux enquêteurs de documenter chaque tentative d’appel effectuée. Ils devront notamment préciser la date et l’heure de l’appel, l’identité de la personne qui a répondu et la langue dans laquelle elle s’est exprimée. Si les répondants reçoivent une incitation financière pour participer à l’enquête, celle-ci doit également faire l’objet d’un suivi minutieux. On peut notamment mettre en place des procédures permettant de confirmer que les répondants ont bien reçu l’incitation et de résoudre les problèmes éventuels. L’équipe de recherche doit en outre établir une procédure pour réagir aux données de suivi des répondants (en ciblant par exemple un autre moment de la journée, ou en affectant un autre enquêteur à certains ménages en fonction de la langue parlée par la personne qui a répondu au téléphone). Comme pour les enquêtes en face à face, les chercheurs doivent également donner aux enquêteurs des consignes claires concernant le remplacement des répondants.
- Gestion de l’équipe de terrain : Les interactions en personne étant limitées, la supervision et la gestion des enquêteurs revêtent une importance d’autant plus cruciale. Les sessions de débriefing, qui doivent être régulières (voire quotidiennes), doivent parfois être effectuées à distance. Ces sessions sont l’occasion pour les chercheurs d’aborder les difficultés rencontrées par l’équipe d’enquêteurs et les éventuels problèmes de qualité. Il peut également être utile de faire chaque jour le point par téléphone avec un sous-ensemble d’enquêteurs, de façon à bien leur montrer que la qualité et la productivité sont contrôlées, tout en leur donnant l’opportunité de faire remonter leurs préoccupations ou de poser des questions en privé.
Recrutement et formation des enquêteurs
Lorsque vous évaluez des candidats au poste d’enquêteur pour une enquête téléphonique, il est important de prendre en compte un certain nombre de compétences techniques et non techniques supplémentaires qui sont essentielles à ce type d’enquêtes, notamment la capacité à tenir une conversation tout en saisissant des données sur un autre appareil, une connaissance de base de Google Drive ou Dropbox, et la faculté de ne pas se laisser distraire pendant les appels. Pour plus d’informations, y compris sur les modalités d’organisation d’une formation des enquêteurs à distance, consultez le guide sur la formation à distance du personnel de terrain publié par J-PAL Asie du Sud, ainsi que la section sur la formation aux enquêtes à distance de la ressource sur le recrutement et la formation des enquêteurs.
Sécurité des données
Il est possible que les enquêteurs aient besoin de matériel supplémentaire pour garantir la sécurité et la confidentialité des données, comme des casques anti-bruit, des adaptateurs 4G, des cartes SIM, etc. Tous les enregistrements audio de la procédure de recueil du consentement ou des entretiens téléphoniques doivent être chiffrés. Les enquêteurs doivent donc être formés à la méthode de chiffrement utilisée et à la gestion des fichiers audio. Si les enquêteurs utilisent leur appareil personnel pour effectuer les entretiens, il est important de prendre des précautions supplémentaires pour protéger la vie privée de l’enquêteur et des répondants, comme par exemple le masquage des appels. Notez que si les enquêteurs passent les appels depuis leur domicile ou tout autre lieu décentralisé, le risque de perte de données (lié à la perte d’un appareil, par exemple) est plus élevé.
Dernière mise à jour : Mai 2021
Ces ressources sont le fruit d’un travail collaboratif. Si vous constatez un dysfonctionnement, ou si vous souhaitez suggérer l'ajout de nouveaux contenus, veuillez remplir ce formulaire.
Traduit de l’anglais par Marion Beaujard.
Additional Resources
Atkinson, Rowland and John Flint. 2001. “Accessing Hidden and Hard-to-Reach Populations: Snowball research strategies.” Social Research Update 33. https://sru.soc.surrey.ac.uk/SRU33.html
Himelein, Kristen, Stephanie Eckman, Charles Lau, and David McKenzie. “Mobile Phone Surveys for Understanding COVID-19 Impacts: Part I Sampling and Mode.” Development Impact (Blog). April 7, 2020, https://blogs.worldbank.org/impactevaluations/mobile-phone-surveys-understanding-covid-19-impacts-part-i-sampling-and-mode. Last accessed April 23, 2021
Hughes, Sarah, and Kristen Velyvis. “Tips to quickly switch from Face-to-Face to Home-Based telephone interviewing.” Mathematica (Blog), April 1, 2020 https://www.mathematica.org/commentary/tips-to-quickly-switch-from-face-to-face-to-home-based-telephone-interviewing. Last accessed April 23, 2021
IPAs’ Remote surveying in a pandemic handbook
IPA’s Phone survey methods guide
J-PAL’s Budgeting for phone surveys during the Covid-19 Outbreak
J-PAL’s Covid-19 Pilots and Surveys
J-PAL’s Using smartphones to trace mobility during regional lockdowns in Indonesia
SurveyCTO’s Conducting remote and decentralized data collection with SurveyCTO
Appliqato: Enregistrement automatique des appels
Code SurveyCTO pour intégrer des vidéos Youtube pour la formation à distance des enquêteurs, IPA
Modèles SurveyCTO d’IPA :
- Enquête de mobilisation : Contient le formulaire de mobilisation, utilisé pour générer un échantillon d’enquête et assigner les répondants à recevoir une enquête téléphonique, ainsi que le formulaire d’enquête téléphonique, qui contient l’entretien.
- Tentatives multiples : Contient des lignes de code permettant aux enquêteurs de soumettre un formulaire par jour consignant toutes les tentatives d’appel de la journée, plutôt qu’un formulaire par tentative. Cela permet de limiter le nombre total de formulaires soumis à SurveyCTO.
Petit guide d’utilisation d’Exotel de J-PAL Asie du Sud
J-PAL South Asia’s Quick guide to using Exotel
SurveyCTO code for scheduling appointments (Mansa Saxena)
SurveyCTO’s 7 ways to conduct a Covid-19 phone survey like IPA contains seven case studies for conducting phone interviews, including case studies on random digit dialing and remote training
SurveyCTO’s Resources for transitioning projects to telephone surveying (CATI)
SurveyCTO’s webinar: Discover how J-PAL and IPA use SurveyCTO plug-ins for phone surveys and more