L'évaluation
L'évaluation est un moyen essentiel d'utiliser les données de suivi pour déterminer si votre communication sur les risques de catastrophe a atteint ses objectifs généraux, le plus souvent à la fin de l'initiative.
Elle peut également être utile à des fins d'apprentissage et d'optimisation, par exemple pour identifier les points forts et les points faibles de votre projet ainsi que des bonnes pratiques. Ainsi, elle permet de garantir la transparence et la responsabilité des parties prenantes, ainsi que l'amélioration continue de la communication sur les risques de catastrophe, tant pour vous que pour d'autres acteurs.
Contents of Disaster Risk Communication Hub
Le projet a-t-il atteint ses objectifs ?
Les questions de recherche suivantes peuvent être adaptées à différents projets de communication.
- Fournir aux Combien de personnes/quelle proportion du public cible le contenu a-t-il atteinte(s) ? Qui n'a pas été atteint et pourquoi ?
- Comprendre : Le public a-t-il correctement compris le contenu ?
- Pertinence : Le contenu était-il pertinent, opportun et utile ?• Engagement : Le public a-t-il eu envie de regarder, de lire ou d'écouter le contenu ? Sʼest-il connecté/a-t-il suivi les publications régulièrement ? Pourquoi ou pourquoi pas ?
- Confiance : Le public a-t-il confiance dans le contenu ? Pourquoi ou pourquoi pas ?
- Efficacité et impact : Le contenu était-il efficace ? Cela variera en fonction de vos objectifs, mais pourrait inclure les questions suivantes :
- Le contenu a-t-il aidé le public à se sentir mieux informé ? A-t-il aidé le public à comprendre les informations clés sur les risques, y compris les prévisions météorologiques ?
- A-t-il permis d'accroître ses connaissances ? Qu'a appris le public sur la façon de se préparer à un aléa ?
- A-t-il conforté le public dans sa perception de l'existence d'un risque réel ?
- A-t-il suscité des discussions sur le risque ? Le public a-t-il partagé les informations incluses dans le contenu avec d'autres personnes ?
- Le public a-t-il pris des mesures préparatoires après avoir pris connaissance du contenu ?
- Le contenu a-t-il eu des effets inattendus au niveau individuel ou de groupes de population ?
Les évaluations peuvent utiliser diverses méthodes de recherche quantitatives ou qualitatives. Choisissez une méthode de recherche qui réponde au mieux à votre question de recherche et mesurez les progrès réalisés par rapport à vos indicateurs. Tenez également compte du temps dont vous disposez pour mener et analyser les travaux de recherche, de votre budget et de la complexité des travaux de recherche (qui possède l'expertise/les compétences pour les mener : une agence de recherche, un universitaire ou un chercheur ?).
Il est judicieux d'examiner la littérature existante dans votre pays et dans votre contexte pour comprendre quelles sont les données probantes d'ores et déjà disponibles en matière de communication sur les risques de catastrophe. Il peut également être utile de s'inspirer de la manière dont d'autres chercheurs ont formulé leurs questions de recherche et leurs questions d'enquête, ainsi que de les conclusions et les enseignements qu'ils en ont tirés, pour orienter votre évaluation. Par ailleurs, partager les résultats et l'analyse de votre évaluation afin de guider les autres est une bonne pratique.
Recherche quantitative
Les essais contrôlés randomisés sont des études qui mesurent l'efficacité d'une nouvelle intervention ou d'un nouveau traitement. Les participants sont répartis de manière aléatoire entre un groupe de contrôle (pas de traitement) et un groupe de traitement (qui peut être exposé au contenu des médias). Les deux groupes peuvent ensuite être interrogés pour mesurer les différences de résultats.
Bien qu'aucune étude ne puisse établir de lien de causalité avec certitude, la randomisation réduit les biais et constitue une méthode rigoureuse pour examiner les relations de cause à effet entre une intervention et son résultat.
Les enquêtes quantitatives sont le meilleur moyen de savoir quelle proportion de votre public cible a été touchée par votre contenu. Une enquête menée auprès d'un échantillon représentatif de la population permet également de comparer les réactions des personnes qui ont été atteintes par le contenu (exposées) avec celles des personnes qui ne l'ont pas été (non exposées). Des techniques statistiques telles que la régression multiple permettent de mettre en évidence les autres influences de variables tierces (mesurées), telles que les caractéristiques démographiques, et d'étayer les allégations de corrélation entre l'exposition et l'évolution des résultats. Vous pouvez également ventiler les données d'un large échantillon par sexe, âge, origine ethnique ou toute autre catégorie pertinente. Vous pourriez découvrir que les différents groupes ont une compréhension très différente de l'information et préfèrent des médias différents.
Enquêtes de référence, de mi-parcours ou de fin de parcours : Ces méthodes quantitatives peuvent vous aider à comparer vos résultats (par exemple, la compréhension du public) dans le temps.
Conception longitudinale : comprend la mesure répétée des résultats auprès des mêmes individus afin d'évaluer les changements au fil du temps.
Recherche qualitative
Les entretiens qualitatifs et approfondis ainsi que les discussions de groupe sont utiles pour recueillir les perspectives précises de vos publics cibles. Ces informations peuvent vous fournir de précieuses données sur ce que le public pense du contenu, ce qui l'a intéressé, ce qu'il a retenu et appris et ce qui l'a incité à agir. Elles peuvent contribuer à compléter les résultats des données quantitatives.
Les entretiens qualitatifs avec des informateurs clés peuvent apporter une expertise dans un domaine ou un sujet d'intérêt spécifique et permettre de mieux comprendre l'efficacité de vos contenus médiatiques et de communication. Ils peuvent également permettre de mieux comprendre la communauté et les problèmes auxquels elle est confrontée, et ainsi fournir des informations utiles sur l'efficacité du contenu.
Différentes méthodologies d'évaluation qualitative de l'impact peuvent être envisagées, telles que la traçabilité des processus, l'analyse de la contribution et le protocole d'impact qualitatif.
Les méthodes de recherche susmentionnées peuvent être mises en œuvre en partenariat avec une institution universitaire, une agence de recherche ou des chercheurs ayant de l'expérience dans ces domaines.
Considérations éthiques lors de la conduite de travaux de recherche
- Ne pas nuire : donnez la priorité à la sécurité des chercheurs et des participants. Ne poursuivez pas les travaux de recherche si quelqu'un risque d'être blessé en y participant.
- Collaborer : Pour éviter de trop sonder les populations touchées par une crise, envisagez de vous associer à d'autres organisations ou d'ajouter vos questions à des études existantes.
- Se tenir prêts : Réfléchissez à ce qui est disponible dans la zone touchée et à ce que vous devrez apporter avec vous pour éviter d'épuiser des ressources limitées. Si possible, apportez une liste de services dont vous pourrez parler aux participants s'ils en ont besoin.