Précédente - Suivante
Table des matières
- Précédente - Suivante
Étapes de l'analyse et de l'interprétation des résultats
Établissement de la fiabilité des informations
Présentation des résultats
Application pratique des résultats
Lorsque
vous aurez fini d'utiliser les méthodes et les outils que vous
avez choisis pour la réalisation de votre étude, vous aurez une
foule d'informations organisées et consignées dans des carnets
de notes, des fichiers et des fiches signalétiques par ordre
chronologique ou par méthode/outil utilisé, ou les deux. Ce
chapitre traite des procédures à suivre pour effectuer
l'analyse globale des informations recueillies et examinées;
pour vérifier leur fiabilité par le recoupement; pour
interpréter ou donner un sens aux résultats; pour présenter et
appliquer concrètement les résultats. La documentation étant
l'un des produits les plus importants d'une étude d'évaluation
sanitaire, nous essaierons de démontrer comment rapprocher
l'investigation et l'analyse en vue de la rédaction de rapports.
L'analyse et l'interprétation des informations qualitatives comportent quatre grandes étapes. Celles-ci sont traitées plus en détail dans plusieurs manuels parmi lesquels Patton (1986, 1990), Miles et Huberman (1994) et Silverman (1994). Nous avons choisi ici de délaisser les questions théoriques pour nous intéresser aux tâches pratiques.
Analyse descriptive
La description et l'analyse des informations qualitatives sont étroitement lices, d'où le terme d'analyse descriptive. L'analyse descriptive comporte une description succincte de l'objet de l'étude, du site de l'étude et des participants que l'on trouve habituellement dans les sections préliminaires d'un rapport. Il faut préciser toutefois que l'analyse descriptive s'intéresse plus aux moyens utilisés pour recueillir les informations, aux lieux où elles ont été recueillies, et aux personnes chargées des les recueillir, qu'aux informations elles-mêmes. Elle consiste notamment à examiner les informations, à identifier les liens et les tendances, à ordonner les faits, et à les présenter tels quels, sans ajouter de commentaires sur leur signification ou leur importance. Les données ainsi dépouillées sont généralement présentées dans la partie Résultats du rapport. Elles peuvent être présentées dans l'ordre chronologique de leur obtention, ou par ordre d'importance en regard du sujet de l'étude ou hiérarchiques selon leur importance relative par rapport au coeur de l'investigation. Les sections du rapport consacrées à la description préliminaire et à l'analyse descriptive (résultats) devraient vous permettre de répondre à des questions élémentaires, comme par exemple:
Sections préliminaires
• Où l'étude a-t-elle été réalisée? Quelles sont les conditions climatiques et physiques?
• Quand l'étude a-t-elle été réalisée? Pourquoi?
• Quels étaient les objectifs et les résultats visés par l'étude?
• Qui a été chargé de sa réalisation? Quelles méthodes ou quels outils ont été utilisés? Pourquoi?
• Comment les gens ont-ils participé à l'étude? D'autres groupes linguistiques ou ethniques y ont-ils participé? Lesquels? Comment le taux de participation à votre étude se compare-t-il à l'éthologie générale de votre projet concernant la participation de la population locale?
Section Résultats
Comment les informations recueillies sont-elles présentées?
• par outil/méthode utilisée
• par catégorie de pratiques d'hygiène
• dans un autre ordre jugé pertinent
ENCADRÉ 24. Exemple montrant en quoi le compte rendu des résultats diffère de leur interprétation Dans une étude d'évaluation sanitaire réalisée dans une région rurale de l'Ouest du Kenya, plusieurs outils et méthodes ont été employés, dont notamment la cartographie, le triage en trois piles, les observations ponctuelles et les entrevues semi-dirigées (informelles). Concernant l'usage des latrines, voici ce que ces différents moyens ont révélé:
|
Les réponses à ces questions nécessitent une analyse et une description rigoureuses, mais pas d'interprétation (voir l'exemple à l'encadré 24, où il est fait une distinction entre les résultats et la discussion des résultats ou l'interprétation).
L'analyse descriptive doit contenir suffisamment de renseignements pour que le lecteur puisse voir les étapes que vous avez suivies dans votre investigation, comment vous avez pris vos décisions méthodologiques ou de nouvelles orientations, et pourquoi. N'oubliez pas qu'il est fondamental de présenter les faits avec clarté, cohérence et au complet, avant de pouvoir les interpréter. Autre élément très important de l'analyse descriptive: la vérification et le recoupement des informations, et ce, afin de garantir la qualité et la fiabilité des résultats. Nous reviendrons en détail sur ce point dans la section intitulée «Établissement de la fiabilité des informations».
Interprétation
La deuxième étape consiste à déterminer la signification des résultats et leur importance dans leur contexte spécifique. Les raisons qui motivent certaines pratiques d'hygiène et le rôle des facteurs socioculturels peuvent être élucidés lorsque les multiples perspectives de l'équipe chargée de l'étude sont rapportées aux résultats. Des questions plus générales concernant notre compréhension des liens entre les pratiques d'hygiène et la santé peuvent également être examinées à la lumière des résultats.
Voici quelques-unes des questions auxquelles l'équipe chargée de l'étude devra répondre au moment de procéder à l'interprétation des résultats de l'étude.
• Quelle est la signification des résultats?
• Pourquoi les résultats sont-ils ce qu'ils sont?
• Comment peut-on expliquer les résultats?
• Toutes les questions de type pourquoi ont-elles trouvé une réponse?
Faut-il examiner en profondeur certaines d'entre elles?
Dans l'absolu, l'interprétation des résultats doit correspondre aux commentaires et suggestions faits par les membres de la population étudiée lors des sessions de rétroaction qui sont intégrées aux méthodes/outils d'investigation et d'analyse, tels ceux décrits aux chapitres 5 et 6. Cela permet de minimiser les préjugés ou les erreurs qui pourraient fausser l'interprétation des résultats, en veillant à ce qu'elles ne soient pas dissociées du contexte dans lequel elles ont été recueillies (voir encadré 24).
Appréciation
L'analyse descriptive et l'interprétation des résultats donnent lieu à une appréciation, positive ou négative, ou les deux, accompagnée des motivations de cette appréciation. Les valeurs de l'équipe chargée de l'étude et des autres parties intéressées sont rapportées aux résultats de l'étude. Par exemple, les résultats peuvent montrer quels ont été les aspects positifs, négatifs, souhaitables ou non souhaitables du projet relativement à la promotion/amélioration de la santé/hygiène, de l'assainissement et de l'approvisionnement en eau, et à la façon dont les gens ont réagi aux interventions extérieures, et pourquoi.
La question qui demande une réponse est la suivante:
• Quelle est la signification des résultats aux yeux des parties prenantes dans ce contexte particulier?
• votre projet
• la population étudiée
• les chercheurs en sciences appliquées intéressés par les liens existants entre certaines pratiques d'hygiène et la santé
L'interprétation et l'appréciation des résultats sont habituellement présentées dans la partie Discussions du rapport. Il est important de ménager un certain équilibre entre les aspects positifs et négatifs des résultats. Par exemple, les résultats positifs doivent être soulignés sans pour autant écarter les aspects négatifs. De la même manière, les résultats négatifs doivent non seulement apparaître dans le rapport, mais ils doivent aussi faire l'objet de commentaires évoquant de possibles solutions concrètes pour y remédier. La partie de la discussion doit être suivie des conclusions qui pourront être présentées dans la même section ou séparément, dans une partie conclusions.
Recommandations
La quatrième étape consiste à formuler des recommandations relatives aux mesures à prendre sur la base de l'analyse, de l'interprétation et de l'appréciation des résultats de l'étude. Normalement placée après les sections de discussion et de conclusions, la section intitulée recommandations d'un rapport doit avoir pour ambition de répondre aux questions suivantes:
• Sur la base de l'analyse, de l'interprétation et de l'appréciation que vous avez effectuées, quelles sont les conséquences des résultats:
• Pour votre projet en particulier?
• Pour d'autres projets pouvant tirer profit de vos résultats?
• Pour d'autres parties intéressées, par exemple des chercheurs?
• Sur la base de l'analyse, de l'interprétation et de l'appréciation que vous avez effectuées, que faut-il réaliser dans le cadre du projet et par les principales parties concernées?
Plus les
différentes parties concernées s'impliquent dans les étapes
d'interprétation et d'appréciation des résultats de l'étude,
plus vous serez en mesure de tenir compte de leurs intérêts
dans vos recommandations. Il est donc évident que vous devrez y
incorporer des suggestions pratiques et réalisables.
Comme on l'a vu dans la section intitulée «Mise en place de dispositifs de contrôle de la qualité des données» au chapitre 4, les critères d'établissement de la fiabilité des données qualitatives sont des éléments fondamentaux de la conception et de la réalisation de l'étude qui rehaussent la fiabilité (ou la qualité ou la validité) des informations recueillies. Contrairement aux tests de signification statistique ou de validité de l'ajustement appliqués aux données quantitatives, les critères de fiabilité des données qualitatives ne sont pas un ensemble de tests s'appliquant aux informations après leur collecte, mais des vérifications intégrées qui sont mises en place avant que commence la collecte des informations, puis surveillées tout au long de l'investigation (voir chapitre 4).
Vous devriez pouvoir apprécier la fiabilité des informations que vous avez recueillies en appliquant les critères définis lors de la conception de l'étude et de sa réalisation. Le nombre de critères appliqués peut varier d'une étude à l'autre, en fonction des ressources (humaines, matérielles, temps) et des contraintes associées à la conception et à l'exécution de l'étude. Cependant, les critères clés suivants constituent les conditions minimales à remplir afin d'établir la fiabilité ou la qualité des données qualitatives.
• Relation prolongée ou intense de l'équipe chargée de l'étude auprès de la population étudiée. La durée de l'étude dépendra des ressources disponibles et de l'intimité des membres de l'équipe avec la population. On peut accomplir beaucoup en deux semaines, surtout si les travailleurs sur le terrain connaissent très bien «leur» population. Sinon, l'équipe aura besoin de plus de temps pour établir des relations avec la population et minimiser les erreurs systématiques ou préjugés découlant de comportements inhabituels et de sa mise à l'écart de la communauté. Soyez clair et honnête dans l'estimation des erreurs systématiques qui ont pu se glisser dans l'étude en raison du type de relation entre l'équipe et la population.
• Triangulation des sources, méthodes et investigateurs. Comme on l'a vu au chapitre 4, il n'est souvent ni faisable ni pratique de concevoir une étude où les moyens de triangulation des sources, des méthodes et des investigateurs peuvent tous être mis en place et appliqués. Par exemple, une étude peut être menée en se basant sur des discussions dirigées avec les gardiennes des jeunes enfants, les entrevues semi-dirigées avec la même catégorie de répondants et d'observations ponctuelles de foyers observés, alors que les membres de l'équipe possèdent pour la plupart des formations différentes. Une autre étude pourra faire appel à une équipe plus importante dont les membres possédant une formation et des compétences diverses, et suffisamment de ressources pour leur permettre d'utiliser les outils d'investigation participative et les outils analytiques. Le recoupement des informations peut être effectué dans les deux cas par la triangulation des sources et des méthodes ou la triangulation des méthodes et des investigateurs. L'essentiel étant que la fiabilité des résultats soit vérifiée et recoupée par triangulation. Votre rapport doit également comprendre un compte rendu détaillé de la triangulation.
• Rétroaction et discussion avec la population. La rétroaction et la discussion avec la population sont utiles pour trouver des voies d'interprétation des résultats. Elles doivent être documentées dans le rapport.
• Examen/vérification par les pairs. L'examen de vos résultats par des pairs et des examinateurs indépendants, parmi lesquels certains de vos collègues n'ayant pas participé directement aux processus d'investigation, permettra peut-être de faire ressortir d'éventuelles lacunes d'informations ou de justifications des conclusions. Cela signifie que votre rapport doit inclure une description et une analyse rigoureuses, accompagnées d'un journal de vos activités contenant tous les détails nécessaires sur la date et les modalités de réalisation de l'étude, et ce, à titre de référence.
Pour que les examens par des pairs soient réellement productifs, les critiques du travail de l'équipe chargée du projet doivent être formulées de façon claire et constructive. Vous devez tout de même être prêt à répondre aux questions difficiles et aux critiques qui ne sont pas constructives. Vous serez peut-être amené à réexaminer, voire clarifier, les décisions et les changements d'orientation importants que vous avez pris au cours de l'étude. Pour vous aider à faire face à de telles éventualités, il est important d'encourager l'autocritique chez les membres de l'équipe durant les procédures d'investigation et d'analyse, dans une atmosphère de confiance et de franchise.
Les
rapports d'études qui ne contiennent pas ou peu de détails sur
les modalités et les dates de réalisation de l'étude, ni sur
les raisons qui ont motivé le choix des méthodes et les
décisions prises pourront éveiller les soupçons des
vérificateurs quant à la fiabilité des résultats, voire
compromettre la crédibilité et le statut des investigateurs.
Vous pourrez présenter les résultats de votre étude d'évaluation sanitaire de différentes manières selon les destinataires de l'étude. Tout d'abord, vous aurez un rapport écrit contenant un dossier complet des procédures et des résultats de l'étude. Une fois que vous aurez achevé le rapport, vous pourrez en extraire des parties, et préparer des résumés succincts à l'intention des diverses parties intéressées soucieuses de connaître vos résultats. Dans cette section, nous verrons d'abord le rapport complet, puis nous étudierons divers moyens de le diffuser à des lecteurs ou destinataires spécifiques.
Rédaction d'un rapport d'étude complet
A la fin des procédures d'investigation et d'analyse, vous aurez accumulé une somme importante de notes, de tableaux et de documents divers. Il vous faudra les organiser de façon systématique, les consigner dans des carnets et compiler les fichiers à la main ou à l'aide d'un ordinateur, si vous en avez un. Vous pourrez ensuite les regrouper suivant un plan présenté dans la section «étapes de l'analyse et de l'interprétation des résultats» dans ce chapitre. L'encadré 25 présente un exemple de plan de rapport.
Rédaction de sommaires distincts pour des lecteurs ou des groupes d'intérêt déterminés
Il vous faudra peut-être transmettre de courts résumés aux bailleurs de fonds du projet, à la population étudiée, aux groupes communautaires locaux, à leurs homologues gouvernementaux et non-gouvernementaux. Il est important de trouver un juste équilibre entre les résultats positifs et les résultats négatifs, surtout si vous présentez les résultats dans un format de type «sommaire exécutif». Par définition, un sommaire exécutif ne permet pas au lecteur de prendre connaissance des résultats dans leur contexte. Il est rare que les résultats de l'étude d'évaluation soient entièrement positifs ou totalement négatifs. Ils sont le plus souvent un mélange des deux. Qu'il en soit fait une interprétation positive ou négative dépend de la personne qui les interprète et qui les utilise.
ENCADRÉ 25. Esquisse d'un rapport
|
Vous pourrez aussi préparer de courts articles récapitulatifs de vos résultats pour les diffuser aux réseaux locaux ou régionaux de praticiens exerçant dans les domaines de l'éducation sanitaire/hygiénique, de l'approvisionnement en eau, et de l'assainissement; et les réseaux de recherche, comme le Global Applied Research Network (GARNET), qui exploite un réseau thématique sur le comportement hygiénique, le groupe de travail sur la promotion de l'assainissement, etc. Vous devrez tenir compte des intérêts de chacun de ces groupes avant de décider du contenu, du style et de la langue de votre résumé.
Faire des présentations orales à des groupes choisis et solliciter leur commentaires et suggestions
Vous trouverez peut-être utile de présenter des résultats partiels ou complets de votre investigation aux principaux participants à l'étude afin d'obtenir leurs réponses à l'analyse et à l'interprétation de vos résultats. Par exemple, aux chapitres 5 et 6, nous avons examiné un certain nombre d'outils participatifs de collecte des informations (cartographie, historique, calendriers saisonniers, tableau de poche) qui comportaient la présentation d'informations aux participants sur place et au moment de l'étude. Les tableaux, graphiques et autres présentations visuelles peuvent servir à présenter les résultats de façon intéressante et stimulante pour les participants. Mais attention, seuls les résultats définitifs doivent être présentés, pas les détails des entrevues ou des ménages individuels.
Votre projet possède peut-être déjà du personnel qualifié (un instructeur ou un porte-parole) capable de présenter les résultats de l'étude à des auditoires intéressés à l'occasion d'ateliers, réunions ou conférences divers.
Le type de matériels visuels et autres que vous pouvez utiliser pour présenter vos résultats dépendra des ressources disponibles. Souvent, les résumés des résultats rédigés sur des tableaux-papier à l'aide de gros marqueurs et en grosses lettres (diagrammes, tableaux et graphiques) constituent les moyens les plus efficaces de présenter les résultats à de vastes groupes, aussi bien en zone rurale qu'urbaine. Leur préparation est à la fois moins coûteuse et plus amusante et intéressante.
Organiser une discussion ou un débat sur les résultats où pourront être exprimés des points de vue divergents
C'est une
excellente idée, surtout si le taux de participation des
différentes parties intéressées est élevé et s'il y a des
chances que vos résultats soient interprétés de manière très
différente par les groupes, en fonction des intérêts
divergents. Dans l'analyse finale, les comparaisons doivent être
effectuées avec soin et à-propos pour éviter de tirer de
fausses conclusions.