Contenu de la page.
Fiches méthodologiques pour l'évaluation d'une technologie ou d'un mode d'intervention en santé
Vous vous demandez s’il serait bénéfique d’adopter une nouvelle technologie ou une nouvelle pratique, mais sans nécessairement entreprendre un projet complet avec l’Unité d’évaluation des technologies et des modes d’intervention en santé (UETMIS)?
Conçues pour vous guider dans chacune des étapes d’une démarche d’évaluation, ces fiches méthodologiques vous aideront à trouver les réponses à vos questions!
Les fiches se retrouvent également en format PDF dans la section des documents à télécharger.
Fiche 1 – Définir une question décisionnelle et des questions d’évaluation
-
Comment identifier précisément la problématique?
-
Comment baliser, définir et orienter la recherche de données provenant de la littérature et de la pratique?
-
Quelles sont les hypothèses à vérifier?
-
Est-ce que les hypothèses à vérifier sont liées à une prise de décision?
Étape 1 : se familiariser avec le sujet
-
Lectures à caractère général (exemple: manuels généraux, encyclopédie, sites Internet)
-
Discussions informelles avec des experts du domaine et des acteurs du terrain

Étape 2 : faire une liste de mots clés
-
Qui ? (Exemple: Enfants)
-
Quoi ? (Exemple: Apnée du sommeil)
-
Comment ? (Exemple: Effets indésirables)
-
Quand ? (Exemple: Surveillance postopératoire)
-
Où ? (Exemple: Salle de réveil)

Étape 3 : dresser une bibliographie sommaire spécialisée pour émettre des hypothèses

Étape 4 : recueillir des données sommaires à l’interne sur le contexte et la pratique

Étape 5 : utiliser l’outil «PICO»
L’outil PICO permet de structurer les questions et de définir les critères d’inclusion et d’exclusion pour la recherche documentaire ainsi que les besoins d’enquêtes ou d’études sur le terrain.
Éléments du PICO
Population : Personnes visées par la technologie ou l’intervention (âge, problèmes de santé, traitement, etc.)
Intervention : Technologie ou mode d’intervention à l’étude (principales caractéristiques)
Comparateur : Technologie(s) ou intervention(s) habituellement utilisée(s) ou autres interventions
Résultats (Outcomes) : Indicateurs de résultats

Étape 6 : formuler la question décisionnelle
Une seule question décisionnelle claire doit être définie en collaboration avec les personnes impliquées dans l’évaluation, la prise de décision, et l’utilisation de la technologie ou de l’intervention pour une compréhension commune.
Exemple: «Est-ce que les pratiques de surveillance postopératoire des enfants avec apnée obstructive du sommeil confirmée ou suspectée devraient être modifiées au CHU de Québec-Université Laval (CHU) ?»

Étapes 7 : formuler les questions d’évaluation
Les questions d’évaluation précisent les différents résultats recherchés pour évaluer la technologie ou l’intervention.
Exemple:
-
Quelles sont les recommandations de pratique clinique concernant les niveaux et les méthodes de surveillance postopératoire des enfants avec apnée obstructive du sommeil?
-
Quelle est l’efficacité des pratiques de surveillance postopératoire des enfants avec apnée obstructive du sommeil confirmée ou suspectée à prévenir les complications postopératoires?
-
Quels sont les effets indésirables des pratiques de surveillance postopératoire des enfants avec apnée obstructive du sommeil?
-
Quels sont les niveaux et les méthodes de soins implantés au CHU ainsi que dans les autres établissements québécois et canadiens quant à la surveillance postopératoire des enfants avec apnée obstructive du sommeil?
Fiche 2 – Structurer une recherche documentaire
Objectifs
-
Identifier les meilleures preuves disponibles sur l’intervention à évaluer
-
Documenter l’efficacité, la sécurité et, selon le cas, les enjeux sociaux, économiques, éthiques, juridiques, environnementaux et organisationnels

Étape 1 : identifier des sources de données
Sources documentaires :
-
Bases de données sur l'innocuité et la sécurité
-
Bases de données bibliographiques
-
Rapports d'organismes en ETMIS
-
Documents gouvernementaux
-
Guides de pratiques d'organisations professionnelles
-
Thèses et mémoires
-
Recherche générale sur le web
-
Bibliographies
-
Études en cours
Exemples :
-
Bases de données bibliographiques : MEDLINE (Pubmed), Embase
-
Rapports d’organismes en ETMIS : Agence des médicaments du Canada (CDA-AMC), Haute Autorité de santé (HAS), National Institute for Health and Care Excellence (NICE)
-
Documents gouvernementaux : Santé Canada, Food and Drug Administration (FDA)

Étape 2 : rechercher dans les bases de données bibliographiques
Identifier les mots-clés relatifs à la question de recherche (voir fiche 1)

Élaborer une stratégie de recherche
Pour lier les mots clés en vocabulaire libre et contrôlé, utiliser des opérateurs booléens:
-
AND : Pour associer différents concepts et identifier des citations qui incluent tous les mots clés de la recherche (exemple: child AND asthma)
-
OR : Pour identifier au moins l’un des mots clés de la recherche ou pour lier des synonymes (exemple: infant OR child)
-
(…) : Pour établir l’ordre d’exécution des opérations et, considérer plusieurs mots clés comme un concept unique (exemple: (infant OR child) AND (asthma OR pneumonia))
-
* : Pour tronquer des mots et identifier toutes les terminaisons des mots (exemple: adolescen* va permettre d’identifier «adolescence», «adolescent», «adolescents», etc.)
-
"…" : Pour identifier une expression précise contenant au moins deux mots (exemple: "bronchial asthma", "oxygen monitoring")
Exemple de stratégie de recherche :
("Pediatrics"[MeSH] OR "Infant"[MeSH] OR "Child" [MeSH] OR "Adolescent"[MeSH] OR pediatric* OR infant* OR child* OR adolescent*) AND ("Pneumonia"[Mesh] OR "Asthma"[Mesh] OR pneumoni* OR asthma OR "bronchial asthma") AND ("Oximetry"[Mesh] OR "oxygen monitoring" OR oxymetr*)

Utiliser des filtres
Pour affiner la recherche, il est possible d’utiliser des filtres proposés par les bases de données:
-
Dates de publication, langue, types de documents recherchés (exemple: revues systématiques), groupes d’âge visés (exemple: adultes ou enfants)

Étape 3 : explorer d’autres sources de données
Une recherche documentaire peut être réalisée à partir d’autres sources de données:
-
Sites Internet d’organismes d’ETMIS, de sociétés savantes et d’associations professionnelles
-
Moteurs de recherche sur le Web (Google, Google Scholar)
-
Registres répertoriant des études en cours de réalisation
-
Bibliographies des études identifiées au préalable
-
Consultation auprès d’experts du domaine
Le recours à une bibliothécaire peut être envisagé au besoin
Fiche 3 – Construire un modèle logique
-
Outil visuel pour identifier les différentes composantes d’une technologie ou d’une intervention et comprendre leurs interactions autour d’une problématique.
-
Permet de clarifier les concepts liés aux questions d’évaluation en orientant la démarche évaluative et en structurant la présentation des résultats.
Il y a toujours place à la créativité
La forme du modèle logique peut varier d’un projet à l’autre. L’objectif est de bien illustrer les éléments clés.
Principales approches de modèle logique
Trois approches principales peuvent être envisagées lors de la
conception d’un modèle logique.
-
L’approche «a priori» consiste à développer le modèle dès le début de la phase de cadrage du projet.
-
L’approche «par étapes» prévoit une élaboration initiale lors du cadrage, suivie de modifications à des moments précis selon un calendrier prédéfini.
-
L’approche «itérative» repose sur une conception initiale au début du cadrage, mais prévoit des révisions et des ajustements continus tout au long du processus d’évaluation.

Principales étapes préalables à la création d’un modèle logique
1. Définir le contexte et les objectifs

2. Décrire la technologie ou l'intervention
-
Préciser la technologie ou le mode d'intervention
-
Préciser la population cible
-
Identifier les comparateurs

3. Identifier les résultats attendus

4. Formuler des hypothèses et faire des liens de causalité
-
Considérer les facteurs contextuels
-
Considérer les facteurs de risques
-
Identifier les moyens de prévention

Création et opérationnalisation d’un modèle logique
1. Représentation visuelle

2. Validation avec les parties prenantes

3. Guider l'évaluation

Exemple d'éléments à considérer dans l'élaboration d'un modèle logique
-
Population à l’étude (exemple: adultes, enfants, nourrissons, type de pathologie)
-
Milieu d’évaluation (exemple: unité hospitalière, un service externe, domicile)
-
Problématique
-
Composantes pouvant influencer la problématique (exemple: facteurs de risque, moyens de prévention, activités, soins, processus en place)
-
Technologie ou mode d’intervention en santé
-
Résultats attendus (exemple: cliniques, organisationnels, économiques, expérientiels)
Fiche 4 – Choisir des indicateurs de résultats
Un indicateur de résultats est une mesure utilisée pour évaluer, entre autres, l’efficacité, la sécurité, l’innocuité ou l’impact sur les ressources humaines, organisationnelles et financières d’une technologie ou d’un mode d’intervention en santé. L’indicateur de résultats, représenté par le «O» (outcomes) dans l’outil PICO (voir fiche 1), constitue un élément important pour la sélection des études.
Les indicateurs de résultats permettent de:
-
Synthétiser des résultats (moyenne, médiane)
-
Évaluer la fréquence d’un résultat (%, prévalence, incidence)
-
Mesurer l’association entre deux variables (rapport de risques, rapport de cotes) afin d’appuyer des décisions sur des données probantes

Les indicateurs de résultats devraient être:
-
Déterminés a priori
-
Valides, fiables et applicables au contexte
-
Spécifiques, mesurables et temporellement définis
-
Utiles pour éclairer les décisions des cliniciens, des patients, des gestionnaires

Types d’indicateurs de résultats
Les indicateurs de résultats peuvent apporter de l’information autant sur des aspects cliniques (exemple: nombre de journées sous ventilation), organisationnels (exemple: durée de séjour hospitalier) ou économiques (exemple: coût de la médication), que sur des aspects contextuels, éthiques, d’expérience patient ou de gestion des risques.
Indicateurs primaires
-
Rapportent le ou les résultats en lien avec l’objectif principal de l’évaluation
-
Idéalement, il ne devrait pas y en avoir plus de trois
Indicateurs secondaires
Des indicateurs finaux plutôt qu’intermédiaires devraient être privilégiés afin de prédire avec précision des résultats de santé cliniquement significatifs.
Indicateurs intermédiaires
Indicateurs finaux
Exemple:
Indicateurs intermédiaires
-
Hypertension
-
Diabète
-
Dyslipidémie
Indicateur final

Éléments requis pour définir les indicateurs de résultats
Par exemple, dans un projet visant à évaluer un type de psychothérapie:
-
Définition du domaine ou du thème de l’indicateur: anxiété
-
Instrument ou technique de mesure: échelle d’anxiété de Hamilton
-
Mesure retenue pour évaluer le changement: différence des scores avant et après l’intervention
-
Méthode d’agrégation et mesure de dispersion des résultats: moyenne et écart-type
-
Moment de la mesure à considérer: avant l’intervention et 3 mois après
|