Outils pour évaluer les interventions en application des connaissances : examen systématique

Van Eerd, D., Cole, D., Keown, K., Irvin, E., Kramer, D., Brenneman Gibson, J., Kohn, M.K. et coll. (2011)
Toronto ON

Pour citer cet sommaire :

Centre de collaboration nationale des méthodes et outils (2012). Outils pour évaluer les interventions en application des connaissances : examen systématique. Hamilton, ON : Université McMaster. récupéré sur le site from http://www.ccnmo.ca/registry/view/fra/114.html.

Méthode Knowledge Knowledge Knowledge Évaluation

Ces sommaires sont préparés par le CCNMO afin de condenser la matière et offrir un aperçu des ressources figurant dans le Registre des méthodes et outils, et pour fournir des suggestions quant à leur utilisation dans un contexte de santé publique. Pour plus d’information sur une méthode/un outil mentionné dans le sommaire, consultez les auteurs/développeurs de la ressource d’origine.

Pertinence pour la santé publique

Les outils cités dans la ressource pourraient servir à évaluer des activités d’application des connaissances dans un cadre de santé publique. Par exemple, les instruments pourraient servir à mesurer les changements qui se produisent dans le travail des professionnels et leur capacité à utiliser dans leur pratique des données probantes issues de la recherche. 

Description

L’Institute for Work & Health (IWH) a réalisé un examen systématique afin de définir des instruments pour évaluer des initiatives d’application des connaissances (AC) et leur effet. Comme l’accent en santé et en santé publique est de plus en plus mis sur l’AC, l’attention se porte sur l’efficacité des interventions en AC. Cependant, l’efficacité des pratiques d’AC n’est pas évaluée uniformément, ce qui est peut-être dû à un manque d’outils valables et fiables.

L’équipe de l’IWH a effectué un examen exhaustif et systématique de littérature revue par les pairs afin de trouver des instruments pour évaluer les pratiques d’AC. Parmi ces instruments figuraient des questionnaires, des sondages et des entrevues qui visaient à réunir des renseignements auprès d’utilisateurs finals de données probantes issues de la recherche (comme des professionnels). 

L’application des connaissances [ou transfert et échange de connaissances (TEC)], a été définie comme un « processus itératif et dynamique par lequel des données de recherche pertinentes sont produites, synthétisées, disséminées, puis échangées par un engagement interactif avec des décideurs ou des utilisateurs de connaissances dans le but d’améliorer les résultats, d’offrir de meilleurs services et produits, et de renforcer l’utilisation de données probantes dans la prise de décisions, la pratique, la planification et l’élaboration de politiques ».

Il est possible d’obtenir les ressources sur les outils d’évaluation des interventions en AC de l’Institute for Work & Health sur son site Web (http://www.iwh.on.ca/sys-reviews/kte-evaluation-tools). Elles comprennent les suivantes :

  • un sommaire soulignant des éléments clés des données probantes;
  • une liste d’outils d’évaluation prometteurs en AC;
  • le rapport intégral.
Caractéristiques de l’évaluation et de la mesure
Évaluation
Information non disponible
Validité
Sans objet
Fiabilité
Sans objet
Cote méthodologique
RigoureuseRigoureuse  (Cliquez ici pour afficher la feuille d’évaluation for this systemic review.)

Mise en œuvre de la méthode/ce l’outil
Qui est engagé dans la mise en œuvre

Toute personne qui souhaite évaluer l’efficacité d’une activité d’application des connaissances pourrait utiliser les outils indiqués dans l’examen systématique.

Temps requis
Information non disponible
Ressources et/ou capacités additionnelles requises par la mise en œuvre
Non précisé
Étapes de l’utilisation de la méthode/de l’outil

Voici quelles sont les principales conclusions de l’examen systématique produit par l’Institute for Work & Health :

  • Il existe peu d’instruments bien élaborés pour évaluer la mise en œuvre et l’effet des pratiques de TEC.
  • En tout, 16 articles décrivent des outils prometteurs qui permettraient d’évaluer des initiatives de TEC. Ces instruments montrent un certain degré de validité et de fiabilité, et peuvent mesurer des changements qui se produisent dans les connaissances, les attitudes et les comportements des décideurs et des intervenants.

Voici, entre autres, ce que l’examen systématique a comme portée pour les professionnels et les chercheurs :

  • Songez aux instruments d’évaluation découverts dans l’examen lorsqu’il s’agit de planifier l’évaluation d’une initiative de TEC. Pour choisir un instrument, recherchez une présentation claire des propriétés de mesure.
  • Choisissez ou créez des instruments d’évaluation bien élaborés.
  • Envisagez de mettre au point des instruments pouvant servir dans divers contextes. Il importe de distinguer la mise en œuvre, qui dépend du contexte, de l’élaboration de l’instrument, qui peut reposer sur la théorie et être indépendante du contexte.
  • Créez et utilisez systématiquement des instruments d’évaluation aux propriétés de mesure connues pour faire progresser l’évaluation du TEC.
Conditions d’utilisation
Non précisé
Développement de la méthode/de l’outil
Développeur(s)
Dwayne Van Eerd
Institute for Work & Health
Department of Health Studies and Gerontology, University of Waterloo

Donald Cole
Institute for Work & Health
Dalla Lana School of Public Health, University of Toronto

Kiera Keown
Institute for Work & Health

Emma Irvin
Institute for Work & Health

Desre Kramer
Centre of Research Expertise for the Prevention of Musculoskeletal Disorders, University of Waterloo

Jane Brenneman Gibson
Institute for Work & Health

Melanie Kazman Kohn
St. Michael's Hospital
Faculty of Medicine, Department of Health Policy Management and Evaluation, University of Toronto

Quenby Mahood
Institute for Work & Health

Tesha Slack
Institute for Work & Health

Benjamin Amick III
Institute for Work & Health

David Phipps
Office of Research Services, York University

John Garcia
Department of Health Studies and Gerontology, University of Waterloo

Sara Morassaei
Institute for Work & Health
Méthode de développement

L’examen a été effectué par une équipe multidisciplinaire qui a cherché des articles sur l’application des connaissances dans neuf bases de données se rapportant à différentes disciplines (dont la médecine, la psychologie, l’éducation et l’agriculture), en plus de dépouiller manuellement des revues précises et de consulter des spécialistes du contenu. La recherche initiale a permis de découvrir 9 998 articles une fois les doubles éliminés.

Les articles ont été examinés du point de vue de leur pertinence par rapport à la question de recherche : « L’article décrit-il un résultat de TEC ou un outil servant à mesurer un résultat de TEC découlant d’une application de TEC? »

L’équipe d’examen a trouvé 346 articles potentiels comme articles qualitatifs et quantitatifs pertinents et examinés. Les articles qualitatifs décrivaient des approches spécifiques à l’évaluation du TEC, alors que les articles quantitatifs incluaient des instruments utilisés pour évaluer le TEC (comme des questionnaires, des sondages et des entrevues).

En tout, 12 articles qualitatifs et 54 articles quantitatifs ont satisfait aux critères d’inclusion de l’équipe. Les données provenant des 66 articles ont été rassemblées et les détails sur les propriétés de mesure des instruments découlant des articles quantitatifs ont été recueillis. L’équipe d’examen a recueilli des renseignements sur la validité, la fiabilité et la souplesse des instruments. Des 54 instruments, 16 ont été jugés prometteurs d’après leurs propriétés de mesure.

Date de sortie
2011

Personne contact / source
Dwayne Van Eerd
Institute for Work & Health
481, av. University, bureau 800
Toronto ON M5G 2E9
Courriel : dvaneerd@iwh.on.ca
Site Web : www.iwh.on.ca

Ressources

Titre de la ressource primaire
Report on Knowledge Transfer and Exchange Practices: A systematic review of the quality and types of instruments used to assess KTE implementation and impact.
Fichier joint
Aucun
Lien Web
http://www.iwh.on.ca/sys-reviews/kte-evaluation-tools
Référence

Van Eerd, D., Cole, D., Keown, K., Irvin, E., Kramer, D., Brenneman Gibson, J., Kohn, M.K., Mahood, Q., Slack, T., Amick III, B.C., Phipps, D., Garcia, J. et Morassaei, S. (2011). A systematic review of the quality and types of instruments used to assess KTE implementation and impact, Toronto ON : Institute for Work & Health

Type de ressource
Rapport
Format
Accès en ligne
Coût de l’accès
 
Langue
Anglais
Conditions d’utilisation
Droit d'auteur © 2011 Institute for Work & Health 

Titre de la ressource supplémentaire
Sharing best evidence: Promising KTE evaluation tools
Fichier joint
Aucun
Lien Web
http://www.iwh.on.ca/sys-reviews/kte-evaluation-tools
Référence

Institute for Work & Health (2011). Sharing best evidence: Promising KTE evaluation tools, Knowledge Transfer & Exchange, Institute for Work & Health

Type de ressource

Fiche de renseignements

Format
Accès en ligne
Coût de l’accès
Aucun 
Langue
Anglais
Conditions d’utilisation
Non précisé 

Titre de la ressource supplémentaire
Sharing best evidence: Finding tools to measure the impact of KTE activities
Fichier joint
Aucun
Lien Web
http://www.iwh.on.ca/sys-reviews/kte-evaluation-tools
Référence

Institute for Work & Health (2011). Sharing best evidence: Finding tools to measure the impact of KTE activities, Knowledge Transfer & Exchange, Institute for Work & Health

Type de ressource

Sommaire

Format
Accès en ligne
Coût de l’accès
Aucun 
Langue
Anglais
Conditions d’utilisation
Non précisé