Évaluation de l`initiative du Carnet de route de l`information : Carnet

Évaluation de l’initiative du Carnet
de route de l’information sur la santé :
Carnet de route II et Carnet de route II plus
Sommaire
Évaluation de l’initiative du Carnet de route de l’information sur la santé :
Carnet de route II et Carnet de route II plus — Sommaire
Sommaire
Titre de l’initiative en cours d’évaluation : Carnet de route II
et Carnet de route II plus
Le Carnet de route II, lancé en 2001 à la suite du renouvellement du financement engagé
par le gouvernement fédéral (par l’entremise de Santé Canada) pour le Carnet de route I
(aussi connu sous le nom de l’Initiative du Carnet de route de l’information sur la santé),
était une continuité de ce dernier. Le Carnet de route II plus est issu quant à lui de l’accord
de 2002 des premiers ministres visant à « préparer l’avenir des soins de santé au Canada ».
L’Institut canadien d’information sur la santé (ICIS) s’est vu attribuer 70 millions de dollars
dans le budget fédéral de 2003 pour le Carnet de route II Plus, dans lequel un addenda fait
état des fonds supplémentaires prévus au budget pour s’attaquer aux questions prioritaires
soulevées dans l’accord des premiers ministres à l’égard du Plan décennal pour consolider
les soins de santé de 2004. Les bénéficiaires des fonds de Santé Canada comprennent l’ICIS
et Statistique Canada, soit les organismes responsables des produits financés dans le cadre
des initiatives du Carnet de route II et du Carnet de route II plus.
Bien que l’initiative du Carnet de route de l’information sur la santé ait bénéficié d’un
important financement, elle dépend également des programmes de base et des bases de
données transférées à partir de Santé Canada et financées dans le cadre du Programme
de contribution pour l’information sur la santéi. Sans ces programmes et bases de données,
l’Initiative du Carnet de route de l’information sur la santé ne pourrait exister. Aussi a-t-on
conclu que l’évaluation des carnets de route I et II servirait également à évaluer le Programme
de contribution pour l’information sur la santé.
Objectif de l’évaluation
Ce rapport présente une évaluation indépendante du Carnet de route II et du Carnet de
route II plus, conformément aux directives du Conseil du Trésorii et au cadre d’évaluationiii
existant créé en conformité avec le Guide d’élaboration des cadres de gestion et de
responsabilisation axés sur les résultats (CGRR)iv.
L’ICIS, par l’entremise de son Conseil d’administration, a non seulement assumé la
responsabilité fiduciaire des programmes transférés de Santé Canada à l’ICIS et à Statistique
Canada, mais aussi celle de les superviser. L’ICIS s’est également fait le chef de file dans
l’élaboration du cadre d’évaluation utilisé dans le présent rapport. Statistique Canada et Santé
Canada ont apporté leur concours dans l’élaboration du cadre (appelé « modèle logique »
ou « cadre d’évaluation » dans les résultats des indicateurs du présent rapport).
i.
Le Programme de contribution pour l’information sur la santé a été créé en 1994 conjointement par Santé
Canada et Statistique Canada dans le but de faciliter le transfert des programmes, des fonctions et du personnel
de la Division de l’information sur la santé de Santé Canada à l’Institut canadien d’information sur la santé.
ii. Secrétariat du Conseil du Trésor du Canada, Guide for the Review of Evaluation Reports, Ottawa, Centre
d’excellence en évaluation, janvier 2004.
iii. Institut canadien d’information sur la santé, Initiative du Carnet de route de l’information sur la santé
(Carnet de route II et Carnet de route II Plus) : Cadre d’évaluation, Ottawa, Institut canadien d’information
sur la santé, juillet 2006.
iv. Secrétariat du Conseil du Trésor du Canada, Guide d’élaboration des cadres de gestion et de responsabilisation
axés sur les résultats (en ligne), février 2005. Internet : <http://www.tbs-sct.gc.ca/eval/pubs/RMAF-CGRR/
guide/guide_f.asp>.
1
Services d’affaires mondiaux IBM — Soins de santé
En vertu des ententes de contribution entre l’ICIS et Santé Canada, l’évaluation de la deuxième
phase (Carnet de route II et Carnet de route II plus) doit être achevée en 2006-2007. En
vertu du cadre d’évaluation, l’objectif de la présente évaluation est de se pencher sur les
résultats de l’initiative du Carnet de route II et du Carnet de route II plus, en les comparant
aux objectifs prévus.
À cet égard, la présente évaluation vise expressément à examiner les trois grands
objectifs suivants :
1. Déterminer si l’initiative du Carnet de route II et du Carnet de route II plus a atteint les
résultats voulus d’une façon efficiente et efficace et comparer les objectifs et les résultats.
Cette étape requiert l’examen de ce qui a été planifié par rapport à ce qui a été fait.
2. Évaluer les progrès réalisés par le Carnet de route II et le Carnet de route II plus pour
accomplir son principal objectif, répondre à deux questions fondamentales : i) Comment
se portent les Canadiens? et ii) Comment se porte notre système de santé? Cette partie
de l’évaluation permet de mesurer l’incidence qu’a eue l’initiative et est axée sur les
résultats à court et à long terme. L’information recueillie tout au long du processus du
Carnet de route II a servi à alimenter les indicateurs de rendement associés au cadre
d’évaluation. D’autres renseignements ont été recueillis dans le cadre d’entrevues,
de séances de groupes de discussion et de sondages. Dans certains cas, des données
anecdotiques ont été utilisées afin d’appuyer les analyses, particulièrement en ce qui
concerne l’évaluation des résultats à long terme.
3. Fournir une information objective qui permettrait de déterminer le bien-fondé des initiatives
futures d’information sur la santé. Cet objectif s’applique aux secteurs qui n’ont pas encore
été traités à fond dans le Carnet de route II et le Carnet de route II plus, p. ex., des lacunes
critiques ou émergentes en information qui peuvent exiger de nouveaux investissements.
Clients et public cible de cette évaluation
Les clients de l’évaluation en cours comprennent les principaux partenaires du Carnet de
route, soit l’ICIS, Statistique Canada et Santé Canada. Le public cible comprend les partenaires
du Carnet de route et Santé Canada en plus d’un grand nombre d’intervenants clés et de
bénéficiaires de produits, d’activités et de données du Carnet de route II et du Carnet de
route II plus. La liste qui suit présente les groupes d’intervenants visés et les bénéficiaires
de l’initiative du Carnet de route II et du Carnet de route II plus :
a. Ministères fédéral, provinciaux et territoriaux de la Santé, politiciens et responsables
de l’élaboration des politiques;
b. Régies régionales de la santé, professionnels et gestionnaires de la santé;
c. Grand public;
d. Chercheurs et universitaires, organisations non gouvernementales, associations
œuvrant dans le domaine de la santé, secteur bénévole et secteur des entreprises;
e. Secteurs financier, de l’environnement et de l’éducation.
2
Évaluation de l’initiative du Carnet de route de l’information sur la santé :
Carnet de route II et Carnet de route II plus — Sommaire
Que sont le Carnet de route II et le Carnet de route II plus?
•
Les activités et produits liés au Carnet de route II et au Carnet de route II plus n’auraient
pas pu être réalisés sans le financement fourni dans les deuxième et troisième vagues de
contributions fédérales (2001 et 2003).
•
Budget de décembre 2001 (Carnet de route II) — Afin de prolonger le Carnet de route I,
le gouvernement fédéral a renouvelé le financement initial de 95 millions de dollars sur
quatre ans en vue de continuer à assurer une information sur la santé opportune et de qualité.
•
Budget de février 2003 (Carnet de route II plus) — Dans l’Accord sur la santé, les premiers
ministres ont convenu que les Canadiens ont droit à une meilleure information et à des
renseignements davantage comparables en ce qui a trait à la qualité et à l’actualité des
services de santé. Le Budget de 2003 a consacré 70 millions de dollars à l’ICIS, somme
devant être partagée avec Statistique Canada, à l’appui de ces objectifs.
•
Le Carnet de route II et le Carnet de route II plus représentent plus que des « produits ».
Ils sont un ensemble d’activités et de liens interdépendants qui ont été élaborés tant
stratégiquement que spontanément tout au long d’un parcours.
•
En outre, le Programme de contribution pour l’information sur la santé stipule que Santé Canada
doit fournir un montant égal à 4 460 000 $ sur une période de deux ans, qui a commencé
en 2005-2006 et s’est achevée en 2006-2007.
Principaux résultats de l’évaluation
Les centaines de produits d’information et d’activités de diffusion financées dans le cadre
du Carnet de route II et du Carnet de route II plus ont formé, au cours des cinq dernières
années, les piliers de la sphère d’information sur la santé. L’ICIS et Statistique Canada,
tous deux au centre de la complexité croissante du domaine de l’information sur la santé
au Canada, jouent un rôle de plus en plus crucial dans la coordination et la diffusion de
produits d’information de qualité aux Canadiens, aux chercheurs et aux décideurs des
gouvernements, des hôpitaux et des régions du pays.
Comme il a été démontré dans cette évaluation, les objectifs du Carnet de route II et du
Carnet de route II plus ont clairement été atteints, voire dépassés. Les objectifs étaient
les suivants :
•
« Aider à fournir aux dispensateurs et aux gestionnaires de soins de santé l’information
dont ils ont besoin pour mesurer le rendement et en faire rapport »;
•
« Aider à fournir aux dispensateurs et aux gestionnaires de soins de santé les données
probantes dont ils ont besoin pour prendre des décisions éclairées quant au renouvellement
du système de santé »;
•
« Aider à créer l’information dont les Canadiennes et les Canadiens ont besoin pour
prendre des décisions éclairées au sujet de leur santé et de leur utilisation des services
de santé »;
•
« Accroître le partage de l’information sur la santé grâce à une approche globale en
matière de diffusion des données qui respecte le droit à la vie privée des Canadiens ».
3
Services d’affaires mondiaux IBM — Soins de santé
Pour atteindre les objectifs ci-dessus, énoncés dans les ententes de contribution de 2001
et 2003 entre Santé Canada et l’ICIS, il a fallu que Statistique Canada et l’ICIS apportent
une importante contribution pour élaborer et élargir l’infostructure nationale. L’achèvement
de cette dernière n’était pas prévu pour la fin de 2006-2007, soit la date limite de
l’évaluation. Comme l’a fait remarquer un intervenant externe :
« Il nous reste indéniablement beaucoup de travail à faire en matière d’information
sur la santé, sans oublier les nombreux défis que nous devons relever pour améliorer
la qualité des données. Cela dit, nous pouvons affirmer que tous les objectifs
du Carnet de route II et du Carnet de route II plus ont été atteints. Personne
ne s’était imaginé que les quatre objectifs seraient atteints à la perfection. »
- Un responsable à l’échelle nationale de l’élaboration de politiques sur la santé
Compte tenu des limites du contrôle qu’exercent Statistique Canada et l’ICIS sur les extrants
et les résultats du Carnet de route II et du Carnet de route II plus, les contributions de ces
organismes au développement de l’information ont été considérables et impressionnantes.
Les principales conclusions de l’évaluation démontrent que sans le Carnet de route II
et le Carnet de route II plus :
•
il serait presque impossible d’établir des repères interprovinciaux fiables;
•
les débats publics pour soutenir et améliorer les soins de santé au Canada s’enliseraient;
•
les intervenants auraient une vision beaucoup plus limitée des meilleures pratiques
relatives à la prestation des services du système;
•
l’apprentissage méthodologique des pratiques en matière de qualité et de collecte des
données se détériorerait considérablement;
•
les régions sanitaires et les hôpitaux débourseraient d’importantes sommes pour accroître
de façon substantielle les capacités de leurs services internes de collecte de données;
•
les procédures d’établissement de priorités en souffriraient, puisque le Carnet de route II
et le Carnet de route II plus sont des outils essentiels qui permettent de planifier et d’évaluer
les initiatives et les investissements d’intérêt public.
Plusieurs constatations décrivent le noyau que forment le Carnet de route II et le Carnet
de route II plus dans la sphère actuelle de l’information sur la santé. En particulier, les résultats
de l’évaluation démontrent que les produits du Carnet de route sont des nœuds ou des
ancres fiables dans la masse actuelle de données sur la santé qui sont de plus en plus
accessibles au public et aux intervenants. Dans une analyse menée en 2006, la firme IBM
estime que d’ici 2010, la base d’information mondiale doublera toutes les onze heuresv.
Sur le Web, l’information sur la santé est l’un des secteurs qui a connu la croissance la
plus rapide dans l’explosion de l’information. Dans ce flot d’information, le Carnet de route
II et le Carnet de route II plus servent de guides fiables. De plus, les résultats du Carnet de
route représentent plus que des « données » ou des « produits »; ils favorisent les discussions
et l’apprentissage mutuel en ce qui concerne les meilleures pratiques en matière de qualité
de données, de collecte de données, d’évaluations comparatives et d’amélioration de la qualité.
v . IBM Global Technical Services, « The toxic terabyte: How data-dumping threatens business efficiency »,
IBM White Paper, juillet 2006.
4
Évaluation de l’initiative du Carnet de route de l’information sur la santé :
Carnet de route II et Carnet de route II plus — Sommaire
Les constatations empiriques et anecdotiques de l’évaluation démontrent que les intervenants
visés utilisent beaucoup les produits du Carnet de route II et du Carnet de route II plus.
Ces produits sont également accessibles aux responsables de l’élaboration des politiques,
qui participent aux débats à l’Assemblée législative et durant les délibérations de comité.
De cette façon, le Carnet de route II et le Carnet de route II plus servent à influer la base
de la politique publique au Canada. Les principaux médias diffusent les résultats du Carnet
de route II et du Carnet de route II plus de plus en plus régulièrement, informant ainsi
fréquemment le public sur la recherche menée dans le cadre du Carnet de route II et du Carnet
de route II plus. Il reste à savoir si le public réagit à cette recherche en prenant des décisions
éclairées sur les soins de santé et l’utilisation des services de santé. Bien que le Carnet de
route II et le Carnet de route II plus aient indéniablement créé une base d’information fiable
qui permet au public de prendre des décisions éclairées, nous ne pouvons pas mesurer
de façon irréfutable la mesure dans laquelle le public s’appuie sur cette information pour
prendre des décisions en matière de soins de santé.
Principales conclusions et recommandations
Les intervenants ont formulé cinq observations pertinentes à l’évaluation :
•
Les produits du Carnet de route II et du Carnet de route II plus constituent des outils
essentiels pour prendre des décisions fondées sur des données probantes;
•
Les produits du Carnet de route II et du Carnet de route II plus forment les piliers
de la production de rapports comparatifs à l’échelle nationale;
•
Les produits du Carnet de route II et du Carnet de route II plus s’avèrent fiables
et de haute qualité;
•
L’étude des raisons expliquant pourquoi certains Canadiens sont en santé et d’autres
ne le sont pas n’en est qu’à son début. Un examen plus poussé est nécessaire;
•
De nombreux intervenants veulent voir davantage d’analyses plus approfondies
comme celles effectuées dans le cadre de récents produits afin de savoir où orienter
les rares ressources.
Les sources d’évaluation démontrent un vif succès quant aux objectifs du Carnet de route II
et du Carnet de route II plus ainsi qu’aux éléments mesurables du cadre d’évaluation du
Carnet de route. D’après les intervenants, les éléments du cadre qui sont à plus long terme
et moins mesurables (p. ex., la sensibilisation accrue des Canadiens aux facteurs qui influent
sur la santé) peuvent nécessiter des initiatives ciblées en matière de partenariats et de médias.
Le Carnet de route II et le Carnet de route II plus, deux outils extrêmement précieux,
représentent la plaque tournante du grand réseau de l’information sur la santé au Canada.
Les nouvelles initiatives, notamment l’Enquête canadienne sur les mesures de la santé et le
Portail de l’ICIS, démontrent que les partenaires du Carnet de route sont sur la bonne voie
pour répondre aux priorités critiques ainsi qu’aux besoins des intervenants au cours des
trois à cinq prochaines années. Les attentes des intervenants augmentent, et dans certains
cas, le Carnet de route II et le Carnet de route II plus n’ont pas pu y répondre, notamment
en ce qui concerne la compréhension des résultats personnels pour la santé. Il est entendu
que les partenaires du Carnet de route exercent un contrôle restreint sur l’application
de l’information sur la santé pour produire de meilleurs résultats pour la santé.
5
Services d’affaires mondiaux IBM — Soins de santé
L’évaluation a produit des recommandations dans le but d’aider le public à mieux
comprendre les résultats pour la santé et le rendement du système. Voici quelques-unes
des principales recommandations :
•
Créer plus de liens avec les associations nationales de lutte contre les maladies afin
d’élaborer des outils d’information qui aideront les chercheurs à mieux étudier les
facteurs de risque liés aux maladies chroniques;
•
Les partenaires du Carnet de route devraient travailler plus souvent en collaboration
avec les intervenants afin d’élaborer des indicateurs de santé qui tiennent plus compte
du sexe et de la diversité;
•
Accroître l’étendue des bases de données en continuant de créer des relations avec
les provinces et territoires pour les encourager à y participer;
•
Continuer de créer des relations solides avec les médias aux fins d’une interprétation
exacte des résultats qui peuvent être pertinents à l’échelle locale;
•
Travailler en partenariat avec Inforoute Santé du Canada et les initiatives sur les DSE
afin de recueillir de façon coordonnée des mesures cliniques de qualité.
Enfin, les principales recommandations ayant trait aux futurs produits du Carnet de route
ont permis de relever quatre secteurs chevauchants pour les prochaines orientations.
Tous ces secteurs sont axés sur l’élaboration d’une base d’information qui permettrait
de surmonter les défis grandissants associés aux maladies chroniques :
•
Collecte de plus d’information sur les activités et les modèles liés aux soins primaires;
•
Meilleure compréhension de la santé des populations vulnérables;
•
Compréhension des facteurs de risques et des déterminants sociaux associés aux
maladies chroniques;
•
Collecte et communication d’information sur le traitement des maladies chroniques.
6