Voyons ce que signifie \u00ab \u00e9valuer une intervention \u00bb en r\u00e9pondant \u00e0 des questions peu \u00e9videntes : que peut-on \u00e9valuer, comment et pourquoi ?<\/p>\n
Cet article marque le d\u00e9but de la collaboration de notre Guide avec l \u00ab ASVAPP<\/a>, avec qui nous allons explorer le th\u00e8me de l \u00bb \u00e9valuation. Article de Valentina Battiloro et Luca Mo Costabella. <\/p>\n Comment concevoir une \u00e9valuation ? Comment et quand la r\u00e9aliser ?\" sont des questions de plus en plus fr\u00e9quentes lors de la conception d’une intervention visant \u00e0 r\u00e9soudre un probl\u00e8me collectif donn\u00e9. Au cours des derni\u00e8res d\u00e9cennies, l’attention accrue port\u00e9e \u00e0 l’\u00e9valuation s’est accompagn\u00e9e de b\u00e9n\u00e9fices en termes de connaissances, mais aussi d’une certaine confusion.<\/p>\n Pour clarifier un peu les choses, il convient de commencer par le terme. \u00c9valuer\" signifie porter un jugement : cela implique une activit\u00e9 comparative entre ce qui est observ\u00e9 \u00e0 la suite d’une intervention et un terme de comparaison, tel qu’un niveau standard ou des conditions attendues. <\/p>\n \u00c0 qui s’adresse l’arr\u00eat ? Pas \u00e0 l’entit\u00e9 qui con\u00e7oit, finance ou met en \u0153uvre l’intervention. Alors, sur quoi doit-on porter un jugement et pourquoi ? <\/p>\n Les objets de jugement et les besoins cognitifs qui motivent l’\u00e9valuation sont potentiellement nombreux, et des questions diff\u00e9rentes impliquent l’utilisation d’approches analytiques diff\u00e9rentes. De mani\u00e8re sch\u00e9matique et non exhaustive, nous pouvons identifier trois expressions diff\u00e9rentes du jugement qui visent \u00e0 \u00e9valuer diff\u00e9rents aspects d’une intervention et qui motivent chacune des approches \u00e9valuatives sp\u00e9cifiques : <\/p>\n L’un des besoins les plus fr\u00e9quents en mati\u00e8re de connaissances pour ceux qui financent et planifient les interventions est de suivre et de communiquer au monde ext\u00e9rieur ce qui a \u00e9t\u00e9 fait avec les ressources disponibles. Le rapport sur les r\u00e9alisations examine le nombre et les caract\u00e9ristiques des ressources investies, les actions r\u00e9alis\u00e9es, les b\u00e9n\u00e9ficiaires de l’intervention et leurs \u00e9ventuelles conditions apr\u00e8s le projet. Il s’agit d’une activit\u00e9 d’\u00e9valuation car elle implique une comparaison entre ce qui a \u00e9t\u00e9 fait et ce que l’on imaginait faire, ou ce que l’on d\u00e9clarait faire. <\/p>\n Cette forme d’\u00e9valuation implique un syst\u00e8me de collecte de donn\u00e9es ad hoc, dont la conception doit n\u00e9cessairement pr\u00e9c\u00e9der le d\u00e9but de l’intervention. La conception de cette activit\u00e9 implique certaines pr\u00e9cautions indispensables : <\/p>\n La troisi\u00e8me exigence cognitive concerne l’efficacit\u00e9 de l’intervention, c’est-\u00e0-dire sa capacit\u00e9 \u00e0 modifier le probl\u00e8me initial. C’est le domaine de l \u00ab \u00e9valuation de l’impact (ou des effets) : un type d \u00bb \u00e9valuation qui consiste \u00e0 observer ou \u00e0 mesurer les conditions d’int\u00e9r\u00eat apr\u00e8s l’intervention et \u00e0 estimer de mani\u00e8re cr\u00e9dible ce qui se serait pass\u00e9 sans l’intervention. <\/p>\n L’effet (ou l’impact) est estim\u00e9 comme la diff\u00e9rence entre les deux sc\u00e9narios, dont le premier (factuel) existe et est mesurable, tandis que le second (contrefactuel) doit \u00eatre reconstruit et estim\u00e9 d’une mani\u00e8re ou d’une autre. Les approches de l’estimation contrefactuelle sont diverses (voir ici<\/a> pour un bref aper\u00e7u) et reposent en grande partie sur l’utilisation de groupes de contr\u00f4le s\u00e9lectionn\u00e9s de mani\u00e8re appropri\u00e9e. Ce type d’estimation n\u00e9cessite une expertise sp\u00e9cifique (statistique et \u00e9conom\u00e9trique) et des efforts consid\u00e9rables. <\/p>\n Certaines conditions de faisabilit\u00e9 sont \u00e9galement n\u00e9cessaires \u00e0 sa r\u00e9alisation : la disponibilit\u00e9 de donn\u00e9es ad\u00e9quates, la possibilit\u00e9 de construire un groupe de contr\u00f4le r\u00e9ellement comparable aux \"trait\u00e9s\" et une taille suffisante des groupes analys\u00e9s pour garantir la pr\u00e9cision des estimations. La force de ce type d’\u00e9valuation r\u00e9side dans la possibilit\u00e9 de fournir des r\u00e9ponses circonscrites, mais solides et pr\u00e9cises, avec un degr\u00e9 de subjectivit\u00e9 tr\u00e8s r\u00e9duit par rapport \u00e0 toute autre approche. <\/p>\n Alors que les deux premi\u00e8res activit\u00e9s accompagnent la r\u00e9alisation de l’intervention (bien qu’elles puissent \u00eatre effectu\u00e9es \u00e0 la fin de l’intervention), l \u00ab \u00e9valuation d’impact est n\u00e9cessairement une activit\u00e9 ex post, qui ne peut \u00eatre lanc\u00e9e qu \u00bb \u00e0 la fin de l’intervention ou apr\u00e8s qu’une fen\u00eatre temporelle utile se soit \u00e9coul\u00e9e afin de saisir les changements qu’elle a pu produire sur le probl\u00e8me initial.<\/p>\n Mais avant de se demander ce que l’on veut savoir, il est n\u00e9cessaire de s’interroger sur la nature de l’intervention \u00e9valu\u00e9e. Il est n\u00e9cessaire de prendre du recul par rapport aux exigences qui motivent l’\u00e9valuation afin de reconstruire la \"th\u00e9orie du changement\" de l’intervention. Partant de la d\u00e9finition du probl\u00e8me \u00e0 traiter, la th\u00e9orie du changement repr\u00e9sente et explicite la mani\u00e8re dont les actions \u00e0 mettre en \u0153uvre doivent contribuer \u00e0 modifier la situation existante et \u00e0 produire le changement souhait\u00e9. En fin de compte, la \"th\u00e9orie du changement\" n’est qu’un mod\u00e8le plausible et raisonnable de la mani\u00e8re dont un programme devrait fonctionner. La th\u00e9orie du changement peut \u00eatre repr\u00e9sent\u00e9e graphiquement par le cadre logique, qui rend imm\u00e9diatement visibles les \"ingr\u00e9dients\" de l’intervention, ainsi que les hypoth\u00e8ses et les menaces qui p\u00e8sent sur son fonctionnement. <\/p>\n Une fois la th\u00e9orie du changement reconstruite, il est possible de se demander ce que l’on veut savoir et pourquoi. Il n’est pas n\u00e9cessairement toujours judicieux ou possible de r\u00e9pondre \u00e0 tous les besoins de connaissances d\u00e9crits. Les caract\u00e9ristiques de l’intervention, le nombre de b\u00e9n\u00e9ficiaires, la quantit\u00e9 et la qualit\u00e9 des informations collect\u00e9es sont autant de conditions qui influent sur la possibilit\u00e9 de produire des \u00e9valuations solides. <\/p>\n Le choix du type d’\u00e9valuation \u00e0 mener doit donc s’accompagner, dans la mesure du possible, de la conception de l’intervention, afin que toutes les conditions n\u00e9cessaires soient r\u00e9unies pour r\u00e9pondre aux questions pos\u00e9es. Nombre de ces r\u00e9flexions sont reprises par le Guide dans les chapitres consacr\u00e9s au suivi et \u00e0 l’\u00e9valuation<\/a>, \u00e0 la d\u00e9finition de la<\/a> logique d’ intervention et \u00e0 la structuration du cadre logique<\/a>. <\/p>\n Une consid\u00e9ration importante doit concerner les motivations qui sous-tendent l’\u00e9valuation.<\/p>\n Quel que soit le besoin de connaissance en amont, l’\u00e9valuation doit contribuer \u00e0 produire des connaissances utiles pour \"concevoir\" de mani\u00e8re plus \u00e9clair\u00e9e, en r\u00e9pondant aux doutes sur la coh\u00e9rence des activit\u00e9s planifi\u00e9es avec celles mises en \u0153uvre, leur reproductibilit\u00e9 et leur efficacit\u00e9, y compris par rapport aux co\u00fbts encourus.<\/p>\n Il s’agit dans tous les cas d’une activit\u00e9 co\u00fbteuse, pour ceux qui la financent et pour ceux qui y participent en tant qu’observateurs. Il convient donc de choisir avec soin ce que l’on demande et \u00e0 quel moment, et de viser \u00e0 produire un avis qui puisse \u00eatre utilis\u00e9 (m\u00eame s’il est n\u00e9gatif !) \u00e0 des fins de prise de d\u00e9cision. <\/p>\n Dans les articles suivants, nous d\u00e9velopperons l’applicabilit\u00e9 de ces trois types d \u00ab \u00e9valuation aux projets europ\u00e9ens, leurs conditions de faisabilit\u00e9 et nous fournirons des exemples et des exp\u00e9riences d \u00bb \u00e9valuation de certains projets europ\u00e9ens.<\/p>\n Une discussion plus g\u00e9n\u00e9rale sur le sujet peut \u00eatre trouv\u00e9e<\/a> ici et un examen approfondi des activit\u00e9s et des outils offerts par l’ASVAPP peut \u00eatre trouv\u00e9 ici.<\/a> <\/p>\n L’article refl\u00e8te la terminologie adopt\u00e9e par l’ASVAPP, de sorte que certaines diff\u00e9rences avec la terminologie adopt\u00e9e dans d’autres sections du guide sont possibles.<\/p>\n","protected":false},"excerpt":{"rendered":" Voyons ce que signifie \u00ab \u00e9valuer une intervention \u00bb en r\u00e9pondant \u00e0 des questions peu \u00e9videntes : que peut-on \u00e9valuer, comment et pourquoi ?<\/p>\n","protected":false},"author":10,"featured_media":37884,"comment_status":"closed","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"_acf_changed":false,"inline_featured_image":false,"footnotes":""},"categories":[743,2194],"tags":[2380,2377],"class_list":["post-35167","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-archives-archives","category-archives-guides-et-outils","tag-comment-faire-methodes-pour","tag-outils"],"acf":[],"_links":{"self":[{"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/posts\/35167","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/users\/10"}],"replies":[{"embeddable":true,"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/comments?post=35167"}],"version-history":[{"count":1,"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/posts\/35167\/revisions"}],"predecessor-version":[{"id":37395,"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/posts\/35167\/revisions\/37395"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/media\/37884"}],"wp:attachment":[{"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/media?parent=35167"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/categories?post=35167"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/euknow.it\/fr\/wp-json\/wp\/v2\/tags?post=35167"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}L’\u00e9valuation : quoi et comment<\/h2>\n
\n
\u00c9valuation, ce qui a \u00e9t\u00e9 fait : rendre compte des r\u00e9alisations<\/h2>\n
\n
Ce qui a chang\u00e9 \"gr\u00e2ce \u00e0\" : \u00e9valuation de l’impact<\/h2>\n
S’\u00e9quiper avant de partir : la th\u00e9orie du changement et le cadre logique<\/h2>\n
Pourquoi le faire : r\u00e9colter les b\u00e9n\u00e9fices des interventions d’\u00e9valuation<\/h2>\n
Perspectives \u00e0 venir<\/h2>\n