{"id":25895,"date":"2024-02-29T11:53:59","date_gmt":"2024-02-29T11:53:59","guid":{"rendered":"https:\/\/www.guidaeuroprogettazione.eu\/guida\/erste-schritte-an-die-arbeit\/projektmanagement-ueberwachung-und-bewertung\/"},"modified":"2025-12-09T12:38:18","modified_gmt":"2025-12-09T12:38:18","slug":"projektmanagement-ueberwachung-und-bewertung","status":"publish","type":"guida","link":"https:\/\/euknow.it\/de\/guida\/an-projekten-arbeiten\/projektmanagement-ueberwachung-und-bewertung\/","title":{"rendered":"Projektmanagement: \u00dcberwachung und Bewertung"},"content":{"rendered":"<h3>Warum und wie man \u00fcber Monitoring und Evaluierung in europ\u00e4ischen Projekten spricht<\/h3>\n<p>Dieses Kapitel veranschaulicht, wie der Logical Framework, das grundlegende Instrument zur <strong>Formulierung<\/strong> europ\u00e4ischer Projekte, f\u00fcr das <strong>Projektmanagement<\/strong>, d.h. als \u00dcberwachungs- und Bewertungsinstrument, verwendet wird.<\/p>\n<p>Wie wir feststellen werden, gibt es in der Tat nur wenige Unterschiede zwischen dem Logical Framework (insbesondere in seiner <a href=\"https:\/\/wikis.ec.europa.eu\/download\/attachments\/44169123\/e3d_logframe_en.docx\" target=\"_blank\" rel=\"noopener\">&#8218;erweiterten&#8216; und offiziellen Version<\/a> ) und einem &#8218;Monitoring- und Evaluierungsrahmen&#8216;, der im Wesentlichen eine detailliertere und operationelle Version dessen ist, was bereits im Logical Framework enthalten ist.<\/p>\n<p>Die korrekte Verwendung des logischen Rahmens und das gute Management eines europ\u00e4ischen Projekts erfordern eine effektive \u00dcberwachung und Bewertung. Diese Aspekte stellen die wichtigste Komponente der <strong>Projektmanagementt\u00e4tigkeit<\/strong> dar, und es gibt nur wenige offizielle &#8218;Gebrauchsanweisungen&#8216; dazu: wie auch andere spezifische Aspekte, die in diesem Abschnitt behandelt werden (z.B. <a href=\"https:\/\/euknow.it\/guida\/al-lavoro-progettazione-europea\/partnership-collaborazione-progetti-europei\/\" target=\"_blank\" rel=\"noopener\">Partnerschaftsmanagement<\/a> und <a href=\"https:\/\/euknow.it\/guida\/al-lavoro-progettazione-europea\/rendicontazione-progetti-europei\/\" target=\"_blank\" rel=\"noopener\">Berichterstattung<\/a>), werden sie normalerweise in Fachkursen oder durch Praxis erlernt.<\/p>\n<p>Im Folgenden wird daher versucht, diese L\u00fccke zu schlie\u00dfen, indem ein erster operativer und nicht ersch\u00f6pfender Rahmen zu diesem Thema geschaffen wird. Es vertieft und verkn\u00fcpft, was in den vorangegangenen Kapiteln bereits veranschaulicht wurde:<\/p>\n<p><a href=\"https:\/\/euknow.it\/guida\/al-lavoro-progettazione-europea\/come-strutturare-un-progetto-un-esempio-pratico-e-altri-strumenti\/\">Wie man ein Projekt strukturiert:<\/a> <a href=\"https:\/\/euknow.it\/guida\/al-lavoro-progettazione-europea\/come-strutturare-un-progetto-il-processo-e-gli-strumenti\/\">der Prozess und die<\/a> Werkzeuge | Wie man ein Projekt strukturiert: ein praktisches Beispiel und andere Werkzeuge | <a href=\"https:\/\/euknow.it\/guida\/al-lavoro-progettazione-europea\/elaborare-e-gestire-un-progetto\/\">Entwicklung und Management eines Projekts<\/a><\/p>\n<p>\u00dcberwachung und Bewertung sind ein integraler Bestandteil jeder Projektaktivit\u00e4t. Als solches unterliegt ein <strong>&#8218;Projekt&#8216;<\/strong> in der Tat <strong>Zw\u00e4ngen<\/strong>, die Formen der <strong>Kontrolle<\/strong> erfordern:<\/p>\n<ul>\n<li>Leistungszw\u00e4nge (ein Projekt zielt auf die Erreichung von Ergebnissen, Produkten und Zielen ab, die durch eine Reihe von miteinander verbundenen Aktivit\u00e4ten erreicht werden);<\/li>\n<li>Zeitliche Beschr\u00e4nkungen (ein Projekt findet innerhalb eines bestimmten Zeitrahmens statt), wirtschaftliche und ressourcenbezogene Beschr\u00e4nkungen (ein Projekt verf\u00fcgt \u00fcber speziell zugewiesene wirtschaftliche, materielle und personelle Ressourcen);<\/li>\n<li>Zw\u00e4nge organisatorischer Art (ein Projekt ist in Phasen mit bestimmten Zieldaten und einer Aufteilung der Aufgaben und Verantwortlichkeiten organisiert).<\/li>\n<\/ul>\n<p><strong>\u00dcberwachung<\/strong> und <strong>Bewertung<\/strong> sind Formen der Kontrolle dieser Zw\u00e4nge.<\/p>\n<p>Diese Kontrolle betrifft sowohl diejenigen, die das Projekt umsetzen (diejenigen, die daf\u00fcr sorgen m\u00fcssen, dass die Ausf\u00fchrung innerhalb der geforderten Grenzen bleibt), als auch diejenigen, die es finanzieren (diejenigen, die einen gro\u00dfen Teil dieser Grenzen festlegen). Die Europ\u00e4ische Kommission und die Verwaltungsbeh\u00f6rden der europ\u00e4ischen Fonds unterliegen ebenfalls Zw\u00e4ngen und sind (selbst) verpflichtet, ihre Programme und Projekte zu \u00fcberwachen und zu bewerten. Zu wissen, wie sie vermitteln k\u00f6nnen, was sie mit den ihnen anvertrauten Mitteln erreicht haben, ist ein wesentlicher Bestandteil ihrer <strong>Verantwortung <\/strong>gegen\u00fcber den B\u00fcrgern.<\/p>\n<p>Die Erreichung der gesetzten Ziele innerhalb des vorgegebenen Zeitrahmens und mit den verf\u00fcgbaren Mitteln ist daher das <strong>Herzst\u00fcck der Verbindung<\/strong> zwischen der Person, die ein europ\u00e4isches Projekt einreicht, und der Verwaltungsbeh\u00f6rde, die es finanziert. Aus diesem Grund ist eine gut durchdachte (in der Vorschlagsphase) und gut umgesetzte (in der Durchf\u00fchrungsphase) \u00dcberwachung und Bewertung ein grundlegender Bestandteil f\u00fcr die an der Europlanung Beteiligten und eine Voraussetzung f\u00fcr den Erfolg ihrer Projekte.<\/p>\n<p>Selbst wenn in der Aufforderung zur Einreichung von Vorschl\u00e4gen die Ausarbeitung eines logischen Rahmens oder eines Rahmens f\u00fcr die \u00dcberwachung und Bewertung nicht ausdr\u00fccklich gefordert wird, ist die Anforderung in verschiedenen Feldern und Kriterien des Antragsformulars implizit enthalten (Beschreibung der Projektlogik, erwartete Projektauswirkungen, Projekt\u00fcberwachungssystem usw.). Diese Bereiche und Kriterien k\u00f6nnen bei der Projektauswahl ein erhebliches Gewicht haben und m\u00fcssen konkret und im Einklang mit dem Vorschlag als Ganzes dargestellt werden. Dies ist m\u00f6glich, wenn das Projekt durch einen guten Logical Framework und einen guten Monitoring- und Evaluierungsrahmen unterst\u00fctzt wird.<\/p>\n<p>Monitoring und Evaluierung sind zwei \u00e4hnliche Aktivit\u00e4ten, sie unterst\u00fctzen sich gegenseitig und dienen beide dazu, zu verstehen, \"wie das Projekt l\u00e4uft\" (oder \"wie es gelaufen ist\"). Sie sind jedoch unterschiedlich:<\/p>\n<ul>\n<li>Nach <strong>Zeitplan<\/strong>. Die \u00dcberwachung erfolgt kontinuierlich und systematisch w\u00e4hrend des Verlaufs der Aktivit\u00e4ten und ist notwendig, um die operative Lebensdauer des Projekts zu steuern. Die Evaluierung findet zu bestimmten Zeitpunkten statt (haupts\u00e4chlich am Ende der Aktivit\u00e4ten, aber auch in der Mitte des Projekts oder einige Zeit nach dessen Abschluss) und hat strategische Auswirkungen (hat das Projekt die beabsichtigten Wirkungen erzielt? Welche Lehren k\u00f6nnen daraus gezogen werden? Wie sollten neue Programme und Projekte entsprechend ausgerichtet werden?);<\/li>\n<li>Mit <strong>Absicht<\/strong>. Die \u00dcberwachung konzentriert sich auf die &#8218;unteren&#8216; Ebenen des <a href=\"https:\/\/euknow.it\/guida\/al-lavoro-progettazione-europea\/come-strutturare-un-progetto-il-processo-e-gli-strumenti\/\">logischen Rahmens<\/a>, auf das t\u00e4gliche Management von Aktivit\u00e4ten, Risiken, Zeit und Ressourcen sowie auf die Projektergebnisse und auf die operativen Dimensionen (Effizienz und Effektivit\u00e4t). Die Evaluierung konzentriert sich auf die &#8218;h\u00f6heren&#8216; und strategischen Ebenen des logischen Rahmens (Ergebnisse, Ziele, Resultate und Auswirkungen des Projekts) und befasst sich eingehend mit allen <a href=\"https:\/\/euknow.it\/guida\/al-lavoro-progettazione-europea\/come-strutturare-un-progetto-il-processo-e-gli-strumenti\/\">5 Kriterien<\/a> - Relevanz, Effizienz, Effektivit\u00e4t, Auswirkungen und Nachhaltigkeit;<\/li>\n<li>F\u00fcr <strong>Instrumente<\/strong>. Bei der Evaluierung k\u00f6nnen \"langsamere\" und komplexere Instrumente (z.B. Frageb\u00f6gen, Interviews, Fokusgruppen und andere Arten der Datenerhebung) zum Einsatz kommen, w\u00e4hrend bei der \u00dcberwachung schnellere und unmittelbarere Instrumente zur Datenerhebung und -analyse oder die direkte Beobachtung bestimmter Schl\u00fcsselvariablen verwendet werden. Au\u00dferdem wird die \u00dcberwachung normalerweise von den f\u00fcr die Projektaktivit\u00e4ten Verantwortlichen durchgef\u00fchrt, w\u00e4hrend die Bewertung oft an Dritte delegiert wird;<\/li>\n<li>Nach <strong>Relevanz<\/strong> (f\u00fcr diejenigen, die an europ\u00e4ischen Projekten beteiligt sind). Von den beiden Aktivit\u00e4ten ist die \u00dcberwachung diejenige, der die europ\u00e4ischen Projekttr\u00e4ger am unmittelbarsten Rechenschaft ablegen m\u00fcssen, und diejenige, die sich am direktesten auf die Projektdurchf\u00fchrung auswirkt. Nichtsdestotrotz bleibt die Evaluierung eine wichtige Aufgabe, denn sie bietet eine strategische Orientierung (wenn sie z.B. in der Mitte eines Projekts durchgef\u00fchrt wird) und eine Reihe von abschlie\u00dfenden \u00dcberlegungen und Orientierungen (die oft in der abschlie\u00dfenden Projektberichterstattung verlangt werden).<\/li>\n<\/ul>\n<p>Der Aufwand f\u00fcr die \u00dcberwachung und Bewertung erstreckt sich von der Planungsphase eines Projekts bis zu seinem Abschluss und dar\u00fcber hinaus. Es besteht aus den folgenden Schritten, die in den n\u00e4chsten Abschnitten dieses Kapitels erl\u00e4utert werden:<\/p>\n<ul>\n<li>Definieren Sie die Interventionslogik;<\/li>\n<li>Definieren Sie Indikatoren;<\/li>\n<li>Legen Sie den Rahmen f\u00fcr die \u00dcberwachung und Bewertung fest;<\/li>\n<li>Setzen Sie den \u00dcberwachungs- und Bewertungsplan mit Hilfe geeigneter Instrumente und Datenerfassungsmethoden um;<\/li>\n<li>Sch\u00e4tzung der &#8218;Auswirkungen&#8216; eines Projekts.<\/li>\n<\/ul>\n<h2>Definition der Interventionslogik: der logische Rahmen und die Theorie der Ver\u00e4nderung<\/h2>\n<p>Der Ausgangspunkt f\u00fcr eine gute Messung der Projektleistung ist eine klare Identifizierung der <a href=\"https:\/\/euknow.it\/guida\/al-lavoro-progettazione-europea\/come-strutturare-un-progetto-il-processo-e-gli-strumenti\/\">Interventionslogik<\/a>, d.h. der (logisch verketteten) Abfolge von Zielen, Ergebnissen und Aktivit\u00e4ten, die erreicht werden sollen.<\/p>\n<p>Eine Formulierung der Interventionslogik, die nicht genau, klar und konsistent ist (in Bezug auf die Definition und die logische Verkn\u00fcpfung ihrer Teile), macht die anschlie\u00dfende Ausarbeitung des Monitoring- und Evaluierungsrahmens komplexer, weniger effektiv und weniger sinnvoll. Wenn Sie n\u00e4mlich nicht genau definieren, was Sie mit einem Projekt erreichen wollen, ist es schwierig, es zu bewerten.<\/p>\n<p>Die Interventionslogik ist wiederum die Grundlage f\u00fcr den <strong>Logical Framework<\/strong>, der den wichtigsten Kern eines Monitoring- und Evaluierungsrahmens darstellt. In seiner <a href=\"https:\/\/wikis.ec.europa.eu\/download\/attachments\/44169123\/e3d_logframe_en.docx\" target=\"_blank\" rel=\"noopener\">&#8218;erweiterten&#8216; Version<\/a> enth\u00e4lt der Logical Framework tats\u00e4chlich fast alle Elemente eines \u00dcberwachungs- und Bewertungsrahmens (Indikatoren, Quellen der \u00dcberpr\u00fcfung, Basislinien, Ziele und progressive Daten im Zusammenhang mit der Messung der Indikatoren).<\/p>\n<p><em>Genauere Angaben zur Definition der Interventionslogik und des Logical Framework finden Sie in einem <a href=\"https:\/\/euknow.it\/guida\/al-lavoro-progettazione-europea\/come-strutturare-un-progetto-il-processo-e-gli-strumenti\/\">eigenen Kapitel<\/a> (mit einem <a href=\"https:\/\/euknow.it\/guida\/al-lavoro-progettazione-europea\/come-strutturare-un-progetto-un-esempio-pratico-e-altri-strumenti\/\">praktischen Beispiel<\/a>).<\/em><\/p>\n<p>Um die Formulierung einer guten Interventionslogik zu unterst\u00fctzen, gibt es ein alternatives und erg\u00e4nzendes Instrument zum Logical Framework (und dem Problem\/L\u00f6sungsbaum), die <strong>Theorie der Ver\u00e4nderung<\/strong>.<\/p>\n<p>Die Theory of Change basiert auf einem \u00e4hnlichen (wenn auch nicht identischen) Prozess und einer \u00e4hnlichen Terminologie und identifiziert (wie der Logical Framework) verschiedene logische Schritte, die die Projektaktivit\u00e4ten mit der zu erreichenden \"endg\u00fcltigen Ver\u00e4nderung\" verbinden. Es ist ein dynamischeres und flexibleres Werkzeug als das Logical Framework. Es umfasst die folgenden Schritte:<\/p>\n<ul>\n<li>Die Definition der langfristigen \"Ver\u00e4nderung\", die mit dem Projekt erreicht werden soll;<\/li>\n<li>Kartierung der Bedingungen, die notwendig sind, um einen solchen Wandel herbeizuf\u00fchren;<\/li>\n<li>Die \u00dcberpr\u00fcfung der Notwendigkeit und Vollst\u00e4ndigkeit der identifizierten Bedingungen;<\/li>\n<li>Die Formulierung von Hypothesen, um einige der identifizierten Bedingungen aus dem Anwendungsbereich der Intervention auszuschlie\u00dfen;<\/li>\n<li>Die Identifizierung der Ma\u00dfnahmen, die notwendig sind, um die verbleibenden Bedingungen zu erreichen, die folglich den Umfang des Projekts ausmachen;<\/li>\n<li>Die Entwicklung von Indikatoren, um zu \u00fcberpr\u00fcfen, ob alle notwendigen Bedingungen f\u00fcr die urspr\u00fcnglich identifizierte Ver\u00e4nderung erf\u00fcllt wurden.<\/li>\n<\/ul>\n<p><em>Mehr \u00fcber die Theory of Change, mit Erkl\u00e4rungen und Beispielen, erfahren Sie auf einer <a href=\"https:\/\/www.theoryofchange.org\/what-is-theory-of-change\/\" target=\"_blank\" rel=\"noopener\">speziellen Website<\/a>.<\/em><\/p>\n<p>Die Visualisierung der Theory of Change in einem Projekt nimmt vielf\u00e4ltigere und flexiblere Formen an als die (starre und strukturierte) Tabelle, die f\u00fcr den Logical Framework typisch ist. Eine Theory of Change l\u00e4sst sich mit Hilfe von Diagrammen mit K\u00e4stchen, Pfeilen und nicht-linearen Pfaden visualisieren und ist daher besser geeignet, die Komplexit\u00e4t des Umfangs eines Projekts zu erfassen.<\/p>\n<p>Andererseits erm\u00f6glicht die strukturiertere Form des logischen Rahmens eine pr\u00e4zisere Definition einer \"Hierarchie\" von Indikatoren, die je nach Bezugsebene entweder mit \u00dcberwachungsaktivit\u00e4ten oder mit Bewertungsaktivit\u00e4ten verbunden sind.<\/p>\n<p>W\u00e4hrend die Theory of Change f\u00fcr die Definition der Interventionslogik und die Strukturierung des Projekts sehr n\u00fctzlich ist, bildet der Logical Framework die Grundlage f\u00fcr die anschlie\u00dfenden \u00dcberwachungs- und Bewertungsaktivit\u00e4ten.<\/p>\n<p>Weitere n\u00fctzliche Instrumente zur Unterst\u00fctzung der Entwicklung der Interventionslogik eines Projekts sind die <strong>\"L\u00fcckenanalyse<\/strong> \" und die <strong>\"Szenarioplanung\",<\/strong> bei denen jeweils Folgendes analysiert wird: (a) die \"L\u00fccken\", die in Bezug auf bestimmte Parameter zu schlie\u00dfen sind, die Zielparameter und die zu ihrer Erreichung erforderlichen Ma\u00dfnahmen und Ressourcen; (b) die m\u00f6glichen (positiven und negativen) \"Szenarien\" f\u00fcr die Entwicklung eines bestimmten Sektors oder Kontexts, die Bedingungen und Faktoren (positive und negative), die mit jeder Art von Entwicklung verbunden sind, und der Weg, der erforderlich ist, um das \"Szenario\" zu erreichen, das mit den verf\u00fcgbaren Ressourcen als am g\u00fcnstigsten und machbarsten angesehen wird.<\/p>\n<p><a href=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-teoria-cambiamento.jpg\" data-elementor-open-lightbox=\"yes\" data-elementor-lightbox-title=\"Guida Europrogettazione - Esempio di Teoria del Cambiamento\" data-e-action-hash=\"#elementor-action%3Aaction%3Dlightbox%26settings%3DeyJpZCI6MTU5MjgsInVybCI6Imh0dHBzOlwvXC93d3cuZ3VpZGFldXJvcHJvZ2V0dGF6aW9uZS5ldVwvd3AtY29udGVudFwvdXBsb2Fkc1wvMjAyNFwvMDJcL2d1aWRhZXVyb3Byb2dldHRhemlvbmUtY2FwLTMuNi1tb25pdG9yYWdnaW8tdmFsdXRhemlvbmUtdGVvcmlhLWNhbWJpYW1lbnRvLmpwZyJ9\">\n<img fetchpriority=\"high\" decoding=\"async\" src=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-teoria-cambiamento.jpg\" sizes=\"(max-width: 2338px) 100vw, 2338px\" srcset=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-teoria-cambiamento.jpg 2338w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-teoria-cambiamento-300x212.jpg 300w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-teoria-cambiamento-1024x724.jpg 1024w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-teoria-cambiamento-768x543.jpg 768w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-teoria-cambiamento-1536x1086.jpg 1536w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-teoria-cambiamento-2048x1448.jpg 2048w\" alt=\"\" width=\"2338\" height=\"1653\"> <\/a><\/p>\n<h2>Definition von Indikatoren: \"SMART\"-Kriterien, Linearit\u00e4t und Vereinfachung<\/h2>\n<p>Der n\u00e4chste Schritt nach der Definition der Interventionslogik ist die Definition von Indikatoren.<\/p>\n<p>Wie in der Logical Framework-Matrix angegeben, sollte f\u00fcr jede Zeile der Interventionslogik (Allgemeines Ziel, spezifische Ziele und Ergebnisse) mindestens ein Indikator enthalten sein. Im Sinne einer effektiven und zeitnahen \u00dcberwachung ist es ratsam, einfache Indikatoren oder operative Checklisten auch f\u00fcr die Durchf\u00fchrung von Aktivit\u00e4ten oder Gruppen von Aktivit\u00e4ten (Arbeitspakete oder Komponenten) bereitzustellen.<\/p>\n<p>Die Definition der Indikatoren muss den folgenden Kriterien folgen, die das Akronym &#8218;SMART&#8216; bilden:<\/p>\n<ul>\n<li><strong>Spezifisch<\/strong> (muss greifbar, genau definiert und eindeutig identifizierbar sein);<\/li>\n<li><strong>Messbar<\/strong> (muss objektiv nachweisbar sein, qualitativ oder quantitativ, mit den verf\u00fcgbaren Ressourcen);<\/li>\n<li><strong>Erreichbar<\/strong> (muss sich auf Inhalte beziehen, die mit den verf\u00fcgbaren Ressourcen tats\u00e4chlich erreichbar sind);<\/li>\n<li><strong>Zeitgebunden<\/strong> (muss mit einem Zeitrahmen f\u00fcr die Erreichung und Messung der Ziele verbunden sein).<\/li>\n<\/ul>\n<p>Operativ gesehen erfordert eine gute Definition von Indikatoren sowohl Linearit\u00e4t als auch Pr\u00e4zision.<\/p>\n<p><strong>Linearit\u00e4t und Vereinfachung.<\/strong> Ein guter Bewertungsrahmen basiert auf einer kleinen Anzahl relevanter, spezifischer und gut messbarer <a href=\"https:\/\/en.wikipedia.org\/wiki\/Performance_indicator\" target=\"_blank\" rel=\"noopener\">Schl\u00fcsselindikatoren<\/a>: Zu viele Indikatoren belasten die Projektressourcen unn\u00f6tig. Jeder Indikator muss seine eigene Bedeutung haben, um den Erfolg (oder Misserfolg) des Projekts zu definieren. \t\t\t<sup id=\"1\" class=\"nota\" role=\"button\">1<\/sup>\n\t \t\n\t Indikatoren, die f\u00fcr die Definition des Erfolgs oder des Fortschritts des Projekts nicht wirklich relevant sind, die schwer zu messen sind oder deren Messung zu kostspielig ist, k\u00f6nnen vermieden werden: durch eine \u00dcberarbeitung der Interventionslogik, durch die Verwendung anderer, leichter messbarer Indikatoren oder durch die Verwendung von \"Proxy\"-Indikatoren (die die gew\u00fcnschte Variable nicht direkt messen, aber eine zuverl\u00e4ssige Sch\u00e4tzung liefern).<\/p>\n<p>Die Komplexit\u00e4t der Indikatoren h\u00e4ngt von der Ebene der Interventionslogik ab, auf die sie sich beziehen. Aktivit\u00e4ts- oder Ergebnisindikatoren sollten sofort gemessen werden k\u00f6nnen (im Rahmen der t\u00e4glichen Projekt\u00fcberwachung), w\u00e4hrend Ergebnis- oder Wirkungsindikatoren (im Zusammenhang mit den Projektzielen) m\u00f6glicherweise eine eingehendere Bewertung erfordern, da sie eine allgemeinere und langfristige Ver\u00e4nderung messen. Die Ziele und Ergebnisse selbst m\u00fcssen einfach und m\u00f6glichst \"empirisch\" formuliert werden, um die Anzahl und Komplexit\u00e4t der zu ihrer Messung erforderlichen Indikatoren zu reduzieren.<\/p>\n<p>Linearit\u00e4t und Vereinfachung sind auch Leitprinzipien bei der Formulierung von Indikatoren: Es ist besser, Indikatoren zu verwenden, die bereits bekannt sind, existieren und von &#8218;Insidern&#8216; verwendet werden (z.B. Invalsi-Daten in einer bestimmten Region), als neue zu erfinden (z.B. \u00e4hnliche Daten, die durch eigene Tests gewonnen wurden); es ist besser, Indikatoren in knappen Worten zu definieren, als zu viele Details aufzunehmen (Zeitrahmen, Ziele und andere Aspekte sollten in speziellen Feldern des Anzeigers angegeben werden).<\/p>\n<p><strong>Spezifit\u00e4t und Pr\u00e4zision.<\/strong>  Die Vereinfachung sollte nicht auf Kosten von Spezifit\u00e4t und Pr\u00e4zision gehen, vor allem dann nicht, wenn diese in Reichweite der eigenen Ressourcen liegen oder mit einfachen Mitteln erreicht werden k\u00f6nnen. Insbesondere die Spezifit\u00e4t und Pr\u00e4zision der Indikatoren sind eine Folge der Ziele und Ergebnisse, die auf einfache, empirische und direkt beobachtbare Weise formuliert wurden.<\/p>\n<p>Die Parameter m\u00fcssen das tats\u00e4chliche Ma\u00df dessen angeben, was als Ziel und Ergebnis definiert ist. Sie m\u00fcssen eindeutig formuliert sein, damit ihre Messung nicht durch Ermessensspielraum variiert werden kann. Falls erforderlich, kann die Berechnungsmethode auf der Seite definiert werden (z.B.: Parameter, die bei der Berechnung eines Prozentsatzes zu ber\u00fccksichtigen sind).<\/p>\n<p>Spezifit\u00e4t und Pr\u00e4zision k\u00f6nnen auch auf Indikatoren qualitativer Art angewandt werden, wenn diese zur Messung einer gew\u00fcnschten Ver\u00e4nderung erforderlich sind. In diesen F\u00e4llen erfordert das Kriterium der Genauigkeit eine Definition der Skala und der Situation, auf die sich die verwendeten qualitativen Parameter beziehen (z. B. was Bewertungen wie \"ausgezeichnet\" oder \"gut\" bedeuten) und\/oder eine spezifische Definition der Art und Weise, wie dieser Indikator bewertet wird (z. B. eine eindeutige Formulierung der Fragen in einem Fragebogen oder einer Fokusgruppe).<\/p>\n<p>Die Indikatoren und insbesondere ihre Zielwerte m\u00fcssen im Rahmen des Projekts praktisch durchf\u00fchrbar sein und mit Zeitrahmen, Zeitrahmen f\u00fcr die Feststellung und den anderen Aspekten des \u00dcberwachungs- und Bewertungsrahmens in Verbindung stehen.<\/p>\n<h2>Festlegung des Rahmens f\u00fcr die \u00dcberwachung und Bewertung<\/h2>\n<p>Die  Der <strong>Rahmen f\u00fcr die \u00dcberwachung und Bewertung<\/strong> ist eine gro\u00dfe Tabelle, die jeden Indikator mit jedem der folgenden Elemente verkn\u00fcpft, die angeben, wie und wann jeder Indikator \u00fcberpr\u00fcft wird:<\/p>\n<ol>\n<li>Ausgangswerte (Baseline) und Zielwerte (Ziele) der Indikatoren,<\/li>\n<li>Quellen, Methoden und materielle Mittel f\u00fcr ihre \u00dcberpr\u00fcfung,<\/li>\n<li>Zeitplan f\u00fcr die \u00dcberpr\u00fcfung und Berichterstattung,<\/li>\n<li>Verantwortung und Arbeitsteilung im Verifizierungsprozess.<\/li>\n<\/ol>\n<p>Der Umfang des Monitoring- und Evaluierungsrahmens und der daf\u00fcr erforderliche Aufwand m\u00fcssen realistisch und nicht \u00fcberdimensioniert sein und der Art des Projekts, den verf\u00fcgbaren Ressourcen und den tats\u00e4chlichen operativen Kapazit\u00e4ten der Projekttr\u00e4ger und der Beg\u00fcnstigten entsprechen.\nEs ist besser, eine kleinere Anzahl von<strong>Leistungsindikatoren (Key Performance Indicators - <\/strong> <a href=\"https:\/\/en.wikipedia.org\/wiki\/Performance_indicator\" target=\"_blank\" rel=\"noopener\">KPIs<\/a>) zu \u00fcberwachen und zu bewerten, die m\u00f6glicherweise aus den im Logical Framework definierten Indikatoren ausgew\u00e4hlt werden, als aufgrund der Komplexit\u00e4t des Systems und des Umfangs der erforderlichen Aktivit\u00e4ten \u00fcberhaupt kein Monitoring und keine Evaluierung durchzuf\u00fchren.<\/p>\n<p>Bei komplexen Projekten ist es au\u00dferdem ratsam, einen <strong>\u00dcberwachungs- und Bewertungsplan<\/strong> (z.B. in Form eines Gantt-Diagramms) zu erstellen, in dem die durchzuf\u00fchrenden Aktivit\u00e4ten, der Zeitrahmen und die H\u00f6hepunkte des \u00dcberwachungs- und Bewertungsprozesses zusammengefasst sind.<\/p>\n<p><strong>\n1. Ausgangsbasis und Ziel.<\/strong>  Die Definition einer Baseline, d.h. eines Ausgangspunkts f\u00fcr die betrachteten Indikatoren, ist die erste wirkliche \"Bewertungs\"-Aktivit\u00e4t, die im Rahmen eines Projekts durchgef\u00fchrt wird, und wird als \"Baseline-Studie\" bezeichnet.<\/p>\n<p>F\u00fcr die Festlegung einer Baseline werden Daten, Zeit und Ressourcen ben\u00f6tigt, \u00e4hnlich wie bei der Durchf\u00fchrung einer \u00dcberwachungs- und Bewertungsma\u00dfnahme. Der Aufwand f\u00fcr die Ermittlung einer Baseline und der entsprechenden Zielwerte ist proportional zu dem Aufwand, der sp\u00e4ter bei der \u00dcberwachung und Bewertung erforderlich ist. Schwierigkeiten in dieser Phase (aufgrund mangelnder Daten, Zeit und Ressourcen) k\u00f6nnen darauf hindeuten, dass der \u00dcberwachungs- und Bewertungsrahmen in keinem Verh\u00e4ltnis zu den eigenen F\u00e4higkeiten steht, ihn in die Praxis umzusetzen.<\/p>\n<p>Es ist wichtig, dass Sie einen Zeitrahmen f\u00fcr die Erreichung der Zielwerte angeben. Zus\u00e4tzlich zum Enddatum des Projekts ist es ratsam, Referenzwerte f\u00fcr eine Halbzeitbewertung und m\u00f6glicherweise weitere Zwischenwerte anzugeben, um vor dem Ende des Projekts zu verstehen, ob man auf dem richtigen Weg ist, die Indikatoren zu erreichen.<\/p>\n<p>Indikatoren, die bestimmte Aktionen oder Produkte, die im Rahmen des Projekts realisiert werden sollen, quantifizieren, haben normalerweise einen Startwert von Null, der sich mit der Durchf\u00fchrung der Aktivit\u00e4ten erh\u00f6ht. Die Zielwerte der Indikatoren m\u00fcssen nat\u00fcrlich realistisch quantifiziert werden.<\/p>\n<p><strong>\n2. Quellen, Wege und Mittel zur \u00dcberpr\u00fcfung.<\/strong>  Dieser Teil des Monitoring- und Evaluierungsrahmens beantwortet die zentrale Frage, \"wie\" die Indikatoren gemessen werden sollen.<\/p>\n<p>Zun\u00e4chst muss die Quelle (Dokument oder physischer Datentr\u00e4ger) definiert werden, \u00fcber die die Daten gesammelt werden k\u00f6nnen: entweder eine interne Projektquelle (das Projekt \"erstellt\" die Daten durch eigene Frageb\u00f6gen, Untersuchungen oder Beobachtungen) oder eine externe Quelle (Ver\u00f6ffentlichungen, Datenbanken und statistische Jahrb\u00fccher regionaler, nationaler oder internationaler Institutionen, Universit\u00e4ten, Unternehmen oder Organisationen, die in diesem Bereich t\u00e4tig sind, beg\u00fcnstigte Organisationen, andere Projekte oder parallele Aktionen, die Daten sammeln und verarbeiten, usw.).<\/p>\n<p>Neben der Quelle m\u00fcssen auch die Art und Weise der \u00dcberpr\u00fcfung unter Ber\u00fccksichtigung der folgenden Parameter \u00fcberpr\u00fcft werden:<\/p>\n<ul>\n<li>Die Konsistenz der Daten mit der vom Projekt angenommenen Definition und ihre Konstanz im Laufe der Zeit (Daten, die mit denselben Parametern mit der erforderlichen H\u00e4ufigkeit berechnet wurden, vom Zeitpunkt der Baseline bis zum Zeitpunkt der letzten Bewertungen);<\/li>\n<li>Die Zuverl\u00e4ssigkeit der Quelle (ma\u00dfgebliche Quelle, \u00fcberpr\u00fcfbar auch durch Dritte, oder strenge und \u00fcberpr\u00fcfbare Methodik, da die Daten intern entwickelt wurden);<\/li>\n<li>Ihre tats\u00e4chliche Verf\u00fcgbarkeit (Notwendigkeit von Vereinbarungen oder Abonnements, m\u00f6gliche Kosten, unkontrollierbare Faktoren, die den Zugang zu den Daten beeintr\u00e4chtigen k\u00f6nnten);<\/li>\n<li>Wie wird darauf zugegriffen (online, Bibliothek, Kauf des Mediums, eigene Datenbank, Notwendigkeit der Weiterverarbeitung von Daten).<\/li>\n<\/ul>\n<p>Als n\u00e4chstes muss festgelegt werden, wie die Daten verarbeitet werden, um n\u00fctzliche Informationen f\u00fcr das Projekt zu erhalten, wie sie gespeichert werden (Art des Formats und des Mediums) und wie auf sie zugegriffen, sie \u00fcberpr\u00fcft, aktualisiert und ge\u00e4ndert werden.<\/p>\n<p>Die so gewonnenen Informationen m\u00fcssen an diejenigen weitergegeben werden, die daraus n\u00fctzliche Schl\u00fcsse (und eventuelle Korrekturma\u00dfnahmen) ziehen k\u00f6nnen, d.h. an diejenigen, die das Projekt verwalten, an diejenigen, die eine Entscheidungsfunktion darin aus\u00fcben, an diejenigen, die es finanzieren, und an diejenigen, die berechtigt und daran interessiert sind, seine Entwicklung zu verfolgen. Dies geschieht durch Analysen und Berichte (deren H\u00e4ufigkeit und Struktur festgelegt werden m\u00fcssen) sowie durch spezifische Kommunikationskan\u00e4le (deren Art, Mechanismen und Beg\u00fcnstigte festgelegt werden m\u00fcssen).<\/p>\n<p>Angesichts des Arbeitsaufwands, den die Erhebung und Verarbeitung von Daten mit sich bringen kann, sollten auch hier die einfachsten, kosteneffizientesten und zeitsparendsten Optionen gew\u00e4hlt werden, z. B. indem der Umfang und die Komplexit\u00e4t der Daten \"produktion\" durch das Projekt und seine Beg\u00fcnstigten (durch Frageb\u00f6gen, Umfragen, Fokusgruppen usw.) auf das unbedingt Notwendige beschr\u00e4nkt werden.<\/p>\n<p><em>Dies kann im folgenden Abschnitt \u00fcber die Erfassung und Verarbeitung von Daten genauer untersucht werden.<\/em><\/p>\n<p><strong>\n3. Zeitplan f\u00fcr die \u00dcberpr\u00fcfung und Berichterstattung.<\/strong>  Dieser Teil des Monitoring- und Evaluierungsrahmens beantwortet die Schl\u00fcsselfrage, wann die Indikatoren gemessen werden, oder genauer gesagt, wie lange und wie oft. Die Wahl h\u00e4ngt von den Indikatoren, den Daten, den zuvor festgelegten Modalit\u00e4ten, dem Engagement, das sie von den Beg\u00fcnstigten erfordern, und den verf\u00fcgbaren personellen und materiellen Ressourcen ab.<\/p>\n<p>Der Zeitplan h\u00e4ngt auch von der \"Ebene\" ab, auf der der Indikator angesiedelt ist: Wie bereits erw\u00e4hnt, sind Indikatoren, die sich auf Aktivit\u00e4ten und Ergebnisse (Output) beziehen, normalerweise einfacher und k\u00f6nnen im Rahmen der Projekt\u00fcberwachung h\u00e4ufig \u00fcberpr\u00fcft werden; Indikatoren, die sich auf Ergebnisse (Outcome) und Projektziele (Impact) beziehen, werden im Rahmen einer Ad-hoc-Evaluierung gemessen. Wenn eine Evaluierung durchgef\u00fchrt werden soll, sollte sie nicht erst am Ende des Projekts stattfinden, sondern parallel zur Vorbereitung und Durchf\u00fchrung des Projekts, damit der Prozess der Strukturierung und Sammlung von Daten (z.B. \u00fcber eine Zielgruppe und eine m\u00f6gliche &#8218;Kontrollgruppe&#8216;) richtig organisiert ist.<\/p>\n<p>Schlie\u00dflich muss der festgelegte Zeitrahmen Mittel und Wege beinhalten, um die gesammelten Informationen an diejenigen weiterzuleiten, die die M\u00f6glichkeit haben, Schlussfolgerungen zu ziehen und Korrekturma\u00dfnahmen zu ergreifen. Die kritischsten Indikatoren, d.h. diejenigen, deren Nichterreichen ein gr\u00f6\u00dferes Risiko f\u00fcr die Projektleistung darstellt, verdienen w\u00e4hrend der gesamten Projektlaufzeit st\u00e4ndige Aufmerksamkeit. Die Risikoanalyse und das Risikomanagement sind in der Tat ein integraler Bestandteil der \u00dcberwachungst\u00e4tigkeit.<\/p>\n<p><em>Mehr dar\u00fcber, wie die Indikatoren \u00fcberpr\u00fcft werden und wie die Risiken gehandhabt werden, erfahren Sie im folgenden Abschnitt \u00fcber \u00dcberwachungs- und Bewertungsinstrumente.<\/em><\/p>\n<p><strong>\n4. Verantwortlichkeiten und Aufgaben.<\/strong>  Dieser Teil des \u00dcberwachungs- und Bewertungsrahmens beantwortet die Schl\u00fcsselfrage, wer die Indikatoren misst. Eine genaue Festlegung der Verantwortlichkeiten ist n\u00fctzlich, um wichtige Aspekte des Projektmanagements nicht zu vernachl\u00e4ssigen, insbesondere in Zeiten, in denen Fristen und laufende Aktivit\u00e4ten viel Zeit und Energie absorbieren.<\/p>\n<p>\"Wenn man von Zeit zu Zeit den Kopf hebt, und sei es nur, um einige wichtige \"KPIs\" zu analysieren, kann das Projekt auf dem richtigen Weg bleiben. Dies kann direkt von den Projektmitarbeitern und dem Projektmanager erledigt werden, obwohl bei gro\u00dfen Projekten (und insbesondere bei Bewertungsaktivit\u00e4ten) spezialisierte externe Berater in Betracht gezogen werden k\u00f6nnen (um die Neutralit\u00e4t des Prozesses zu gew\u00e4hrleisten).<\/p>\n<p>Zu diesem Zweck kann es sinnvoll sein, einen einfachen Kalender einzurichten, der daran erinnert, wer wann die wichtigsten \u00dcberwachungs- und Bewertungsaktivit\u00e4ten in Form einer Erinnerung oder eines Gantt-Diagramms durchf\u00fchrt; dazu geh\u00f6ren auch die Aktivit\u00e4ten im Zusammenhang mit der Projektberichterstattung. Einige der grundlegenden operativen Kontrollen (Zeit, Aktivit\u00e4ten und Ergebnisse, Budget und Ressourcen) sollten vom Team w\u00e4hrend der t\u00e4glichen Projektmanagementaktivit\u00e4ten automatisch durchgef\u00fchrt werden.<\/p>\n<p><a href=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-1.jpg\" data-elementor-open-lightbox=\"yes\" data-elementor-lightbox-title=\"Guida Europrogettazione - Esempio di Quadro di monitoraggio e valutazione\" data-e-action-hash=\"#elementor-action%3Aaction%3Dlightbox%26settings%3DeyJpZCI6MzMxNzQsInVybCI6Imh0dHBzOlwvXC93d3cuZ3VpZGFldXJvcHJvZ2V0dGF6aW9uZS5ldVwvd3AtY29udGVudFwvdXBsb2Fkc1wvMjAyNFwvMDJcL2d1aWRhZXVyb3Byb2dldHRhemlvbmUtY2FwLTMuNi1tb25pdG9yYWdnaW8tdmFsdXRhemlvbmUtcXVhZHJvLTEuanBnIn0%3D\">\n<img decoding=\"async\" src=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-1.jpg\" sizes=\"(max-width: 2338px) 100vw, 2338px\" srcset=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-1.jpg 2338w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-1-300x212.jpg 300w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-1-1024x724.jpg 1024w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-1-768x543.jpg 768w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-1-1536x1086.jpg 1536w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-1-2048x1448.jpg 2048w\" alt=\"Europlanning Leitfaden - Beispiel f\u00fcr einen Monitoring- und Evaluierungsrahmen\" width=\"2338\" height=\"1653\"> <\/a><\/p>\n<h2>Instrumente zur \u00dcberwachung und Bewertung<\/h2>\n<p>Eine gute \u00dcberwachung ist ein Zeichen f\u00fcr gutes Projektmanagement. Die \u00dcberwachung - und die Folgema\u00dfnahmen - sind in der Tat das Herzst\u00fcck des <strong>Projektmanagements<\/strong>. F\u00fcr das <a href=\"https:\/\/it.wikipedia.org\/wiki\/Project_management\" target=\"_blank\" rel=\"noopener\">Projektmanagement<\/a> wurden viele Methoden und Werkzeuge entwickelt: Jeder Projektmanager und jedes Projekt w\u00e4hlt die Kombination, die am besten zu seiner Organisation und seinen Bed\u00fcrfnissen passt. Die Europ\u00e4ische Kommission hat eine eigene &#8218;Toolbox&#8216; von Tools entwickelt, die in einer Projektmanagement-Methode namens <strong>&#8218;OpenPM2&#8216;<\/strong> organisiert sind <strong>:<\/strong> Wir haben ihr <a href=\"https:\/\/euknow.it\/gestire-progetto-europeo-openpm2\/\">einen Artikel<\/a> und eine kurze <a href=\"https:\/\/euknow.it\/openpm2-domande-progetti-europei\/\">, ausf\u00fchrliche Diskussion<\/a> gewidmet. Die<a href=\"https:\/\/op.europa.eu\/it\/publication-detail\/-\/publication\/b8458be2-821d-11eb-9ac9-01aa75ed71a1\" target=\"_blank\" rel=\"noopener\">letzte Ausgabe des Handbuchs<\/a>, das kostenlos auf Italienisch erh\u00e4ltlich ist, datiert auf April 2023. OpenPM2:<\/p>\n<ul>\n<li>Es definiert \u00dcberwachung und Kontrolle als eine kontinuierliche<strong>Aktivit\u00e4t<\/strong>, die sich \u00fcber die gesamte Lebensdauer des Projekts erstreckt, von der Initiierung (Phase 1) \u00fcber die Planung und Durchf\u00fchrung (Phasen 2 und 3) bis zum Abschluss (Phase 4).<\/li>\n<li>Es identifiziert 11 <strong>Hauptkomponenten der<\/strong> \u00dcberwachungs- und Kontrollt\u00e4tigkeit: Beschaffung verwalten, Risiken verwalten, Aufmerksamkeitspunkte und Entscheidungen verwalten, Kosten kontrollieren, Zeit kontrollieren, Leistung \u00fcberwachen, Qualit\u00e4t verwalten, Produkte abnehmen, Beteiligte verwalten, Projekt\u00e4nderungen verwalten, \u00dcbergang verwalten.<\/li>\n<li>Es werden verschiedene f\u00fcr das Projektmanagement typische <strong>Instrumente<\/strong> vorgeschlagen, von denen viele in diesem Leitfaden vorgestellt oder erw\u00e4hnt werden (RACI-Matrix und ihre Varianten, Stakeholder-Matrix, Projektplanung und Budgetierung, Risiko- und Aufmerksamkeitsregister, Checkliste, Gantt-Diagramm&#8230;).<\/li>\n<\/ul>\n<p>Ohne den Anspruch auf Vollst\u00e4ndigkeit erheben zu wollen, stellen wir im Folgenden zwei der <strong>am h\u00e4ufigsten verwendeten Tools<\/strong> f\u00fcr Projektmanagement, \u00dcberwachung, Kontrolle und Bewertung vor, zus\u00e4tzlich zu dem, was bereits in diesem und den vorangegangenen Kapiteln erl\u00e4utert wurde.\n<strong>Das Projekt &#8218;Dashboard&#8216;.<\/strong>  Eine der beliebtesten und effektivsten Methoden zur \u00dcberwachung des Projektfortschritts besteht darin, ein \"Dashboard\" oder \"Kontrollpanel\" zu erstellen, mit dem bestimmte Schl\u00fcsselparameter \u00fcberwacht werden k\u00f6nnen, darunter insbesondere<\/p>\n<ul>\n<li>Die einzelnen <strong>Aktivit\u00e4ten<\/strong>, die von ihnen produzierten <strong>Ergebnisse<\/strong> und ihre Zeitpl\u00e4ne, wobei der Schwerpunkt auf den so genannten <strong>Projekt-\"<\/strong> Meilensteinen\" liegt, d.h. den \"Meilensteinen\", die die wichtigsten Etappenziele markieren (z.B. die Zieldaten f\u00fcr die Definition, Genehmigung, Einf\u00fchrung und Fertigstellung eines Ausbildungsplans). Dieser Teil des &#8218;Dashboards&#8216; kann effektiv in Form eines <a href=\"https:\/\/it.wikipedia.org\/wiki\/Diagramma_di_Gantt\" target=\"_blank\" rel=\"noopener\">Gantt-Diagramms<\/a> dargestellt werden.<\/li>\n<li>Die wichtigsten <strong>Indikatoren<\/strong>, die f\u00fcr das Projekt ermittelt wurden, insbesondere die einfacheren, &#8218;operativen&#8216; Indikatoren (die mit Aktivit\u00e4ten und Ergebnissen verbunden sind) und die Indikatoren, die als <strong>&#8218;KPIs<\/strong> &#8218; (Schl\u00fcsselindikatoren) definiert wurden, die regelm\u00e4\u00dfig \u00fcberwacht werden sollen. In diesem Fall kann das &#8218;Dashboard&#8216; f\u00fcr jeden Indikator einen erwarteten Wert f\u00fcr jedes geplante Kontrolldatum anzeigen, der mit der entsprechenden Messung einhergeht, um etwaige Abweichungen zu verdeutlichen.<\/li>\n<li>Ein Plan f\u00fcr die Nutzung der <strong>Ressourcen<\/strong>, wiederum mit den erwarteten Werten f\u00fcr die Nutzung jeder Ressource (Mittel, Personal, Material) im Laufe der Zeit und regelm\u00e4\u00dfigen &#8218;Kontrollpunkten&#8216;, die mit dem Fortschrittsstatus der Indikatoren verglichen werden.<\/li>\n<\/ul>\n<p>F\u00fcr jede Messung ist es ratsam, jedem dieser Parameter ein synthetisches &#8218;Etikett&#8216; zu geben, m\u00f6glicherweise in Verbindung mit einem Symbol und einem Farbcode (wie in diesem Beispiel):<\/p>\n<p><span style=\"font-family: -apple-system, BlinkMacSystemFont, 'Segoe UI', Roboto, 'Helvetica Neue', Arial, 'Noto Sans', sans-serif, 'Apple Color Emoji', 'Segoe UI Emoji', 'Segoe UI Symbol', 'Noto Color Emoji';\">\u25b6 &#8218;Laufend&#8216;: Fortschritt wie geplant, ohne besondere Hindernisse oder Verz\u00f6gerungen;<\/span><\/p>\n<p><span style=\"font-family: -apple-system, BlinkMacSystemFont, 'Segoe UI', Roboto, 'Helvetica Neue', Arial, 'Noto Sans', sans-serif, 'Apple Color Emoji', 'Segoe UI Emoji', 'Segoe UI Symbol', 'Noto Color Emoji';\">\u25b6 &#8218;Versp\u00e4tet&#8216;: Der Fortschritt bleibt hinter den Erwartungen zur\u00fcck, so dass m\u00f6glicherweise Korrekturma\u00dfnahmen erforderlich sind (bei Ressourcen: &#8218;Im \u00dcberschuss&#8216; \/ Auslastung \u00fcber den Erwartungen);<\/span><\/p>\n<p><span style=\"font-family: -apple-system, BlinkMacSystemFont, 'Segoe UI', Roboto, 'Helvetica Neue', Arial, 'Noto Sans', sans-serif, 'Apple Color Emoji', 'Segoe UI Emoji', 'Segoe UI Symbol', 'Noto Color Emoji';\">\u25b6 &#8218;Gef\u00e4hrdet&#8216;: Das Vorankommen ist in Gefahr und ohne schnelles Handeln wird es zwangsl\u00e4ufig zum Nicht-Erreichen oder Scheitern (oder zur \u00dcberschreitung der verf\u00fcgbaren Ressourcen) f\u00fchren;<\/span><\/p>\n<p><span style=\"font-family: -apple-system, BlinkMacSystemFont, 'Segoe UI', Roboto, 'Helvetica Neue', Arial, 'Noto Sans', sans-serif, 'Apple Color Emoji', 'Segoe UI Emoji', 'Segoe UI Symbol', 'Noto Color Emoji';\">\u25fc &#8218;Abgeschlossen&#8216;: die Aktivit\u00e4t ist wie erwartet abgeschlossen (oder die Ressource ist ersch\u00f6pft);<\/span><\/p>\n<p><span style=\"font-family: -apple-system, BlinkMacSystemFont, 'Segoe UI', Roboto, 'Helvetica Neue', Arial, 'Noto Sans', sans-serif, 'Apple Color Emoji', 'Segoe UI Emoji', 'Segoe UI Symbol', 'Noto Color Emoji';\">\u25fc &#8218;Ausgesetzt&#8216;: die Aktivit\u00e4t ist aufgrund externer Faktoren oder mangelnder Ressourcen vor\u00fcbergehend ausgesetzt;<\/span><\/p>\n<p><span style=\"font-family: -apple-system, BlinkMacSystemFont, 'Segoe UI', Roboto, 'Helvetica Neue', Arial, 'Noto Sans', sans-serif, 'Apple Color Emoji', 'Segoe UI Emoji', 'Segoe UI Symbol', 'Noto Color Emoji';\">\u25fc &#8218;Gescheitert&#8216;: die Aktivit\u00e4t ist nicht mehr durchf\u00fchrbar oder die Ressource ist vorzeitig ersch\u00f6pft.<\/span><\/p>\n<p>Im Zuge der \u00dcberwachung ist es auch ratsam, den Zustand zu erhalten:<\/p>\n<ul>\n<li>eine Aufzeichnung der festgestellten <strong>Diskrepanzen<\/strong>, der ergriffenen <strong>Korrekturma\u00dfnahmen<\/strong> und der \u00c4nderungen an der Projektstruktur (Umgestaltung von Aktivit\u00e4ten und Ressourcen), die als Reaktion auf die bei der Umsetzung aufgetretenen Herausforderungen vorgenommen wurden;<\/li>\n<li>eine <strong>Risikomatrix<\/strong> und ein Register der relevanten <strong>Aufmerksamkeitspunkte<\/strong> (siehe unten).<\/li>\n<\/ul>\n<p>Die Elemente eines &#8218;Dashboards&#8216; finden Sie in einer Software, die speziell f\u00fcr das Projektmanagement entwickelt wurde. Sie k\u00f6nnen aber auch (in relativ einfacher Form) durch entsprechend eingerichtete <strong>Tabellenkalkulationen<\/strong> erstellt werden, die \u00fcber ein Netzwerk oder eine Cloud zwischen den Mitgliedern des Projektteams ausgetauscht werden.\n<a href=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-dashboard.jpg\" data-elementor-open-lightbox=\"yes\" data-elementor-lightbox-title=\"Guida Europrogettazione - Esempio di Dashboard\" data-e-action-hash=\"#elementor-action%3Aaction%3Dlightbox%26settings%3DeyJpZCI6MTU5NzAsInVybCI6Imh0dHBzOlwvXC93d3cuZ3VpZGFldXJvcHJvZ2V0dGF6aW9uZS5ldVwvd3AtY29udGVudFwvdXBsb2Fkc1wvMjAyNFwvMDJcL2d1aWRhZXVyb3Byb2dldHRhemlvbmUtY2FwLTMuNi1tb25pdG9yYWdnaW8tdmFsdXRhemlvbmUtZGFzaGJvYXJkLmpwZyJ9\">\n<img decoding=\"async\" src=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-dashboard.jpg\" sizes=\"(max-width: 2338px) 100vw, 2338px\" srcset=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-dashboard.jpg 2338w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-dashboard-300x212.jpg 300w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-dashboard-1024x724.jpg 1024w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-dashboard-768x543.jpg 768w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-dashboard-1536x1086.jpg 1536w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-dashboard-2048x1448.jpg 2048w\" alt=\"\" width=\"2338\" height=\"1653\"> <\/a><\/p>\n<p><strong>Die Risikomatrix.<\/strong>  Die Aktivit\u00e4ten des Projektmanagements und der \u00dcberwachung zielen darauf ab, Risiken, die w\u00e4hrend der Projektdurchf\u00fchrung auftreten k\u00f6nnen, zu verhindern, zu mindern und zu korrigieren. Das Projekt-Dashboard wird daher normalerweise durch spezielle Tools f\u00fcr das Risikokonzept erg\u00e4nzt. Das Risikomanagement besteht wiederum aus vier Hauptphasen:<\/p>\n<ol>\n<li><strong>Identifizierung<\/strong> potenzieller Risiken, die sich auf das Projekt auswirken k\u00f6nnten, durch Brainstorming-Aktivit\u00e4ten, Definition von Checklisten und Analyse der Erfahrungen aus anderen Projekten. Es m\u00fcssen alle relevanten Risiken ber\u00fccksichtigt werden, die aus verschiedenen Quellen stammen k\u00f6nnen: die Organisation selbst und ihre Partner (interne Risiken), Zielgruppen und Beg\u00fcnstigte, andere Organisationen im Rahmen des Projekts, Institutionen, die politische, wirtschaftliche und finanzielle Situation, st\u00f6rende soziale oder technologische Ereignisse, Naturereignisse, usw;<\/li>\n<li><strong>Risikoanalyse <\/strong>zur Bestimmung der Wahrscheinlichkeit und der m\u00f6glichen Auswirkungen. Die Risiken k\u00f6nnen in eine <strong>Matrix<\/strong> eingetragen werden, die durch Zuweisung eines Wertes von 1 bis 3 f\u00fcr die Wahrscheinlichkeit (P) und die Auswirkungen (I) ihren Schweregrad (G = P x I) in leicht (G = 1 oder 2, mit dem normalen Projektbetrieb vereinbar), m\u00e4\u00dfig (G = 3 oder 4, erfordert spezifische Gegenma\u00dfnahmen) und hoch (G = 6 oder 9, kann die Lebensf\u00e4higkeit des Projekts untergraben) unterteilt;<\/li>\n<li>Planung einer <strong>Risikoreaktion<\/strong>, die aus verschiedenen L\u00f6sungen bestehen kann, die darauf abzielen, das Risiko zu vermeiden (durch \u00c4nderung der Konstruktion oder durch besondere Vorkehrungen), das Risiko zu \u00fcbertragen (indem es von einem Dritten gemindert wird, z. B. durch eine Versicherung), das Risiko zu mindern (indem sein Schweregrad auf ein \"mildes\" Niveau reduziert wird) oder das Risiko zu akzeptieren (indem seine Folgen in Kauf genommen werden, aber ein ausgekl\u00fcgelter \"Notfallplan\" f\u00fcr den Fall seines Eintretens besteht);<\/li>\n<li>Einf\u00fchrung eines <strong>Risiko\u00fcberwachungssystems<\/strong> durch eine mehr oder weniger kontinuierliche Aktualisierung der Risikomatrix und des entsprechenden Reaktionsplans (\u00e4hnlich wie bei den Indikatoren im Projekt-Dashboard). \u00c4hnlich wie bei den KPIs sind Risiken mit einem h\u00f6heren Schweregrad die <strong>Aufmerksamkeitspunkte<\/strong>, die regelm\u00e4\u00dfiger und gr\u00fcndlicher \u00fcberwacht werden m\u00fcssen.<\/li>\n<\/ol>\n<p><a href=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-rischi.jpg\" data-elementor-open-lightbox=\"yes\" data-elementor-lightbox-title=\"Guida Europrogettazione - Esempio di Matrice dei rischi\" data-e-action-hash=\"#elementor-action%3Aaction%3Dlightbox%26settings%3DeyJpZCI6MTU5NjksInVybCI6Imh0dHBzOlwvXC93d3cuZ3VpZGFldXJvcHJvZ2V0dGF6aW9uZS5ldVwvd3AtY29udGVudFwvdXBsb2Fkc1wvMjAyNFwvMDJcL2d1aWRhZXVyb3Byb2dldHRhemlvbmUtY2FwLTMuNi1tb25pdG9yYWdnaW8tdmFsdXRhemlvbmUtcXVhZHJvLXJpc2NoaS5qcGcifQ%3D%3D\">\n<img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-rischi.jpg\" sizes=\"(max-width: 2338px) 100vw, 2338px\" srcset=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-rischi.jpg 2338w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-rischi-300x212.jpg 300w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-rischi-1024x724.jpg 1024w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-rischi-768x543.jpg 768w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-rischi-1536x1086.jpg 1536w, https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro-rischi-2048x1448.jpg 2048w\" alt=\"\" width=\"2338\" height=\"1653\"> <\/a><\/p>\n<h2>Methoden der Datenerhebung und -verarbeitung<\/h2>\n<p>Monitoring und Evaluierung basieren auf Daten, die <strong>gesammelt<\/strong> (d.h. auf irgendeine Weise beobachtet und aufgezeichnet), <strong>verwaltet<\/strong> (d.h. sicher und einheitlich auf einem Medium, in der Regel elektronisch, gepflegt und gespeichert), <strong>verarbeitet<\/strong> (d.h. mit Hilfe von analytischen und statistischen Werkzeugen in n\u00fctzliche Projektinformationen umgewandelt) und <strong>pr\u00e4sentiert<\/strong> (d.h. in ein Berichtssystem integriert) werden m\u00fcssen.<\/p>\n<p>Die Daten sind in verschiedene Typen unterteilt:<\/p>\n<ul>\n<li><strong>Prim\u00e4re<\/strong> Daten werden im Rahmen des Projekts direkt bei der zu beobachtenden Bev\u00f6lkerung erhoben, w\u00e4hrend <strong>sekund\u00e4re<\/strong> Daten \u00fcber vorhandene Quellen gesammelt werden. Prim\u00e4rdaten sind spezifischer in Bezug auf die Messung der Projektwirkungen und -auswirkungen, aber weniger vergleichbar mit allgemeineren Daten und sicherlich schwieriger zu erstellen; Sekund\u00e4rdaten hingegen sind leichter verf\u00fcgbar und vergleichbar, messen den Beitrag des Projekts aber tendenziell weniger spezifisch;<\/li>\n<li><strong>Quantitative<\/strong> Daten entsprechen numerischen Werten, die zum Zeitpunkt der Messung direkt gemessen werden, sind normalerweise in einem bestimmten Format strukturiert und lassen sich durch Gleichungen und Formeln mathematisch darstellen. <strong>Qualitative<\/strong> Daten hingegen beziehen sich auf subjektive Dimensionen und lassen sich nicht direkt in einem numerischen Wert zusammenfassen, sondern werden normalerweise in Kategorien organisiert, um mit mathematischen und statistischen Werkzeugen leichter verwaltet werden zu k\u00f6nnen. Quantitative Daten lassen sich leichter mit mathematischen Werkzeugen bearbeiten und k\u00f6nnen daher \"objektiver\" erscheinen, aber sie k\u00f6nnen die Komplexit\u00e4t eines Ph\u00e4nomens weniger gut erfassen als qualitative Daten.<\/li>\n<\/ul>\n<p>Die bestehenden wissenschaftlichen Erkenntnisse und Methoden der Datenerfassung und -verarbeitung sind vielf\u00e4ltig, breit gef\u00e4chert und komplex und w\u00fcrden den Rahmen dieses Leitfadens sprengen. Ohne Anspruch auf Vollst\u00e4ndigkeit und Strenge versuchen wir, einen schnellen \u00dcberblick zu geben, als Ausgangspunkt f\u00fcr das weitere Studium anderer, speziellerer Quellen. Die verschiedenen Methoden erg\u00e4nzen sich gegenseitig und werden in der Regel in verschiedenen Kombinationen eingesetzt, um die \u00dcberwachung und Bewertung eines Projekts zu unterst\u00fctzen.<\/p>\n<p><strong>1. Dokumentarische Recherche<\/strong> und die Verwendung von Sekund\u00e4rdaten, z. B. aus Regierungsdokumenten, akademischer Forschung, Forschung und Analyse durch andere in diesem Bereich oder anderen Projekten, Online-Quellen wie soziale Medien, Blogs oder Gespr\u00e4che zwischen Nutzern.<\/p>\n<p><strong>2. Direkte Beobachtung<\/strong>, die durch die direkte Erhebung von Projektdaten auf verschiedene Weise gewonnen wird (z.B. Anzahl der produzierten Medien, Anzahl der Teilnehmer an einer Schulungsveranstaltung, Anwesenheitslisten, Spuren und R\u00fcckmeldungen, die zu den im Rahmen des Projekts erstellten IT-Tools aufgezeichnet wurden, R\u00fcckmeldungen, die direkt w\u00e4hrend der Projektaktivit\u00e4ten eingeholt wurden, Beobachtungen, die von den Mitarbeitern w\u00e4hrend der Durchf\u00fchrung der Aktivit\u00e4ten aufgezeichnet wurden, usw.).<\/p>\n<p><strong>3. Umfragen<\/strong>, die dazu dienen, Daten von einer gro\u00dfen Anzahl von Personen \u00fcber Online-Tools, Telefonumfragen oder Papierfrageb\u00f6gen zu sammeln, die auch w\u00e4hrend der Projektaktivit\u00e4ten (z. B. am Ende einer Veranstaltung) durchgef\u00fchrt werden. Sie k\u00f6nnen quantitative Antworten, nach Kategorien geordnete qualitative Antworten und qualitatives Feedback in freier Form (offene Antworten) sammeln.<\/p>\n<p><strong>4. Interviews<\/strong>, d.h. Gespr\u00e4che von Angesicht zu Angesicht zwischen einem Forscher und einem Teilnehmer, mit einem Frage- und Antwortsystem, das frei, halbstrukturiert (mit festen Fragen und Antworten, die variieren k\u00f6nnen) oder strukturiert (Fragen mit k\u00fcrzeren oder vordefinierten Antworten) sein kann.<\/p>\n<p><strong>5. Fokusgruppen<\/strong>, d.h. moderierte Gruppendiskussionen, in denen die Teilnehmer aufgefordert werden, Meinungen und Ideen zu einem bestimmten Thema auszutauschen. Sie erm\u00f6glicht eine tiefere Analyse und Integration verschiedener Standpunkte. Je nach den Bed\u00fcrfnissen und der Dynamik in der Teilnehmergruppe kann sie mehr oder weniger strukturiert verlaufen (z. B. in Form eines Interviews).<\/p>\n<p><strong>6. Crowdsourcing<\/strong>, d.h. ein System (in der Regel unterst\u00fctzt durch digitale Plattformen), bei dem die Nutzer einer Dienstleistung oder die Beg\u00fcnstigten eines Projekts kollektiv zur Sammlung von Daten, Informationen und Feedback beitragen.<\/p>\n<p><strong>7. Fallstudien<\/strong>, die dazu dienen, ein bestimmtes Ph\u00e4nomen und ein bestimmtes Thema eingehend zu verstehen. Sie beinhaltet die Sammlung und Analyse verschiedener Quellen wie Interviews, Umfragen und Beobachtungen, die darauf abzielen, den Kontext, die Faktoren und die Dynamik hinter dem Ph\u00e4nomen im Detail zu rekonstruieren, was n\u00fctzlich ist, um Trends, Dynamiken, Beispielmodelle, L\u00f6sungen, Empfehlungen und Lehren abzuleiten.<\/p>\n<p><strong>8. Narrative Enquiry<\/strong>, ein qualitativer Ansatz, der Interviews, Feldnotizen und andere Formen der Datenerfassung verwendet, um die Geschichten von Gruppen oder Einzelpersonen aufzudecken und ihre Erfahrungen, Perspektiven, Dynamiken und Lehren f\u00fcr k\u00fcnftige Ma\u00dfnahmen zu analysieren.<\/p>\n<p><strong>9. Sammlung von Audio- und Videoaufnahmen<\/strong>. Die Verbreitung digitaler Video- und Fotoaufnahmen und die wachsende Gewohnheit der Nutzer, diese zu teilen, indem sie ihre eigene \"Geschichte\" damit entwickeln, kann genutzt werden, um die Aktivit\u00e4ten eines Projekts und seine H\u00f6hepunkte zu erz\u00e4hlen. Dies ist zwar eine sehr erz\u00e4hlerische, partizipatorische und qualitative Art der Datenerhebung, kann aber in Bezug auf den Reichtum der gesammelten Informationen und ihre kommunikative Wirkung sehr effektiv sein.  <\/p>\n<p><strong>8. \"Bedeutendste Ver\u00e4nderung\", eine<\/strong> strukturiertere Variante der vorherigen Ans\u00e4tze, die darin besteht, jeden Teilnehmer zu bitten, die bedeutendste Ver\u00e4nderung zu beschreiben, die in seiner Erfahrung in Bezug auf einen bestimmten Bereich oder Parameter eingetreten ist, und deren Bedeutung zu erkl\u00e4ren. Die gesammelten &#8218;Geschichten&#8216; k\u00f6nnen in Gruppen vertieft, weiter ausgew\u00e4hlt und kommentiert werden.<\/p>\n<p><strong>10. Qualitative Trendanalyse<\/strong>, bei der Tabellen und visuelle Hilfsmittel verwendet werden, um qualitative Daten \u00fcber die Ver\u00e4nderungen zu sammeln und darzustellen, die bei einer Gruppe und \u00fcber einen bestimmten Zeitraum hinweg entstanden sind. Sie kann mit Hilfe der Referenzgruppe auf <a href=\"http:\/\/www.ngo-ideas.net\/tiny_tools\/index.html\" target=\"_blank\" rel=\"noopener\">verschiedene Weise<\/a> dargestellt werden: <strong>1<\/strong> ) <strong>Kartesische<\/strong> Darstellung auf einer Skala von 1 bis 5 des Trends eines bestimmten Parameters im Laufe der Jahre. Es k\u00f6nnen mehrere Linien verwendet werden, um mehrere Parameter darzustellen, die synthetisch die Ph\u00e4nomene anzeigen, die mit dem Erreichen bestimmter &#8218;Spitzen&#8216; und &#8218;T\u00e4ler&#8216; in der Grafik verbunden sind; <strong>2<\/strong> ) <strong>tabellarische<\/strong> Darstellung mit den verschiedenen Referenzkriterien, ihrer Bewertung von 1 bis 5 im Laufe der Jahre und einer zusammenfassenden Bewertung (+ \/ -) der Entwicklung jedes Parameters im Laufe der Jahre; <strong>3)<\/strong> <strong>visuelle<\/strong> Darstellung, bei der der Weg der Gruppe auf einer realen &#8218;Stra\u00dfe&#8216; eingezeichnet wird und die wichtigsten Ereignisse, Ph\u00e4nomene und Ver\u00e4nderungen, die ihre Entwicklung im Laufe der Jahre gepr\u00e4gt haben, mit Zeichnungen und Kommentaren angezeigt werden.<\/p>\n<p><strong>11. Benchmarking<\/strong> (oder vergleichende Analyse), eine Methode, die zum Vergleich und zur Gegen\u00fcberstellung von zwei oder mehr verschiedenen F\u00e4llen verwendet wird, um \u00c4hnlichkeiten und Unterschiede zwischen zwei oder mehr Akteuren oder Ph\u00e4nomenen zu ermitteln. Die Daten m\u00fcssen in den beiden zu vergleichenden F\u00e4llen parallel mit denselben Parametern und Methoden erhoben werden, um eine vollst\u00e4ndige Vergleichbarkeit zu gew\u00e4hrleisten.<\/p>\n<p><strong>12. Statistische Analyse<\/strong>, die quantitative Daten mit Hilfe statistischer Methoden verarbeitet, um Informationen zu beschreiben und zusammenzufassen (deskriptive Statistik) oder um Vorhersagen zu treffen (inferentielle Statistik). Zu den Methoden der <strong>deskriptiven Statistik<\/strong> geh\u00f6ren z.B. die Messung der zentralen Tendenz (Mittelwert, Median und Mode), die Korrelation (Bewertung der Existenz einer positiven oder negativen Beziehung zwischen Variablen) und die Verteilung (Beschreibung der Verteilung von Daten \u00fcber ein Feld durch Funktionen, Daten und Kurven). Zu den Methoden der <strong>Inferenzstatistik<\/strong> geh\u00f6ren z.B. Regression (Umrei\u00dfen eines Trends aus einer Reihe von Daten), Zeitreihenanalyse und andere Methoden zur Erstellung von Vorhersagemodellen. Die statistische Analyse verwendet das <a href=\"https:\/\/it.surveymonkey.com\/mp\/sample-size-calculator\/\" target=\"_blank\" rel=\"noopener\">Konzept einer &#8218;Stichprobe&#8216;,<\/a> deren Gr\u00f6\u00dfe von der Gr\u00f6\u00dfe der Gesamtpopulation, auf die sie sich bezieht, und dem gew\u00fcnschten Konfidenzniveau und der Fehlermarge abh\u00e4ngt.<\/p>\n<p><strong>13. Text Mining und Data Mining<\/strong>, bei denen es um die Sammlung von Online-Daten anhand von Dokumentens\u00e4tzen und gro\u00dfen Datenbanken geht, aus denen mit Hilfe spezieller Computer-Tools, Algorithmen und Anwendungen der K\u00fcnstlichen Intelligenz n\u00fctzliche Informationen, Trends und Muster extrahiert werden k\u00f6nnen.<\/p>\n<p>Bei der Einrichtung eines <strong>Datenverarbeitungssystems<\/strong>, insbesondere wenn Daten \"intern\" erhoben und verarbeitet werden (z.B. bei Umfragen \u00fcber Telematik-Tools), muss die Organisation die aktuellen Gesetze und Vorschriften zu personenbezogenen Daten<strong>(GDPR<\/strong>) beachten. Personenbezogene Daten sind definiert als <em>\"Informationen, mit denen eine nat\u00fcrliche Person direkt oder indirekt identifiziert oder identifizierbar gemacht werden kann und die m\u00f6glicherweise Aufschluss \u00fcber ihre Eigenschaften, Gewohnheiten, Lebensweise, pers\u00f6nliche Beziehungen, ihren Gesundheitszustand, ihre wirtschaftliche Lage usw. geben\"<\/em> (hier die Referenzseite des <a href=\"https:\/\/www.garanteprivacy.it\/home\/diritti\/cosa-intendiamo-per-dati-personali\" target=\"_blank\" rel=\"noopener\">Datenschutzgaranten<\/a>). Es ist ratsam, so wenig personenbezogene Daten wie m\u00f6glich zu verwenden, ein Register der erhobenen Daten zu f\u00fchren, die Daten so <strong>anonym<\/strong> wie m\u00f6glich zu erheben (oder, wenn dies nicht m\u00f6glich ist, die erhobenen Daten zu \"anonymisieren\") und einen Verantwortlichen f\u00fcr die Verarbeitung personenbezogener Daten auf der Grundlage der <a href=\"https:\/\/www.garanteprivacy.it\/regolamentoue\" target=\"_blank\" rel=\"noopener\">geltenden Rechtsvorschriften<\/a> zu benennen. <\/p>\n<p>Die h\u00e4ufigsten<strong> Verzerrungen<\/strong> bei der Datenerfassung und -verarbeitung sind:<\/p>\n<ul>\n<li>Confirmation&#8216; bias, d.h. die Tendenz, nach Beweisen zu suchen, die mit den erwarteten Effekten \u00fcbereinstimmen, und dabei Beweise zu vernachl\u00e4ssigen, die ihnen widersprechen k\u00f6nnten, oder potenziell problematische Aspekte;<\/li>\n<li>Die &#8218;Empathie&#8216;-Voreingenommenheit und die &#8218;Selbstzensur&#8216;-Voreingenommenheit, d.h. die Tendenz, positiv zu antworten, um dem Fragesteller zu gefallen, oder um keine Meinungen zu \u00e4u\u00dfern, die der aktuellen Meinung oder der der eigenen Hierarchie widersprechen;<\/li>\n<li>Die &#8217;strategische&#8216; Verzerrung und die &#8218;Manipulationsverzerrung&#8216;, d.h. die Verzerrung, die bei den Befragten durch den Wunsch entsteht, die Bewertung an ihren eigenen Zielen auszurichten, oder durch die Art und Weise, wie die Fragen formuliert wurden, was zu einer Verzerrung der Antworten f\u00fchren kann;<\/li>\n<li>Die \"Apoph\u00e4nie\" oder \"Scheinkorrelation\", d.h. die Verzerrung, die durch die Beobachtung einer Korrelation zwischen Variablen entsteht, die entweder nicht wirklich existiert oder nicht durch eine <a href=\"https:\/\/www.tylervigen.com\/spurious-correlations\" target=\"_blank\" rel=\"noopener\">kausale Beziehung<\/a> bestimmt ist;<\/li>\n<li>Die \"Verankerung\" oder der \"Halo-Effekt\", d.h. die Tendenz, alle Informationen auf der Grundlage der ersten gesammelten Informationen oder auf der Grundlage einer einzigen Variable zu interpretieren.<\/li>\n<\/ul>\n<p>Bestimmte Tricks helfen, die Auswirkungen dieser Verzerrungen zu begrenzen, z. B. offene Fragen zu stellen, positive und negative Fragen zu mischen, die Fragen auf Fakten zu konzentrieren, Anonymit\u00e4t zu gew\u00e4hrleisten und Daten aus verschiedenen Quellen miteinander zu vergleichen (Triangulation).<\/p>\n<h2>Von Indikatoren zu Auswirkungen<\/h2>\n<p><strong>Wirkung, ein komplexes Konzept.<\/strong>  Das Ergebnis von Monitoring und Evaluierung ist klar und direkt sp\u00fcrbar, wenn es sich um operative Aspekte handelt: durchgef\u00fchrte Aktivit\u00e4ten und Outputs, erreichte Beg\u00fcnstigte, unmittelbare und sichtbare Folgen eines gerade abgeschlossenen Projekts. Diese Daten, die haupts\u00e4chlich durch Monitoring-Aktivit\u00e4ten gewonnen werden, sind auch die wichtigsten f\u00fcr die Projektdurchf\u00fchrenden, die direkt f\u00fcr sie verantwortlich sind.<\/p>\n<p>Die Beantwortung umfassenderer und strategischerer Fragen, wie sie f\u00fcr die Evaluierungsarbeit typisch sind, ist dagegen komplexer: Welche Auswirkungen hatte das Projekt (und welche werden es haben)? Hat das Projekt sein Endziel, d.h. sein Gesamtziel, erreicht? Hat es die Auswirkungen und Ver\u00e4nderungen bewirkt, die es bei seiner Entwicklung beabsichtigte?<\/p>\n<p>Um diese Fragen mit objektiven Beweisen zu beantworten, ist es notwendig, nach dem Ende des Projekts Daten zu sammeln und Ressourcen zu nutzen, die \u00fcber das hinausgehen, was im Rahmen eines einzelnen europ\u00e4ischen Projekts zur Verf\u00fcgung gestellt wird.<\/p>\n<p>Dar\u00fcber hinaus ist der Begriff der Wirkung aus konzeptioneller und statistisch-mathematischer Sicht komplex, da viele Faktoren dazu beitragen: Es ist nicht einfach, den Beitrag des Projekts von einer Vielzahl anderer begleitender Faktoren zu \"isolieren\". Zum Beispiel: Wie sp\u00fcrbar sind die Auswirkungen eines Armutsbek\u00e4mpfungsprojekts auf eine Gemeinde, und wie lassen sie sich von einer Vielzahl anderer (positiver oder negativer) Faktoren wie den Auswirkungen der Wirtschaftslage, der Industriepolitik, anderer paralleler Projekte und der Initiative von Gemeindemitgliedern trennen?<\/p>\n<p>Die Messung der Auswirkungen bleibt jedoch ein berechtigtes Anliegen: Die Auswirkungen sind ein integraler Bestandteil der Projektbegr\u00fcndung und des \u00dcberwachungs- und Bewertungsrahmens; sie sind der Ausgangs- und Endpunkt f\u00fcr jeden, der ein Projekt durchf\u00fchrt oder finanziert; sie definieren im weitesten Sinne den tats\u00e4chlichen Erfolg des Projekts.<\/p>\n<p>Auch die folgende Diskussion erhebt keinen Anspruch auf wissenschaftliche Strenge oder Vollst\u00e4ndigkeit, sondern zielt darauf ab, <strong>das Konzept der &#8218;Wirkung&#8216; in einige Einsichten zu \u00fcbersetzen<\/strong>, die f\u00fcr europ\u00e4ische Projektdurchf\u00fchrer &#8218;greifbar&#8216; sein k\u00f6nnten.<\/p>\n<p><strong>Auswirkungen als kontrafaktische Analyse.<\/strong>  Die kontrafaktische Analyse definiert die Wirkung als den Unterschied zwischen den Daten, die am Ende einer Intervention erhoben wurden (\"faktische\" Daten) und den Daten, die in einer Situation ohne Intervention erhoben wurden (\"kontrafaktische\" Daten). Dies ist der \"wissenschaftlichste\" Ansatz zur Folgenabsch\u00e4tzung: Er wird in der medizinischen Forschung verwendet, um \"Behandlungsgruppen\" mit Zeitreihen oder Kontrollgruppen zu vergleichen.<\/p>\n<p>Dieser Ansatz ist im sozialen Bereich nur schwer anwendbar, da er voraussetzt:<\/p>\n<ul>\n<li>Das Vorhandensein von Indikatoren, die mit analytischen Instrumenten eindeutig \u00fcberpr\u00fcfbar sind und eine ebenso eindeutige und langfristige Verbindung zu der Dimension haben, die sie messen sollen;<\/li>\n<li>Oder die M\u00f6glichkeit, eine \"Kontrollgruppe\" zu identifizieren, deren Merkmale und Dynamik mit denen der Zielgruppe des Projekts vollst\u00e4ndig vergleichbar sind.<\/li>\n<\/ul>\n<p>Dies sind keine einfachen Bedingungen f\u00fcr viele Projekte, bei denen es um \"menschliche\" und soziale Aspekte geht, bei denen die Korrelation zwischen Daten und gemessenen Ph\u00e4nomenen zwar mehr oder weniger stark sein mag, aber kaum eindeutig ist und vom Zusammenspiel mehrerer Faktoren abh\u00e4ngt (insbesondere angesichts des geringen Umfangs eines normalen Projekts); und bei denen die Situationen von Gruppen und Gemeinschaften sehr vielf\u00e4ltig und komplex sind und sich nur schwer mit den begrenzten Ressourcen eines normalen Projekts vergleichen lassen.<\/p>\n<p>Trotz ihrer operativen Einschr\u00e4nkungen im Zusammenhang mit europ\u00e4ischen Projekten bleibt die kontrafaktische Analyse eine n\u00fctzliche \"ideale Referenz\" f\u00fcr die Messung der Auswirkungen. Sie kann mit drei Modifikationen durchgef\u00fchrt werden: <\/p>\n<ul>\n<li>Das sogenannte <strong><a href=\"https:\/\/www.ipsee.info\/glossario-panoramica\/#glossario-pre-post-design\" target=\"_blank\" rel=\"noopener\">\"Pr\u00e4-Post-Design\".<\/a><\/strong>bei dem die Auswirkungen anhand der Diskrepanzen zwischen langen Zeitreihen von Daten (und den daraus resultierenden Projektionen) und dem, was nach der Projektrealisierung beobachtet wird, gesch\u00e4tzt werden. Diese Modalit\u00e4t erfordert eine Zeitspanne und einen Umfang, die nur schwer mit den Daten und der Realisierung eines Projekts in Einklang zu bringen sind; <\/li>\n<li>Das sogenannte <strong><a href=\"https:\/\/www.ipsee.info\/glossario-panoramica\/#glossario-control-group-design\" target=\"_blank\" rel=\"noopener\">\"Kontrollgruppen-Design\".<\/a><\/strong>bei dem die Auswirkungen gesch\u00e4tzt werden, indem der Unterschied zwischen der Gruppe der Projektbeg\u00fcnstigten und einer \"Kontrollgruppe\" mit denselben Merkmalen analysiert wird. Dieser Modus impliziert die Identifizierung (und Analyse) einer Kontrollgruppe, die \"anders\" ist als die Projektaktivit\u00e4ten; <\/li>\n<li>Die sogenannte <a href=\"https:\/\/www.ipsee.info\/glossario-panoramica\/#glossario-difference-in-differences\" target=\"_blank\" rel=\"noopener\"><strong>&#8218;Differenz in Unterschieden&#8216;.<\/strong><\/a>die die beiden vorherigen Modi kombiniert und die doppelte Variation einer Variablen analysiert: <strong>im Laufe der Zeit<\/strong> (vorher, nachher, ex-post) und <strong>zwischen Subjekten<\/strong> (Empf\u00e4ngern und Nicht-Empf\u00e4ngern).<\/li>\n<\/ul>\n<p><strong>Auswirkungen als Ver\u00e4nderung eines Trends.<\/strong>  Die kontrafaktische Analyse kann in abgeschw\u00e4chter Form verwendet werden, indem ein weniger rigoroser Ansatz im Umgang mit Projektdaten und Referenztrends gew\u00e4hlt wird, wobei der Grad der Komplexit\u00e4t proportional zu den Ambitionen des Projekts und den verf\u00fcgbaren Ressourcen ist. Andererseits verliert eine seri\u00f6se kontrafaktische Folgenabsch\u00e4tzung ihren Sinn und ihre wissenschaftliche Relevanz, wenn die Gruppe der \"behandelten Subjekte\" (d.h. die Beg\u00fcnstigten des Projekts) nur ein paar Dutzend Menschen betrifft (wie es oft der Fall ist). <\/p>\n<p>Die \"Ver\u00e4nderung der Flugbahn\" im gesch\u00e4tzten Trend hat daher einen erz\u00e4hlerischen und indikativen Wert. Es kann jedoch sinnvoll sein, zum Abschluss eines Projekts einige Vorschl\u00e4ge zu machen, die sich auf leichter und objektiv \u00fcberpr\u00fcfbare Aspekte beziehen (durchgef\u00fchrte Aktivit\u00e4ten und Outputs, erreichte Beg\u00fcnstigte, Follow-up-Daten zu den Beg\u00fcnstigten), und zwar in Kombination mit den substanzielleren Elementen eines Berichts. Um die Einsch\u00e4tzung der Auswirkungen realistischer und wahrheitsgetreuer zu gestalten, ist es ratsam:  <\/p>\n<ul>\n<li>Beschr\u00e4nken Sie den Umfang des zu messenden Ph\u00e4nomens auf das, wozu das Projekt am st\u00e4rksten und direktesten beigetragen hat (und erh\u00f6hen Sie so den Grad der Korrelation zwischen dem Indikator und dem zu messenden Ziel);<\/li>\n<li>Vergleich der von den Projektdaten aufgezeichneten Entwicklung mit Referenzpunkten, die der Zielpopulation des Projekts so \"nahe\" wie m\u00f6glich kommen (\"quasi-kontrafaktische\" Situation);<\/li>\n<li>Kombinieren Sie, wenn m\u00f6glich, verschiedene und sich erg\u00e4nzende vergleichende Referenzen, indem Sie verschiedene Daten und Standpunkte <a href=\"https:\/\/en.wikipedia.org\/wiki\/Triangulation_(social_science)\" target=\"_blank\" rel=\"noopener\">\"triangulieren\"<\/a>, um die Zuverl\u00e4ssigkeit der Ergebnisse zu erh\u00f6hen;<\/li>\n<li>Beziehen Sie, wenn m\u00f6glich, mehrere Messzeitpunkte in die Analyse ein (um einen Trend zu ermitteln), einschlie\u00dflich \"Follow-up\"-Messungen (z. B. ein, zwei oder drei Jahre nach Ende des Projekts);<\/li>\n<li>Begleiten Sie die Analyse mit einer Bewertung der (positiven oder negativen) Faktoren, die die Daten und \"Trends\" des Projekts beeinflusst haben k\u00f6nnten, und den verwendeten Referenzen.<\/li>\n<\/ul>\n<p>Bei einem Projekt zur Arbeitsvermittlung f\u00fcr junge Menschen im Alter von 15-24 Jahren, die in einem st\u00e4dtischen Gebiet mit sozialen Problemen wohnen, k\u00f6nnen Sie beispielsweise die Ver\u00e4nderungen bei den erfassten Besch\u00e4ftigungsdaten junger Menschen im Alter von 15-24 Jahren vergleichen:<\/p>\n<ul>\n<li>Vom Projekt zu seinen Nutznie\u00dfern (Ausgangsdaten vs. Enddaten: \"faktische\" Daten).<\/li>\n<li>Im Projektgebiet (oder in einem anderen st\u00e4dtischen Gebiet mit sozialen Problemen), w\u00e4hrend des gleichen Zeitraums (eine \"quasi-kontrafaktische\" Zahl).<\/li>\n<\/ul>\n<p>Ein ausf\u00fchrlicheres und spezifischeres Beispiel finden Sie am Ende des<a href=\"https:\/\/euknow.it\/wp-content\/uploads\/2024\/02\/guidaeuroprogettazione-cap-3.6-monitoraggio-valutazione-quadro.jpg\">Beispiels f\u00fcr den \u00dcberwachungs- und Bewertungsrahmen<\/a>.<\/p>\n<p>Die Wahl des Benchmarks (oder die gleichzeitige Verwendung mehrerer Benchmarks) kann je nach Verf\u00fcgbarkeit von Daten variieren. Unterschiede zwischen \"faktischen Daten\" und \"quasi-kontrafaktischen Daten\" k\u00f6nnen unter Ber\u00fccksichtigung anderer Faktoren und Variablen, die die beiden Referenzpopulationen beeinflusst haben k\u00f6nnten, analysiert (und m\u00f6glicherweise gewichtet oder korrigiert) werden:<\/p>\n<ul>\n<li>Positive Faktoren - z.B. positive Ergebnisse, die durch parallele Initiativen in diesem Bereich erzielt wurden (z.B. berufsbildende Kurse, Unterst\u00fctzung f\u00fcr Lehrstellen, Instrumente zur Abstimmung von Arbeitsangebot und -nachfrage&#8230;).<\/li>\n<li>Negative Faktoren - z.B. wirtschaftliche Schwierigkeiten von Unternehmen in der Region oder sich verschlechternde Rahmenbedingungen (z.B. R\u00fcckgang der von der Regierung f\u00fcr Bildung oder Sozialhilfe bereitgestellten Mittel).<\/li>\n<\/ul>\n<p>Die Theorie der Ver\u00e4nderung kann bei dieser Abw\u00e4gung helfen, da sie eine \"Kartierung\" aller Bedingungen liefert, die notwendig sind, um eine gew\u00fcnschte Ver\u00e4nderung herbeizuf\u00fchren.<\/p>\n<p>Wenn dies m\u00f6glich ist und die entsprechenden Mittel zur Verf\u00fcgung stehen, kann im Rahmen des Projekts mit der Datenerhebung begonnen werden, und zwar entweder bei der Gruppe der Beg\u00fcnstigten (z. B. Jugendliche zwischen 15 und 24 Jahren aus bestimmten technischen Instituten) oder bei m\u00f6glichst \u00e4hnlichen Kontrollgruppen (z. B. Jugendliche zwischen 15 und 24 Jahren aus denselben Instituten, die in Bezug auf Alter, Klasse, durchschnittlichen Schulbesuch, Geschlecht und Familieneinkommen \u00e4hnlich verteilt sind, oder Jugendliche zwischen 15 und 24 Jahren aus anderen technischen Instituten desselben Typs und derselben Gr\u00f6\u00dfe, die in Vierteln mit \u00e4hnlichen sozio\u00f6konomischen Bedingungen liegen).<\/p>\n<p><strong>Nicht-experimentelle Methoden der Folgenabsch\u00e4tzung.<\/strong>  Es gibt verschiedene Methoden, die nicht streng quantitativ sind, um die Auswirkungen eines Projekts anhand seiner Interventionslogik oder seiner Theorie der Ver\u00e4nderung zu messen. Dabei handelt es sich um nicht-experimentelle Methoden, die daher weniger \"wissenschaftlich\" sind als kontrafaktische Methoden, die aber darauf abzielen, den <strong>Prozess der Zuordnung von<\/strong> Ver\u00e4nderungen oder beobachteten Ergebnissen zu einem bestimmten Projekt oder einer Intervention zu formalisieren. Wir erw\u00e4hnen sie im Besonderen:  <\/p>\n<ol>\n<li>Die<a href=\"https:\/\/www.betterevaluation.org\/methods-approaches\/approaches\/contribution-analysis\" target=\"_blank\" rel=\"noopener\">Beitragsanalyse<\/a>. Diese Methodik beginnt mit einer begr\u00fcndeten und plausiblen Kausaltheorie dar\u00fcber, wie eine Ver\u00e4nderung zustande kommen soll (Interventionslogik oder Theorie der Ver\u00e4nderung). Sie konzentriert sich dann auf das Sammeln von Beweisen, die diese Theorie best\u00e4tigen: Sie sucht nach anderen Faktoren, die zu den beobachteten Ergebnissen beigetragen haben k\u00f6nnten, und identifiziert und schlie\u00dft (wenn m\u00f6glich) alternative oder erg\u00e4nzende Erkl\u00e4rungen aus, die zu diesen Ergebnissen gef\u00fchrt haben k\u00f6nnten. Zu diesem Zweck werden verschiedene Perspektiven (z. B. Kontext, andere Interventionen, Erz\u00e4hlungen der Akteure, Feedback der Beg\u00fcnstigten) einbezogen, um verschiedene Faktoren oder \"Kausalpfade\" aufzuzeigen, die zu den Ergebnissen gef\u00fchrt oder beigetragen haben k\u00f6nnten;   <\/li>\n<li>Die <a href=\"https:\/\/www.betterevaluation.org\/methods-approaches\/methods\/general-elimination-methodology\" target=\"_blank\" rel=\"noopener\">Global Elimination Methodology<\/a> (GEM) basiert auf der systematischen Identifizierung m\u00f6glicher alternativer Erkl\u00e4rungen, die zu den beobachteten Ergebnissen gef\u00fchrt haben k\u00f6nnten, indem f\u00fcr jedes interessierende Ergebnis eine Liste von Ursachen und ihren miteinander verkn\u00fcpften <a href=\"https:\/\/www.betterevaluation.org\/methods-approaches\/methods\/modus-operandi\" target=\"_blank\" rel=\"noopener\">\"modus operandi\"<\/a> erstellt wird. Anschlie\u00dfend wird ermittelt, welche der Ursachen eingetreten sind und welche der \"modus operandi\" beobachtet wurden. Ursachen, bei denen der entsprechende \"modus operandi\" nicht beobachtet wurde, werden verworfen, so dass nur diejenigen kausalen Erkl\u00e4rungen \u00fcbrig bleiben, die einen echten Kausalzusammenhang aufweisen. Auf dieser Grundlage kann die tats\u00e4chliche Wirksamkeit der Intervention genauer kontextualisiert und bewertet werden;   <\/li>\n<li>Die <a href=\"https:\/\/www.betterevaluation.org\/methods-approaches\/approaches\/realist-evaluation\" target=\"_blank\" rel=\"noopener\">realistische Bewertung<\/a> geht von der \u00dcberlegung aus, dass die Wirksamkeit einer Intervention nicht nur von den Ursache-Wirkungs-Beziehungen dessen abh\u00e4ngt, was ein Projekt oder eine Intervention bewirkt, sondern von einer Vielzahl von Mechanismen, die mit dem Kontext, der Gruppe von Akteuren und einer Gemeinschaft, ihren historischen, kulturellen, wirtschaftlichen, menschlichen und sozialen Interaktionen und Dynamiken zusammenh\u00e4ngen. In verschiedenen Kontexten und in verschiedenen Gemeinschaften wird eine Intervention unterschiedliche Ergebnisse und Wirksamkeit haben. Die Evaluierung (die sich auf quantitative und qualitative Quellen st\u00fctzt) versucht daher, eine Reihe hypothetischer \"Mini-Theorien des Wandels\" zu entwerfen, die in der Lage sind, die verschiedenen Dynamiken zu erfassen und die Intervention und ihre Wirksamkeit in diesem Kontext zu kontextualisieren;  <\/li>\n<li><a href=\"https:\/\/www.betterevaluation.org\/methods-approaches\/approaches\/qualitative-comparative-analysis\" target=\"_blank\" rel=\"noopener\">Die Qualitative Comparative Analysis (QCA)<\/a> vergleicht verschiedene F\u00e4lle (Konfigurationen verschiedener m\u00f6glicher kausaler Bedingungen), die jedoch ein \u00e4hnliches Ergebnis hervorgebracht haben. Sie analysiert daher Cluster von Faktoren, die in verschiedenen F\u00e4llen vorhanden sind, aber zu den gew\u00fcnschten Ergebnissen und Auswirkungen gef\u00fchrt haben, um den Grad der Relevanz jeder Bedingung f\u00fcr das Erreichen der gew\u00fcnschten Auswirkungen zu bestimmen und die einfachste Gruppe von Bedingungen zu ermitteln, die alle beobachteten Ergebnisse sowie deren Fehlen erkl\u00e4ren kann; <\/li>\n<li><a href=\"https:\/\/www.betterevaluation.org\/methods-approaches\/methods\/process-tracing\" target=\"_blank\" rel=\"noopener\">Die Prozessverfolgung<\/a> ist eine Methode zur Untersuchung und Pr\u00fcfung eines bestimmten kausalen Zusammenhangs, um zu beurteilen, ob die Beweise ausreichen, um eine Schlussfolgerung \u00fcber die Ursache zu ziehen. Sie wendet vier Arten von Tests mit zunehmender &#8218;St\u00e4rke&#8216; an: der &#8218;Strohhalm im Wind&#8216;-Test, der es erm\u00f6glicht, zu bestimmen, ob es Bedingungen gibt, die einen kausalen Zusammenhang von vornherein ausschlie\u00dfen; der &#8218;Kreis&#8216;-Test, der es erm\u00f6glicht, einen kausalen Zusammenhang auszuschlie\u00dfen, wenn die analysierte Bedingung vorliegt, aber das erwartete Ergebnis nicht vorhanden ist; der &#8217;smoking gun&#8216;-Test, der im Gegenteil das gemeinsame Vorhandensein (und tendenziell den kausalen Zusammenhang) der analysierten Bedingung und des erwarteten Ergebnisses best\u00e4tigt; der &#8218;double definitive&#8216;-Test erlaubt es (in sehr seltenen F\u00e4llen), die Existenz anderer kausaler Zusammenh\u00e4nge zus\u00e4tzlich zu dem identifizierten auszuschlie\u00dfen. <\/li>\n<\/ol>\n<p><strong>Auswirkungen als &#8218;Geschichten&#8216; des Wandels<\/strong>. Was bisher dargestellt wurde, folgt einem logischen und strukturierten Schema, das mehr oder weniger quantitativ ist und auf dem Konzept der \"Messung\" der erzielten Ver\u00e4nderungen in Bezug auf und unter Verwendung von mehr oder weniger ausgefeilten statistischen Techniken basiert (je nach den Ambitionen der \"Wissenschaftlichkeit\" des durchgef\u00fchrten Evaluierungsprozesses).<\/p>\n<p>Bei einigen Projekten kann dieses Schema komplex oder unzureichend sein, um qualitative Ver\u00e4nderungen, unerwartete Ph\u00e4nomene und Effekte, die in den urspr\u00fcnglichen Metriken nicht definiert wurden, korrekt und vollst\u00e4ndig darzustellen. Aus diesem Grund gibt es breiter angelegte, qualitative oder uneingeschr\u00e4nkte Methoden zur Messung der Auswirkungen gegen\u00fcber den anf\u00e4nglichen &#8218;Zielen&#8216; (z.B. <strong><a href=\"https:\/\/en.wikipedia.org\/wiki\/Goal-free_evaluation\" target=\"_blank\" rel=\"noopener\">zielfreie&#8216; Bewertung<\/a><\/strong>).<\/p>\n<p>Auch hier liegt eine umfassende, ersch\u00f6pfende und strenge Behandlung des Themas jenseits der Ambitionen dieses Leitfadens. Es ist jedoch wichtig, auf die Bedeutung der qualitativen und weniger strukturierten Aspekte bei der Messung der Auswirkungen eines Projekts hinzuweisen.<\/p>\n<p>Auf operativer Ebene bedeutet dies, <strong>die folgenden Fragen zu stellen<\/strong>: Wie hat sich das Leben der Beg\u00fcnstigten (oder der beg\u00fcnstigten Organisationen) durch das Projekt ver\u00e4ndert? Welche Rolle hat das Projekt f\u00fcr ihre Entwicklung, ihre \"Geschichte\" und ihre individuellen Erfahrungen gespielt? Wie h\u00e4tten die Beg\u00fcnstigten (oder die beg\u00fcnstigten Organisationen) ihr Leben und ihre Geschichte ohne die Projektintervention erlebt? Sind diese kleinen individuellen \"Geschichten\" in der Lage, ihrerseits neue kleine und eindrucksvolle \"Geschichten des Wandels\" hervorzubringen? Ist es m\u00f6glich, anhand der individuellen \"Geschichten\" und Sichtweisen eine Linie zu ziehen, die die Erfolgsparameter und Schw\u00e4chen des Projekts aufzeigt?<\/p>\n<p>Geschichten\" k\u00f6nnen durch verschiedene <strong>Methoden der qualitativen Analyse<\/strong> gesammelt und ausgewertet werden, die bereits in den vorangegangenen Abschnitten erw\u00e4hnt wurden: Interviews und Fokusgruppen, Fallstudien und narrative Umfragen, spezifischere Methoden wie die<strong><a href=\"https:\/\/www.betterevaluation.org\/methods-approaches\/approaches\/most-significant-change\" target=\"_blank\" rel=\"noopener\">\"bedeutendste Ver\u00e4nderung<\/a>\"<\/strong> und Systeme zur Analyse und grafischen Darstellung von Trends und qualitativen Ver\u00e4nderungen.<\/p>\n<p>Diese Art der Analyse verfolgt einen empirischen Ansatz, der auf<a href=\"https:\/\/it.wikipedia.org\/wiki\/Induzione\" target=\"_blank\" rel=\"noopener\">\"Induktion<\/a>\" beruht, d.h. auf der Formulierung allgemeiner Schlussfolgerungen aus bestimmten F\u00e4llen. Sie sollte nicht als &#8218;Plan B&#8216; im Vergleich zu anderen Methoden betrachtet werden, da sie im Vergleich zu st\u00e4rker strukturierten Analysesystemen m\u00f6glicherweise andere, tiefere oder zumindest erg\u00e4nzende Elemente erfassen kann.<\/p>\n<p>Ein weiterer weit verbreiteter qualitativer Bewertungsansatz ist das<a href=\"https:\/\/www.betterevaluation.org\/methods-approaches\/approaches\/outcome-mapping\" target=\"_blank\" rel=\"noopener\"><strong>Outcome Mapping<\/strong><\/a>das die Auswirkungen eines Projekts oder einer Intervention absch\u00e4tzt, indem es die Ver\u00e4nderungen im Verhalten, in den Beziehungen, Aktivit\u00e4ten und Handlungen von Menschen, Gruppen und Organisationen analysiert, mit denen direkt gearbeitet wurde. Er basiert auf der Annahme, dass jeglicher sozialer Wandel letztlich von Ver\u00e4nderungen im menschlichen Verhalten abh\u00e4ngt und dass die Nachhaltigkeit jeglichen Wandels von den Beziehungen zwischen den Menschen abh\u00e4ngt. Aus dieser Philosophie ergibt sich der Gegenstand des entsprechenden Evaluierungsmonitoringsystems: <strong>1)<\/strong> die Vision, zu der die Intervention beitragen will, und (vor allem) die Ver\u00e4nderungen im Verhalten, im Handeln und in den Beziehungen, die erreicht werden sollen; <strong>2)<\/strong> die &#8218;Grenzpartner&#8216; der Intervention, d.h. die Personen, Gruppen und Organisationen, mit denen das Programm direkt interagiert und auf die es direkte Einflussm\u00f6glichkeiten hat. Die sich daraus ergebende Analyse ist qualitativer Natur und konzentriert sich auf die Beobachtung (und manchmal Selbsteinsch\u00e4tzung) der Verhaltens\u00e4nderung derjenigen, die mit dem Projekt arbeiten. Obwohl sie weniger streng ist, kann sie daher einfacher und besser anwendbar sein als andere Ans\u00e4tze.    <\/p>\n<p>Eine Analyse anhand von &#8218;Geschichten des Wandels&#8216; verschiedener Art erm\u00f6glicht es, <strong>Kommunikations-<\/strong> und <strong>Verbreitungsmaterial<\/strong> zu entwickeln, das f\u00fcr ein breites Fachpublikum (aufgrund seiner Analysetiefe), f\u00fcr Partner und Interessengruppen (die es sich wiederum zu eigen machen und verbreiten k\u00f6nnen) und f\u00fcr die breite Laien\u00f6ffentlichkeit interessant und nutzbar ist.<\/p>\n<p>Diese Aspekte sind relevant und werden in europ\u00e4ischen Projekten gesch\u00e4tzt. Berichterstattung und Kommunikation sind miteinander verkn\u00fcpfte Aspekte, die dem gemeinsamen Ziel der Rechenschaftspflicht und Transparenz entsprechen (<em><strong>Rechenschaftspflicht<\/strong><\/em>) gegen\u00fcber Institutionen, B\u00fcrgern und ihren Gemeinschaften.<\/p>\n<p><strong>Vertiefung der Konzepte und Ans\u00e4tze zur Wirkung.<\/strong>  F\u00fcr diejenigen, die sich eingehender und aus alternativen und erg\u00e4nzenden Perspektiven mit Methoden der Wirkungsmessung und des Wirkungsmanagements befassen m\u00f6chten, empfehlen wir:<\/p>\n<p><strong>1.<\/strong> <a href=\"https:\/\/www.betterevaluation.org\/\" target=\"_blank\" rel=\"noopener\">BetterEvaluation<\/a>, eine Wissensplattform und globale Gemeinschaft, die sich der Verbesserung und Verbreitung von Methoden und Instrumenten f\u00fcr eine gute Bewertung von Projekten, Interventionen und \u00f6ffentlichen Ma\u00dfnahmen widmet. Sie bietet insbesondere ein Tool<a href=\"https:\/\/www.betterevaluation.org\/frameworks-guides\/rainbow-framework\" target=\"_blank\" rel=\"noopener\">(RainbowFramework<\/a>), mit dem Sie Ihr eigenes Bewertungssystem besser definieren und verwalten k\u00f6nnen, eine Auswahl <a href=\"https:\/\/www.betterevaluation.org\/frameworks-guides\" target=\"_blank\" rel=\"noopener\">spezieller Leitf\u00e4den<\/a> und eine ausf\u00fchrliche Beschreibung (mit Beispielen und einer umfassenden \u00dcbersicht \u00fcber weiterf\u00fchrende Links) der in der Welt der Bewertung verwendeten <a href=\"https:\/\/www.betterevaluation.org\/methods-approaches\" target=\"_blank\" rel=\"noopener\">Methoden und Ans\u00e4tze<\/a>; <\/p>\n<p><strong>2.<\/strong> Das von der Europ\u00e4ischen Kommission (GD INTPA) erstellte <a href=\"https:\/\/capacity4dev.europa.eu\/media\/256195\/download\/c3534015-0720-471c-935a-0f8bdbef3b55_en\" target=\"_blank\" rel=\"noopener\">Evaluierungshandbuch<\/a>. Es konzentriert sich speziell auf Evaluierungsverfahren und -prozesse, die bei europ\u00e4ischen Projekten in Drittl\u00e4ndern zum Einsatz kommen, enth\u00e4lt aber auch wertvolle Hinweise darauf, wie der Evaluierungsprozess von der Definition der Interventionslogik (drittes Kapitel \u00fcber Ans\u00e4tze, Methoden und Instrumente) an gesteuert werden kann; <\/p>\n<p><strong>3.<\/strong> Das<a href=\"https:\/\/www.ipsee.info\/\" target=\"_blank\" rel=\"noopener\">IPSEE<\/a> (Inventory of Problems, Solutions and Evidence on Effects), eine spezielle Plattform, die von<a href=\"https:\/\/www.asvapp.org\/\" target=\"_blank\" rel=\"noopener\">ASVAPP<\/a>, der Vereinigung f\u00fcr die Entwicklung der Evaluierung und Analyse der \u00f6ffentlichen Politik, unterhalten wird. Sie bietet einen <a href=\"https:\/\/www.ipsee.info\/ricerca-avanzata\/\" target=\"_blank\" rel=\"noopener\">\u00dcberblick \u00fcber die Probleme<\/a>, die von der \u00f6ffentlichen Politik angegangen werden sollten, die gew\u00e4hlten L\u00f6sungen und die vorhandenen empirischen Nachweise \u00fcber ihre Auswirkungen, begleitet von einem <a href=\"https:\/\/www.ipsee.info\/glossario-panoramica\/#glossario-analisi-costi-benefici\" target=\"_blank\" rel=\"noopener\">Glossar \u00fcber die<\/a> Auswirkungen und einem \u00dcberblick \u00fcber die verwendeten <a href=\"https:\/\/www.ipsee.info\/glossario-panoramica\/#manuale-cose-la-valutazione-dimpatto-o-degli-effetti\" target=\"_blank\" rel=\"noopener\">Methoden<\/a>; <\/p>\n<p><strong>4.<\/strong> Eine<a href=\"https:\/\/euknow.it\/misurare-impatto-sociale\/\" target=\"_blank\" rel=\"noopener\">ausf\u00fchrliche \u00dcberpr\u00fcfung<\/a> von Leitf\u00e4den und Tools, die von spezialisierten Organisationen im Bereich Impact Investing erstellt wurden, denen wir einen <a href=\"https:\/\/euknow.it\/misurare-impatto-sociale\/\" target=\"_blank\" rel=\"noopener\">eigenen Abschnitt<\/a> gewidmet haben.<em>Impact Investing<\/em> zeichnet sich durch eine methodische und bewusste Mobilisierung von Ressourcen aus, um eine messbare Wirkung in Bereichen zu erzielen, in denen es daran mangelt (Grunds\u00e4tze der Intentionalit\u00e4t, Messbarkeit und Zus\u00e4tzlichkeit); <\/p>\n<p><strong>5.<\/strong> Ein <a href=\"https:\/\/civitas.eu\/sites\/default\/files\/Evaluation_Matters.pdf\" target=\"_blank\" rel=\"noopener\">Leitfaden, der im Rahmen von CIVITAS entwickelt wurde<\/a>, einer Initiative der Europ\u00e4ischen Union, die sich der urbanen Mobilit\u00e4t widmet. Obwohl er Beispiele f\u00fcr den spezifischen Sektor enth\u00e4lt, bietet er eine sehr klare, umfassende und allgemeine Behandlung des Themas der Projekt- und Programmbewertung. <\/p>\n<p><strong>6.<\/strong> Ein <a href=\"https:\/\/www.nsf.gov\/pubs\/2002\/nsf02057\/nsf02057.pdf\" target=\"_blank\" rel=\"noopener\">benutzerfreundliches Handbuch<\/a> f\u00fcr die Projektevaluierung, das in den USA (Regierungsbeh\u00f6rde National Science Foundation) entwickelt wurde und einen systematischen, umfassenden und wissenschaftlichen Ansatz f\u00fcr das Thema Projektevaluierung bietet.<\/p>\n","protected":false},"featured_media":19706,"parent":28929,"menu_order":24,"template":"","meta":{"_acf_changed":false,"inline_featured_image":false},"class_list":["post-25895","guida","type-guida","status-publish","has-post-thumbnail","hentry","capitoli-3-6-de"],"acf":[],"_links":{"self":[{"href":"https:\/\/euknow.it\/de\/wp-json\/wp\/v2\/guida\/25895","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/euknow.it\/de\/wp-json\/wp\/v2\/guida"}],"about":[{"href":"https:\/\/euknow.it\/de\/wp-json\/wp\/v2\/types\/guida"}],"version-history":[{"count":5,"href":"https:\/\/euknow.it\/de\/wp-json\/wp\/v2\/guida\/25895\/revisions"}],"predecessor-version":[{"id":39049,"href":"https:\/\/euknow.it\/de\/wp-json\/wp\/v2\/guida\/25895\/revisions\/39049"}],"up":[{"embeddable":true,"href":"https:\/\/euknow.it\/de\/wp-json\/wp\/v2\/guida\/28929"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/euknow.it\/de\/wp-json\/wp\/v2\/media\/19706"}],"wp:attachment":[{"href":"https:\/\/euknow.it\/de\/wp-json\/wp\/v2\/media?parent=25895"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}