Het ontwikkelen van een Monitoring-en evaluatieplan
een Monitoring-en evaluatieplan (M&E) is een leidraad voor wat u moet evalueren, welke informatie u nodig hebt en voor wie u evalueert.
het plan schetst de belangrijkste evaluatievragen en de gedetailleerde monitoringvragen die helpen de evaluatievragen te beantwoorden. Dit stelt u in staat om de informatie die u moet verzamelen te identificeren, en hoe u deze kunt verzamelen. Afhankelijk van de details van het plan M&E, kunt u de personen identificeren die verantwoordelijk zijn voor verschillende taken, evenals tijdlijnen. Het plan moet te allen tijde door iedereen die bij het project betrokken is, kunnen worden opgepikt en duidelijk zijn over wat er op het gebied van Toezicht en evaluatie gebeurt.
het is ook belangrijk om te onthouden dat er vele soorten evaluaties zijn.
een evaluatieplan moet idealiter worden uitgevoerd in de planningsfase van een project, voordat u met de uitvoering begint. Zo kunt u van tevoren plannen en activiteiten voor gegevensverzameling die u mogelijk moet ondernemen, zoals pre-interventieonderzoeken. Het is echter nooit te laat om een M&E-plan te ontwikkelen. Het achteraf aanpassen van een M&E-plan aan een bestaand project kan alleen maar betekenen dat u beperkt bent in sommige gegevens die u kunt verzamelen.
hoe een Monitoring-en evaluatieplan te ontwikkelen
een korte handleiding over hoe een M&E plan te ontwikkelen – opent in PowerPoint
Stap 1. Identificeer uw evaluatiepubliek
Identificeer wie de evaluatiepubliek of belanghebbenden zijn. De evaluatiepubliek omvat de mensen of organisaties die een evaluatie moeten uitvoeren. Er kunnen meerdere doelgroepen zijn, elk met hun eigen behoeften. Dit omvat doorgaans het financieringsagentschap en kan ook partnerorganisaties, de Raad (of raadsleden), het projectteam en de deelnemers of doelgroep van het project omvatten. Vergeet niet dat evaluatie over het algemeen wordt uitgevoerd voor verantwoording, of leren, en bij voorkeur beide samen.
als u beperkte middelen voor evaluatie hebt, moet u mogelijk prioriteit geven aan uw evaluatie door te bepalen aan wie de belangrijkste personen zijn om verslag uit te brengen.
Download M&e publiek en evaluatievragen Template
Stap 2. Definieer de evaluatievragen
evaluatievragen moeten vooraf worden ontwikkeld, en in samenwerking met de primaire doelgroep(en) en andere belanghebbenden aan wie u van plan bent te rapporteren. Evaluatievragen gaan verder dan metingen om de hogere orde vragen te stellen, zoals of de interventie de moeite waard is, of had kunnen worden bereikt op een andere manier (zie voorbeelden hieronder). Over het algemeen moeten evaluatievragen tot verdere maatregelen leiden, zoals projectverbetering, Project mainstreaming of projectherontwerp.
in dit stadium moet u ook nagaan of de evaluatiepubliek specifieke tijdlijnen heeft voor het opstellen van een evaluatieverslag. Dit zal een belangrijke factor zijn bij het beslissen wat je wel en niet kunt verzamelen.
houd uw Op resultaten gerichte evaluatievragen open. Bijvoorbeeld. “In welke mate deed…”
brede soorten evaluatievragen per aandachtsgebied
aangepast van: Davidson & Wehipeihana (2010)
| Focus van evaluatie | Evaluatievraag |
|---|---|
| proces |
hoe goed het project is ontworpen en uitgevoerd (d.w.z. de kwaliteit ervan)) |
| resultaat |
in hoeverre voldeed het project aan de algemene behoeften? waren er significante veranderingen en in welke mate was deze toe te schrijven aan het project? hoe waardevol zijn de resultaten voor de organisatie, andere belanghebbenden en deelnemers? |
|
wat werkte en wat niet? wat waren onbedoelde gevolgen? wat waren emergent properties? |
|
| investering |
Was het project kosteneffectief? Was er een ander alternatief dat wellicht een betere investering betekende? |
| welke volgende |
kan het project worden opgeschaald? kan het project elders worden herhaald? is de verandering zelfvoorzienend of is er voortdurende interventie nodig? |
| veranderingstheorie |
heeft het project een veranderingstheorie? wordt de veranderingstheorie weerspiegeld in de programmalogica? Hoe kan de programmalogica de onderzoeksvragen beïnvloeden? |
Hieronder volgt een andere manier om brede evaluatievragen te classificeren.
aangepast aan: Bureau voor samenwerking Europe Aid
| Focus van evaluatie | Evaluatievraag |
|---|---|
| relevantie |
voldoen het thema en de inhoud van de workshop aan de informatiebehoeften van de doelgroep? in hoeverre is het doel van de interventie in overeenstemming met de behoeften en prioriteiten van de gemeenschap? |
| efficiëntie |
leidde de in dit project gebruikte methode tot een vergelijkbaar aantal deelnemers als eerdere of andere programma ‘ s tegen vergelijkbare of lagere kosten? hebben de duurdere inspraakbenaderingen tot betere resultaten geleid dan de minder dure inspraakbenaderingen? |
| effectiviteit |
in hoeverre hebben de workshops geleid tot meer communautaire steun voor Maatregelen ter bestrijding van klimaatverandering? in hoeverre heeft de methode van betrokkenheid de doelgroep aangemoedigd om aan het project deel te nemen? |
| resultaat |
in hoeverre heeft het project geleid tot duurzamer gedrag in de doelgroep? waren er andere onbedoelde positieve of negatieve resultaten van het project? |
| duurzaamheid |
in hoeverre heeft het project geleid tot de gedragsverandering op lange termijn? |
Stap 3 Identificeer de monitoringvragen
om de evaluatievragen te beantwoorden, moeten monitoringvragen worden ontwikkeld die zullen bepalen welke gegevens via het monitoringproces zullen worden verzameld. Monitoringvragen zijn vrij specifiek in wat ze stellen, vergeleken met evaluatievragen. Bijvoorbeeld, voor een evaluatie vraag van ” wat werkte en wat niet?”u kunt verschillende specifieke vragen hebben, zoals” hebben de workshops geleid tot meer kennis over energie-efficiëntie in huis?”of” installeerden deelnemers water efficiënte douchekoppen”.
de controlevragen zullen idealiter worden beantwoord door het verzamelen van kwantitatieve en kwalitatieve gegevens. Het is belangrijk om niet direct in het verzamelen van gegevens te springen, zonder na te denken over de evaluatievragen. Recht in springen kan leiden tot het verzamelen van gegevens die geen nuttige informatie biedt, dat is een verspilling van tijd en geld.
Download het M&e Planiesjabloon om de informatie in te voeren of download een specifiek ingevuld m&e planiesjabloon dat steekproefevaluatievragen, monitoringvragen, indicatoren en bronnen voor een project voor recyclingonderwijs aan de rand van de straat bevat.
als u een programmalogica hebt ontwikkeld, kunt u deze gebruiken om relevante monitoringvragen en indicatoren te identificeren. Klik hier om te zien hoe.
zodra u de monitoringvraag in uw programmalogica hebt geïdentificeerd, kunt u deze overbrengen naar uw M&e-Plansjabloon. Klik hier om te zien hoe.
een korte handleiding over het extraheren van informatie uit uw programmalogica om uw M&E plan te ontwikkelen – opent in PowerPoint
Stap 4. Identificeer de indicatoren en gegevensbronnen
de volgende stap is om te bepalen welke informatie u nodig hebt om uw monitoringvragen te beantwoorden (indicatoren) en waar deze informatie vandaan zal komen (gegevensbronnen). Het is belangrijk om te overwegen dataverzameling, in termen van het type gegevens en elk type onderzoeksontwerp. Gegevensbronnen kunnen deelnemer zelf, of mensen huizen (bijv. audit van verlichtingstypen) of meting, of zelfs literatuur. U kunt dan beslissen over de meest geschikte methode om de gegevens uit de gegevensbron te verzamelen.
de keuzehulpmiddel voor evaluatie is er om u te helpen bij het selecteren van een geschikte methode voor uw behoeften.
het is belangrijk ervoor te zorgen dat uw evaluatiekader cultureel geschikt is. Bij het werken met culturele en Taaldivers (CALD) gemeenschappen, overweeg dan vertegenwoordigers van de Gemeenschap of culturele deskundigen te betrekken bij het evaluatiekader om ervoor te zorgen dat de methoden voor het verzamelen van gegevens geschikt zijn (gevoelig en begrepen) voor de doelgroep. Zie voor meer informatie het echte Evaluatieblog
Stap 5. Identificeer wie verantwoordelijk is voor het verzamelen van gegevens en tijdlijnen
het is raadzaam om de verantwoordelijkheid voor het verzamelen van gegevens toe te wijzen, zodat iedereen vrij is van zijn taken en verantwoordelijkheden. Dit stelt ook nieuwe medewerkers in staat om mee te doen aan het project en een idee te krijgen van wie verantwoordelijk is voor wat, en wat ze kunnen hebben om op te nemen en wanneer.
het verzamelen van monitoringgegevens kan regelmatig plaatsvinden met korte tussenpozen, of minder regelmatig, zoals halfjaarlijks of jaarlijks. Opnieuw, het toewijzen van tijdlijnen beperkt het excuus van ‘niet weten’.
u kunt ook eventuele vereisten noteren die nodig zijn om de gegevens te verzamelen (personeel, budget, enz.). Het is raadzaam om een idee van de kosten in verband met de controle hebben, als je grote ideeën kan hebben om veel informatie te verzamelen, alleen om uit te vinden dat je niet kunt veroorloven het allemaal. In zo ‘ n geval moet je ofwel prioriteiten stellen of ergens anders geld vinden (sorry, maar daar hebben we geen speciaal gereedschap voor).
Stap 6. Geef aan wie de gegevens zal evalueren, hoe deze zullen worden gerapporteerd en wanneer
deze stap is facultatief, maar wordt ten zeerste aanbevolen, aangezien het plan M&E als een volledig document zal worden afgerond. In het besef dat evaluatie de subjectieve beoordeling van de waarde van een project is, is het belangrijk om te bepalen wie deze ‘subjectieve beoordeling’zal maken. In de meeste gevallen is het het projectteam, maar in sommige gevallen kunt u andere stakeholders betrekken, waaronder de doelgroep of deelnemers. U kunt ook overwegen een bepaald deel van de evaluatie uit te besteden aan een externe of onafhankelijke partij.
voor een evaluatie die moet worden gebruikt (en daarom nuttig is) is het belangrijk om de bevindingen te presenteren in een formaat dat geschikt is voor het publiek. Dit kan een kort verslag, een memo, of zelfs een poster of nieuwsbrief betekenen. Daarom is het raadzaam om vanaf het begin na te gaan hoe u uw evaluatie presenteert, zodat u de manier waarop u uw bevindingen presenteert kunt afstemmen op het presentatieformaat (zoals grafieken, tabellen, tekst, afbeeldingen).
Stap 7. Controleer het plan m&E
nadat u uw plan m&E hebt voltooid, markeer gegevensbronnen die vaak worden weergegeven. U kunt bijvoorbeeld enquêtes ontwikkelen die voldoen aan de vereisten voor gegevensverzameling voor veel vragen.
overweeg ook om het plan M&E op verschillende manieren opnieuw te ordenen, bijvoorbeeld op basis van gegevensbron of op basis van het tijdschema voor het verzamelen van gegevens. Tot slot, ga door deze checklist. Heeft uw M&E-plan:
- Focus op de belangrijkste evaluatievragen en het evaluatiepubliek?
- alles vastleggen wat u moet weten om een zinvolle evaluatie van het project te maken?
- stelt alleen relevante monitoringvragen en vermijdt het verzamelen van onnodige gegevens?
- weet u hoe de gegevens zullen worden geanalyseerd, gebruikt en gerapporteerd?
- binnen uw budget en andere middelen werken?
- welke vaardigheden nodig zijn om gegevens te verzamelen en te analyseren?