Monitoring és értékelési terv kidolgozása
a Monitoring és értékelési terv (M& E) útmutató arra vonatkozóan, hogy mit kell értékelnie, milyen információkra van szüksége, és kinek értékeli.
a terv felvázolja a legfontosabb értékelési kérdéseket és a részletes monitoring kérdéseket, amelyek segítenek megválaszolni az értékelési kérdéseket. Ez lehetővé teszi, hogy azonosítsa a gyűjtendő információkat, és hogyan gyűjtheti azokat. Az M&e terv részleteitől függően azonosíthatja a különböző feladatokért felelős embereket, valamint az ütemterveket. A tervet bárki, aki részt vesz a projektben, bármikor átveheti, és egyértelműnek kell lennie arról, hogy mi történik a nyomon követés és az értékelés szempontjából.
fontos megjegyezni, hogy sokféle értékelés létezik.
az értékelési tervet ideális esetben a projekt tervezési szakaszában, a megvalósítás megkezdése előtt kell elvégezni. Ez lehetővé teszi, hogy előre megtervezze az adatgyűjtési tevékenységeket, amelyeket esetleg el kell végeznie, például a beavatkozás előtti felméréseket. Soha nem késő azonban kidolgozni egy M& E tervet. Az M&e terv utólagos illesztése egy meglévő projekthez csak azt jelentheti, hogy korlátozhatja az összegyűjtött adatok egy részét.
Hogyan dolgozzunk ki egy Monitoring és értékelési tervet
rövid bemutató az M& e terv kidolgozásáról – megnyílik a PowerPoint
1.lépés. Azonosítsa az értékelési közönséget
határozza meg, hogy kik az értékelési közönség vagy az érdekeltek. Az értékelő közönség magában foglalja azokat az embereket vagy szervezeteket, amelyek értékelést igényelnek. Több közönség is lehet, mindegyiknek megvan a maga igénye. Ez általában magában foglalja a finanszírozó ügynökséget, és magában foglalhatja a partnerszervezeteket, a tanácsot (vagy tanácsosokat), a projektcsapatot, valamint a projekt résztvevőit vagy célcsoportját is. Ne feledje, hogy az értékelést általában elszámoltathatóság vagy tanulás céljából végzik, lehetőleg mindkettőt együtt.
ha korlátozott pénzeszközei vannak az értékeléshez, előfordulhat, hogy az értékelést prioritásként kell kezelnie azáltal, hogy meghatározza, kik a legfontosabb emberek, akiknek jelentést kell tennie.
letöltés M& e közönség és értékelési kérdések sablon
2.lépés. Határozza meg az értékelési kérdéseket
az értékelési kérdéseket előre kell kidolgozni, együttműködve az elsődleges közönséggel(közönséggel) és más érdekelt felekkel, akiknek jelentést kíván tenni. Az értékelési kérdések túlmutatnak a méréseken, hogy feltegyék a magasabb rendű kérdéseket, például azt, hogy a beavatkozás megéri-e, vagy más módon sikerült volna-e elérni (lásd az alábbi példákat). Összességében az értékelési kérdéseknek további intézkedésekhez kell vezetniük, például a projektek fejlesztéséhez, a projektek általános érvényesítéséhez vagy a projektek újratervezéséhez.
ebben a szakaszban azt is meg kell határoznia, hogy az értékelési közönségnek vannak-e konkrét ütemtervei, amelyek alapján értékelési jelentést igényel. Ez fontos tényező lesz annak eldöntésében, hogy mit lehet és mit nem lehet gyűjteni.
az eredményközpontú értékelési kérdések megfogalmazásakor tartsa nyitva azokat. Eg. “Milyen mértékben tette…”
az értékelési kérdések széles típusai fókuszterületenként
adaptálva: Davidson & Wehipeihana (2010)
| Az értékelés fókusza | értékelési kérdés |
|---|---|
| folyamat |
a projekt megtervezése és végrehajtása (azaz minősége) |
| eredmény |
milyen mértékben felelt meg a projekt az Általános igényeknek? volt-e jelentős változás, és milyen mértékben tulajdonítható ez a projektnek? mennyire értékesek az eredmények a szervezet, a többi érdekelt fél és a résztvevők számára? |
| tanulságok |
mi működött és mi nem? mik voltak a nem kívánt következmények? mik voltak a kialakuló tulajdonságok? |
| beruházás |
költséghatékony volt a projekt? volt-e más alternatíva, amely jobb befektetést jelenthetett? |
| mi a következő lépés |
bővíthető-e a projekt? megismételhető-e a projekt máshol? a változás önfenntartó, vagy folyamatos beavatkozást igényel? |
| a változás elmélete |
van-e a projektnek változáselmélete? a változás elmélete tükröződik a program logikájában? hogyan tudja a program logikája tájékoztatni a kutatási kérdéseket? |
az alábbiakban bemutatjuk az átfogó értékelési kérdések osztályozásának másik módját.
átvéve: Europe Aid Cooperation Office
| Az értékelés fókusza | értékelési kérdés |
|---|---|
| relevancia |
a workshop témája és tartalma megfelel-e a célcsoport információs igényeinek? a beavatkozási cél mennyiben felel meg a közösség szükségleteinek és prioritásainak? |
| hatékonyság |
az ebben a projektben alkalmazott elkötelezettségi módszer hasonló számú résztvevőt eredményezett, mint az előző vagy más programok hasonló vagy kisebb költséggel? a drágább eljegyzési megközelítések jobb eredményeket hoztak-e, mint az olcsóbb eljegyzési megközelítések? |
| eredményesség |
milyen mértékben vezettek a munkaértekezletek az éghajlatváltozás elleni fellépés közösségi támogatásának növekedéséhez? milyen mértékben ösztönözte az elkötelezettségi módszer a célcsoportot a projektben való részvételre? |
| eredmény |
milyen mértékben vezetett a projekt fenntarthatóbb magatartáshoz a célcsoportban? volt-e más nem kívánt pozitív vagy negatív eredmény a projektből? |
| fenntarthatóság |
milyen mértékben vezetett a projekt a hosszú távú viselkedésváltozáshoz? |
3. lépés. Azonosítsa a monitoring kérdéseket
az értékelési kérdések megválaszolása érdekében monitoring kérdéseket kell kidolgozni, amelyek tájékoztatják, hogy milyen adatokat gyűjtenek a monitoring folyamat során. A nyomon követési kérdések meglehetősen specifikusak abban, amit kérnek, az értékelési kérdésekhez képest. Például egy értékelési kérdésre: “mi működött és mi nem?”számos konkrét kérdése lehet, például:” a műhelyek vezettek-e az otthoni energiahatékonysággal kapcsolatos ismeretek növekedéséhez?”vagy”telepítettek-e a résztvevők vízhatékony zuhanyfejeket”.
a nyomon követési kérdésekre ideális esetben mennyiségi és minőségi adatok gyűjtésével lehet választ adni. Fontos, hogy ne ugorjunk egyenesen az adatgyűjtésbe, anélkül, hogy az értékelési kérdésekre gondolnánk. Az egyenes ugrás olyan adatok gyűjtéséhez vezethet, amelyek nem nyújtanak hasznos információkat, ami idő-és pénzpocsékolás.
töltse le az M&E Tervsablont az információk beviteléhez, vagy töltsön le egy speciálisan kitöltött M& E tervsablont, amely mintaértékelési kérdéseket, monitoringkérdéseket, mutatókat és forrásokat tartalmaz egy kerbside újrahasznosítási oktatási projekthez.
ha kifejlesztett egy program logikát, akkor ezzel elkezdheti azonosítani a releváns monitoring kérdéseket és mutatókat. Kattintson ide, hogy megnézze, hogyan.
miután azonosította a megfigyelési kérdést a program logikájában, átviheti őket az M& E Tervsablonba. Kattintson ide, hogy megnézze, hogyan.
egy rövid bemutató arról, hogyan lehet információkat kinyerni a program logikájából az M&E terv fejlesztéséhez – megnyílik a PowerPoint
4.lépés. A mutatók és adatforrások azonosítása
a következő lépés annak meghatározása, hogy milyen információkra van szüksége a megfigyelési kérdések megválaszolásához (mutatók), és honnan származnak ezek az információk (adatforrások). Fontos figyelembe venni az adatgyűjtést az adatok típusa és a kutatási tervezés bármilyen típusa szempontjából. Az adatforrások lehetnek maguk a résztvevők, vagy az emberek otthonai(pl. világítási típusok ellenőrzése) vagy mérés, vagy akár irodalom. Ezután eldöntheti, hogy melyik a legmegfelelőbb módszer az adatok gyűjtésére az adatforrásból.
az értékelési eszközválasztó segít az igényeinek megfelelő módszer kiválasztásában.
fontos, hogy az értékelési keretrendszer kulturálisan megfelelő legyen. A kulturális és nyelvileg sokszínű (cald) közösségekkel való együttműködés során fontolja meg a közösség képviselőinek vagy kulturális szakértőinek bevonását az értékelési keretbe annak biztosítása érdekében, hogy az adatgyűjtési módszerek megfelelőek (érzékenyek és értettek) a célcsoport számára. További olvasáshoz nézze meg az eredeti értékelési blogot
5.lépés. Határozza meg, hogy ki felelős az adatgyűjtésért és az ütemtervekért
tanácsos az adatgyűjtésért felelősséget ruházni, hogy mindenki tisztában legyen szerepével és felelősségével. Ez lehetővé teszi az új munkatársak számára, hogy belépjenek a projektbe, és megértsék, hogy ki a felelős, és mit kell vállalniuk, és mikor.
a megfigyelési adatok gyűjtése rendszeresen, rövid időközönként, vagy kevésbé rendszeresen, például félévente vagy évente történhet. Az idővonalak kijelölése ismét korlátozza a ‘nem tudás’mentségét.
érdemes megjegyezni az adatok gyűjtéséhez szükséges követelményeket is (személyzet, költségvetés stb.). Javasoljuk, hogy legyen némi elképzelése a monitorozással kapcsolatos költségekről, mivel nagyszerű ötletei lehetnek sok információ összegyűjtésére, csak annak kiderítésére, hogy nem engedheti meg magának az egészet. Ebben az esetben vagy rangsorolnia kell, vagy máshol kell pénzt találnia (sajnálom, de erre nincs külön eszközünk).
6.lépés. Határozza meg, hogy ki fogja értékelni az adatokat, hogyan fogják jelenteni, és mikor
ez a lépés opcionális, de erősen ajánlott, mivel teljes dokumentumként kerekíti az M&E tervet. Emlékeztetve arra, hogy az értékelés a projekt értékének szubjektív értékelése, fontos meghatározni, hogy ki fogja elvégezni ezt a szubjektív értékelést. A legtöbb esetben a projekt csapata lesz, de egyes esetekben más érdekelt feleket is bevonhat, beleértve a célcsoportot vagy a résztvevőket. Azt is fontolóra veheti, hogy az értékelés egy bizonyos részét külső vagy független félnek kiszervezi.
az értékeléshez (és ezért hasznos) fontos, hogy az eredményeket a közönségnek megfelelő formátumban mutassuk be. Ez rövid jelentést, emlékeztetőt, vagy akár posztert vagy hírlevelet jelenthet. Mint ilyen, javasoljuk, hogy fontolja meg, hogyan fogja bemutatni az értékelést a kezdetektől, hogy a megállapítások bemutatásának módját a prezentációs formátumhoz igazítsa (például grafikonok, táblázatok, szövegek, képek).
7.lépés. Tekintse át az M& E tervet
miután befejezte az M& E tervet, jelölje ki a gyakran megjelenő adatforrásokat. Például olyan felméréseket készíthet, amelyek számos kérdésre megfelelnek az adatgyűjtési követelményeknek.
fontolja meg az M& e terv újrarendelését is többféle módon, például adatforrás vagy adatgyűjtési időkeret szerint. Végül menjen át ezen az ellenőrzőlistán. Az M&e terv:
- összpontosítson a legfontosabb értékelési kérdésekre és az értékelési közönségre?
- Capture minden, amit tudnod kell annak érdekében, hogy egy értelmes értékelést a projekt?
- csak releváns monitoring kérdéseket tesz fel, és elkerüli a felesleges adatok gyűjtését?
- tudja, hogyan fogják elemezni, felhasználni és jelenteni az adatokat?
- a költségvetésen és egyéb forrásokon belül dolgozik?
- határozza meg az adatgyűjtés és elemzés elvégzéséhez szükséges készségeket?