Tag: badania ewaluacyjne

Cele badań ewaluacyjnych

Ewaluacja służy tym samym:

  • Poznaniu mechanizmów funkcjonowania programu / projektu;
  • Usprawnieniu  zarzÄ…dzania i realizacji projektów/ programów;
  • StaÅ‚emu ich ulepszaniu, poprzez identyfikacjÄ™ mocnych i sÅ‚abych stron;
  • Dokonywaniu diagnozy wystÄ™pujÄ…cych problemów oraz wskazaniu stosownych rekomendacji;
  • Identyfikacji potrzeb beneficjentów;
  • OkreÅ›leniu stopnia zgodnoÅ›ci z wstÄ™pnymi zaÅ‚ożeniami;
  • OkreÅ›leniu efektów programów oraz dziaÅ‚aÅ„ instytucji w kontekÅ›cie zaÅ‚ożonych celów;
  • Wskazaniu kierunków rozwoju;
  • Podniesieniu przejrzystoÅ›ci dziaÅ‚aÅ„;
  • Bardziej efektywnemu wykorzystaniu zasobów;
  • Promowaniu dziaÅ‚aÅ„ finansowanych ze Å›rodków publicznych.

Ewaluacja Ex-ante – w jakim celu się ją prowadzi?

 

Ewaluacja Ex-ante jest prowadzona na etapie poprzedzajÄ…cym wdrażanie Programu. Jej gÅ‚ówny cel stanowi zweryfikowanie, na ile uzasadnione jest podjÄ™cie planowanych interwencji i czy zakÅ‚adane rezultaty majÄ… szansÄ™ zostać osiÄ…gniÄ™te. W poniższym artykule zostaÅ‚y przedstawione najważniejsze informacje na temat ewaluacji wstÄ™pnej.

 

Spójność wewnÄ™trzna w ewaluacji Ex-ante

W ramach badaÅ„ ewaluacyjnych przed wdrożeniem Programu weryfikacji jest poddawana miÄ™dzy innymi spójność wewnÄ™trzna. Polega ona najproÅ›ciej rzecz ujmujÄ…c na tym, iż dziaÅ‚ania zaplanowane do realizacji powinny stwarzać realnÄ… możliwość osiÄ…gniÄ™cia celów majÄ…c na uwadze zakÅ‚adane do wykorzystania Å›rodki finansowe oraz pozostaÅ‚e zasoby. Zapewniona powinna być zarazem możliwość prowadzenia staÅ‚ego monitoringu uzyskiwanych efektów i – w miarÄ™ potrzeby – wprowadzenia niezbÄ™dnych modyfikacji oraz udoskonaleÅ„ z punktu widzenia beneficjentów.

 

Badania ewaluacyjne – spójność zewnÄ™trzna

Analizie podlega kwestia tego, czy zaÅ‚ożenia programowe sÄ… zgodne z zapisami strategii zarówno na poziomie regionalnym, krajowym, jak i europejskim. MogÄ… być to chociażby takie dokumenty jak strategie rozwoju miast, strategie rozwiÄ…zywania lokalnych problemów spoÅ‚ecznych czy programy na rzecz walki z uzależnieniami.

Założenia projektowe powinny znajdować odzwierciedlenie w lokalnych potrzebach i problemach oraz stanowić na nie właściwą odpowiedź.

 

Badania Ex-ante – w jaki sposób siÄ™ je prowadzi?

W badaniach ewaluacyjnych Ex-ante wykorzystywana jest przede wszystkim metoda analizy danych zastanych (desk research). Badacze dokonujÄ… dogÅ‚Ä™bnego przeglÄ…du dostÄ™pnych dokumentów strategicznych i projektowych, starajÄ…c siÄ™ poddać weryfikacji kryterium spójnoÅ›ci. Analizie podlega także literatura naukowa oraz publikacje eksperckie wpisujÄ…ce siÄ™ w tematykÄ™ zaÅ‚ożeÅ„ Programu.

Analiza desk research sÅ‚uży nastÄ™pnie stworzeniu narzÄ™dzi do badaÅ„ iloÅ›ciowych oraz jakoÅ›ciowych. Uczestnikami badaÅ„ ewaluacyjnych poprzedzajÄ…cych wdrażanie Programu zwykle sÄ… osoby odpowiedzialne za zarzÄ…dzanie, monitoring oraz realizacjÄ™ poszczególnych dziaÅ‚aÅ„. Można z nimi przeprowadzić m.in. nastÄ™pujÄ…ce badania:

  • IDI – indywidualne wywiady jakoÅ›ciowe pozwalajÄ… pozyskać pogÅ‚Ä™bione informacje na temat kontekstu projektu/Programu. DziÄ™ki temu można siÄ™ dowiedzieć, jakie byÅ‚y przesÅ‚anki ku temu, aby podjąć siÄ™ jego realizacji oraz jakie zostaÅ‚y zaplanowane dziaÅ‚ania na wypadek, gdyby zanotowano problemy z osiÄ…gniÄ™ciem zakÅ‚adanych wskaźników;

  • FGI – grupowe wywiady fokusowe stwarzajÄ… możliwość skonfrontowania opinii i przemyÅ›leÅ„ przedstawicieli różnych instytucji zaangażowanych we wdrażanie Programu czy zarzÄ…dzanie nim. SÄ… one zazwyczaj prowadzone w grupach 7-osobowych pod nadzorem odpowiednio przygotowanego moderatora;

  • Badania ankietowe – pomiar o charakterze iloÅ›ciowym realizowany w celu uzyskania danych o charakterze reprezentatywnym. SÄ… one najczęściej wykorzystywane z zamiarem pozyskania informacji od beneficjentów (bezpoÅ›rednich oraz ostatecznych).

 

Podsumowanie

Ewaluacja Ex-ante peÅ‚ni zatem bardzo ważnÄ… rolÄ™, umożliwiajÄ…c dokonanie niezbÄ™dnych usprawnieÅ„ w zaÅ‚ożeniach projektowych. Jej przeprowadzenie pozwala znaczÄ…co zwiÄ™kszyć szansÄ™ uzyskania zakÅ‚adanych wartoÅ›ci wskaźników, a tym samym zaspokojenia potrzeb beneficjentów. 

Badania ewaluacyjne Ex-post - na czym polegajÄ…?

Badania ewaluacyjne ex-post to termin ekonomiczny wprowadzony przez KomisjÄ™ EuropejskÄ… w celu obiektywnego oceniania projektów, programów lub polityki. Ewaluacja ta polega na ocenie projektu lub programu operacyjnego po jego zakoÅ„czeniu, a także uwzglÄ™dnia analizy danych na temat zakresu i trwaÅ‚oÅ›ci ich oddziaÅ‚ywania. 

W jakim celu prowadzi siÄ™ badania ewaluacyjne?

Badania te prowadzone sÄ… w celu uzyskania odpowiedzi na pytanie, czy wczeÅ›niejsze postanowienia zostaÅ‚y speÅ‚nione, a także by ocenić rezultaty dziaÅ‚aÅ„. Metoda ta pozwala również skutecznie zaplanować kolejne aktywnoÅ›ci i jest coraz szerzej wykorzystywana zarówno w wiÄ™kszych, jak i mniejszych projektach.

Jak prowadzi siÄ™ badania ex-post?

Ewaluacja ex-post musi zostać uwieczniona na dokumencie bÄ™dÄ…cym raportem koÅ„cowym projektu wspóÅ‚finansowanego ze Å›rodków europejskich. Raport przeprowadza siÄ™ zawsze po zakoÅ„czeniu projektu i musi on zawierać m.in.:


•    charakterystykÄ™ projektu, 
•    analizÄ™ wyników badaÅ„, 
•    analizÄ™ i ocenÄ™ procesu realizacji,
•    wszelkie niezbÄ™dne dokumenty pomocne w procesie ewaluacji.

Kto dokonuje ewaluacji ex-post?

Osoba zajmujÄ…ca siÄ™ ewaluacjÄ… nazywana jest ewaluatorem i jest ona niezależna od stron uczestniczÄ…cych w projekcie oraz ma odpowiedniÄ… wiedzÄ™ - np. ekspert akademicki lub firma badawcza. 

Korzyści

Ewaluacja ex-post gwarantuje poprawÄ™ jakoÅ›ci, skutecznoÅ›ci i spójnoÅ›ci pomocy funduszy europejskich, a także pomaga w zwiÄ™kszeniu efektywnoÅ›ci zarówno planowania, jak i realizowania projektów i programów operacyjnych. KorzyÅ›ci, jakie instytucje mogÄ… osiÄ…gnąć z realizacji badaÅ„ ex-post, dotyczÄ… szczególnie staÅ‚ego rozwoju możliwego dziÄ™ki obiektywnej ocenie.

Kryteria oceny

W procesie ewaluacji ex-post wyróżniamy nastÄ™pujÄ…ce kryteria oceny:
•    efektywność 
•    użyteczność
•    skuteczność i trwaÅ‚ość

Inne rodzaje ewaluacji

Ewaluacja ex-post zostaÅ‚a wprowadzona do sÅ‚ownika ekonomicznego wraz z ewaluacjÄ… ex-ante oraz ewaluacjÄ… bieżącÄ…. Terminów tych używa siÄ™ w zależnoÅ›ci od tego, w którym momencie przeprowadzane zostajÄ… ewaluacje.
 

Badania ewaluacyjne Mid-term – co pozwalają zweryfikować?

 

Ewaluacja Mid-term jest prowadzona w celu diagnozy stopnia, w jakim udaÅ‚o siÄ™ osiÄ…gnąć zakÅ‚adane wskaźniki rezultatu w poÅ‚owie realizacji Programu. Badanie tego typu powinna przeprowadzić zewnÄ™trzna firma ewaluacyjna, aby możliwe byÅ‚o zachowanie obiektywizmu w trakcie dokonywanych pomiarów.

Warto zaznaczyć, że komisja europejska podjęła decyzję, iż w perspektywie programowania 2014-2020 (podobnie jak 2007-2013) realizacja ewaluacji Mid-term ma charakter jedynie fakultatywny. Nie znaczy to jednak bynajmniej, że nie jest uzasadnione jej wykonanie.

Ewaluacja Mid-term – dlaczego warto jÄ… wykonać?

Badania ewaluacyjne mid-term dostarcza cennych wniosków, dziÄ™ki którym można siÄ™ dowiedzieć, jakie jest prawdopodobieÅ„stwo osiÄ…gniÄ™cia wskaźników Programu, majÄ…c na uwadze dotychczas podjÄ™te dziaÅ‚ania. DziÄ™ki przeprowadzonym analizom można zidentyfikować obszary wymagajÄ…ce usprawnieÅ„, po czym podjąć aktywność w celu ich wdrożenia.  Badanie ewaluacyjne mid-term pozwala wiÄ™c zwiÄ™kszyć skuteczność i efektywność interwencji, uwzglÄ™dniajÄ…c zmieniajÄ…cy siÄ™ kontekst spoÅ‚eczny oraz instytucjonalny.

Jakie metody sÄ… wykorzystywane?

Ewaluacja w Å›rodkowej części realizacji Programu uzasadnia przeprowadzenie badaÅ„ zarówno z zastosowaniem technik iloÅ›ciowych, jak i jakoÅ›ciowych. Badania mogÄ… być wykonane m.in. na dotychczasowych beneficjantach, osobach odpowiedzialnych za zarzÄ…dzanie Programem i poszczególnymi projektami, a także ich wdrażanie oraz monitoring. W tym celu można zrealizować m.in. badania iloÅ›ciowe CATI (telefoniczne) lub CAWI (internetowe). Aby jednak możliwe byÅ‚o osiÄ…gniecie wysokiego response rate, warto wczeÅ›niej dostarczyć respondentom list polecajÄ…cy, podpisany przez przedstawiciela instytucji zlecajÄ…cej badanie ewaluacyjne.

W celu uzyskania pogÅ‚Ä™bionych danych w obszarze badawczym prowadzone sÄ… natomiast najczęściej badania jakoÅ›ciowe – zarówno indywidualne (IDI, TDI), jak i grupowe (FGI). Wykorzystanie w ramach jednej ewaluacji Mid-term różnego rodzaju metod, technik i narzÄ™dzi pozwala speÅ‚nić tak ważne przecież w przypadku ewaluacji Programów unijnych kryterium triangulacji metodologicznej.

Firmy ewaluacyjne – jak wybrać najlepszÄ… spoÅ›ród nich?

KluczowÄ… kwestiÄ… decydujÄ…cÄ… o tym, czy ewaluacja dostarczy podmiotowi realizujÄ…cego Program z Funduszy Europejskich, jest wybór profesjonalnej firmy ewaluacyjnej. Należy wobec tego zwrócić szczególnÄ… uwagÄ™ zwÅ‚aszcza na nastÄ™pujÄ…ce aspekty:

  • Od jakiego czasu firma ewaluacyjna dziaÅ‚a na rynku?
  • Ile projektów i dla jakich instytucji dotychczas zrealizowaÅ‚a?
  • Czy może pochwalić siÄ™ referencjami od dotychczasowych klientów?
  • Czy posiada w swoim zespole wykwalifikowanych badaczy z doÅ›wiadczeniem?
  • Za pomocÄ… jakich metod i technik badawczych zamierza przeprowadzić badanie ewaluacyjne?
  • Na jakie pytania badawcze deklaruje uzyskać odpowiedzi?
  • Czy przedstawiona koncepcja metodologiczna jest spójna z celami badania?
  • Czy zaproponowana logika badania umożliwi zweryfikowanie stopnia osiÄ…gniÄ™cia zakÅ‚adanych wskaźników?

 

Podsumowanie

Pomimo wiÄ™c faktu, iż Komisja Europejska nie wymaga przeprowadzenia ewaluacji mid-term, warto jednak siÄ™ na to zdecydować, gdyż uzyskane w jej ramach wnioski pozwalajÄ… usprawnić podejmowanÄ… interwencjÄ™, a co za tym idzie zwiÄ™kszyć prawdopodobieÅ„stwo uzyskania docelowych wartoÅ›ci wskaźników. Aby jednak ewaluacja tego typu miaÅ‚a uzasadnienie, należy szczególnÄ… uwagÄ™ zwrócić na wybór profesjonalnej firmy badawczej. 

Badania ewaluacyjne on-going – dlaczego warto się na nie zdecydować?

 

Bieżące ewaluacje on-going sÄ… prowadzone w trakcie trwania projektów zaplanowanych w ramach wdrażania Programu unijnego. Ich realizacja zazwyczaj ma miejsce w peÅ‚nym okresie realizacji. Nie jest wymagana przez KomisjÄ™ EuropejskÄ…, natomiast mimo to nie warto z niej rezygnować. Jakie sÄ… tego powody? Tego i jeszcze wiÄ™cej można dowiedzieć siÄ™ z treÅ›ci niniejszego artykuÅ‚u.

Badania on-going – skuteczny monitoring

Przede wszystkim przeprowadzenie badaÅ„ ewaluacyjnych on-going daje szansÄ™ systematycznego monitoringu podejmowanych interwencji. DziÄ™ki temu możliwe staje siÄ™ dostrzeżenie w porÄ™ ewentualnych bÅ‚Ä™dów i nieprawidÅ‚owoÅ›ci, które stanowiÅ‚yby spore zagrożenie pod kÄ…tem możliwoÅ›ci osiÄ…gniÄ™cia wartoÅ›ci docelowych wskaźników.

Ewaluacja bieżąca pozwala poddać wstÄ™pnej ocenie podjÄ™te wydatki, a także pozyskać opinie na temat dotychczasowej realizacji od beneficjentów. DziÄ™ki wdrożeniu na czas koniecznych zmian, efekty realizacji projektów bÄ™dÄ… znacznie lepsze, niż gdyby podjÄ™to decyzjÄ™ o rezygnacji z badania on-going.

 

Kogo można badać?

W ramach badań ewaluacyjnych on-going zazwyczaj pozyskuje się opinie mając na uwadze następujące grupy:

1. Beneficjentów bezpoÅ›rednich (np. przedstawicieli instytucji do których kierowane jest wsparcie);

2. Beneficjentów koÅ„cowych (zazwyczaj sÄ… to czÅ‚onkowie spoÅ‚ecznoÅ›ci lokalnej, którzy bÄ™dÄ… korzystać z efektów interwencji);

3. Osoby zarzÄ…dzajÄ…ce realizacjÄ… poszczególnych projektów;

4. Reprezentacji instytucji odpowiedzialnych za wdrażanie Programu;

5. Osoby zajmujÄ…ce siÄ™ monitoringiem realizowanej interwencji.

 

Stosowane techniki i metody badawcze

W ramach ewaluacji on-going zaleca siÄ™ wykorzystanie kilku różnorodnych metod i technik, tak aby speÅ‚nione zostaÅ‚o kryterium triangulacji metodologicznej. Aby zapewnić otrzymanie danych z różnych punktów widzenia, konieczna jest także triangulacja czÅ‚onków zespoÅ‚u badawczego. Najlepiej sprawdza siÄ™ poÅ‚Ä…czenie w ramach ewaluacji technik jakoÅ›ciowych oraz iloÅ›ciowych, a także wsparcie ich analizÄ… danych zastanych (desk research), odnoszÄ…cych siÄ™ Å›ciÅ›le do realizacji projektu/Programu.

W przypadku badania beneficjentów ostatecznych, zasadne jest przeprowadzenie przede wszystkim badaÅ„ o charakterze iloÅ›ciowym – np. ankiet telefonicznych (CATI), elektronicznych (CAWI) lub z użyciem aplikacji na smartfonie (CAPI). Z beneficjentami docelowymi oraz osobami odpowiedzialnymi za zarzÄ…dzanie i monitoring warto zrealizować jednoczeÅ›nie pomiary jakoÅ›ciowe – np. indywidualne wywiady pogÅ‚Ä™bione lub badania fokusowe (FGI).

 

Podsumowanie

Nie warto zatem rezygnować z przeprowadzenia ewaluacji on-going tylko dlatego, że w obecnej perspektywie finansowania Komisja Europejska tego nie wymaga. Ewaluacja bieżąca pozwala bowiem usprawnić interwencjÄ™, a tym samym znaczÄ…co zwiÄ™kszyć szansÄ™ osiÄ…gniÄ™cia wartoÅ›ci zaÅ‚ożonych wskaźników. 

Co umożliwiają przeprowadzone ewaluacje?

PodejmujÄ…c dziaÅ‚ania, które nakierowane sÄ… na poprawienie skutecznoÅ›ci realizowanych projektów czy programów, warto zwrócić uwagÄ™ nie tylko na potrzeby beneficjentów, ale także na takie kwestie, jak: komunikacja miÄ™dzy czÅ‚onkami zespoÅ‚u, trafność wprowadzanych zmian czy nowe możliwoÅ›ci dalszego rozwoju. Skupienie siÄ™ na tych obszarach, pozwoli na lepsze zaprojektowanie dziaÅ‚aÅ„ oraz zwiÄ™kszenie skutecznoÅ›ci kolejnych edycji realizowanego programu.

 

KorzyÅ›ci, które skÅ‚aniajÄ… do realizacji badania

Przeprowadzane procesy badawcze, nakierowane na ewaluacje, majÄ… na celu:

  • rozpoznanie mechanizmów, które sÄ… obecne w realizowanym programie/projekcie;
  • przewidywanie efektów programu w odpowiedzi na zaÅ‚ożone cele;
  • usprawnianie dziaÅ‚aÅ„, dziÄ™ki podnoszeniu ich przejrzystoÅ›ci;
  • maksymalne wykorzystanie dostÄ™pnych zasobów.

BiorÄ…c pod uwagÄ™ powyższe korzyÅ›ci, można powiedzieć, iż badania ewaluacyjne zorientowane sÄ… na wytyczenie kierunków dalszego rozwoju przy jednoczesnej analizie dotychczasowych dziaÅ‚aÅ„. DziÄ™ki systematycznemu przyglÄ…daniu siÄ™ realizowanemu projektowi bÄ…dź programowi, można uskuteczniać podejmowane dziaÅ‚ania, co nastÄ™pnie pozytywnie przeÅ‚oży siÄ™ na osiÄ…gane efekty.

Funkcje, które nakierowujÄ… procesy badawcze

WÅ›ród funkcji badaÅ„ ewaluacyjnych należy wymienić:

  • potwierdzenie bÄ…dź zaprzeczenie spoÅ‚ecznej użytecznoÅ›ci zaproponowanego programu/projektu;
  • pozyskiwanie wiedzy oraz wyników badaÅ„ we wskazanym zakresie wraz ze wskazaniem zwiÄ…zków przyczynowo-skutkowych miÄ™dzy podjÄ™tym dziaÅ‚aniem, a osiÄ…gniÄ™tym efektem;
  • gromadzenie wiedzy, uÅ‚atwiajÄ…cej wdrążanie kolejnych programów/projektów lub modyfikowanie już istniejÄ…cych wraz z ustaleniem celów odpowiadajÄ…cych zebranym informacjom.

 

Co może podlegać pod realizację procesu badawczego?

Procesy badawcze, które sÄ… nakierowane na ewaluacje, mogÄ… orientować siÄ™ wokóÅ‚:

  • oceny stopnia, w jaki zostajÄ… zrealizowane postawione cele;
  • bilansu zysków i strat;
  • trafnoÅ›ci celów realizowanego badania do rzeczywiÅ›cie istniejÄ…cych problemów;
  • dopasowania celów programu do potrzeb skonkretyzowanej grupy odbiorców badania;
  • oceny stopnia, w jaki efekty programu sÄ… trwaÅ‚e.

Takie procesy badawcze dajÄ… szansÄ™ na usprawnienie dotychczas podejmowanych dziaÅ‚aÅ„ oraz wzmacniajÄ… ich skuteczność. DziÄ™ki wÅ‚aÅ›ciwemu zrozumieniu istoty prowadzonego programu, można dostosowywać jego przebieg do pojawiajÄ…cych siÄ™ potrzeb i oczekiwaÅ„ jego odbiorców, a przy tym przewidzieć jego efekty. Wszystko to pozwala na zaplanowanie dziaÅ‚aÅ„ nakierowanych na osiÄ…ganie wyznaczonych celów.

Badania Ewaluacyjne

W ramach naszych badaÅ„, przywiÄ…zujemy szczególnÄ… wagÄ™ do triangulacji metodologicznej. Oznacza to, że stosujemy różnorodne metody i techniki, odpowiednie dla celów i przedmiotu badania. Zaangażowani sÄ… również eksperci z różnych dziedzin, co pomaga uniknąć subiektywizmu.

Posiadamy 18-letnie doÅ›wiadczenie w przeprowadzaniu różnych rodzajów badaÅ„ ewaluacyjnych:

Ex-post - badania przeprowadzane po zakończeniu projektu lub Programu.

Ex-ante - ocena poczÄ…tkowych zaÅ‚ożeÅ„ Programu, ze szczególnym uwzglÄ™dnieniem spójnoÅ›ci zewnÄ™trznej i wewnÄ™trznej.

On-going - ewaluacje w trakcie realizacji Programu.

Mid-term - ewaluacja w Å›rodkowej fazie realizacji Programu, umożliwiajÄ…ca weryfikacjÄ™ osiÄ…gniÄ™cia wczeÅ›niej zaÅ‚ożonych celów.

 

W naszych badaniach korzystamy z różnych technik, obejmujÄ…cych iloÅ›ciowÄ… ankietyzacjÄ™ i jakoÅ›ciowe wywiady:

CATI - ankietyzacja telefoniczna z użyciem oprogramowania do rejestracji rozmów.

CAWI - badania ankietowe online.

CAPI - ankiety w terenie przy użyciu aplikacji na urządzeniach mobilnych.

IDI - indywidualne wywiady pogłębione w celu zdobycia informacji na temat potrzeb i motywacji.

FGI - grupowe badania fokusowe, podczas których uczestnicy wspólnie dochodzÄ… do wniosków.

Analizy desk research - zbieranie i analizowanie ogólnodostÄ™pnych danych.

Badania tajemniczego klienta - ocena jakoÅ›ci obsÅ‚ugi klienta w ramach projektów.

Badania user experience (UX) - analiza użyteczności portali internetowych finansowanych z funduszy Unii Europejskiej.

Czym jest ewaluacja

Ewaluacja stanowi obiektywnÄ… ocenÄ™ projektu, programu lub polityki. SÅ‚uży do okreÅ›lenia jego  znaczenia i wartoÅ›ci, przy zwróceniu uwagi na zagadnienia szczególnie istotne dla zainteresowanych. Może dotyczyć wszystkich etapów ocenianego przedsiÄ™wziÄ™cia: planowania, realizacji i mierzenia rezultatów. GÅ‚ównym celem ewaluacji jest dostarczenie rzetelnych oraz przydatnych informacji, które pozwolÄ… ocenić wartość przedsiÄ™wziÄ™cia, przy uwzglÄ™dnieniu odpowiednich kryteriów i standardów.



 Ewaluacja sÅ‚uży tym samym:

  • Poznaniu mechanizmów funkcjonowania programu / projektu;

  • Usprawnieniu  realizacji projektów / programów;

  • StaÅ‚emu ich ulepszaniu, poprzez identyfikacjÄ™ mocnych i sÅ‚abych stron, diagnozÄ™ wystÄ™pujÄ…cych problemów oraz wskazanie stosownych rekomendacji;

  • OkreÅ›leniu stopnia zgodnoÅ›ci z wstÄ™pnymi zaÅ‚ożeniami;

  • OkreÅ›leniu efektów programów oraz dziaÅ‚aÅ„ instytucji w kontekÅ›cie zaÅ‚ożonych celów;

  • Wskazaniu kierunków rozwoju;

  • Podniesieniu przejrzystoÅ›ci dziaÅ‚aÅ„;

  • Bardziej efektywnemu wykorzystaniu funduszy;


Proces ewaluacji prowadzony jest w Polsce w celu ustalenia efektywnoÅ›ci pomocy UE oraz w celu oszacowania jej oddziaÅ‚ywania w odniesieniu do celów danego Programu, a także analizy wpÅ‚ywu na specyficzne problemy strukturalne. Wytyczne w zakresie ewaluacji programów operacyjnych na lata 2007-13  definiujÄ… ewaluacjÄ™ jako osÄ…d (ocenÄ™) wartoÅ›ci interwencji publicznej, dokonany przy uwzglÄ™dnieniu odpowiednich kryteriów i standardów. OsÄ…d ten dotyczy zwykle potrzeb, jakie muszÄ… być zaspokojone w wyniku interwencji oraz osiÄ…gniÄ™tych efektów.

Proces ewaluacji

PrzystÄ™pujÄ…c co przeprowadzania ewaluacji precyzyjnie jÄ… planujemy, by jak najskuteczniej wykorzystać czas i posiadane zasoby. Im lepiej zaplanowana ewaluacja, tym wiÄ™ksza szansa na przeprowadzenie jej w taki sposób, który dostarczy istotnych, wiarygodnych i rzetelnych informacji, odpowiadajÄ…cych potrzebom i zainteresowaniom jej odbiorców i użyteczność i efektywność. Proces ewaluacji można podzielić na nastÄ™pujÄ…ce etapy:

  • Planowanie ewaluacji
  • Projektowanie ewaluacji
  • Zbieranie i analiza danych
  • Raportowanie

 

 Wykorzystywanie wyników ewaluacji   

Podsumowanie dokonanych analiz jest raport koÅ„cowy z ewaluacji, prezentujÄ…cy wyniki dokonanych analiz oraz odpowiedź na rozważane zagadnienia badawcze. DbajÄ…c o najwyższÄ… jakość realizowanych badaÅ„, przestrzegamy w szczególnoÅ›ci wytycznych opracowanych przez Polskie towarzystwo Ewaluacyjne. Forma raportu i sposób prezentacji danych sÄ… dostosowane do celu ewaluacji oraz potrzeb danego projektu. 

Struktura raportu obejmuje zazwyczaj następujące elementy:
 

  • Streszczenie raportu
  • Spis treÅ›ci
  • Wprowadzenie
  • Opis zastosowanej metodologii oraz źródÅ‚a informacji wykorzystywanych w badaniu
  • Opis wyników ewaluacji
  • Wnioski i rekomendacje
  • Aneksy (np. zastosowane narzÄ™dzia badawcze; tabele statystyczne; lista osób, z którymi z którymi przeprowadzono wywiady podczas badania)

Ewaluacje

Prowadzimy ewaluacje strategiczne (sÅ‚użące do oceny NSRO / PO dla priorytetów krajowych i wspólnotowych) oraz ewaluacje operacyjne (wspierajÄ…ce monitorowanie NSRO / PO). Kluczowymi naszymi Klientami sÄ… instytucje sektora publicznego, instytuty naukowe i uczelnie wyższe oraz podmioty komercyjne zobligowane do prowadzenia badaÅ„ ewaluacyjnych realizowanych projektów wspóÅ‚finansowanych ze Å›rodków Unii Europejskiej.

 

Rodzaje realizowanych ewaluacji:

  • ex-antem - poprzedzajÄ…ce etap wdrażania programu/strategii lub projektu 
  • mid-term (on-going) - przeprowadzane, gdy w ramach inwestycji zrealizowano okoÅ‚o 50% dziaÅ‚aÅ„
  • ex-post - realizowane na etapie powdrożeniowym

 

Dane do ewaluacji pozyskujemy metodami iloÅ›ciowymi jak: 

  • PAPI: tradycyjne ankiety papierowe 
  • CATI: wywiady telefoniczne wspomagane komputerowo
  • CAWI: ankiety internetowe 

oraz metodami jakoÅ›ciowymi: 

  • IDI: indywidualne wywiady pogÅ‚Ä™bione 
  • FGI: zogniskowane wywiady grupowe
  • Case Study: studium przypadku