Ewaluacyjny przybornik realizatora projektu
szkoleniowego
Beata Ciężka
Elementy przybornika ewaluacyjnego
Jak (racjonalnie) wpisać działania ewaluacyjne w realizację projektu szkoleniowego?
Jak wykorzystać wyniki ewaluacji (tu i teraz oraz na przyszłość)?
Jakie metody ewaluacji zastosować (nie tylko ankietę)?
Jak (dzięki ewaluacji) budować współodpowiedzialność
uczestników za osiągane cele i efekty w projekcie?
Z Pamiętnika starej ewaluatorki…
Ewaluacja sztampowa: banał i „pytania dyżurne”
Ewaluacja rytualna: „daj nam gotową ankietę!”
Ewaluacja fasadowa: żeby tylko nic nie wyszło…
Ewaluacja ględząca: „zawracanie głowy”
Panika ewaluacyjna: o rany, potrzebujemy mieć ewaluację!
Kilka pytań o racjonalność ewaluacji
Cele ewaluacji – czyli po co komu ona?
Planowanie ewaluacji – planować ale czy kurczowo trzymać się planu?
Realizacja ewaluacji – czyli jak zrobić a się nie narobić?
Wykorzystanie wyników ewaluacji – czyli czy to aby nie sztuka dla sztuki?
Cele ewaluacji
Dla kogo ta ewaluacja? Kto jest zamawiającym ewaluację?
Jakie funkcje ma spełniać ewaluacja?
Czy jest szansa na wykorzystanie wyników ewaluacji?
Planowanie ewaluacji
Zakres ewaluacji – użyteczność, ważność pytań Czas realizacji ewaluacji
Kto będzie prowadził ewaluację?
Jaki jest budżet przeznaczony na ewaluację?
„Raport metodologiczny” – czy wszyscy rozumieją jego znaczenie
Realizacja ewaluacji
Ewaluacja jako proces
Jak ewaluacja może towarzyszyć działaniom projektu?
Zrozumienie znaczenia ewaluacji (przez wszystkich „aktorów”
projektu)
Wykorzystanie wyników ewaluacji
Użyteczność!
Zakres wykorzystania wyników ewaluacji – ewaluacja formatywna czy konkluzywana?
Interpretacja wyników ewaluacji Praca z wynikami ewaluacji
Jakie metody ewaluacji zastosować?
Czy ktoś jeszcze kocha ankiety ewaluacyjne?
Dyskusje grupowe moderowane…
…z użyciem metod aktywizujących (stoliki „przechodnie”,
hex’y, dłonie)
List do…
„list do trenera”
„list do organizatorów”
„list do siebie”
post, wpis na FB
Dzienniczki podróży
Dzienniczki (stażysty, uczestnika wizyt studyjnych, uczestnika szkolenia, projektu)
Mapa podróży użytkownika (kolejnych czynności podczas korzystania z działań projektu, wykorzystania efektów szkolenia)
Sesje
plakatowe
Przykłady:
Pytanie o realizację harmonogramu Pytanie o realizację zadań
Uczenie się od siebie rozwiązań, które zadziałały
Gadająca ściana
Przykładowe nagłówki :
Na szkoleniu dowiedziałem/am się, że…
Najciekawsze/najbardziej przydatne było dla mnie…
Najmniej interesujące/przydatne było dla mnie…
Wrócę ze szkolenia z pomysłem, żeby…
Organizacja szkolenia była…
Następnym razem organizatorzy powinni…
Kupon
ewaluacyjny
Aplikacje
Np.:
Kahoot Quizziz Mentimeter
Jak (dzięki ewaluacji) budować
współodpowiedzialność uczestników
za osiągane cele i efekty w projekcie?
Hamulcowi
Strach przed oceną
Alienacja i uprzedmiotowienie
Niezrozumienie procesu ewaluacji
Poczucie bezsensu podejmowanego wysiłku
Bezużyteczność wyników ewaluacji
Partycypacyjność
Partycypacyjność na każdym etapie ewaluacji (od wspólnej definicji wartości do opracowywania rekomendacji)
Dyskusja nad wynikami i ich interpretacja Operacjonalizacja wyników
Włączenie w proces opracowywania rekomendacji z
ewaluacji wszystkich, których potencjalnie te
rekomendacje mogą dotyczyć
Przyjazność procesu ewaluacji
Zintegrowanie działań szkoleniowych, rozwojowych i ewaluacyjnych → wzmocnienie roli autoewaluacji
Redukcja lęku przed oceną osób → uwaga skierowana na skuteczność działań
Działania „poewaluacyjne” → poczucie sensu
Guba, Lincoln „Fourth Generation
Evaluation”, SAGE Publications: Newbury Park-London-New Delhi,1989)
„Jak być jeszcze lepszym? Ewaluacja w edukacji” red. Mazurkiewicz G. (rozdział „Koncepcja metodologiczna ewaluacji… w kontekście czterech generacji ewaluacji …” Ciężka B.)
https://www.npseo.pl/data/documents/3/272/272.pdf
Dla inspiracji…
Dla inspiracji…
Ewaluacja rozwijająca (Developmental
Evaluation) (Patton M.Q.
2011)
Przekierownie uwagi z efektów na proces uczenia się i zmiany