Specjalista ds. edukacji i ewaluacji
Kompendium zawodu — pojęcia i zwroty
Pojęcia w pracy
- Rezultat edukacyjny
- Oczekiwana zmiana wiedzy, umiejętności lub postawy uczestnika.
- Pytanie ewaluacyjne
- Pytanie o cel lub działanie programu, które prowadzi do decyzji.
- Pilotaż narzędzia
- Pilotażowe użycie ankiety, arkusza obserwacji lub zadania przed właściwym badaniem.
- Pomiar przed i po
- Porównanie informacji zebranej przed działaniem i po nim przy zachowaniu jasnych warunków.
- Dobór grupy lub obserwacji
- Sposób wybrania uczestników albo obserwacji, na których opiera się wynik.
Zwroty w typowych sytuacjach
- „Ten wynik opisuje satysfakcję, potrzebujemy jeszcze śladu uczenia się.”
- Oddziela reakcję uczestnika od osiągnięcia celu.
- „Sprawdźmy, czy grupa rozumie to pytanie tak samo jak my.”
- Wskazuje cel pilotażu.
- „Wniosek dotyczy szkół, które przekazały formularze.”
- Określa granice wnioskowania.
Podstawy · Lekcja 1 z 6
Efekt a reakcja uczestnika
Rezultat edukacyjny opisuje, co uczestnik zauważy, wyjaśni lub wypróbuje. Satysfakcja pokazuje odbiór zajęć. Dobierz dowód do każdego celu osobno.
- Nazwij cel
- Wybierz dowód
- Zapisz pytanie
Przykład z pracy
Podobało mi się opisuje reakcję. Wyjaśnienie różnicy między dwiema obserwacjami daje ślad uczenia.
Ćwiczenie praktyczne
Zapisz rezultat pokazu i oddzielne pytanie o wrażenia.
Sprawdź się — opcjonalne pytanie
Co daje dowód osiągnięcia celu o wyjaśnianiu zjawisk?
- Kolor wybranego formularza
- Odpowiedź uczestnika objaśniająca zaobserwowany efekt
- Sama deklaracja dobrej zabawy
Pokaż odpowiedź i wyjaśnienie
Odpowiedź uczestnika objaśniająca zaobserwowany efekt. Dowód powinien odpowiadać zachowaniu zapisanemu w celu.
Podstawy · Lekcja 2 z 6
Neutralne pytanie ankiety
Każde pytanie powinno badać jedną rzecz i mieć słowa zrozumiałe dla odbiorcy. Unikaj podsuwania odpowiedzi i łączenia różnych ocen.
- Wybierz cechę
- Napisz neutralnie
- Sprawdź zrozumienie
Przykład z pracy
Zamiast pytania o świetny pokaz i miłych edukatorów pojawiają się dwa odrębne pytania.
Ćwiczenie praktyczne
Przeredaguj pytanie sugerujące, że doświadczenie było ciekawe i zrozumiałe.
Ankieta mierzy, czy pokaz się podobał
Zespół ma podsumować naukę uczestników. Formularz zawiera wyłącznie pytanie o ocenę atrakcyjności zajęć.
Pokaż przykładową reakcję
Raportuję satysfakcję i proponuję zadanie sprawdzające cel edukacyjny. Każdy wniosek będzie odnosił się do dowodu zebranego właściwym narzędziem.
Sprawdź się — opcjonalne pytanie
Co utrudnia odpowiedź w pytaniu o jasność i tempo łącznie?
- Pytanie jest za krótkie
- Uczestnik widzi nazwę programu
- Można inaczej oceniać jasność i tempo
Pokaż odpowiedź i wyjaśnienie
Można inaczej oceniać jasność i tempo. Osobne pytania pozwalają rozpoznać źródło trudności.
Praktyka · Lekcja 3 z 6
Karta obserwacji
Zapisuj konkretne zachowania i warunki, w których je odnotowano. Opis obserwacji oddziel od przypuszczenia o motywach uczestników.
- Nazwij zachowanie
- Zapisz kontekst
- Oddziel interpretację
Przykład z pracy
Grupa wskazuje element doświadczenia, ale nie objaśnia jego funkcji bez podpowiedzi.
Ćwiczenie praktyczne
Zaprojektuj dwie obserwowalne oznaki zrozumienia pokazu.
Sprawdź się — opcjonalne pytanie
Który zapis jest obserwacją?
- Uczestnik wskazał element po pytaniu pomocniczym
- Uczestnik był z natury nieuważny
- Warsztat zapewne niczego nie nauczył
Pokaż odpowiedź i wyjaśnienie
Uczestnik wskazał element po pytaniu pomocniczym. Obserwacja opisuje zachowanie, które da się opisać bez przypisywania intencji.
Praktyka · Lekcja 4 z 6
Pilotaż w różnych grupach
Sprawdź narzędzie z małą grupą, zanim zastosujesz je szerzej. Zapisz trudności związane ze słownictwem, formą i czasem oraz decyzję o zmianie.
- Przetestuj
- Zbierz trudności
- Popraw narzędzie
Przykład z pracy
Dwie klasy inaczej rozumieją termin model. Po pilotażu pytanie odwołuje się do widocznego przedmiotu.
Ćwiczenie praktyczne
Zaproponuj poprawkę narzędzia dla dzieci czytających z różną płynnością.
Sprawdź się — opcjonalne pytanie
Po co prowadzisz pilotaż?
- Żeby wykluczyć osoby z trudnościami
- Żeby sprawdzić, jak uczestnicy rozumieją i wykonują zadanie
- Żeby uznać wyniki za reprezentatywne bez sprawdzenia
Pokaż odpowiedź i wyjaśnienie
Żeby sprawdzić, jak uczestnicy rozumieją i wykonują zadanie. Sprawdzenie narzędzia ujawnia bariery i pomaga je usunąć.
Specjalizacja · Lekcja 5 z 6
Porównanie i braki danych
Zanim zestawisz wyniki, sprawdź zadanie, czas, odbiorców i braki odpowiedzi. Wynik nieobecnej grupy pozostaw jako brak, a zakres porównania opisz jasno.
- Sprawdź warunki
- Oznacz braki
- Ogranicz wniosek
Przykład z pracy
Jedna grupa wykonała zadanie po dodatkowym wyjaśnieniu. Traktujesz tę różnicę jako ważny kontekst.
Ćwiczenie praktyczne
Napisz ograniczenie do raportu, jeśli jedna ze szkół nie oddała ankiet.
Sprawdź się — opcjonalne pytanie
Co trzeba ujawnić przy różnym trybie zebrania odpowiedzi?
- Wyłącznie nazwę folderu danych
- Najbardziej korzystną wersję wyniku
- Warunki zebrania i ograniczenie porównania
Pokaż odpowiedź i wyjaśnienie
Warunki zebrania i ograniczenie porównania. Warunki mogą wpływać na odpowiedzi i zakres wniosku.
Specjalizacja · Lekcja 6 z 6
Rekomendacja do kolejnego pokazu
Połącz obserwację z propozycją zmiany, właścicielem i dowodem, który sprawdzi jej efekt. Nie przypisuj przyczyn na podstawie samego współwystępowania.
- Pokaż ustalenie
- Uzgodnij zmianę
- Sprawdź efekt
Przykład z pracy
Uczestnicy mylą dwa etapy doświadczenia. Zespół dodaje krótkie zatrzymanie i ponownie obserwuje wyjaśnienia.
Ćwiczenie praktyczne
Napisz rekomendację i warunek oceny po następnym pokazie.
Sprawdź się — opcjonalne pytanie
Która rekomendacja prowadzi do decyzji?
- Dodać demonstrację różnicy i sprawdzić wyjaśnienie uczestników
- Zrobić jeszcze ciekawsze zajęcia
- Zmienić wszystko bez powtórzenia pomiaru
Pokaż odpowiedź i wyjaśnienie
Dodać demonstrację różnicy i sprawdzić wyjaśnienie uczestników. Zmiana powinna odpowiadać obserwacji i dawać się ocenić po wdrożeniu.