Joanna Maźniewska

1. Analizai interpretacjawyników egzaminu ósmoklasisty, wykorzystanie wniosków z analizy do poprawy jakości kształcenia Joanna Maźniewska

2. System egzaminów zewnętrznych to narzędzie pozwalające na zmierzenie efektywności pracy nauczyciela/szkoły w zakresie sprawdzanym przez egzamin

3. SZKOŁA ORGAN PROWADZĄCY Wynik egzaminu UCZEŃ ORGAN NADZORUJĄCY MEN SZKOŁA WYŻSZEGO SZCZEBLA

4. Szkolna analiza wyników egzaminu to wnioskowanie o osiągnięciach uczniów

5. Analiza wyników egzaminów powinna: • prowadzić do ustalenia takich obszarów, w których osiągnięcia uczniów są zadowalające i niezadowalające, • uświadomić konieczność włączenia wymagań ogólnych i szczegółowych podstawy programowej w ciągły proces dydaktyczny, • uświadomić potrzebę monitorowania osiągnięć uczniów z wykorzystaniem zasad oceniania kryterialnego stosowanych podczas egzaminów • uwzględniać konteksty oceniania: szkolne, środowiskowe, indywidualne, • prowadzić do refleksji nad jakością własnej pracy.

6. Do przeprowadzenia analizy potrzebne są: • Raport OKE zawierający: • statystyczny opis egzaminu i jego wyników (analizę ilościową), • analizę jakościową zadań; • Wyniki szkoły; • Wyniki badań kontekstowych, programy nauczania, nauczycielskie plany wynikowe

7. Etapy analizy wyników egzaminu • analiza ilościowa wyników szkoły na tle wyników województwa, miasta, kraju • analiza zakresu treści egzaminu • określenie mocnych i słabych stron uczniów • sformułowanie wniosków wynikających z analizy • sformułowanie rekomendacji wynikających z wniosków

8. Analiza ilościowa wyników Zebranie, zestawienie, statystyczne opracowanie i interpretacja danych uzyskanych podczas egzaminu – wskaźniki statystyczne. Opiera się na analizie statystycznej, dzięki czemu uzyskujemy możliwość dokładniejszego porównaniami opisu badanych grup.

9. Wskaźniki statystyczne Analiza wyników testowania: • średnia arytmetyczna (X) • mediana (Me)- wynik środkowy -porównujemy ze średnią; wyższa od średniej pokazuje, że uczniów z wynikiem wyższym od średniej jest więcej, test był dla nich łatwy • modalna (Mo) -wynik uzyskiwany przez największą liczbę testowanych; wynik najbardziej typowy • najwyższy i najniższy wynik

10. Średnia (X) Możemy porównywać średnią szkoły ze średnią: • uzyskaną przez inną szkołę • województwa • kraju Możemy porównywać średnią klasy ze średnią: • innych klas • szkoły

11. Analiza miar tendencji centralnej czyli X, Me, Mo, pozwala na sformułowanie wniosków o trudności testu dla danej populacji zdających

12. Prezentacja arkusza do analizy wyników CKE www.sod.ids.czest.pl

13. Wyniki egzaminu ósmoklasisty z j. polskiego w szkole X (wyniki w punktach)

14. Wyniki egzaminu ósmoklasisty z j. angielskiego w szkole X (wyniki w punktach)

15. Wyniki egzaminu ósmoklasisty z matematykiw szkole X (wyniki w punktach)

16. Zastosowanie podstawowych miar tendencji centralnej Rozkład symetryczny – średnia, mediana i modalna przyjęły tę samą wartość (taki rozkład wyników bardzo rzadko występują w praktyce szkolnej) Rozkład asymetryczny lewostronnie (lewoskośny) – powstaje, gdy średnia jest niższa od mediany i modalnej, oznacza, że uczniowie w większości uzyskali wysokie wyniki na teście czy egzaminie, test okazał się łatwy Rozkład asymetryczny prawostronnie (prawoskośny) – modalna jest niższa od mediany, a mediana niższa od średniej, oznacza, że uczniowie w większości uzyskali niskie wyniki na teście czy egzaminie, bo zadania okazały się dla nich zbyt trudne

17. Rozkład wyników szkoły – j. polski

18. Rozkład wyników szkoły – j. angielski

19. Rozkład wyników szkoły – matematyka

20. Pułapki średniej arytmetycznej • Porównywanie klas • Kl. A – 85%, 87%, 20% • Kl. B – 65%, 64%, 63% • X= 64 • Porównywanie wyników szkoły w różnych latach lub śledzenie trendów osiągnięć

21. Skala staninowa Znormalizowana skala standardowa, w której wszystkie wyniki uczniów poddanych egzaminowi porządkuje się od najwyższego do najniższego i dzieli się na dziewięć nierównych frakcji.Daje możliwość porównania wyników z różnych lat niezależnie od trudności testu i potencjału uczniów.

22. Analiza jakościowa Analiza zakresu treści arkusza to szczegółowa analiza, jakie wiadomości i umiejętności były sprawdzane poszczególnymi zadaniami arkusza, do jakich wymagań ogólnych i szczegółowych podstawy programowej te zadania należą oraz jakie są ich wskaźniki łatwości (poziom wykonania zadania).

23. Co to jest wskaźnik łatwości zadania? łatwość zadania (p) - stosunek liczby punktów uzyskanych za rozwiązanie danego zadania przez wszystkich uczniów do maksymalnej liczby punktów możliwych do uzyskania za to zadanie, mieści się w przedziale od 0 do 1 Współczynnik łatwości stosowany w pomiarze dydaktycznym odpowiada nam na pytanie, czy osiągnięcia ucznia są jego mocną czy słabą stroną. www.sod.ids.czest.pl

24. Interpretacja stopnia opanowania umiejętności • Jeżeli p = 0,50 to dana umiejętność jest opanowana w stopniu koniecznym • Jeżeli 0,5< p < 0,7 to todana umiejętność jest opanowana w stopniu niżej zadawalającym. • Jeżeli p ⋝ 0,7 todana umiejętność jest opanowana w stopniu zadowalającym.

25. Interpretacja wskaźnika łatwości zadań

26. Wartości wskaźnika łatwości zadań standardowego arkusza z matematyki w szkole, województwie, kraju

27. Wartości wskaźnika łatwości zadań standardowego arkusza z matematyki w szkole, województwie, kraju

28. Interpretacja wskaźnika łatwości zadań arkusza egzaminacyjnego

29. Łatwość testu i wymagań ogólnych • Łatwość testu (p) - stosunek sumy punktów uzyskanych za rozwiązanie wszystkich zadań do liczby punktów możliwych do uzyskania. Wskaźnik łatwości przyjmuje wartości z przedziału 0-1. • Łatwość wymagań ogólnych(p) - stosunek sumy punktów uzyskanych za rozwiązanie zadań danego wymagania do liczby punktów możliwych do uzyskania. Wskaźnik łatwości przyjmuje wartości z przedziału 0-1.

30. Łatwość arkusza w szkole p= 0,27 arkusz z matematyki trudny

31. Łatwość wymagań ogólnych I.  Sprawność rachunkowa – 3 zadania II.  Wykorzystanie i tworzenie informacji – 8 zadań III.  Wykorzystanie i interpretowanie reprezentacji –6 zadań IV. Rozumowanie i argumentacja– 4 zadania

32. Łatwość wymagań ogólnych I.  Sprawność rachunkowa – 3 zadania II.  Wykorzystanie i tworzenie informacji – 8 zadań III.  Wykorzystanie i interpretowanie reprezentacji –6 zadań IV. Rozumowanie i argumentacja– 4 zadania

33. Łatwość wymagań ogólnych I.  Sprawność rachunkowa – 3 zadania II.  Wykorzystanie i tworzenie informacji – 8 zadań III.  Wykorzystanie i interpretowanie reprezentacji –6 zadań IV. Rozumowanie i argumentacja– 4 zadania

34. Zadania bardzo trudne – 19, łatwość 0,05 www.sod.ids.czest.pl

35. Typowe błędy • …… • …… • ….. • ….. Przyczyny błędów • ….. • ….. • ….. www.sod.ids.czest.pl

36. Wnioski z analizy wyników • ustalenie mocnych i słabych stron zdających w zakresie danego przedmiotu, • wskazanie umiejętności, które nie zostały opanowane w stopniu zadowalającym, • uwzględnienie wniosków zawartych w sprawozdaniu OKE

37. Rekomendacje – sposób i kierunek działania • powinny wynikać z wniosków własnych i OKE, • muszą być konkretnymi propozycjami działań, które pomogą wzmocnić słabe strony, • zazwyczaj odnoszą się do przedmiotowego i szkolnego systemu kształcenia

38. Planowanie pracy w kontekście wyników egzaminu oraz wymagań ogólnych i szczegółowych podstawy programowej

39. Tylko realizacja wszystkich wymagań edukacyjnych zawartych w podstawie programowej jest gwarantem sukcesu uczniów na egzaminie

40. Dziękuję za uwagę i życzę sukcesów egzaminacyjnych Joanna Maźniewska j.mazniewska@sod.edu.pl www.sod.ids.czest.pl