O manipulowaniu interpretacją wyników badań TIMSS - 2019

 

(źródło: Policy Note 1/2020)

Zdaniem opozycyjnych wobec rządu komentatorów najnowszej edycji międzynarodowego badania TIMSS - Wyniki polskich czwartoklasistów z matematyki w ciągu czterech lat znacząco się pogorszyły. Wyniki uczniów najlepszych nie zmieniły się, spadły natomiast osiągnięcia uczniów na średnim i niskim poziomie. 

Eksperci Evidence Institut, który założył były wiceminister edukacji za rządów PO/PSL Maciej Jakubowski, słusznie twierdzą, że  skoro polscy uczniowie brali udział w tych diagnozach dopiero od 2011 roku, kiedy to w pierwszej edycji TIMSS w Polsce badani byli uczniowie trzecich klas, to opublikowane w 2020 r. wyniki pomiaru z 2019 r. nie są porównywalne w czasie. 

Niestety, nie dodali, że żadne wyniki badań poprzecznych nie są porównywalne w wymiarze temporalnym, gdyż nie są to badania podłużne (longitudinalne), a więc prowadzone na tej samej próbie uczniowskiej. Nie wolno zatem mówić, że w ciągu czterech czy więcej lat coś uległo poprawie i/lub pogorszeniu, bo nie dotyczy to tych samych uczniów, z tych samych szkół.  

Udział w badaniu nie jest łatwy, bowiem uczniowie musieli rozwiązać zadania z obu dziedzin wiedzy w ustalonym czasie. Organizatorzy mieli do dyspozycji 350 zadań. 

   

Skoro w 2011 i 2015 r. badaniami TIMSS byli objęci w Polsce uczniowie klas trzecich szkół podstawowych, to tym bardziej przeprowadzenie pomiaru w 2019 r. w grupie czwartoklasistów rodzi pytanie, czy aby nie był to celowy manewr władz resortu edukacji, by ewentualną porażkę zrzucić na poprzednią władzę? 

Zdaniem A. Zalewskiej badani uczniowie klas czwartych sa w tym pomiarze ofiarami polityki PO-PSL. To jest argument demagogiczny, gdyż to nie podręcznik szkolny decyduje o wykształceniu, ale w pierwszej kolejności środowisko rodzinne uczniów, a w dalszej - nauczyciele realizujący podstawę programową oraz ich uczniowie z określonym poziomem wieku rozwojowego i aspiracji. O curriculum dla klas I-III nie można powiedzieć, że było infantylne w swej treści. Podręczniki same w sobie niewiele znaczą.         

Porażka częściowo jest ewidentna w odniesieniu do tej próbki badanych, skoro najwyższym wynikiem może pochwalić się jedynie 8 proc. dzieci, zaś aż 7 proc. uczniów nie osiągnęło nawet najniższego poziomu wiedzy i umiejętności z matematyki, jakiej wymaga się na świecie od dziesięciolatków!  

Pamiętajmy jednak, że pomiar objął tylko 4 882 uczniów klas czwartych z 149 wylosowanych szkół podstawowych. Jednak tak z matematyki, jak i przyrody nasi uczniowie uzyskali wynik powyżej średniej na poziomie 500 pkt. Zadania oceniane były w skali czterostopniowej (poziom: niski, średni, wysoki i bardzo wysoki).     

Po czterech latach edukacji w stylistyce programowej Anny Zalewskiej nasi uczniowie są półanalfabetami!, gdyż nie potrafią rozwiązać najprostszych zadań rachunkowych i rozpoznać figur geometrycznych. Może potrafią odróżnić kij od szczotki od kija bejsbolowego?

Podobnie częściowo źle jest z wiedzą przyrodniczą badanych dziesięciolatków, skoro aż 5 proc. objętych pomiarem TIMSS nie opanowało najprostszej wiedzy i umiejętności w zakresie przyrody, zaś na najwyższym poziomie odliczyło się tylko 9 proc. dzieci. 

(źródło: tamże)

Niezależnie od wszystkiego, czy tego chcemy, czy nie, czy urzędnicy MEiN będą manipulować interpretacją tych danych bardziej lub mniej, to poziom wiedzy i umiejętności czwartoklasistów jest żenujący. Ci przecież powinni wypaść lepiej niż gdyby mierzono ich wiedzę i umiejętności pod koniec klasy trzeciej. 

Niepokojące jest, że znacznie gorzej z matematyki i nauk przyrodniczych wypadły dziewczęta w porównaniu ze swoimi koleżankami sprzed czterech lat (z matematyki spadek aż o 18 pkt., zaś z przyrody o 16 pkt.). 

(źródło: tamże)

Wprawdzie MEiN może się chwalić, że mimo wszystko i tak polscy uczniowie uzyskali wynik wyższy od średniej w krajach OECD , która wynosi 500 pkt, a nasi mieli z matematyki - 520 pkt., zaś  z przyrody - 531 pkt.   

Zobaczymy wkrótce, jak wypadną nasi piętnastolatkowie w badaniach PISA. Tu zapewne będzie jeszcze większy pogrom, biorąc pod uwagę skandaliczną dewastację ustrojową w polskim szkolnictwie, do której doprowadziła totalna ignorancja i populistyczna hucpa A. Zalewskiej.   

Co z nich wyrośnie, skoro była to tylko mała próbka, chociaż - w sensie statystycznie uzasadnionego doboru - reprezentatywna? 

 

 

Po co ideologiczna nowelizacja prawa o szkolnictwie wyższym i nauce?

 

Nowy minister edukacji i nauki Przemysław Czarnek zamiast zająć się konieczną zmianą absurdów w prawie akademickim, do których częściowo doprowadziła reforma Jarosława Gowina, przedłożył 9 grudnia 2020 r. projekt nowelizacji Ustawy Prawo o Szkolnictwie Wyższym i Nauce w sprawach, których by nie wymyślił nawet Sławomir Mrożek, gdyby jeszcze żył w wolnym, demokratycznym państwie. 

Czy rzeczywiście mamy tak niewychowanych, niemoralnych i źle wykształconych rektorów oraz rzeczników dyscyplinarnych dla nauczycieli akademickich, że trzeba będzie teraz zapisywać w ustawie wszystko to, co powinno gwarantować uczonym i wykładowcom normalność? 

Minister P. Czarnek odsłania właściwie tym projektem katastrofalny stan zniszczenia kodu moralnego w uniwersytetach i brak norm przyzwoitości, skoro konieczne jest zapisanie w ustawie: 

w art. 23 w ust. 2 po pkt 2 dodaje się pkt 2a w brzmieniu: „2a)

zapewnianie w uczelni poszanowania wolności nauczania, wolności słowa, badań naukowych, ogłaszania ich wyników, a także debaty akademickiej organizowanej przez członków wspólnoty uczelni z zachowaniem zasad pluralizmu światopoglądowego i przepisów porządkowych uczelni. 

2) w art. 275 po ust. 1 dodaje się ust. 1a w brzmieniu: „1a. Nie stanowi przewinienia dyscyplinarnego wyrażanie przekonań religijnych, światopoglądowych lub filozoficznych.”;

   Przepraszam, ale to chyba formacja polityczna ministra P. Czarnka  od pięciu lat ogłasza, o czym nie wolno mówić studentom w uniwersytetach, jakie zagadnienia są niestosowne, które metody badań powinny obowiązywać, co jest nauką, a co nią nie jest i dlaczego jest ideologią, itp., itd.?    

Inna rzecz, że w mijającej pięciolatce środowisko akademickie zostało już tak radykalnie podzielone zgodnie z kryterium światopoglądowo-partyjnej afirmacji, że być może właśnie ten zapis w ustawie pozwoli na powrót do normalności? 

Chyba jestem naiwny sądząc, że PRAWDA i DOBRO obronią się same. Na ich straży musi stać prawo, które i tak dowolnie będą komentować i interpretować koledzy ministra z tej samej dyscypliny naukowej.   

Może minister zajmie się absurdami, nonsensownymi rozwiązaniami, które niszczą polską naukę i uniwersytety? Może minister zacznie wreszcie walczyć o środki finansowe na badania naukowe i zmianę ustawy o Narodowym Centrum Nauki, bo jak się zdaje, to właśnie tam rozstrzygają się kwestie, które są toksyczne dla młodego pokolenia badaczy. 

Kiedy skończy się to pozorowanie przez władze finansowania nauki i sprzyjanie lobbystom, także w środowiskach władzy, na pozyskiwanie środków budżetowych kosztem wielu dyscyplin i szkół naukowych? 

Zdecydowanej większości uczonych nie musi minister przywracać godność, bo oni jej nie stracili. Chyba że ma na myśli tych, którzy ją utracili w wyniku nieuczciwości akademickiej, urzędniczej czy polityczno-administracyjnej? To może lepiej im jej nie przywracać, tylko niech zajmą się nimi stosowne służby?         

Nie bardzo rozumiem, po co w tej nowelizacji zapis: 

„Art. 284a. 2. Na postanowienie o poleceniu rozpoczęcia prowadzenia sprawy osobie, której czynu dotyczy zawiadomienie lub informacja, o których mowa w art. 282, przysługuje zażalenie do komisji dyscyplinarnej przy ministrze w przypadku, gdy sprawa objęta postanowieniem dotyczy wyrażania przez tę osobę przekonań religijnych, światopoglądowych lub filozoficznych.   

Możemy przecież złożyć na nierzetelnego i zdemoralizowanego politycznie rzecznika dyscyplinarnego w danej uczelni doniesienie do prokuratury rejonowej. Niech sąd zajmie się takim "pseudoprawnikiem", a jak to uczynić, to jeszcze opowiem przy innej okazji. Także można odwołać rektora, dziekana czy dyrektora instytutu, jeśli narusza nasze konstytucyjne prawa. 

 Do relacji Mistrz-Student nie potrzebuję żadnej ustawy. Wystarczą moje kompetencje oraz osobista i akademicka kultura. Z pseudonaukowcami poradzimy sobie bez tej nowelizacji. Może czas skończyć z tą permanentną ideologizacją wszystkiego?   Czy może Ustawa Prawo Oświatowe też będzie nowelizowana pod tym kątem? Jak już, to niech minister nowelizuje także prawo oświatowe, bo zdaje się, że niektórzy nauczyciele już mają problemy w swoich szkołach.  

Jak ideolodzy Ministerstwa Edukacji i Nauki tłumaczą spadek osiągnięć czwartoklasistów w badaniach TIMMS-2019

 

Muszę przyznać, że sposób, w jaki wice-wiceminister Maciej Kopeć tłumaczył fatalne wyniki polskich czwartoklasistów w międzynarodowych badaniach porównawczych TIMSS - 2019 świadczy o tym, że poziom rozwoju polskiego społeczeństwa nie zasługuje na szacunek władzy. Uzyskanie przez diagnozowany rocznik gorszych wyników w stosunku do czwartoklasistów z 2015 r. uzasadniano w następujący sposób: 

Wiceminister Maciej Kopeć podkreślił, że analizując wyniki badania należy wziąć pod uwagę przede wszystkim to, w jakim stopniu na ich wynik wpłynął ubiegłoroczny strajk nauczycieli, wprowadzenie nowej podstawy programowej oraz to, że udział w badaniu wzięli uczniowie, którzy swoją edukację rozpoczęli w wieku sześciu lat.(...) - Należy się zastanowić, na ile przyczyną obniżenia wyników TIMSS 2019 była tzw. reforma sześciolatków i czy mamy do czynienia z porażką tej reformy widoczną w tym badaniu – wskazał wiceminister Maciej Kopeć.

 

Rzecz jasna, zespoły krajowe badań TIMSS nie dociekają tego i w żadnej mierze nie weryfikują naukowymi metodami procesów, o których mówi M. Kopeć. To nawet nie są hipotezy, tylko wciskane polskiemu społeczeństwu tego, że wszystko, co złe, jest winą poprzedniej formacji politycznej. 

 

W diagnozie osiągnięć nie dokonuje się pomiaru innych czynników, uwarunkowań, które mogłyby rzutować na osiągnięcia uczniów po czterech latach wczesnej edukacji.  Uczeni sprawdzają, z jakich rodzin pochodzą ci uczniowie, korelując dane z wykształceniem ich rodziców. Nie dociekają jednak, kim są nauczyciele, jaki był poziom ich zaangażowania w pracę, jakie mieli kwalifikacje, czy zrealizowali curriculum dla tego etapu kształcenia itp., itd.  Dlaczego winą za gorsze wyniki obarczają nauczycieli i ich udział w ubiegłorocznych strajkach? 

MEiN zamieściło na swoim portalu propagandową papkę z wybranymi danymi tak je interpretując, żeby czytelnik był przekonany, że znacznie gorsze wyniki edukacji nie są pochodną deformy Anny Zalewskiej, tylko...  .  

 

No właśnie, co - zdaniem urzędników MEiN - mówią o alfabetyzacji polskich dzieci wyniki międzynarodowego pomiaru?

Nasi uczniowie lubią matematykę i przyrodę, chwalą swoich nauczycieli i rozumieją, co nauczyciel do nich mówi. Nie brakuje jednak takich, których lekcje nudzą i mają trudności z ich zrozumieniem, w szczególności matematyki. W porównaniu z chłopcami, dziewczynki są lepsze z biologii, a także w rozumowaniu i znajomości podstaw metody naukowej. Chłopcy lepiej poradzili sobie za to z geografią oraz w zadaniach fizyko-technicznych.

 

Polscy uczniowie zespołowo lepiej poradzili sobie w matematyce z rozumowaniem, słabiej w zadaniach wymagających wiedzy, wiadomości i znajomości arytmetyki. Mocną stroną naszych uczniów są elementy statystyki, odczytywanie tabel i wykresów, a w przyrodzie, stosowanie wiedzy. Słabsze wyniki uczniowie otrzymali z wiedzy i rozumowania, a także rozumienia zasad myślenia naukowego czy z zadań z podstaw fizyki. (...)

 

Polscy uczniowie dobrze wypadli w pomiarze osiągnięć przyrodniczych (16. miejsce). (...) Na ustalonej w 1995 r skali ze średnią 500 i odchyleniem standardowym 100, średnia osiągnięć matematycznych polskich dzieci wyniosła w 2019 r. 520 punktów. Dało to Polsce 26 miejsce na 58 krajów. 

 

Średni wynik uzyskany przez polskich czwartoklasistów był niższy od wyników czwartoklasistów w 2015 r. Różnica wyniosła ok. 15 punktów. Słabszy wynik czwartoklasistów w 2019 częściowo wyjaśniają różnice w strukturze wieku badanych uczniów. (...) 

 

Dobry wynik polscy czwartoklasiści uzyskali w części przyrodniczej: średni wynik wyniósł 531 punktów. (...) Wynik polskich czwartoklasistów badanych w 2019 r. był niższy o 16 pkt od wyników ich rówieśników badanych 5 lat wcześniej. (...) 

 

Więcej jest chłopców, którzy osiągają bardzo słabe i bardzo dobre wyniki. Umiejętności dziewczynek są zaś bardziej wyrównane. Nie ma natomiast różnic między średnim wynikiem chłopców i dziewczynek w przyrodzie. (...) 

 

W matematyce polscy uczniowie relatywnie lepiej radzili sobie z zadaniami mierzącymi rozumowanie, nieco gorzej w zadaniach wymagających wiedzy i wiadomości, w tym w zadaniach z arytmetyki.

 

Wielokrotnie już o tym pisałem w blogu, przytaczając wyniki badań zagranicznych i polskich socjologów edukacji, że o wysokim poziomie wykształcenia nie decyduje sama szkoła, ale przede wszystkim to, w jakich rodzinach, z jakim habitusem kulturowym i kapitałem ekonomicznym są rodzice uczniów.  Komentujący na stronie MEiN wyniki TIMSS-2019 sami to przyznają: 

 

Wyniki badania pokazały także, że dzieci lepiej wykształconych rodziców wcześniej zaczynały edukację przedszkolną i uczęszczały do żłobka (badany nie była jeszcze objęty rozszerzeniem prawa do opieki przedszkolnej w wieku 3 lat). Status społeczno-ekonomiczny różnicuje częstość aktywności edukacyjnych podejmowanych przez rodziców z dziećmi w ich wczesnym dzieciństwie. Dodatkowo uczęszczanie na płatne zajęcia poza szkołą także sprzyja zwiększaniu nierówności.

 

Zdumiewający jest sposób tłumaczenia przez MEiN pogorszenia się poziomu alfabetyzacji polskich czwartoklasistów. Informują bowiem społeczeństwo, że z jednej strony: 

 

Polscy uczniowie bardzo dobrze oceniają przystępność prowadzenia lekcji przez swoich nauczycieli: 91-93 proc. uważa, że ich nauczyciele dobrze tłumaczą matematykę i przyrodę (...),   z drugiej zaś strony:  Ok. 20 proc. polskich czwartoklasistów przyznało np. że nie rozumie wszystkiego, co mówi nauczyciel. (...) 

 

Dla 30 proc. uczniów matematyka jest nudna. Niewiele mniej uczniów, bo 22 proc. wypowiada się w ten sam sposób o przyrodzie. Co trzeci polski czwartoklasista uważa, że matematyka jest dla niego trudniejsza niż dla większości uczniów w jego klasie – w przyrodzie sądzi tak co czwarty uczeń.

Czy sondażem opinii można tłumaczyć twarde wyniki danych empirycznych, które oparte są nie na tym, co uczniom się wydaje, tylko na tym, co tak naprawdę wiedzą i potrafią? Czemu to służy? Chyba jednak nie wyjaśnieniu stanu wykształcenia dzieci po pierwszych latach edukacji w szkole podstawowej?  

Subresort edukacji nie opublikował polskiego przekładu całego Raportu TIMSS-2019. A Czesi opublikowali.  Jak widać, nasi południowi sąsiedzi nie mają nic do ukrycia przed swoimi obywatelami i płatnikami budżetu, którzy utrzymują urzędników w podobnym resorcie. 

 Zdecydowanie lepiej jest czytać interpretacje Fundacji Evidence Institute w Warszawie.