Slovenské školstvo vo svetle dát z projektu KOMPARO. RNDr. Vladimír Burjan EXAM testing, Bratislava

Transcript

1 Slovenské školstvo vo svetle dát z projektu KOMPARO RNDr. Vladimír Burjan EXAM testing, Bratislava 1

2 Pár slov o EXAMe Súkromná firma pôsobiaca v oblasti merania výsledkov vzdelávania ( slovenské SCIO ) vznikla v marci 1994 v súčasnosti má 11 zamestnancov 2

3 Aktivity EXAMu v oblasti testovania KOMPARO (od roku 2005) testy na prijímacie a talentové skúšky pre SŠ a VŠ rôzne testy na objednávku (ČG) on-line testy ( 3

4 Čo je KOMPARO? služba školám KOMPARO systém periodického testovania žiakov v kľúčových bodoch vzdelávacej dráhy doplnený o zisťova nie názorov žiakov, rodičov a uči teľov (dotazníky) 4

5 KOMPARO súčasný model základné školy a 8-ročné gymn. testujeme žiakov v týchto bodoch: koncom 4. ročníka (máj) koncom 6. ročníka (máj) začiatkom 8. ročníka (november) začiatkom 9. ročníka (november) 5

6 KOMPARO súčasný model Dotazníkové prieskumy sa konajú v marci apríli párne roky: nepárne roky: žiaci a učitelia žiaci a rodičia 6

7 KOMPARO 4 testované oblasti Slovenský jazyk a literatúra Matematika Prírodoveda Vlastiveda Všeobecné študijné predpoklady 7

8 KOMPARO 6, 8 testované oblasti Prírodovedný blok (M, F, Ch, B, fyzická G) Spoločenskovedný blok (Sj, D, On, politická G) Všeobecné študijné predpoklady 8

9 KOMPARO 9 testované oblasti Slovenský jazyk a literatúra Matematika 9

10 DOTAZNÍKY sledované oblasti Obsah vzdelávania Formy a metódy vyučovania Učitelia Negatívne javy v škole Klíma školy Celková spokojnosť so školou 10

11 Čím je KOMPARO zaujímavé? možnosť nezávislej, odbornej a diskrétnej evaluácie výsledkov a podmienok vzdelávania ( kritický priateľ ) možnosť porovnávania (compare), pričom nejde o súťaž 11

12 KOMPARO možnosti porovnávania školy medzi sebou triedy v rámci školy medzi sebou škola sama so sebou v čase efektívnosť (využitie potenciálu) prísnosť (miernosť) klasifikácie 12

13 Princípy projektu KOMPARO dobrovoľnosť dôvernosť (anonymnosť) samofinancovanie školy samotné ručia za korektný priebeh administrácie testov (podvádza sa?) 13

14 KOMPARO 9 versus Testovanie 9 Po et žiakov Hrubé skóre 14

15 Počty škôl a žiakov šk. r. 2012/13 KOMPARO 9: 734 Š, Ž KOMPARO 8: 393 Š, Ž KOMPARO 6: 107 Š, Ž KOMPARO 4: 353 Š, Ž 15

16 Podoba testov Žiak píše dva testy (60 a 70 min) Otázky s výberom odpovede, krátke otvorené otázky Skenovateľné testy / odp. hárky Čiarové kódy namiesto mien 16

17 4 KOMPARO 6 Matematika, prírodovedný blok a všeobecné študijné predpoklady forma A 11 Vierka správne vyplnila všetky prázdne políčka na obrázku. Napíš, ktoré číslo vpísala do tmavého políčka. 9,9 + 1,2 Text k úlohám 12 13: 6,8 42,5 Kika, Nika a Emka majú rovnako dlhé osušky. Na pláži si ich uložili tesne vedľa seba tak, aby vytvorili obdĺžnik (obr.). 1,2 m Kika Nika Emka 1 m 0,9 m 0,8 m 12 Krížikom vyznač, akú plochu pokrývali všetky tri osušky spolu. a 1,44 m 2 b 2,04 m2 c 3,24 m2 d 7,29 m2 13 Nike sa po čase osuška rozstrapkala, preto ju po celom obvode obšila stuhou (obr.). Napíš, koľko metrov stuhy spotrebovala. 14 Krajčírka Terka ušila niekoľko nohavíc, ktoré boli dlhšie ako 80 cm, ale kratšie ako 120 cm. Krížikmi vyznač, ktoré nohavice mohla ušiť. a dlhé 1 m 4 dm b dlhé 900 mm c dlhé 11 dm d dlhé 1 m 3 cm e dlhé 8 dm 5 cm 15 Ku Dňu matiek Soňa vystrihla srdiečko zo štvorčekového papiera (obr.). Každý štvorček má stranu dlhú 1 cm. Napíš, koľko centimetrov štvorcových má srdiečko. 16 Niektoré nežiaduce živočíchy (napr. voš, blcha, hlísta, pásomnica,...) žijú na povrchu alebo vnútri ľudského tela. Človek je ich hostiteľ, poskytuje im zdroj potravy a životný priestor. Napíš, akým spoločným názvom sa tieto živočíchy nazývajú. (2012/13) EXAM testing, spol. s r. o KOMPARO 8 Matematika, prírodovedný blok a všeobecné študijné predpoklady forma A 5 Na grafe je zaznamenané, ako sa menila teplota vzduchu v priebehu dňa. Ktoré tvrdenie z grafu nevyplýva? teplota [ C] A) O 12:00 bola nameraná teplota 16 C. B) O 10:00 bola nameraná rovnaká teplota ako o 18:00. C) Do 14:00 teplota stúpla o 22 C. D) Teplota najrýchlejšie klesala medzi 16:00 a 18: K akej zmene skupenstva dochádza pri kondenzácii? A) Pevná látka sa mení na kvapalnú. B) Kvapalná látka sa mení na pevnú. C) Kvapalná látka sa mení na plynnú. D) Plynná látka sa mení na kvapalnú. 19 V roku 1869 bol vybudovaný Suezský prieplav, čím sa výrazne skrátila morská cesta medzi Európou a Áziou. Ktoré moria spája? A) Červené a Stredozemné B) Červené a Arabské more C) Stredozemné a Čierne D) Arabské a Čierne 20 O výstup na Mont Everest sa pokúša mnoho horolezcov. V ktorom pohorí najvyšší vrch sveta leží? čas [h] Ako sa nazýva čas, ktorý uplynie medzi preniknutím choroboplodných zárodkov do tela a prvými príznakmi choroby? 22 Pre niektoré druhy stavovcov (obojživelníky, plazy, vtáky) je charakteristická kloaka. Ktoré tri sústavy do nej ústia? A) regulačná, dýchacia, vylučovacia B) rozmnožovacia, obehová, regulačná C) tráviaca, močová, rozmnožovacia D) tráviaca, močová, obehová 23 Keď sa povie píšťala, ihlica, jabĺčko, možno niekomu napadne slovenský folklór. Okrem toho sú to aj časti A) kostry lebky človeka. B) hrudného koša človeka. C) hornej končatiny človeka. D) dolnej končatiny človeka. 24 Na obrázkoch sú štyri chemické reakcie. Ktorá z nich nie je reakciou s kyslíkom? dýchanie horenie sviečky A) B) odstraňovanie korózia kovov vodného kameňa C) D) 17 (2012/13) EXAM testing, spol. s r. o.

18 Aké výsledky dostávajú školy? Î Î Î Î Î Î Vysvedčenie pre každého žiaka Vysvedčenie pre každú triedu Vysvedčenie školy Celoslovenská správa CD (správy v PDF a ďalšie dáta) 18

19 KOMPARO 2012/13 Testovanie žiakov 8. ročníka ZŠ a tercie OG Informácia o výsledkoch žiaka Kód žiaka: Škola: Základná škola s MŠ, Demänovská ulica 408/4A, Liptovský Mikuláš Trieda: 8.B Vysvetlivky: X žiadna odpoveď, Y neplatná odpoveď Testy a spôsob hodnotenia nájdeš na po zadaní svojho kódu. Umiestnenie medzi všetkými testovanými žiakmi Matematika Prírodovedný blok Všeobecné študijné predpoklady KOMPARO 2012/13 testovanie žiakov 8. ročníka Informácia o výsledkoch triedy Škola: Trieda: Základná škola, Lachova 1, Bratislava (sguv6e) 8.A Termín testovania: 8. november 2012 Počet testovaných žiakov triedy: 19 Celkové výsledky žiakov triedy v teste z matematiky Priemerná úspešnosť všetkých testovaných žiakov tejto triedy 43,0 % Priemerná úspešnosť všetkých testovaných žiakov vašej školy 38,9 % Priemerná úspešnosť všetkých testovaných žiakov v SR 44,4 % Percento testovaných tried, ktoré v teste z M dosiahli horší výsledok ako táto trieda 50,4 % tĺpec znázorňuje všetkých aných žiakov, čierna čiara ačuje tvoje umiestnenie Šedý st testova vyzna najlepší výsledok najslabší výsledok Tvoje výsledky v teste z matematiky Priem. úspešnosť žiakov triedy 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % Tmavý stĺpec označuje túto triedu. Všetky zúčastnené triedy zoradené podľa priemernej úspešnosti žiakov v teste z M Počet získaných bodov (maximum bolo 51) 14 Percentuálna úspešnosť % z maximálneho počtu bodov 27,5 Umiestnenie v rámci SR % žiakov v SR s horším výsledkom ako je tvoj 23,9 Nasledujúci typ grafu ukazuje, ako je využitý potenciál žiakov (vyjadrený priem. výsledkom vo VŠP). Tejto triede prislúcha veľký krúžok, ostatným malé. Ak je krúžok triedy nad čiarou, dopadli jej žiaci v teste z M lepšie, než by zodpovedalo ich VŠP. Ak je pod čiarou, potenciál žiakov je nevyužitý. Priemerná úspešnosť žiakov (v %), ktorí majú z matematiky rovnakú známku ako ty 45,1 Priemerná úspešnosť žiakov (v %), ktorí preukázali podobnú úroveň všeobecných študijných predpokladov ako ty 41,6 Písal si formu Číslo otázky Tvoja odpoveď B (1. test, úlohy 01 15) Správna odpoveď Body Číslo otázky Tvoja odpoveď Správna odpoveď 01 B B 3 09 C D 0 02 C D 0 10 B A 0 03 B C 0 11 X C 0 04 X A 0 12 B B 3 05 B C C C C B m 5 08 B C 0 Body Priem. percentil žiakov triedy v M 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % 0 % 10 % 20 % 30 % 40 % 50 % 60 % 70 % 80 % 90 % 100 % Priemerný percentil žiakov triedy vo VŠP 19

20 3. Ako sa umiestnili vaši ôsmaci v rámci celej testovanej skupiny ôsmakov? 5. Ako si poradili žiaci vašej školy s jednotlivými položkami v porovnaní s celou populáciou? re Hrubé skór % správnych odpovedí 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % Umiestnenie v rebríčku všetkých testovaných žiakov % 0 % Každá zvislá čiara označuje umiestnenie jedného príp. viacerých žiakov vašej školy. Číslo položky v teste z matematiky (forma A) 4. Prehľad výsledkov vašich ôsmakov v doterajších testovaniach KOMPARO. 100 Tmavé stĺpce = úspešnosť žiakov vašej školy, svetlé stĺpce = celková priemerná úspešnosť. (Prehľad učiva testovaného v jednotlivých položkách je priložený na osobitnom papieri.) 6. Ktoré testové položky zvládli žiaci vašej školy lepšie ako celá populácia a ktoré horšie? 40 % Priemerný percen ntil ,1 48,6 49,1 56,4 56,0 55,7 39,4 šich cie Rozdiel úspešností vaš žiakov a celej populác 30 % 20 % 10 % 0 % -10 % -20 % -30 % apr nov. -40 % Uvedené hodnoty predstavujú priemerný percentil žiakov vašej školy v príslušnom roku. Pozor: nezamieňajte percentil s percentuálnou úspešnosťou. Percentil vyjadruje pozíciu žiaka v rebríčku všetkých testovaných žiakov (udáva, koľko % žiakov dosiahlo horší výsledok ako on). Hodnota 0 označuje, že v danom roku sa vaša škola na testovaní ôsmakov nezúčastnila. Testovanie KOMPARO organizuje spoločnosť EXAM testing, spol. s r. o. ( Číslo položky v teste z matematiky (forma A) Stĺpce nad čiarou = položky, ktoré zvládli vaši žiaci lepšie ako celá populácia. Stĺpce pod čiarou = položky, ktoré zvládli vaši žiaci horšie ako celá populácia. Testovanie KOMPARO organizuje spoločnosť EXAM testing, spol. s r. o. ( 20

21 Trendy, pridaná hodnota Prehľad výsledkov vašich ôsmakov v doterajších testoch KOMPARO (Matematika) 60 % 50 % 40 % 30 % 20 % 10 % 0 % 54,2 22,3 36,4 47,6 24,1 56,9 31, apr 2012 nov Z grafu vidno, že táto škola (kód mx9beq) sa na testovaní ôsmakov zúčastnila už sedemkrát, a to v rokoch Čo znamená výsledok 31,7 v novembri 2012? Je to priemerný percentil, kto- 21

22 Trendy, pridaná hodnota v strede rebríčka všetkých testovaných žiakov. Niektoré školy budú mať určite dôvod na radosť. Napríklad škola s kódom FZ5CUY dosahovala v matematike deviatakov postupne ta kéto výsledky: 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % 33,2 38,2 38,3 42,0 49,0 54,1 69,

23 Trendy, pridaná hodnota Iné školy by sa zrejme mali zamyslieť nad tým, kde majú problém. Napríklad výsledky deviatakov zo školy s kódom BC8NCw majú v slovenskom jazyku a literatúre od roku 2007 v podstate klesajúci trend (s výnimkou v roku 2010): 60 % 50 % 40 % 30 % 20 % 10 % 0 % 46,5 34,4 42,5 39,6 38,4 51,9 30,2 22,

24 16.1. Vývoj výsledkov 60 tried testovaných trikrát (v 5., 6. a 8. ročníku) M Trendy TDDZwt-8.D TDDZwt-8.C UDYNMK-8.D PgRXUj-8.A UDYNMK-8.C U6WYEW-8.B Lrtgda-8.A RJnfAC-8.B U6WYEW-8.A QZX8Wt-8.B qzrdha-8.b RFX5ab-8.A QUzqxk-8.A ns5s3s-8. ryjczt-8.a paeec3-8. RJnfAC-8.A RTck44-8.B RTck44-8.A QZX8Wt-8.A LWA6G3-8. QKjHQb-8.A paemjm-8.a qmyhre-8.a szwhg6-8.a U6WYEW-8.D tgycss-8.b tgycss-8.a pytab9-8.a nyhaje-8. sguv6e-8.a u7w6yv-8.c TDDZwt-8.E MxqP7g-8.S ubctpt-8.a ng78cc-8.a rxu36r-8.a t9kpgh-8.b t9kpgh-8.a ubctpt-8.c m52p6x-8.a U7Y6gn-8.C QKjHQb-8.B NtNESH-8.A szwhg6-8.b sguv6e-8.b 26prmh-8.A U6WYEW-8.C U7Y6gn-8.B u7w6yv-8.a ubctpt-8.b U7Y6gn-8.A TDDZwt-8.A RFX5ab-8.B u7w6yv-8.b U4jG2x-8.B QUzqxk-8.B MhJYVf-8.A U4jG2x-8.C U4jG2x-8.A Ako piataci Ako šiestaci Ako ôsmaci Priemerný percentil žiakov triedy (koľko % populácie predbehol priemerný žiak triedy) 24

25 Čo sa dozvedáme o slov. školstve? Zistenia o vzdelávacom systéme sú iba vedľajším produktom, ciele KOMPARA sú iné Aký vplyv má spôsob vzniku vzorky (dobrovoľné prihlasovanie) na výsledný obraz o systéme? 25

26 Vzorka sa javí ako reprezentatívna Účastníci testovania z M (9. ročník) podľa zriaďovateľa školy Typ školy Š T Ž Ch D Štátne Cirkevné Súkromné Účastníci testovania z M (9. ročník) podľa pohlavia Pohlavie Počet Pohlavie Počet Chlapci Dievčatá Účastníci testovania z M (9. ročník) podľa samosprávneho kraja Kraj Š T Ž Ch D Bratislavský Trnavský Nitriansky Trenčiansky Žilinský Banskobystrický Košický Prešovský Testovaní deviataci podľa známky z M na poslednom vysvedčení Známka Ž Ch D % , , , , ,1 Neuvedená ,4 26

27 Aké sú vedomosti žiakov? slabé a majú klesajúci trend Po et žiakov Hrubé skóre Hrubé skóre Umiestnenie v rebrí ku všetkých testovaných žiakov 27

28 Aké sú vedomosti žiakov? Úspešnosť deviatakov: 76,2 % 28

29 Aké sú vedomosti žiakov? 05 - Úspešnosť deviatakov: 19,5 % 29

30 Príčiny slabých výsledkov Učivo je nerealistické (príliš veľa, príliš teoretické, veku neprimerané a pre žiakov irelevantné...) Chýba motivácia na strane žiakov Nevhodné formy a metódy Problémy s čítaním a vyjadrovaním 30

31 Prírodoveda, 4. ročník ZŠ (68 %) Futbalista kopol do lopty tak, ako vidíš na obrázku: Napíš, čo spôsobilo, že sa lopta po chvíli oblúkom vrátila na zem. 31

32 Prečo sa lopta vrátila na zem? lebo okolo je gravidita, gravicácia, kravitácia, pritlačivosť, gramatická sila, gramotná sila, grafická sila, grafikačné pole, genetická sila, geniračná sila, energetická sila, odrazová sila, magická sila, lebo je ako maget, magnet ju stiahol, v zemi je magnetiok, statická elektrina, dotyk dvoch vecí lebo veci padajú, lebo lopta nelieta, lopta nevidrží, lopta nevedela ostať hore, je ťažšia než vzduch bola vyfúknutá, puknutá lopta, rostrhla sa, sfučala sa, nemá v sebe hélium, bolo to záťažie 32

33 Prečo sa lopta vrátila na zem? bol silný vietor, chvenie vzduchu, atmosféra kopol nedobre, mal malý kopanec, dal špicák, kopol do vzduchu, kopol nartom, skrčenie palcov, skrčil koleno, kopačky, kryvá kopačka, lebo sa pošmikol kopol slabo, dal slabý výkop, dal vysokú, išla oblúkom, padáčik, išla okružnou, nedali gól 33

34 Slov. školstvo je homogénne Výsledky podľa zriaďovateľa školy Typ školy Počet žiakov Úspešnosť Štátne školy ,5 % Cirkevné školy ,4 % Súkromné školy 83 47,6 % 34

35 Slov. školstvo je homogénne Výsledky podľa samosprávneho kraja Samosprávny kraj Počet žiakov Úspešnosť Bratislavský ,2 % Trnavský ,1 % Nitriansky ,4 % Trenčiansky ,5 % Žilinský ,7 % Banskobystrický ,2 % Košický ,3 % Prešovský ,6 % 35

36 36 Existujú však rozdiely medzi školami % 80 % 90 % 100 % em. známka z M os v teste % 30 % 40 % 50 % 60 % Prie Priemerná úspešno % 10 % 20 % P Umiestnenie v rebrí ku všetkých zú astnených škôl

37 Rozdiely medzi školami optikou VŠP Využitie potenciálu žiakov 8. ročníka v M na jednotlivých zúčastnených školách Priem m. percentil žiakov školy v M 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % 0 % 10 % 20 % 30 % 40 % 50 % 60 % 70 % 80 % 90 % 100 % Priemerný percentil žiakov školy vo VŠP 37

38 Rozdiely medzi triedami optikou VŠP Využitie potenciálu žiakov 8. ročníka v M v jednotlivých zúčastnených triedach Priem m. percentil žiakov triedy v M 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % 0 % 10 % 20 % 30 % 40 % 50 % 60 % 70 % 80 % 90 % 100 % Priemerný percentil žiakov triedy vo VŠP 38

39 39 Klasifikácia je veľmi subjektívna % 80 % 90 % 100 % em. známka z M os v teste % 30 % 40 % 50 % 60 % Prie Priemerná úspešno % 10 % 20 % P Umiestnenie v rebrí ku všetkých zú astnených škôl

40 40 Klasifikácia je veľmi subjektívna % 80 % 90 % 100 % em. známka z M v teste % 30 % 40 % 50 % 60 % Pri merná úspešnos v % 10 % Priem Umiestnenie v rebrí ku všetkých zú astnených tried

41 Čo sa ďalej dozvedáme o školách? panuje na nich blbá nálada mnohé sa boja nastaviť si zrkadlo nemajú motiváciu zlepšovať sa nemajú peniaze 41

42 Ďakujem za pozornosť