Slovenské školstvo vo svetle dát z projektu KOMPARO RNDr. Vladimír Burjan EXAM testing, Bratislava 1
Pár slov o EXAMe Súkromná firma pôsobiaca v oblasti merania výsledkov vzdelávania ( slovenské SCIO ) vznikla v marci 1994 v súčasnosti má 11 zamestnancov 2
Aktivity EXAMu v oblasti testovania KOMPARO (od roku 2005) testy na prijímacie a talentové skúšky pre SŠ a VŠ rôzne testy na objednávku (ČG) on-line testy (www.sapiendo.sk) 3
Čo je KOMPARO? služba školám KOMPARO systém periodického testovania žiakov v kľúčových bodoch vzdelávacej dráhy doplnený o zisťova nie názorov žiakov, rodičov a uči teľov (dotazníky) 4
KOMPARO súčasný model základné školy a 8-ročné gymn. testujeme žiakov v týchto bodoch: koncom 4. ročníka (máj) koncom 6. ročníka (máj) začiatkom 8. ročníka (november) začiatkom 9. ročníka (november) 5
KOMPARO súčasný model Dotazníkové prieskumy sa konajú v marci apríli párne roky: nepárne roky: žiaci a učitelia žiaci a rodičia 6
KOMPARO 4 testované oblasti Slovenský jazyk a literatúra Matematika Prírodoveda Vlastiveda Všeobecné študijné predpoklady 7
KOMPARO 6, 8 testované oblasti Prírodovedný blok (M, F, Ch, B, fyzická G) Spoločenskovedný blok (Sj, D, On, politická G) Všeobecné študijné predpoklady 8
KOMPARO 9 testované oblasti Slovenský jazyk a literatúra Matematika 9
DOTAZNÍKY sledované oblasti Obsah vzdelávania Formy a metódy vyučovania Učitelia Negatívne javy v škole Klíma školy Celková spokojnosť so školou 10
Čím je KOMPARO zaujímavé? možnosť nezávislej, odbornej a diskrétnej evaluácie výsledkov a podmienok vzdelávania ( kritický priateľ ) možnosť porovnávania (compare), pričom nejde o súťaž 11
KOMPARO možnosti porovnávania školy medzi sebou triedy v rámci školy medzi sebou škola sama so sebou v čase efektívnosť (využitie potenciálu) prísnosť (miernosť) klasifikácie 12
Princípy projektu KOMPARO dobrovoľnosť dôvernosť (anonymnosť) samofinancovanie školy samotné ručia za korektný priebeh administrácie testov (podvádza sa?) 13
KOMPARO 9 versus Testovanie 9 Po et žiakov 2 000 1 750 1 500 1 250 1 000 750 500 250 0 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 Hrubé skóre 14
Počty škôl a žiakov šk. r. 2012/13 KOMPARO 9: 734 Š, 20 657 Ž KOMPARO 8: 393 Š, 10 042 Ž KOMPARO 6: 107 Š, 2 667 Ž KOMPARO 4: 353 Š, 5 093 Ž 15
Podoba testov Žiak píše dva testy (60 a 70 min) Otázky s výberom odpovede, krátke otvorené otázky Skenovateľné testy / odp. hárky Čiarové kódy namiesto mien 16
4 KOMPARO 6 Matematika, prírodovedný blok a všeobecné študijné predpoklady forma A 11 Vierka správne vyplnila všetky prázdne políčka na obrázku. Napíš, ktoré číslo vpísala do tmavého políčka. 9,9 + 1,2 Text k úlohám 12 13: 6,8 42,5 Kika, Nika a Emka majú rovnako dlhé osušky. Na pláži si ich uložili tesne vedľa seba tak, aby vytvorili obdĺžnik (obr.). 1,2 m Kika Nika Emka 1 m 0,9 m 0,8 m 12 Krížikom vyznač, akú plochu pokrývali všetky tri osušky spolu. a 1,44 m 2 b 2,04 m2 c 3,24 m2 d 7,29 m2 13 Nike sa po čase osuška rozstrapkala, preto ju po celom obvode obšila stuhou (obr.). Napíš, koľko metrov stuhy spotrebovala. 14 Krajčírka Terka ušila niekoľko nohavíc, ktoré boli dlhšie ako 80 cm, ale kratšie ako 120 cm. Krížikmi vyznač, ktoré nohavice mohla ušiť. a dlhé 1 m 4 dm b dlhé 900 mm c dlhé 11 dm d dlhé 1 m 3 cm e dlhé 8 dm 5 cm 15 Ku Dňu matiek Soňa vystrihla srdiečko zo štvorčekového papiera (obr.). Každý štvorček má stranu dlhú 1 cm. Napíš, koľko centimetrov štvorcových má srdiečko. 16 Niektoré nežiaduce živočíchy (napr. voš, blcha, hlísta, pásomnica,...) žijú na povrchu alebo vnútri ľudského tela. Človek je ich hostiteľ, poskytuje im zdroj potravy a životný priestor. Napíš, akým spoločným názvom sa tieto živočíchy nazývajú. (2012/13) EXAM testing, spol. s r. o. www.exam.sk, www.komparo.sk 17 KOMPARO 8 Matematika, prírodovedný blok a všeobecné študijné predpoklady forma A 5 Na grafe je zaznamenané, ako sa menila teplota vzduchu v priebehu dňa. Ktoré tvrdenie z grafu nevyplýva? teplota [ C] 20 15 10 5 0 A) O 12:00 bola nameraná teplota 16 C. B) O 10:00 bola nameraná rovnaká teplota ako o 18:00. C) Do 14:00 teplota stúpla o 22 C. D) Teplota najrýchlejšie klesala medzi 16:00 a 18:00. 18 K akej zmene skupenstva dochádza pri kondenzácii? A) Pevná látka sa mení na kvapalnú. B) Kvapalná látka sa mení na pevnú. C) Kvapalná látka sa mení na plynnú. D) Plynná látka sa mení na kvapalnú. 19 V roku 1869 bol vybudovaný Suezský prieplav, čím sa výrazne skrátila morská cesta medzi Európou a Áziou. Ktoré moria spája? A) Červené a Stredozemné B) Červené a Arabské more C) Stredozemné a Čierne D) Arabské a Čierne 20 O výstup na Mont Everest sa pokúša mnoho horolezcov. V ktorom pohorí najvyšší vrch sveta leží? 21 6 8 10 12 14 16 18 20 22 čas [h] Ako sa nazýva čas, ktorý uplynie medzi preniknutím choroboplodných zárodkov do tela a prvými príznakmi choroby? 22 Pre niektoré druhy stavovcov (obojživelníky, plazy, vtáky) je charakteristická kloaka. Ktoré tri sústavy do nej ústia? A) regulačná, dýchacia, vylučovacia B) rozmnožovacia, obehová, regulačná C) tráviaca, močová, rozmnožovacia D) tráviaca, močová, obehová 23 Keď sa povie píšťala, ihlica, jabĺčko, možno niekomu napadne slovenský folklór. Okrem toho sú to aj časti A) kostry lebky človeka. B) hrudného koša človeka. C) hornej končatiny človeka. D) dolnej končatiny človeka. 24 Na obrázkoch sú štyri chemické reakcie. Ktorá z nich nie je reakciou s kyslíkom? dýchanie horenie sviečky A) B) odstraňovanie korózia kovov vodného kameňa C) D) 17 (2012/13) EXAM testing, spol. s r. o. www.exam.sk, www.komparo.sk
Aké výsledky dostávajú školy? Î Î Î Î Î Î Vysvedčenie pre každého žiaka Vysvedčenie pre každú triedu Vysvedčenie školy Celoslovenská správa CD (správy v PDF a ďalšie dáta) 18
KOMPARO 2012/13 Testovanie žiakov 8. ročníka ZŠ a tercie OG Informácia o výsledkoch žiaka Kód žiaka: 35689 Škola: Základná škola s MŠ, Demänovská ulica 408/4A, Liptovský Mikuláš Trieda: 8.B Vysvetlivky: X žiadna odpoveď, Y neplatná odpoveď Testy a spôsob hodnotenia nájdeš na www.exam.sk po zadaní svojho kódu. Umiestnenie medzi všetkými testovanými žiakmi Matematika Prírodovedný blok Všeobecné študijné predpoklady KOMPARO 2012/13 testovanie žiakov 8. ročníka Informácia o výsledkoch triedy Škola: Trieda: Základná škola, Lachova 1, Bratislava (sguv6e) 8.A Termín testovania: 8. november 2012 Počet testovaných žiakov triedy: 19 Celkové výsledky žiakov triedy v teste z matematiky Priemerná úspešnosť všetkých testovaných žiakov tejto triedy 43,0 % Priemerná úspešnosť všetkých testovaných žiakov vašej školy 38,9 % Priemerná úspešnosť všetkých testovaných žiakov v SR 44,4 % Percento testovaných tried, ktoré v teste z M dosiahli horší výsledok ako táto trieda 50,4 % tĺpec znázorňuje všetkých aných žiakov, čierna čiara ačuje tvoje umiestnenie Šedý st testova vyzna najlepší výsledok najslabší výsledok Tvoje výsledky v teste z matematiky Priem. úspešnosť žiakov triedy 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % Tmavý stĺpec označuje túto triedu. Všetky zúčastnené triedy zoradené podľa priemernej úspešnosti žiakov v teste z M Počet získaných bodov (maximum bolo 51) 14 Percentuálna úspešnosť % z maximálneho počtu bodov 27,5 Umiestnenie v rámci SR % žiakov v SR s horším výsledkom ako je tvoj 23,9 Nasledujúci typ grafu ukazuje, ako je využitý potenciál žiakov (vyjadrený priem. výsledkom vo VŠP). Tejto triede prislúcha veľký krúžok, ostatným malé. Ak je krúžok triedy nad čiarou, dopadli jej žiaci v teste z M lepšie, než by zodpovedalo ich VŠP. Ak je pod čiarou, potenciál žiakov je nevyužitý. Priemerná úspešnosť žiakov (v %), ktorí majú z matematiky rovnakú známku ako ty 45,1 Priemerná úspešnosť žiakov (v %), ktorí preukázali podobnú úroveň všeobecných študijných predpokladov ako ty 41,6 Písal si formu Číslo otázky Tvoja odpoveď B (1. test, úlohy 01 15) Správna odpoveď Body Číslo otázky Tvoja odpoveď Správna odpoveď 01 B B 3 09 C D 0 02 C D 0 10 B A 0 03 B C 0 11 X C 0 04 X A 0 12 B B 3 05 B C 0 13 2 10 0 06 C C 3 14-30 0 07 C B 0 15 2 2 m 5 08 B C 0 Body Priem. percentil žiakov triedy v M 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % 0 % 10 % 20 % 30 % 40 % 50 % 60 % 70 % 80 % 90 % 100 % Priemerný percentil žiakov triedy vo VŠP 19
3. Ako sa umiestnili vaši ôsmaci v rámci celej testovanej skupiny ôsmakov? 5. Ako si poradili žiaci vašej školy s jednotlivými položkami v porovnaní s celou populáciou? re Hrubé skór 51 48 45 42 39 36 30 33 27 24 21 18 15 12 9 6 3 0 % správnych odpovedí 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 1 501 1001 1501 2001 2501 3001 3501 4001 4501 5001 5501 6001 6501 7001 Umiestnenie v rebríčku všetkých testovaných žiakov 7501 8001 8501 9001 9501 10001 10 % 0 % 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 Každá zvislá čiara označuje umiestnenie jedného príp. viacerých žiakov vašej školy. Číslo položky v teste z matematiky (forma A) 4. Prehľad výsledkov vašich ôsmakov v doterajších testovaniach KOMPARO. 100 Tmavé stĺpce = úspešnosť žiakov vašej školy, svetlé stĺpce = celková priemerná úspešnosť. (Prehľad učiva testovaného v jednotlivých položkách je priložený na osobitnom papieri.) 6. Ktoré testové položky zvládli žiaci vašej školy lepšie ako celá populácia a ktoré horšie? 40 % Priemerný percen ntil 80 60 40 20 53,1 48,6 49,1 56,4 56,0 55,7 39,4 šich cie Rozdiel úspešností vaš žiakov a celej populác 30 % 20 % 10 % 0 % -10 % -20 % -30 % 0 2007 2008 2009 2010 2011 2012 apr. 2012 nov. -40 % 2 5 15 12 9 10 7 6 1 3 4 11 14 8 13 Uvedené hodnoty predstavujú priemerný percentil žiakov vašej školy v príslušnom roku. Pozor: nezamieňajte percentil s percentuálnou úspešnosťou. Percentil vyjadruje pozíciu žiaka v rebríčku všetkých testovaných žiakov (udáva, koľko % žiakov dosiahlo horší výsledok ako on). Hodnota 0 označuje, že v danom roku sa vaša škola na testovaní ôsmakov nezúčastnila. Testovanie KOMPARO organizuje spoločnosť EXAM testing, spol. s r. o. (www.exam.sk) Číslo položky v teste z matematiky (forma A) Stĺpce nad čiarou = položky, ktoré zvládli vaši žiaci lepšie ako celá populácia. Stĺpce pod čiarou = položky, ktoré zvládli vaši žiaci horšie ako celá populácia. Testovanie KOMPARO organizuje spoločnosť EXAM testing, spol. s r. o. (www.exam.sk) 20
Trendy, pridaná hodnota Prehľad výsledkov vašich ôsmakov v doterajších testoch KOMPARO (Matematika) 60 % 50 % 40 % 30 % 20 % 10 % 0 % 54,2 22,3 36,4 47,6 24,1 56,9 31,7 2007 2008 2009 2010 2011 2012 apr 2012 nov Z grafu vidno, že táto škola (kód mx9beq) sa na testovaní ôsmakov zúčastnila už sedemkrát, a to v rokoch 2007 2012. Čo znamená výsledok 31,7 v novembri 2012? Je to priemerný percentil, kto- 21
Trendy, pridaná hodnota v strede rebríčka všetkých testovaných žiakov. Niektoré školy budú mať určite dôvod na radosť. Napríklad škola s kódom FZ5CUY dosahovala v matematike deviatakov postupne ta kéto výsledky: 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % 33,2 38,2 38,3 42,0 49,0 54,1 69,5 2005 2006 2007 2008 2009 2010 2011 22
Trendy, pridaná hodnota Iné školy by sa zrejme mali zamyslieť nad tým, kde majú problém. Napríklad výsledky deviatakov zo školy s kódom BC8NCw majú v slovenskom jazyku a literatúre od roku 2007 v podstate klesajúci trend (s výnimkou v roku 2010): 60 % 50 % 40 % 30 % 20 % 10 % 0 % 46,5 34,4 42,5 39,6 38,4 51,9 30,2 22,8 2005 2006 2007 2008 2009 2010 2011 2012 23
16.1. Vývoj výsledkov 60 tried testovaných trikrát (v 5., 6. a 8. ročníku) M Trendy TDDZwt-8.D TDDZwt-8.C UDYNMK-8.D PgRXUj-8.A UDYNMK-8.C U6WYEW-8.B Lrtgda-8.A RJnfAC-8.B U6WYEW-8.A QZX8Wt-8.B qzrdha-8.b RFX5ab-8.A QUzqxk-8.A ns5s3s-8. ryjczt-8.a paeec3-8. RJnfAC-8.A RTck44-8.B RTck44-8.A QZX8Wt-8.A LWA6G3-8. QKjHQb-8.A paemjm-8.a qmyhre-8.a szwhg6-8.a U6WYEW-8.D tgycss-8.b tgycss-8.a pytab9-8.a nyhaje-8. sguv6e-8.a u7w6yv-8.c TDDZwt-8.E MxqP7g-8.S ubctpt-8.a ng78cc-8.a rxu36r-8.a t9kpgh-8.b t9kpgh-8.a ubctpt-8.c m52p6x-8.a U7Y6gn-8.C QKjHQb-8.B NtNESH-8.A szwhg6-8.b sguv6e-8.b 26prmh-8.A U6WYEW-8.C U7Y6gn-8.B u7w6yv-8.a ubctpt-8.b U7Y6gn-8.A TDDZwt-8.A RFX5ab-8.B u7w6yv-8.b U4jG2x-8.B QUzqxk-8.B MhJYVf-8.A U4jG2x-8.C U4jG2x-8.A Ako piataci Ako šiestaci Ako ôsmaci 0 50 90 0 50 90 0 50 90 Priemerný percentil žiakov triedy (koľko % populácie predbehol priemerný žiak triedy) 24
Čo sa dozvedáme o slov. školstve? Zistenia o vzdelávacom systéme sú iba vedľajším produktom, ciele KOMPARA sú iné Aký vplyv má spôsob vzniku vzorky (dobrovoľné prihlasovanie) na výsledný obraz o systéme? 25
Vzorka sa javí ako reprezentatívna 11.2. Účastníci testovania z M (9. ročník) podľa zriaďovateľa školy Typ školy Š T Ž Ch D Štátne 688 1 204 19 723 10 091 9 632 Cirkevné 41 55 851 434 417 Súkromné 5 6 83 43 40 11.4. Účastníci testovania z M (9. ročník) podľa pohlavia Pohlavie Počet Pohlavie Počet Chlapci 10 568 Dievčatá 10 089 11.3. Účastníci testovania z M (9. ročník) podľa samosprávneho kraja Kraj Š T Ž Ch D Bratislavský 66 98 1 637 869 768 Trnavský 63 100 1 655 880 775 Nitriansky 100 167 2 645 1 376 1 269 Trenčiansky 92 158 2 707 1 382 1 325 Žilinský 130 229 3 619 1 761 1 858 Banskobystrický 78 138 2 206 1 142 1 064 Košický 99 174 2 834 1 478 1 356 Prešovský 106 201 3 354 1 680 1 674 11.5. Testovaní deviataci podľa známky z M na poslednom vysvedčení Známka Ž Ch D % 1 4 401 1 708 2 693 21,3 2 6 249 2 942 3 307 30,2 3 5 949 3 310 2 639 28,8 4 3 957 2 549 1 408 19,2 5 11 6 5 0,1 Neuvedená 90 53 37 0,4 26
Aké sú vedomosti žiakov? slabé a majú klesajúci trend Po et žiakov 2 000 1 750 1 500 1 250 1 000 750 500 250 Hrubé skóre 20 19 18 17 16 15 14 13 11 12 10 9 8 7 6 5 4 3 2 1 0 0 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 Hrubé skóre 1 501 1001 1501 2001 2501 3001 3501 4001 4501 5001 5501 6001 6501 7001 7501 8001 8501 9001 9501 10001 10501 11001 11501 12001 12501 13001 13501 14001 14501 15001 15501 16001 16501 17001 17501 18001 18501 19001 19501 20001 20501 Umiestnenie v rebrí ku všetkých testovaných žiakov 27
Aké sú vedomosti žiakov? 01 - - Úspešnosť deviatakov: 76,2 % 28
Aké sú vedomosti žiakov? 05 - Úspešnosť deviatakov: 19,5 % 29
Príčiny slabých výsledkov Učivo je nerealistické (príliš veľa, príliš teoretické, veku neprimerané a pre žiakov irelevantné...) Chýba motivácia na strane žiakov Nevhodné formy a metódy Problémy s čítaním a vyjadrovaním 30
Prírodoveda, 4. ročník ZŠ (68 %) Futbalista kopol do lopty tak, ako vidíš na obrázku: Napíš, čo spôsobilo, že sa lopta po chvíli oblúkom vrátila na zem. 31
Prečo sa lopta vrátila na zem? lebo okolo je gravidita, gravicácia, kravitácia, pritlačivosť, gramatická sila, gramotná sila, grafická sila, grafikačné pole, genetická sila, geniračná sila, energetická sila, odrazová sila, magická sila, lebo je ako maget, magnet ju stiahol, v zemi je magnetiok, statická elektrina, dotyk dvoch vecí lebo veci padajú, lebo lopta nelieta, lopta nevidrží, lopta nevedela ostať hore, je ťažšia než vzduch bola vyfúknutá, puknutá lopta, rostrhla sa, sfučala sa, nemá v sebe hélium, bolo to záťažie 32
Prečo sa lopta vrátila na zem? bol silný vietor, chvenie vzduchu, atmosféra kopol nedobre, mal malý kopanec, dal špicák, kopol do vzduchu, kopol nartom, skrčenie palcov, skrčil koleno, kopačky, kryvá kopačka, lebo sa pošmikol kopol slabo, dal slabý výkop, dal vysokú, išla oblúkom, padáčik, išla okružnou, nedali gól 33
Slov. školstvo je homogénne 12.4. Výsledky podľa zriaďovateľa školy Typ školy Počet žiakov Úspešnosť Štátne školy 19 723 50,5 % Cirkevné školy 851 51,4 % Súkromné školy 83 47,6 % 34
Slov. školstvo je homogénne 12.5. Výsledky podľa samosprávneho kraja Samosprávny kraj Počet žiakov Úspešnosť Bratislavský 1 637 49,2 % Trnavský 1 655 49,1 % Nitriansky 2 645 49,4 % Trenčiansky 2 707 51,5 % Žilinský 3 619 50,7 % Banskobystrický 2 206 51,2 % Košický 2 834 50,3 % Prešovský 3 354 51,6 % 35
36 Existujú však rozdiely medzi školami 1 2 3 4 70 % 80 % 90 % 100 % em. známka z M os v teste 5 6 7 8 9 20 % 30 % 40 % 50 % 60 % Prie Priemerná úspešno 9 10 11 0 % 10 % 20 % 1 21 41 61 81 101 121 141 161 181 201 221 241 261 281 301 321 341 361 381 401 421 441 461 481 501 521 541 561 581 601 621 641 661 681 701 721 P Umiestnenie v rebrí ku všetkých zú astnených škôl
Rozdiely medzi školami optikou VŠP 18.1. Využitie potenciálu žiakov 8. ročníka v M na jednotlivých zúčastnených školách Priem m. percentil žiakov školy v M 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % 0 % 10 % 20 % 30 % 40 % 50 % 60 % 70 % 80 % 90 % 100 % Priemerný percentil žiakov školy vo VŠP 37
Rozdiely medzi triedami optikou VŠP 18.2. Využitie potenciálu žiakov 8. ročníka v M v jednotlivých zúčastnených triedach Priem m. percentil žiakov triedy v M 100 % 90 % 80 % 70 % 60 % 50 % 40 % 30 % 20 % 10 % 0 % 0 % 10 % 20 % 30 % 40 % 50 % 60 % 70 % 80 % 90 % 100 % Priemerný percentil žiakov triedy vo VŠP 38
39 Klasifikácia je veľmi subjektívna 1 2 3 4 70 % 80 % 90 % 100 % em. známka z M os v teste 5 6 7 8 9 20 % 30 % 40 % 50 % 60 % Prie Priemerná úspešno 9 10 11 0 % 10 % 20 % 1 21 41 61 81 101 121 141 161 181 201 221 241 261 281 301 321 341 361 381 401 421 441 461 481 501 521 541 561 581 601 621 641 661 681 701 721 P Umiestnenie v rebrí ku všetkých zú astnených škôl
40 Klasifikácia je veľmi subjektívna 1 2 3 4 70 % 80 % 90 % 100 % em. známka z M v teste 5 6 7 8 9 20 % 30 % 40 % 50 % 60 % Pri merná úspešnos v 10 11 0 % 10 % 1 51 101 151 201 251 301 351 401 451 501 551 601 651 701 751 801 851 901 951 1001 1051 1101 1151 1201 1251 Priem Umiestnenie v rebrí ku všetkých zú astnených tried
Čo sa ďalej dozvedáme o školách? panuje na nich blbá nálada mnohé sa boja nastaviť si zrkadlo nemajú motiváciu zlepšovať sa nemajú peniaze 41
Ďakujem za pozornosť. Burjan@exam.sk www.exam.sk www.burjanoskole.sk 42