Tiskovky označeny tagem ‘Státní maturita’

Přečtěte si rozbor aktuálního stavu a hlavních argumentů k otevírání dat ze státních zkoušek. EDUin se zvyšování transparentnosti společné části maturitní zkoušky a jednotných přijímacích zkoušek věnuje dlouhodobě. Tiskovou zprávu k tématu najdete ZDE, starší články a tiskové zprávy si můžete přečíst ZDE. Analýza je dostupná ke stažení ve formátu PDF.

  1. Pojmy a termíny

(A) Agregovaná data (podle Cermatu anonymizovaná data) – de facto informace o úspěšnosti jednotlivých úloh (resp. podúloh), obvykle tvořené informací o tom, kolik žáků vybralo jednotlivé nabízené položky, případně získalo 0, 1, 2, 3, 4 body v úlohách s tvorbou odpovědí.

(B) Částečně anonymizovaná prvotní data (podle Cermatu položková data) – každému žákovi odpovídá jeden záznam, žák má obvykle anonymní identifikátor (číslo), doplněný v některých případech o znak skupiny škol (gymnázium, SOŠ, SOU s maturitou, nástavby); záznam je tvořen částí kódovou a částí bodovou; v části kódové je u uzavřených úloh informace o vybrané položce (například A, B, C, …, nebo ANO či NE apod.), u úloh s tvorbou odpovědi je pouze kód odpovídající v zásadě uděleným bodům; v části bodové je „překlad“ kódů do bodového zisku.

Podle publikačního kalendáře se agregovaná, resp. částečně anonymizovaná prvotní data zveřejňují vždy k 31. 7.

Tento text se nezabývá tzv. výsledkovým portálem s celkovými výsledky celých škol, krajů, skupin oborů a jen částečně se dotýká analytických zpráv, které začal Cermat publikovat po změně vedení. Jde v něm primárně nikoli o výsledky celých testů (a třeba jednotlivých škol či jejich různých skupin), nýbrž o výsledky jednotlivých úloh a podúloh a jejich souvislosti.

  1. K argumentu „nemůžeme více zveřejňovat z důvodu ochrany osobních údajů“

Analogie s volebními daty

Český statistický úřad zveřejňuje na svých stránkách volební výsledky ve dvou verzích. Pro běž­ného uživatele jde o rozklikávací zdroj informací, ve kterém se uživatelsky vstřícným a pochopitel­ným způsobem může dostat třeba až k tomu, jak příslušné volby dopadly v jeho volebním okrsku. Pro odborně zdatnějšího uživatele má formu tzv. otevřených dat, která snadno umožňují strojové zpracování. Rozklikávací verze nemá v nástrojích Cermatu přímou analogii, neboť ani jeho agrego­vaná data (A) nejsou v uživatelsky vstřícné podobě – chybí v nich nejen uživatelský komfort, ale například také informace o tom, která nabízená položka v multiple-choice úlohách je správná. Jistou analogií volebních otevřených dat jsou částečně anonymizovaná prvotní data (B).

Analogie s volebními daty je užitečná také při uvažování o míře rizika, že zachování určitého údaje (například pohlaví) může v některých případech umožnit identifikaci žáka. Je třeba si uvědomit, že riziko je extrémně nízké a jde o střet základního práva na ochranu osobnosti s dalšími základními právy (právo na vzdělání a právo na informace, včetně práva na přiměřené informace o činnosti státních orgánů). Ústavní soud rozhoduje v případě střetu více základních práv důsledně tak, že je třeba pečlivě zvážit důležitost ochrany každého z nich. Právo na tajné hlasování u voleb zaručuje Listina základních práv a svobod. Když ale v malé vesničce dají všichni oprávnění voliči hlas stejné straně, z dat ČSÚ lze zjistit, jak volil Jan Novák, který tam žije. V posledních volbách do Sněmovny málem došlo k tomu, že se poslancem stal někdo, koho občané nezvolili. To by byl průšvih dotýka­jící se samotné podstaty demokratického státu. Příčinou bylo nezapočítávání přednostních hlasů udělených kandidátům, jejichž jména byla na druhé straně hlasovacího lístku. Veřejně dostupná a přiměřeně anonymizovaná volební data tomu pomohla zabránit – ovšem za cenu velmi malého rizika pro pana Nováka. Podobně je tomu například s uváděním informace o pohlaví žáků v anonymi­zovaných prvotních datech. Zatím tam není, ale být by tam měla, protože její přínos vyváží extrém­ně malé riziko, že kvůli tomu dojde k identifikaci výsledků Jana Nováka.

Závěr: Vymlouvat se, že data nelze zveřejňovat z důvodu, že by na nějaké malé škole nebo oboru mohl někdo identifikovat výsledky konkrétního žáka je přehnané a zavání účelovým alibismem. Jednak je to málo pravděpodobné, za druhé existuje analogie se zveřejňováním volebních výsledků, kde to nijak nevadí.

Data mají sloužit k vyšší transparentnosti, demokratické kontrole, zkvalitňování celého procesu a konkrétního znění úloh a tím i k vyšší důvěře společnosti v celý proces státního testování. Tento vyšší zájem převažuje nad zcela marginálním rizikem identifikace výsledků nějakého konkrétního žáka a tímto prizmatem by se k tomu, dle našeho názoru, mělo MŠMT postavit a využít tak mj. externí expertní analýzu (viz též následující právní rozbor).

  1. Právní stav

Východiskem je odstavec 4 článku 17 Listiny základních práv a svobod, který říká: Svobodu projevu a právo vyhledávat a šířit informace lze omezit zákonem, jde-li o opatření v demokratické společnosti nezbytná pro ochranu práv a svobod druhých, bezpečnost státu, veřejnou bezpečnost, ochranu veřejného zdraví a mravnosti.

Dává vlastně návod, jak posuzovat ustanovení zdánlivě silného § 183c školského zákona, které říká: Údaje získané při přípravě nebo zjišťování výsledků vzdělávání podle § 74, 78, § 171 odst. 2 a § 174 odst. 2 písm. a) a údaje vytvořené kombinací nebo vzájemným srovnáním těchto údajů právnická osoba nebo organizační složka státu, která s těmito údaji nakládá, neposkytuje žadatelům o informace podle zákona o svobodném přístupu k informacím, pokud údaje vypovídají o:

  1. a) výsledcích jednotlivých dětí, žáků a studentů,
  2. b) průměrných nebo souhrnných výsledcích za školu nebo více škol nebo za jinak vymezenou skupinu dětí, žáků nebo studentů,
  3. c) srovnání výsledků mezi školami nebo jinak vymezenými skupinami dětí, žáků nebo studentů,
  4. d) obsahu a formě zadání, která dosud nebyla využita v ukončeném zjišťování,
  5. e) připravovaných nebo používaných nástrojích pro zjišťování a zpracování výsledků vzdělávání.

Je vcelku zjevné, že bezpečnost státu, veřejnou bezpečnost, ochranu veřejného zdraví a mravnosti nemůže ohrozit poskytnutí žádného údaje spadajícího pod § 183c. Ochranu práv a svobod druhých může ohrozit poskytnutí údajů spadajících pod a), pokud by vypovídaly o výsledcích konkrétních (identifikovatelných) osob, a dále poskytnutí údajů spadajících pod d) a snad též e), neboť by to mohlo ohrozit spravedlivost zkoušek (například prozrazením obsahu jen někomu). Poskytnutí agregova­ných dat (A) a částečně anonymizovaných prvotních dat (B) pod § 183c zjevně nespadá, a to ani v případě, že částečně anonymizovaná prvotní data obsahují znak skupiny škol (gymná­zium, SOŠ, SOU s maturitou, nástavby) nebo údaj o pohlaví žáků (viz bod 2).

Proto také MŠMT již několikrát poskytlo částečně anonymizovaná prvotní data z přijímacích zkou­šek nebo z maturitní zkoušky na základě žádosti podle zákona o svobodném přístupu k informacím (dále jen Infozákon), a to včetně znaku skupiny škol (gymnázium, SOŠ, SOU s maturitou, nástavby).

Poznámka: K údaji o pohlaví viz dále.

Důležité je rovněž ustanovení § 2 odst. 4 správního řádu: Správní orgán dbá, aby přijaté řešení bylo v souladu s veřejným zájmem a aby odpovídalo okolnostem daného případu, jakož i na to, aby při rozhodování skutkově shodných nebo podobných případů nevznikaly nedůvodné rozdíly.

Závěr: Je zřejmé, že nechce-li se MŠMT dopustit porušení tohoto ustanovení správního řádu, resp. lhůty pro poskytnutí informace v Infozákoně, mohou být termíny zveřejnění dat uvedené v publikačním kalendáři (což je dokument bez jakékoli právní závaznosti vůči veřejnosti) výrazně překonány žádostí o poskytnutí příslušných dat podanou dostatečně včas podle Infozákona. Proto je zveřejňování dat vhodné automaticky rozšířit i o znak skupiny škol a pohlaví žáka.

  1. Zbytečné utajování ničí důvěru

Práce Cermatu je od spuštění státní maturity v roce 2011 provázena neochotou poskytovat veřejno­sti relevantní informace. V prvním ročníku bylo dokonce podáno trestní oznámení na statutární zástupce EDUinu za zveřejnění znění zadání právě použitých maturitních testů. Zprávy o výsled­cích státní maturity měly téměř pokaždé jinou strukturu a pracovaly dokonce s datovými soubory získanými v různých letech podle různých kritérií – nemožnost sestavit věrohodné datové řady byla očividná. V některých letech nedošlo ani ke zveřejnění klíčů správných řešení, jindy se Cermat snažil utajit manipulaci s hodnocením uzavřených úloh. Například na jaře 2017 došlo tímto způso­bem k umělému snížení obtížnosti testu o 4,6 %, což vedlo k tomu, že prvomaturantů propadlo namísto 10 275 jen 5 896. J. Zíka napsal, že „s ohledem na zkušenosti z minulých období maturitní zkoušky lze vždy očekávat záměrnou nebo nevědomou dezinterpretaci zveřejněných dat“. Byl to však on, kdo například ve dvou ročnících sdělil veřejnosti jen část pravdy: že v maturitním testu Matematika došlo k mírnému zlepšení průměrné úspěšnosti za všechny žáky. Neprozradil už ovšem, že se současně zhoršili jak gymnazisté, tak negymnazisté a ke zlepšení průměru za všechny žáky došlo jen díky tomu, že mezi nimi přibylo gymnazistů.

K pohlaví žáků

Jedním ze základních požadavků na jednotné testy (přijímací i maturitní) je, že nesmějí zvýhodňo­vat některé pohlaví. Podle oficiálních Cermatu dosáhly na jaře 2018 v přijímacích testech na osmi­letá gymnázia dívky o 2,1 procentního bodu lepšího výsledku v českém jazyce, ovšem v matematice byl naopak výrazně lepší průměrný výsledek chlapců. Rozdíl tam činil 5,8 procentního bodu. Je samozřejmě důležité vědět, v jakých typech úloh byly rozdíly mezi oběma pohlavími nejmenší a největší – například kvůli tomu, aby se na to mohli zaměřit učitelé. A také kvůli tomu, aby se podobný nedostatek v následujících přijímacích testech už nevyskytoval. MŠMT ovšem žádost o částečně anonymizovaná data s údajem o pohlaví odmítlo s odůvodněním, že taková data nejsou k dispozici, protože se tím nikdo nezabýval. Buď to není pravda, anebo k analýzám výsledků přistupuje Cermatu zcela diletantsky. Zatímco analytická zpráva Cermatu za první dva ročníky jednotných přijímacích zkoušek člení souhrnné výsledky testů i podle pohlaví, v letošních signálních výsledcích jednotných přijímaček už údaje o pohlaví chybějí. To budí podezření, že rozdíly výsledků mezi pohlavími jsou ještě větší než v minulém roce.

Podobně trapně se vyvíjela situace kolem letošní úlohy č. 11 maturitního testu z matematiky. Nejprve vyšlo najevo, že Cermat utajil jak před externími členy své vlastní validační komise, tak před členy Nezávislé odborné komise MŠMT pro posouzení maturitního testu z matematiky skutečnost, že uznával nejen odpověď (pouze) 248º uvedenou v klíči, ale také odpověď 248º a 112º. Počet žáků, kterým pro úspěšné složení zkoušky chyběl 1 bod v úloze 11 a současně uvedli odpo­věď (pouze) 112º, však prý kvůli způsobu zpracování není znám. Ačkoli je to velmi důležité a šlo o „ruční“ zkontrolování odhadem 300 naskenovaných záznamových archů. To vyvolává nejrůznější domněnky kvůli tomu, že podle některých odborníků měla být uznávána rovněž odpověď (pouze) 112º. Opravdu nebyli tito žáci identifikováni? A pokud skutečně nebyli, neměl by být změněn způsob vyhodnocování otevřených úloh, aby pracnost opravy nebránila průchodu spravedlnosti?

Závěr: Popisované problémy zbytečně oslabují důvěru odborné i laické veřejnosti. U mnohých učitelů vyvolávají dokonce frustraci (viz například diskuze pod články na webu eduin.cz nebo ceskaskola.cz nad spornou otázkou č.11 z letošní matematiky). Jsme přesvědčeni, že otevírání dat by tento problém řešilo, a je to tudíž v zájmu společnosti i MŠMT. Dle argumentů výše je nezbytné do zveřejňovaných kategorií anonymizovaných dat zařadit i pohlaví žáka.

  1. Současný stav

Přehled zveřejňovaných dat a termínů – porovnání jednotných přijímacích zkoušek a společné části maturitní zkoušky

druh informace – termín zveřejnění přijímačky maturita
znění testů (zadání) – v den použití ano ano
pracovní verze klíče správných řešení – v den použití ne ne
prac. verze odůvodnění správných odpovědí – v den použití ne ne
prac. verze vysvětlení, co úlohy ověřují – v den použití ne ne
defin. verze klíče správných řešení – v den odeslání výsledků ano ano
defin. verze odůvod. správ. odpovědí – v den odeslání výsledků ne jen matematika
defin. verze vysvětlení, co úl. ověřují – v den odeslání výsledků ne ne
agregovaná data – v den odeslání výsledků ne ne
část. anonymiz. prvotní data – v den odeslání výsledků ne ne
agregovaná data – 31. 7. ano ano
část. anonymiz. prvotní data – 31. 7. ano ne

Závěr:

Odůvodnění správných odpovědí bylo letos na jaře zveřejněno poprvé, kvitujeme alespoň nějaký posun.

Není zřejmé, proč existuje rozdíl mezi přijímačkami a maturitou u částečně anonymizovaných prvotních dat zveřejňovaných k 31. 7. Agregovaná data by měla být zveřejňována v uživatelsky vstřícné podobě – podobně jako rozklikávací volební data. Položky s šedým pozadím buď nejsou zveřejňovány vůbec, nebo zveřejňovány jsou, ale pozdě – měly by být zveřejňovány v uvedeném termínu.

Žlutě označená pole – přijímačková (na 4leté obory) ani maturitní data neobsahují znak skupiny škol (gymnázium, SOŠ, SOU s maturitou, nástavby) a neobsahují ani údaj o pohlaví. Z hlediska ochrany osobních údajů to nemůže být problém u dat přijímačkových, u dat maturitních přinejmenším u prvomatu­rantů (jde o veliké soubory).

  1. Ukázka odůvodnění správných odpovědí a vysvětlení, co úloha ověřuje

Co se stane, když dítě usne?  (zapiš čísla všeho, co se opravdu stane)

Přestane:

  1. dýchat.
  2.   slyšet.
  3.   růst.
  4.   vytvářet sliny.
  5.   vytvářet moč.
  6.   trávit potravu.
  7.   mu pracovat mozek.
  8.   odpovídat na otázky.
  9.   mu obíhat krev v těle.

Poznámka: Žák tedy mohl odpovědět třeba 2,3,7,8 – věděl, že nabídka úlohy může mít víc správných položek, ale jejich počet předem neznal.

Odůvodnění (správné položky tučně):

  1. Člověk dýchá i ve spánku, můžeme slyšet oddechování a pozorovat pohyby hrudníku.
  2. Člověk slyší i ve spánku – větší hluk ho probudí.
  3. Lidské buňky se dělí i ve spánku. Novorozenec většinu času prospí, přesto velmi rychle roste.
  4. Sliny se vytvářejí i ve spánku, což můžeme u dětí pozorovat (poslintaný polštář).
  5. Moč se vytváří i během spánku – ráno obvykle potřebujeme na záchod. Malé děti se někdy v noci počurávají.
  6. Potravu trávíme i ve spánku – ráno máme opět prázdný žaludek a hlad.
  7. Mozek pracuje i ve spánku, zpracovává nabyté informace a řídí základní tělesné procesy.
  8. Člověk ve spánku nereaguje vědomě na vnější podněty. Může sice třeba pohnout nohou,
    když ho polechtáme na chodidle, ale neví o tom.
  9. Krev v těle obíhá i ve spánku, můžeme pozorovat pulsování cév. Bez přísunu kyslíku do mozku, což obstarává právě okysličená krev, bychom během několika minut zemřeli.

Vysvětlení, co úloha ověřuje

Cílem úlohy bylo odhalit chybné představy žáků o funkcích těla ve spánku. Například dýchání bude nejspíš jednoznačně posuzováno jako funkce, která ve spánku trvá, zatímco u sluchu, práce mozku, vytváření slin a trávení mohou být výsledky horší. Žáci nejspíš zamění tyto funkce za jejich vědomé, aktivní použití: naslouchání, uvažování či jezení. Úloha zjistí, do jaké míry si žáci uvědomují, že velká část tělesných procesů je řízena zcela nezávisle na našem vědomém úsilí o ně, a probíhá tedy i ve spánku.

Je třeba upozornit, že vysvětlení, co úloha ověřuje, je něco jiného než příslušnost úlohy k určitému tématu v RVP nebo v katalogu požadavků, kterou zachycuje tzv. specifikační tabulka. Jako příklad lze uvést úlohu č. 9 z letošního přijímacího testu pro deváťáky, v níž měli žáci najít v odstavci o 883 znacích tři podstatná jména, která se skloňují podle vzoru „růže“. Velmi podstat­nou součástí úlohy je přečtení relativně dlouhého textu, který ovšem žák musí kvůli dalším úlohám číst nejméně ještě jednou, protože v nich jde o porozumění obsahu. Úloha č. 9 tedy ověřuje znalost vzorů pro skloňování podstatných jmen jen u těch žáků, kteří se nenechají otrávit její nesmyslností.

Zmiňovaný text:

Zásadní poznatky geniální vědec získal díky studiu pěnkav. Všiml si rozdílů v jednotlivých populacích těchto ptáků, které žily na různých galapážských ostrovech. Vypozoroval, že tvar a velikost jejich zobáku jsou přizpůsobeny dostupným zdrojům potravy. Některé pěnkavy pomocí svého drobného zobáku snáze zkoumaly květy, jiné pěnkavy měly silný zahnutý zobák jako papoušek a drtily jím oříšky. Na každém ostrově se u pěnkav vyvinuly znaky nejlépe zajišťující přežití druhu. Po návratu z výpravy Darwinovi trvalo více než dvacet let, než plně pochopil, že právě pobyt na Galapágách je klíčem k porozumění evoluci. Svou evoluční teorii představil v roce 1859. V díle O vzniku druhů přírodním výběrem vysvětlil, že organismy se postupně přizpůsobují měnícím se podmínkám prostředí a že přežijí jen ty, které se na změny nejlépe adaptují. Jeho myšlenky posunuly vědecké poznání o značný krok vpřed.

  1. Proč jsou navrhované změny užitečné

Prvním univerzálním odůvodněním výše uvedených návrhů je veřejná kontrola práce Cermatu a předcházení chybám, kterým opakovaně nedokázal zabránit – v případě státní maturity je letos (viz Matematika, úloha č. 11) i dříve často buď maskoval, nebo prostě ignoroval. Pokud bude zřejmé, že v případě klíče správných odpovědí, odůvodnění správných odpovědí i vysvětlení, co úlohy ověřují, jde při zveřejnění v den testování o pracovní verze, nebudou případné nedostatky většině lidí vadit. Bude však zřejmé, co autor každé jednotlivé úlohy sledoval a jak si představoval správné řešení. Pokud někdo objeví chybu (byť jen domnělou), upozorní na ni a Cermat bude mít dost času se upozorněním zabývat tak, aby – pokud se podezření prokáže – nedostatky nepronikly do oficiálních výsledků žáků. Například matematická úloha č. 11 byla podezřelá již v den zveřejnění testu. Až do zveřejnění klíče správných řešení však nebylo zřejmé, zda jde o nedostatek zadání, nebo naopak o záměr (odvést pozornost od druhého správného řešení 112º).

Druhým univerzálním odůvodněním výše uvedených návrhů je užitečnost pro výuku. Za pro­středky státního rozpočtu vzniká, vlastně jako vedlejší produkt, veliké množství informací pro učitele a didaktiky odpovídajících předmětů, často poměrně překvapivých. Cermat mj. disponuje velmi bohatou (a před veřejností skrytou) databází odpovědí žáků na úlohy s tvorbou odpovědí. Tzv. agregovaná data (A) obsahují vlastně jen informaci o úspěšnosti úloh, resp. o četnosti nabízených odpovědí. Kolik učitelů matematiky ovšem tušilo, že následující triviální úlohu z maturitního testu Matematika správně vyřeší pouze 15,7 % maturantů (z necelých 17 tis. žáků)?

Čerpadla

Nádrž se plní několika stejně výkonnými čerpadly. Dvě čerpadla by prázdnou nádrž naplnila za x hodin (x > 0). Vyjádřete v hodinách, za jak dlouho by prázdnou nádrž naplnilo n čerpadel (n Є N).

Tzv. částečně anonymizovaná prvotní data (B) umožňují hlubší analýzy. Lze například zkoumat, jak si žáci úspěšní v úloze o čerpadlech počínali v jiných úlohách testu. Jaká část z nich byla nadprů­měrně úspěšná? Byli úspěšnější chlapci, nebo dívky? Atd.

  1. Další návrh

Z písemného vyjádření MŠMT i Cermatu vyplývá, že vyhodnocování úloh testu Matematika s tvorbou odpovědi probíhá způsobem, při kterém se ztrácí řada informací, které jsou cenné jak pro vlastní vyhodnocení, tak pro školy při práci s výsledky. Výsledkem vyhodnocování (například úlohy č. 11) je pouze informace, zda žák uvedl hodnotu pokládanou za správnou, uvedl hodnotu pokládanou za nesprávnou, případně neuvedl hodnotu žádnou. Jenomže cennou informací je především to, které hodnoty žáci uváděli a kolik takových žáků u každé hodnoty bylo. Často se z nich totiž dají zpětně rekonstruovat postupy, kterými k nim žáci dospěli. Zvláště úlohy směřující pouze k číselnému výsledku by vlastně vůbec neměly být předmětem „ručního“ hodnocení, neboť je pomalé, nákladné a navíc v případě chyby v pokynech pro hodnotitele musí být opakováno od samého počátku. Algoritmy pro rozpoznávání obrazců jsou už mnohem dokonalejší než v roce 2011 a vzhledem k tomu, že záznamové archy jsou skenovány, vlastně nic nebrání tomu, aby číselné hodnoty v odpovědích žáků byly rozpoznávány strojově a zaznamenávány v prvotním datovém souboru. Kontrolu rozpoznání svých odpovědí může provést každý žák prostřednictvím internetu.

  1. září 2019 Za EDUin

Miroslav Hřebecký, programový ředitel

 

Přečtěte si celý článek

Praha 5. září 2019 – Zveřejňujeme analýzu EDUin ke stavu a velmi malému pokroku v otevírání dat z jednotných, státem organizovaných zkoušek (společná část maturitní zkoušky, jednotné přijímací zkoušky). V materiálu rozebíráme nelogické disproporce v celém procesu a vyvracíme některé argumenty státní správy, a zároveň přinášíme konkrétní doporučení, co by se v procesu mělo zlepšit směrem k vyšší kvalitě zkoušek od fáze zadání, formulace úloh, až po následné zveřejnění agregovaných dat k expertní i veřejné kontrole.

Po opakovaných chybách v zadání otázek a nejednoznačných správných řešeních v maturitní zkoušce i JPZ bylo CZVV (Cermat) opakovaně vyzýváno odbornou veřejností, ale koneckonců i svým nadřízeným orgánem ministerstvem školství, aby celý proces učinilo maximálně transparentním a po realizaci zkoušek zveřejnilo nejen zadání a klíč správných odpovědí, ale i vyargumentovalo zařazení jednotlivých úloh a poskytlo anonymizovaná data, která by odborníkům umožnila analyzovat testy jako celky i jednotlivé sporné úlohy.

Zveřejňujeme detailní analýzu současného stavu, kdy při porovnání procesu zveřejnění dat kolem maturitní zkoušky a jednotných přijímacích zkoušek dokazujeme nerovnoměrnosti, které CZVV usvědčují z nerovného přístupu a deficitu transparentnosti. Zároveň vyvracíme častý argument státní správy o nemožnosti zveřejnění anonymizovaných dat s odkazem na ochranu osobních údajů. Přinášíme analogii se zveřejňováním volebních výsledků, kde je praxe léta zavedená a společností přijímaná.

V závěru se soustředíme na formulování konkrétních návrhů, v čem by se měly tyto druhy zkoušek zkvalitnit, aby lépe plnily svoji úlohu a minimalizovaly negativa, která obecně high – stakes testy přinášejí.

Analytický materiál je ke stažení ZDE.

 

Přečtěte si celý článek

Praha, 27. srpna – Ministr školství Robert Plaga minulý týden navrhl, aby se povinná maturita z matematiky a cizího jazyka odložila minimálně o osm let. Do té doby by chtěl zachovat současnou podobu zkoušky, v níž si maturant mezi jmenovanými předměty sám volí. Plaga to zdůvodnil analýzou úspěšnosti žáků u jednotlivých typů úloh v didaktickém testu z matematiky, v níž zjistil, že žáci nejvíce selhávají v úlohách důležitých pro život. Zástupci odborné veřejnosti a EDUin toto rozhodnutí podporují, neboť jde o významné převzetí odpovědnosti za nutnost zkvalitnění vzdělávacího procesu před úpravami zkoušek.

Ministr školství Plaga uvedl, že nehodlá prosazovat experiment, v němž se vlivem zavedení povinné zkoušky žáci začnou více učit. Jinými slovy, riziko, že s povinnou maturitou z matematiky a cizího jazyka přibude propadlíků, bylo mnohokrát zdůrazňováno a je velmi reálné. Cílem změn ve vzdělávacím systému má přitom být pozitivní, nikoliv represivní, podpora, která rovněž vede ke zkvalitnění a zlepšení výsledků žáků. Tuto cestu ostatně zdůrazňuje většina odborných organizací, které volají po zlepšení pedagogického procesu a zvýšení podpory jednotlivým aktérům.

Ministerstvo školství uvedlo řadu významných důvodů, proč by bylo nesprávné povinnou maturitu z matematiky nyní zavádět. Je třeba změnit systém vyučování matematiky, zajistit dostatečnou metodickou podporu pro učitele a zlepšit vzdělávání budoucích učitelů. Bylo by neuvážlivé, aby změnám v povinných předmětech maturity nepředcházelo ověření, že výuka dokáže žáky na zkoušku dostatečně připravit. Základními principy pro rozvoj výuky matematiky by měly být individualizace vzdělávacího procesu a diferenciace pro žáky v rámci smíšených tříd.

Proti zavedení povinné maturity z matematiky mluví i další data. Matematiku si každým rokem vybírá méně žáků, a přestože letošní rok zaznamenal mírné zlepšení průměrných výsledků, neúspěšnost je stále nesrovnatelně vyšší oproti českému jazyku nebo angličtině. Mezinárodní průzkumy jako je PISA nebo TIMSS, dlouhodobě ukazují významné rozdíly v kvalitě výuky mezi školami a závislost žákovských výsledků na socioekonomickém statusu (SES). To znamená, že školy v současné podobě neumí dostatečně kompenzovat znevýhodnění, s nímž žák přichází z rodiny.

Ministerstvo školství tímto ukazuje, že mu nejsou lhostejné empiricky ověřené závěry z terénu, ani osudy budoucích maturantů. Lze předpokládat, že povinnou maturitou z matematiky by byli nejvíce postiženi žáci s nízkým SES, a ještě více ti, kteří chodí do škol s nízkým průměrným SES. EDUin dlouhodobě doporučuje, aby novým povinnostem ve vzdělávacím systému předcházelo šetření o připravenosti jednotlivých aktérů, přičemž základem by měl být varovný indikátor meziročně se snižujícího počtu maturantů z matematiky.

Bohumil Kartous, vedoucí komunikace EDUin, řekl: „Fakt, že se ministr Plaga rozhodl jednat na základě analýzy dat z maturit, je signálem, že se vzdělávací politika začíná alespoň dílčím způsobem blížit evidence-based rozhodování. Zároveň je nutné ocenit, že se ministr školství rozhodl akcentovat zájmy těch, jimž je vzdělávání určeno, tedy zájmy žáků. Bylo by maximálně prospěšné, kdyby se k podobné odpovědnosti přihlásili i ostatní aktéři, kteří vzdělávací politiku v ČR ovlivňují. Lépe bychom dosáhli shody.”

 

 

Přečtěte si celý článek

Praha, 24. června – EDUin ve spolupráci s nezávislými matematiky se několik týdnů intenzivně věnuje chybě v didaktickém testu z matematiky, který připravuje CERMAT v rámci státní maturity. Je nepochybné, že zadání úlohy č. 11 nebylo správně formulované, a tak umožnilo více možností, než organizátor zkoušky původně zamýšlel. Maturanti, kteří nečetli mezi cermatími řádky, jsou penalizováni. Ignorace CERMATu a dosavadní nedostatečná snaha ministerstva školství napravit situaci jsou nepřijatelné vzhledem k významu, jaký má maturita pro budoucnost mladého člověka. Proto EDUin žádá sérii kroků, které by měly zlepšit důvěru ve zkoušku a narovnat chybu, za níž se dosud stát zdráhá přijmout patřičnou odpovědnost.

V didaktickém testu z matematiky vyžaduje úloha č. 11 po maturantovi, aby na základě znalosti úhlu o velikosti 112° vypočítal velikost úhlu druhého. Zadání definuje, že jde o dva různé úhly, nikoliv však dva různě veliké úhly. Zatímco CERMAT tedy očekával, že maturant vypočítá druhou velikost s výsledkem 248°, nedostatečnou formulací fakticky žádal o vypočtení velikosti druhého úhlu, který může mít stejnou velikost jako úhel původní, a přitom musí být úhlem jiným, tedy ležícím jinde.
Z matematického pohledu je proto správně nejen oficiálně platné řešení 248°, ale také 112° a řešení obsahující obě uvedené velikosti.

Člen nezávislé komise MŠMT pro posouzení testu Eduard Fuchs tvrdil, že „jde o nepochopení standardní školské terminologie“, v níž se úhel zaměňuje s velikostí úhlu, pročež je jediným správným řešením 248°. Nad zněním úlohy a správnou odpovědí se rozhořela odborná polemika. Fuchsovo stanovisko podpořil bývalý předseda JČMF Josef Kubát, opoziční stanovisko zastává profesor Václav Chvátal, matematik s vědeckou praxí z několika zahraničních univerzit. U řešení správného znění úlohy se štěpí i názor učitelů matematiky.

Ministerstvo školství později uvedlo, že Cermat – bez vědomí členů jeho komise – uznával rovněž odpověď obsahující obě velikosti: 112 a 248 stupňů. Maturanti, kteří odpověděli výsledkem 112°, mají nicméně z úlohy nadále 0 bodů. EDUin považuje za alarmující, že nedošlo k opravě chyby a že není zřejmé, jak a zda vůbec se ministerstvo a CERMAT k poškození žáků postaví. Je běžnou praxí, aby se uznalo širší pojetí správných odpovědí, je-li nad zadáním odborná polemika. V neposlední řadě dochází k opětovnému zpochybnění důvěry veřejnosti a zejména maturantů vůči CERMATu, navíc jen rok od odvolání bývalého ředitele za chybu v testu z češtiny.

EDUin na základě zmíněného vyzývá MŠMT, aby stav napravilo a:

  1. znovu přezkoumalo a obodovalo didaktické testy z matematiky a uznalo všechny tři možné odpovědi u úlohy č. 11 (tj. 248°; 112°; 248°a 112°),
  2. zveřejnilo počet maturantů, kteří v úloze č. 11 odpověděli výsledkem jen 112°,
  3. zveřejnilo počet maturantů, kteří v úloze č. 11 odpověděli jen 112° a k úspěšnému složení testu jim scházel 1 bod (bez požadované změny hodnocení tedy propadli) a
  4. zavedlo dlouhodobě žádaná opatření, jimiž lze podobným situacím předcházet, to jest zveřejňovat interpretovaný klíč odpovědí a anonymizovaná data o odpovědích bezprostředně po vyhodnocení a zveřejnění výsledků zkoušky.

Miroslav Hřebecký, programový ředitel EDUin, řekl: „Opět se ukazuje, že v procesu státních maturit dochází k chybám v zadání a klíči správných řešení úloh. Kontrolní procesy se tak i přes loňskou změnu na postu ředitele CZVV ukazují nadále jako nedostatečné. To jasně dokládá, že je třeba zvětšit míru veřejné kontroly nad vznikem úloh. S osudy mladých lidí si nelze tak lehkovážně zahrávat, jde o budování jejich elementární důvěry ve stát a demokratickou společnost a toto může být první a fatální zkušenost čerstvě dospělého člověka s úředním mechanismem.“

Matematik Oldřich Botlík řekl: „Někteří učitelé chápou vzdělávání v matematice spíš jako drezúru: jde jim o to, aby se žákovi spustily v hlavě automatismy vyvolané rozpoznáním znaků typových úloh. O to ale ve skutečné matematice tolik nejde – tam jde naopak o hluboké přemýšlení o významu základních pojmů, uvědomování si jejich vzájemných souvislostí a vytváření nových pojmů.“

Přečtěte si celý článek

Dohadování, zda zadání úlohy č. 11 v maturitním testu z matematiky poškodilo, či nepoškodilo žáky, může ministerstvo školství ukončit snadno a rychle

Praha, 24. května 2019 – Probíhající polemika mezi Oldřichem Botlíkem z iniciativy Maturitní data – odtajněno a Eduardem Fuchsem a Josefem Kubátem z Jednoty českých matematiků a fyziků o korektnost zadání jedné z úloh v letošním maturitním testu z matematiky má snadné řešení. Zveřejnění, kolik maturantů odpovědělo na úlohu způsobem, který zmiňují kritici zadání.

Na otázku, zda úloha poškodila maturanty, případně kolik jich bylo, lze snadno odpovědět. Stačí, když Cermat nahlédne do dat z maturitní zkoušky, která má k dispozici. Je na něm, aby zveřejnil, kolik maturantů opravdu odpovědělo, že velikost úhlu, na níž se dotazuje úloha č. 11 v maturitním testu z matematiky, je 112°. A kolik z nich na základě této odpovědi přišlo o bod a kvůli tomu u zkoušky propadli.

Je evidentní, že i přes zpřísněnou kontrolu a pozornost, kterou dvě odborné komise úlohám věnují, se může sporné zadání vyskytnout. Navíc je možné, že Cermat nesbírá data takovým způsobem, aby uměl rychle odpovědět na otázku, kolik maturantů zvolilo tuto variantu odpovědi. Letošní maturitní kauza opět ukazuje, jak by celé věci pomohlo, kdybychom měli včas k dispozici jak anonymizovaná maturitní data, tak zdůvodnění, proč autoři úloh považují za správnou odpověď právě tu, kterou uvádí maturitní klíč správných řešení.

Bob Kartous, vedoucí komunikace EDUin, řekl: „Dlouhodobě vyzýváme Cermat a ministerstvo školství, aby spolu se zadáním testů byla zveřejněna informace, co přesně jednotlivé testové úlohy ověřovaly, a co nejdříve také anonymizovaná maturitní data. Pokud by to už dnes bylo zvykem, mohli jsme si ušetřit přetahování o to, zda zadání úlohy č. 11 bylo korektní a zda úloha poškodila maturanty. Místo toho jsme svědky, že Cermat na probíhající debatu ani nezareagoval a není vůbec jisté, zda má příslušná data k dispozici. Cermat letos poprvé zveřejnil vzorová řešení matematických úloh, což je výrazným posunem k lepšímu. Například u vzorového řešení úlohy 11 je nyní jasně vidět, kde je sporné místo.“

Přečtěte si celý článek

Iniciativa Maturitní data – odtajněno upozorňuje na chybně zadanou úlohu v maturitním testu z matematiky a na chybějící řešení v klíči správných řešení

Praha, 15. května 2019 – Oldřich Botlík z iniciativy Maturitní data – odtajněno upozornil v článku zveřejněném na stránkách eduin.cz na chybné zadání jedné z úloh letošního maturitního testu z matematiky. Upozorňuje tím na rozpor se závěry Nezávislé odborné komise MŠMT, podle níž jsou letošní maturitní testy bez chyb. Článek zároveň znovu připomíná návrh zveřejňovat zdůvodnění správných odpovědí na jednotlivé úlohy.

Ve včerejší tiskové zprávě Ministerstva školství konstatuje Nezávislá odborná komise pro maturitní zkoušku, že v zadání letošních maturitních testů nenašla žádnou chybu. Text Oldřicha Botlíka toto tvrzení rozporuje a upozorňuje na zadání úlohy č. 11 v maturitním testu z matematiky, v němž měli maturanti určit velikost úhlu. Vysvětluje, proč tato úloha neměla jedno, ale dvě správná řešení.

Dnes zveřejněný klíč správných řešení potvrdil, že Cermat druhé správné řešení neuznával. Problém je v nejednoznačném zadání úlohy. Cermat letos poprvé zveřejnil vzorová řešení testových úloh, za což mu patří uznání. Vzorové řešení úlohy 11 ovšem bohužel nedostatečně analyzovalo zadání, a proto ignorovalo druhé správné řešení 112°. Obecně však jde o cestu, jak výskyt podobných chyb omezit.

Měli bychom také vědět, kolik maturantů zvolilo onu „chybnou“ odpověď 112° a kolik z nich tedy bylo poškozeno. To bohužel zatím může zjistit pouze Cermat, protože ke zveřejnění četností odpovědí žáků i anonymizovaných zdrojových dat dojde podle publikačního kalendáře maturit až koncem července 2019.

Celý text s titulkem V zadání maturitního testu z matematiky byla chyba najdete ZDE.

Oldřich Botlík, iniciativa Maturitní data – odtajněno, řekl: „Vyzývám Cermat a ministerstvo školství, aby zveřejnily počet maturantů, kteří vybrali v úloze č. 11 maturitního testu z matematiky variantu odpovědi 112°, případně obě správná řešení 112° a 248°. Pak budeme vědět, kolik studentů chybně zadaná úloha reálně poškodila. Mí oponenti mi předhazují ,každoroční projevy hnidopišství´. Ďábel bývá ale často ukryt v detailu. Až v Cermatu začnou přistupovat k vlastním úlohám s pokorou a k odpovědím maturantů s empatií, rád si podobné články odpustím. Zatím však státní maturita každoročně poškozuje nevinné žáky, jimž stát navíc upírá informace, které mohou využít ke své obraně. A s tím se smířit nehodlám.“

 

 

Přečtěte si celý článek

Praha, 8. dubna – Ministerstvo školství minulý měsíc poslalo do připomínkového řízení návrh školského zákona, který vyjímá ústní a písemnou zkoušku společné části maturitní zkoušky z kompetence CERMATu. Staly by se opět odpovědností jednotlivých škol. Centrálně by se zadávaly a hodnotily už jen maturitní didaktické testy. Rovněž by se ve všech maturitních oborech mělo na jaře 2022 sjednotit zavedení povinné maturity ze tří předmětů, a to češtiny, cizího jazyka a matematiky. EDUin na základě odborné debaty, kterou minulý týden uspořádal, upozorňuje na nedostatky záměru. Zejména na to, že jde jen o dílčí úpravu konceptu, jenž je nutné významně přepracovat na základě cílů stanovených strategií 2030.

Ministerstvo školství chce přesunutím písemné práce (slohovky) a ústní části dle svých slov posílit vazbu mezi učiteli na dané školy a žáky-maturanty. Z dostupných dat, která ukazují úspěšnost na školách během hodnocení vlastními učiteli a centrálně, vyplývá, že učitelé jdou svým maturantům naproti. To se týká zejména škol, kde je v centrálně hodnoceném didaktickém testu vysoká neúspěšnost. Ministerstvo v rámci detailního hodnocení dopadů návrhu zákona přímo předpokládá, že snížení možné neúspěšnosti v těchto dvou zkouškách pomůže zmírnit nárůst propadlíků, jenž vznikne, až bude zavedena povinná maturita z matematiky.

„Je otázkou, zda nejde o hledání pragmatické cesty, jak se vyrovnat s potenciálně vysokým počtem neúspěšných maturantů. To by byl skutečně technokratický cynismus,“ říká vedoucí komunikace EDUin Bob Kartous.

Ministerstvo současně doplňuje, že návrh má jít naproti dvouúrovňové stavbě kurikula, které předpokládá, že každá škola bude mít do určité míry jiný obsah vzdělávání, tudíž i jiné výstupní zkoušky.

Praktický problém se může skrývat ve financování přenosu odpovědnosti na školy. Ministerstvo školství v důvodové zprávě uvádí, že v důsledku odlehčení práce v CERMATu by se po roce 2021 mělo uspořit zhruba 21 milionů korun. Návrh neuvádí, jak bude finančně kompenzována práce učitelů, kteří budou mít povinnost žákovské slohy opravovat.

Byť návratem k hodnocení ve školách dojde z velké části je snížení formalizace hodnocení písemných prací a k posílení faktoru znalosti individuality maturanta, kromě možné snahy učitelů pomáhat svým žákům lze očekávat i nárůst rozdílů v přístupu k výuce. Zatímco na řadě škol může změna vést k pokroku a zavedení například argumentačních esejí či větší čtenářské reflexi v ústní části, nic nebude omezovat další školy, aby se zde vrátily k memorování a netvůrčím slohovým útvarům.

V neposlední řadě jsou uzpůsobení zkoušek žákům s hendikepem, jako je třebas dysgrafie nebo dyslexie. Školy by po změně zákona ztratily podporu, kterou nyní CERMAT v tomto ohledu vyvíjí, proto je důležité se ptát, zda by tito žáci nepřišli k újmě snížením spravedlivosti zkoušky.

„Vzhledem k přípravám Strategie vzdělávací politiky do roku 2030 a změnám v rámcových vzdělávacích programech je nejasné, jak s tím snaha uvolnit centralizaci maturit souvisí. Je skutečné možné, že má jít jen o kompenzaci předpokládaného růstu propadlíků, příp. možnost ušetřit. Maturitu i jiné high stakes zkoušky je třeba pojmout jako prostředek k tomu, jak posílit důraz na žádoucí obsah a formu vzdělávání, což v současné podobě naplňováno není. Proto by reforma maturit měla být mnohem hlubší a měla by jít ruku v ruce se stanovenými cíli strategie 2030. Současný koncept nepodporuje stanovené cíle vzdělávání a je třeba se zamyslet nad tím, jak by vlastně výstupní zkouška na SŠ měla vypadat. Nabízí se pojetí maturit jako dlouhodobého projektu, jenž je uzavřen obhajobou. Takové pojetí mnohem více posiluje komplexitu přípravy a dává tím školám zcela odlišné zadání,“ uzavírá Kartous.

Přečtěte si celý článek

V podkladech pro tiskovou zprávu EDUinu vydanou dne 11. března 2019 s titulkem Analýza propadovosti – Hodnotitelé na školách dosahují stabilnějšího výsledku jsem se dopustil chyby, za kterou se čtenářům ještě jednou omlouvám. Spočívala v tom, že jsem hodnocení písemných prací z češtiny, které žáci psali v roce 2013 jako součást společné části maturitní zkoušky, zahrnul pod centrální hodnocení organizované Cermatem, ačkoli práce byly tehdy hodnoceny na školách. Zdrojová data jsem proto přepočítal. Jaké jsou tedy správné číselné výsledky téže jednoduché analýzy? Budou-li interpretovány stejně jako poprvé, co z původní tiskové zprávy už neplatí? A co naopak platí i nadále?

  1. Počty hodnocení na školách a v Centru se změnily ze 3 a 3 na 4 a 2

Původně stejné počty se tedy změnily na nepoměr, v němž srovnávání přestalo být korektní. U čtyř hodnocení totiž existuje ze zřejmých důvodů více příležitostí, aby maximální výkyv mezi jejich výsledky byl větší než u hodnocení dvou – zde například kvůli třikrát delšímu časovému rozpětí.

  1. Jaké jsou nové hodnoty maximálních výkyvů ve výsledcích hodnocení?

Největší výkyv propadovosti při hodnocení na školách je mezi začátkem a koncem čtyřletého období 2013–2016 a činí 0,86 procentního bodu. Rozdíl mezi oběma hodnotami propadovosti centrálního hodnocení za období 2017–2018 činí 0,50 procentního bodu. Po přepočtu velikosti těchto maximálních výkyvů na průměrný počet 66 693 žáků za sledované období 2013–2018 to znamená maximální výkyv 572 propadlíků při školním hodnocení a maximální výkyv 329 propadlíků při hodnocení centrálním.

  1. Důsledky pro titulek tiskové zprávy

Čistě technicky z toho vyplývá, že informace „Hodnotitelé na školách dosahují stabilnějšího výsledku“ není pravdivá. Korektnější srovnání ovšem bude možné už po letošním jarním kole. Přál bych maturantům, aby naznačený „trend“ meziročního nárůstu propadovosti při centrálním hodnocení nepokračoval. Bude-li však pokračovat, informace „Hodnotitelé na školách dosahují stabilnějšího výsledku“ jako interpretace těchto jednoduchých dat už za dva měsíce zase pravdivá bude. Rozdíl v propadovosti za tři ročníky by totiž činil 1,00 procentního bodu, a byl by tedy větší než maximální výkyv 0,86 procentního bodu zjištěný u čtyř ročníků hodnocení na školách.

  1. Důsledky pro argumentaci, že spory kvůli počtům propadlíků jsou absurdní

Zatímco původní rozdíl mezi počty propadlíků, které odpovídají maximálním výkyvům, činil 587 žáků, nyní činí pouze 243 žáků (572 – 329 = 243). Ukazuje se tedy, že zmíněné spory jsou z tohoto hlediska ještě výrazně absurdnější. Tento hlavní argument tiskové zprávy proto získal na síle.

  1. Tatáž argumentace vyjádřená jinými slovy

Protože jsem z komentářů pod tiskovou zprávou nabyl dojmu, že některým diskutujícím unikla podstata argumentace, dovolím si ji vysvětlit podrobněji.

Pokud je mi známo, neexistují žádné veřejně dostupné informace o dvojím nezávislém hodnocení reprezentativních vzorků písemných prací, které by umožnily korektně srovnat výsledky práce hodnotitelů na školách s výsledky práce centrálních hodnotitelů. Provedení takových hodnocení jsem v minulosti několikrát navrhoval, ale marně. Ukazatele typu „počet propadlíků“, případně „počet podaných odvolání“ jsou totiž jen velmi dílčí (například odvolání může podat každý maturant – důležité je, kolika odvoláním je nakonec vyhověno a z jakých důvodů). Počty propadnuvších prvomaturantů jsou nicméně veřejně dostupné v souvislé časové řadě a – upřímně řečeno – hodně žáků zajímá hlavně to, aby nepropadli.

Na jediné mně známé dvojí hodnocení vzorku písemných prací, jež ovšem pokládám za nekorektní, se odvolávala důvodová zpráva k novele školského zákona, kterou se s účinností od jara 2017 vrátilo hodnocení písemných prací do Centra. Tisková zpráva citovala má slova, jimiž jsem použitý argument označil za zfalšovaný. Odkaz na důvody, které pro to mám, je uveden na konci.  Z dnešního pohledu je pak možné dodat, že argument byl vyvrácen rovněž samotným návratem k centrálnímu hodnocení v roce 2017.

Tisková zpráva srovnávala rozdíl mezi maximálními výkyvy centrálního a školního hodnocení, který se zmenšil a po opravě činí pouhých 242 žáků. Centralisté volají po větším počtu propadlíků, který pokládají za přiměřenější úrovni některých písemných prací, s nimiž se při centrálním hodnocení setkávají. Absurditu sporů mezi centralisty a decentralisty spatřovala tisková zpráva v tom, že ve zdánlivě objektivním maturitním testu z češtiny jde o řádově větší výkyvy. Například v roce 2017 upravily dosud neznámé osoby bodování nejméně pěti uzavřených úloh. Podle tehdejšího ředitele Cermatu neexistují pro bodování úloh žádná pravidla. Cermat přitom zjevně nedodržuje ani zadání ministerstva školství, které požaduje meziročně srovnatelnou náročnost maturitního testu. Lze se o tom snadno přesvědčit v oficiálních analýzách výsledků maturitní zkoušky. Zmíněná úprava vedla ke změně v počtu propadlíků o 4 379 žáků. To je – po přepočtu na stejné počty maturujících žáků – dvacetkrát (!) více, než činí rozdíl ve výkyvech hodnocení písemných prací, o který se přou centralisté s decentralisty.

Za svými slovy citovanými na konci tiskové zprávy EDUinu z 11. března 2019 si proto i nadále stojím.

————————————————————————————————————————

Odůvodnění, proč nebyla oficiální argumentace pro návrat k centrálnímu hodnocení korektní,
naleznete například ZDE.

Tisková zpráva tehdejšího ředitele Cermatu, v níž konstatoval, že pro bodování testových úloh neexistují žádná pravidla, byla zveřejněna ZDE.

Oficiální grafy trendů vývoje výsledků maturitních testů z češtiny jsou na straně 12 analytického materiálu uveřejněného ZDE.

 

Přečtěte si celý článek

V Praze 11. 3. 2019 – Návrh novely školského zákona, která vrací hodnocení písemných prací do škol, vyvolal podrážděné reakce centralistů. Oficiální data zveřejněná na stránce www.novamaturita.cz ovšem ukazují, že v případě slohových prací z češtiny je ministerský návrh oprávněný. Meziroční výkyvy podílu propadlíků jsou totiž při hodnocení ve školách přibližně třikrát menší než při hodnocení v centru. Hodnocení na školách je tedy předvídatelnější a lépe odolává vnějším tlakům. Naznačuje to jednoduchý rozbor propadovosti provedený Oldřichem Botlíkem, který se dlouhodobě věnuje měření výsledků vzdělávání.

Vnější tlak na změny v počtu úspěšných či neúspěšných maturantů je patrný při pohledu na počty propadnuvších maturantů v jednotlivých letech, a to v různých částech společné části maturitní zkoušky. V souvislosti s písemnými pracemi lze poukázat například na rok 2017: bylo žádoucí prokázat, že centrální hodnotitelé nezachraňují před propadnutím maturanty, jejichž práce byly „na hraně“.

Níže uvádíme tabulku týkající se písemných prací z češtiny. V centru (Cermat) se hodnotilo v roce 2013 a potom znovu v letech 2017 a 2018 (šedý podklad), ve školách v období 2014–2016. Největší rozdíl mezi procenty propadovosti vyprodukovanými centrem činil 1,33 %, zatímco hodnocení na školách mělo výkyvy jen do rozsahu 0,45 %, tedy takřka třikrát menší (3 × 0,45 = 1,35).

Je užitečné představit si, co to znamená v počtech žáků. Protože v období 2013–2018 se pořád měnily počty žáků, kteří písemnou práci psali, je v následující tabulce uveden přepočet na průměrný počet žáků za období 2013–2018, a to se stejnými procenty propadovosti. Průměr je větší než počty žáků v posledních čtyřech ročnících. Největší rozdíl mezi počty propadlíků vyprodukovaných centrem činil 886 žáků, zatímco hodnocení na školách mělo výkyvy jen do rozsahu 299 žáků. Což je zase přibližně třikrát méně.

Obhájci centrálního hodnocení písemných prací z českého jazyka se tedy ve skutečnosti přou o pouhých 587 žáků (886 – 299 = 587), kteří nepropadli. Chtějí totiž, aby takoví žáci v důsledku návratu hodnocení do centra propadali. Přitom i zdánlivě objektivní maturitní test (neboť většinu „hodnocení“ provádí počítač) nabízí případným manipulacím v centru mnohem větší prostor. Například na jaře 2017 provedly dosud neznámé osoby meziroční změnu hodnocení nejméně pěti testových úloh standardního formátu, v jejímž důsledku propadlo v testu 5 896 žáků. Bez této změny by jich v testu propadlo 10 275, což je o 4 379 žáků více. Změna byla provedena v úlohách, kde byla možná technicky, a vedla například k tomu, že náhodným tipováním bylo možné získat 1 bod s pravděpodobností 15/16. Tím mj. zcela popřela oficiální důvod zavedení tzv. částečně otevřených úloh, jímž bylo zabránit úspěchu při náhodném tipování. V úlohách bez nabídky, v nichž žáci tvoří odpověď sami, se totiž tipovat nedá.

Oldřich Botlík, iniciativa Maturitní data – odtajněno, řekl: „U hodnocení písemných prací z češtiny se vždy mluvilo jen o spravedlivosti hodnocení těch žáků, jimž hrozilo propadnutí. Pohled na oficiální data ovšem potvrdil, že argumenty, které pomohly prosadit návrat hodnocení do centra počínaje rokem 2017, byly zfalšované: rozdíl v počtech propadlíků totiž nestojí za řeč. Při  hodnocení na školách zmizí nejen dodávání výsledků v posledních hodinách před ústní zkouškou. Zásadní změnou je především posílení odpovědnosti hodnotitelů: budou moci (a současně muset) svým žákům ukázat, které případné nedostatky jejich slohových prací vedly k horšímu hodnocení.

Bob Kartous, vedoucí analýzy a komunikace EDUin, řekl: „Opakovaně se ukazuje, že manipulace s hodnocením jednotlivých částí společné části maturit mají postupný cíl: nenápadně zvyšovat počet neúspěšných maturantů. Meziroční změny v hodnocení testů i v hodnocení písemných prací vedou v konečném důsledku k naplňování takového zadání. Samotný fakt narůstajícího počtu neúspěšných maturantů je poté naprosto diletantsky interpretován jako snižující se úroveň maturantů a je zneužíván k argumentaci pro zavádění dalších restrikcí, jako je cut-off score v přijímacích zkouškách na SŠ. Navrhovaná změna hodnotit písemné práce z českého jazyka ve školách může dílčím způsobem snížit tento uměle vyvolaný tlak a nespravedlnost, nicméně jde spíše o kosmetickou změnu. V případě maturitní zkoušky je nutné uvažovat o mnohem rozsáhlejších změnách, jak navrhujeme například v Auditu vzdělávacího systému v ČR.“

Přečtěte si celý článek

Praha, 9. října Ministr školství, mládeže a tělovýchovy Robert Plaga oznámil, že ministerstvo školství připraví v řádu týdnů návrh na zavedení centrálně stanovené minimální bodové hranice (cut-off skóre) u jednotných přijímacích zkoušek pro přijetí na střední školy. Stalo se tak na základě podnětu Asociace krajů ČR. Jde o unáhlený krok, který není opřený o dostatečnou analýzu příčin selhávání žáků v maturitních oborech. Velmi pravděpodobně by měl takový krok za následek snížení dostupnosti vzdělání pro žáky ze sociálně slabých rodin.

EDUin připravil odborné stanovisko (position paper), jenž shrnuje předpoklady podobných opatření ve vzdělávací politice a dopady zavedení tzv. cut-off skóre na vzdělávání, zejména na konkrétní skupiny žáků a v širším kontextu na společenský vývoj:

  • nedostatečná znalost příčin selhávání žáků ve středním školství,
  • opatření (cut-off skóre) místo zlepšení vzdělávání omezuje přístup k němu,
  • snaha přesunout větší procento uchazečů z maturitních na nematuritní obory za současného stavu vzdělávání na učilištích znamená posilování vzdělávací regrese,
  • hrozící nárůst sociální imobility dětí ze sociálně slabých rodin v českém vzdělávacím systému, jehož výraznou charakteristikou je závislost dosaženého vzdělání na socioekonomickém statusu rodiny.

Kompletní stanovisko, zdroje a argumentaci obsahuje kompletní dokument.

Bob Kartous, analytik a vedoucí komunikace EDUin, řekl: „Zavádění cut-off skóre v přijímacích zkouškách na střední školy může posílit už tak vysokou závislost dosaženého vzdělání na socioekonomickém statusu rodiny. Ti, kdo takový krok obhajují, buď nevědí, co činí, nebo je jim to jedno. Obojí je politováníhodné. Naštěstí Svaz průmyslu a dopravy tento krok jednoznačně odmítl, což by mělo i Asociaci krajů ČR přesvědčit, že vlastně nehájí ničí konkrétní zájem. Nehledě na to, že vzdělání je výsostným zájmem veřejným, ne soukromým, ne skupinovým, ne čistě ekonomickým.“

Přečtěte si celý článek

Nová data byla zveřejněna se zpožděním a v podobě, která znemožňuje efektivní práci. Nové vedení Cermatu pokračuje starou cestou.

Praha, 15. srpna – MŠMT v loňském roce rozhodlo na návrh Cermatu, že data z každého kola maturit budou dostupná na stránkách novamaturita.cz. Data z jarního kola maturit mají být k dispozici vždy od 31. července. Ta letošní byla publikována se zpožděním a v podobě, jež neumožňuje zjistit ani základní informace, které by nás o výsledcích maturit měly zajímat.

Iniciativa Maturitní data – odtajněno v minulosti opakovaně upozorňovala na důležitost pravidelného zveřejňování částečně anonymizovaných prvotních maturit dat. Částečná anonymizace znamená, že se nedozvíme výsledky konkrétního žáka a konkrétní školy, ale z datového souboru bude možné zjišťovat například to, jak každou úlohu řešili nejslabší žáci, ve kterých úlohách se výrazněji liší úspěšnost chlapců a dívek, jak dopadají jednotlivé obory a skupiny škol. Šlo by tedy o data, v nichž zůstane zachována informace o pohlaví žáka a jeho příslušnosti ke skupině studijních oborů.

Data, která Cermat letos se zpožděním publikoval, však nelze považovat za anonymizovaná data, nýbrž jen za data velmi hrubě agregovaná. Z informací pořízených za veřejné prostředky Cermat dovoluje uživatelům zjistit třeba u výběrové úlohy vlastně jen to, kolik procent maturantů vybralo nabídku A, kolik procent nabídku B atd. Dozvědět se třeba to, zda textu rozumějí lépe žáci, kteří méně chybují v pravopisu, už možné není.

Ilustrativním příkladem uživatelské nevstřícnosti je fakt, že v datech nejsou podle klíče správných odpovědí označeny správné položky. Cermat je nepochybně označené měl, neboť s jejich pomocí počítá každému maturantovi jeho výsledek v testu. Musel je tedy záměrně odstranit. To asi nelze interpretovat jinak než jako snahu ztížit či znechutit případným zájemcům práci s daty. V nejlepším případě pak jako neomluvitelnou laxnost.

Oldřich Botlík, zakladatel iniciativy Maturitní data – odtajněno, řekl: Čekal jsem, že po třech ročnících naléhání a s novou ředitelkou konečně Cermat sám zveřejní částečně anonymizovaná prvotní data, v nichž bude údaj o skupině učebních oborů a pohlaví žáka, aby bylo možné zjistit například to, které úlohy dělaly největší potíže nejslabším žákům. Ať mohou spolu s učiteli pracovat na zlepšení. Z těchto dat to však zjistit nelze. Musím konstatovat, že politika Cermatu se nijak nezměnila. Nadále utajuje i informace, o nichž už ví, že je na základě žádosti podle zákona o svobodném přístupu k informacím stejně vydat musí. A dokonce mnohem dříve než 31. července.“

Přečtěte si celý článek

Na novamaturita.cz jsou k dispozici graficky zpracovaná souhrnná data získaná v dosavadních ročnících státní maturity. Jde o hodnotný příspěvek k věcné debatě o budoucnosti zkoušky

Praha, 1. června – Od úterý 29. května je na stránkách spravovaných Cermatem ke stažení prezentace, v níž je možné najít grafické zpracování maturitních dat. Většina se týká posledních šesti ročníků. Data jsou členěna podle typů škol, takže je zajímavé například sledovat, které zkoušky si žáci vybírali a jak v nich byli úspěšní.  Ocenění si zaslouží názornost zpracování: informace jsou až na detaily srozumitelné veřejnosti i novinářům.

První ukázka z prezentace zobrazuje podíl maturujících na jednotlivých typech škol. Z diagramu je například patrné, že často diskutovaná skupina maturujících na učilištích představuje poměrně malý, zhruba sedmiprocentní podíl na celkovém počtu maturantů.

V druhé ukázce je možné sledovat, jak se na jednotlivých typech škol vyvíjí neúspěšnost v testu z češtiny. Je zde patrné, jak velké jsou rozdíly mezi jednotlivými typy škol. Největší míra neúspěšnosti je u maturantů na středních odborných učilištích a nástavbách.

Prezentace obsahuje kromě souhrnných diagramů podrobné diagramy pro každou jednotlivou zkoušku – tedy češtinu, matematiku a cizí jazyk. Celou prezentaci najdete ZDE.

Tomáš Feřtek, odborný konzultant EDUin, řekl: „Cermat už dříve publikoval několik závěrečných zpráv z maturit, ale poprvé už po jarním termínu zveřejnil graficky zpracovaná data, která navíc zařadil do kontextu starších ročníků zkoušky. Jde o významný posun v kvalitě podkladů pro debatu o státní maturitě. Je tu pořád několik vad – částečně anonymizovaná data mají být publikována až na konci července, ovšem měla by být k dispozici už teď, zatím nemáme popisy jednotlivých úloh a diagramy zobrazující, jaké odpovědi u každé z úloh maturanti volili. Chybí také vysvětlení některých použitých pojmů (například čistá neúspěšnost, skór) a možná také jedna strana stručného průvodního textu. Přesto jde o zásadní posun v míře otevřenosti Cermatu, za který je správné ho ocenit.“ 

Přečtěte si celý článek

EDUin žádá ministra školství, aby doporučil Cermatu publikovat u každé maturitní úlohy, co má úloha ověřovat a proč jsou jednotlivé položky odpovědi (ne)správným řešením.

Praha, 29. května – Další chyba v maturitním testu, na niž upozorňuje tiskovou zprávou MŠMT, ukazuje, že opravdu je nutné zabývat se tím, co jednotlivé maturitní úlohy ověřují, a žádat po autorech úloh, aby zdůvodňovali jednotlivé položky odpovědi. Pak by se výrazně snížilo riziko podobných chyb. Dvě taková opatření znovu navrhujeme.

  1. Zveřejňovat autorské zdůvodnění každé úlohy. Cermat by měl přebírat od autorů pouze úlohy doplněné popisem, které znalosti a dovednosti úloha ověřuje, a zdůvodněním, proč jednotlivé položky jsou či nejsou správnou odpovědí. Tento doprovod každé úlohy srozumitelný žákům by pak měl být zveřejněn ve stejném termínu a na stejném místě jako klíč správných odpovědí.
  2. Publikovat data z plošné zkoušky současně se zasláním výsledků školám. Zdrojová data, z nichž Cermat počítá výsledky školám, lze snadno anonymizovat tak, aby neumožňovala identifikovat žáky, ale uchovala informace umožňující posoudit, jak žáci a žákyně podle skupin studijních oborů a v závislosti na pohlaví řešili jednotlivé úlohy zkoušky. Pokud by při prvním zveřejnění výsledků zkoušek byla dostupná tato data, zvýšilo by to věcnost i odbornou úroveň debaty o výsledku maturit. Důležité ale je, aby Cermat tato data také převáděl do graficky srozumitelné podoby.

Zdroj: Maturiní data – odtajněno

Jako příklad takového zpracování uvádíme diagram znázorňující vývoj neúspěšnosti v maturitním testu z češtiny mezi lety 2013–2018. Je z něj patrný dramatický nárůst neúspěšných především u negymnaziálních oborů. Výsledky za rok 2018 jsou korigovány podle toho, jak MŠMT opravilo celkové výsledky maturit poté, co odhalilo aktuální chybu v maturitním testu. Neúspěšní žáci gymnázií se v diagramu s tímto rozlišením vůbec nezobrazují.

Bob Kartous, vedoucí komunikace EDUin, řekl: „V případě výskytu další chyby v testu z dílny Cermatu lze ocenit alespoň to, že ji ministerstvo uznalo navzdory opětovnému selhání všech validačních komisí a že ministr nechal opravit maturitní výsledky a nebudou postiženi nevinní žáci. Případ ale velmi dobře ilustruje, že je důležité, aby veřejnost znala autorské zdůvodnění jednotlivých položek odpovědi. Podle vyjádření ředitele Jiřího Zíky má Cermat taková zdůvodnění k dispozici. Stejně tak by stálo za to zeptat se, co přesně úloha ověřuje. Znalost přísloví? Něco jiného? V této souvislosti by nás mělo zajímat i to, zda úloha odpovídá maturitnímu katalogu, na jehož základě Cermat musí testy sestavovat.“ 

Přečtěte si celý článek

Společným jmenovatelem navrhovaných kroků je snížit riziko chyb a vadných úloh,
a to s minimálními finančními i organizačními náklady.

Praha, 2. května – Chybné a problematické úlohy v letošních jednotných přijímacích testech ukázaly nutnost přijmout opatření, která by snížila riziko, že se podobná pochybení budou opakovat. EDUin ve spolupráci s iniciativou Maturitní data – odtajněno proto navrhuje některá z nich.

Pro zlepšení uživatelského komfortu a odstranění chyb plošných zkoušek navrhujeme:

  1. Zveřejňovat autorské zdůvodnění každé úlohy. Cermat by měl přebírat od autorů pouze úlohy doplněné popisem, jaké znalosti a dovednosti úloha ověřuje, a zdůvodněním, proč jednotlivé položky jsou či nejsou správnou odpovědí. Tento doprovod každé úlohy srozumitelný žákům by pak měl být zveřejněn ve stejném termínu a na stejném místě jako klíč správných odpovědí.

Zdůvodnění a aktuální stav: Veřejně dostupné zdůvodnění koncepce úlohy by zvěcnilo debaty o jejím záměru a kvalitě. Protože precizní doprovod ke každé úloze musí být připraven předem, také by se snížila pravděpodobnost, že se do testu dostane závadná úloha. Takový doprovod v tuto chvíli pravděpodobně neexistuje. A pokud ano, rozhodně není veřejně přístupný.

Ukázkovou úlohu doplněnou o zaměření a odůvodnění najdete ke stažení ZDE.

  1. Vždy bez prodlení oficiálně zpřístupnit testová zadání. Maturitní či přijímací test by měl být publikován na stránkách Cermatu ve stejný den, kdy ho žáci vyplní.

Zdůvodnění a aktuální stav: Debaty laické i odborné veřejnosti o kvalitě testů a veřejná kontrola probíhají hlavně v době testování, proto je důležité testy zveřejňovat ihned. Okamžité zveřejnění úřední verze testových zadání také vytváří rovné podmínky před druhým kolem přijímací zkoušky. V případě maturity už je okamžité publikování testů standardem. Přijímací testy publikoval letos Cermat až po skončení druhého kola. Tuto praxi je třeba změnit.

  1. Publikovat data z plošné zkoušky současně se zasláním výsledků školám. Zdrojová data, z nichž Cermat počítá výsledky školám, lze snadno anonymizovat tak, aby neumožňovala identifikovat žáky, ale uchovala informace umožňující posoudit, jak žáci a žákyně podle skupin studijních oborů a v závislosti na pohlaví řešili jednotlivé úlohy zkoušky.

Zdůvodnění a aktuální stav: Již dostupná data slouží ve veřejné debatě jako věcný doklad funkčnosti či nefunkčnosti jednotlivých úloh, případně úspěšnosti výuky. Částečně anonymizovaná data jsou veřejným majetkem a jejich zveřejnění neodporuje zákonu na ochranu osobních údajů. Můžeme například zkoumat, jaké skupiny žáků jsou úspěšné u úloh zaměřených na porozumění textu. Zatím je nutné o částečně anonymizovaná data žádat podle zákona o veřejném přístupu k informacím a jsou dostupná se zpožděním a na několika různých místech na webu. Tuto praxi je třeba změnit a publikovat data rutinně současně se zasláním výsledků školám.

  1. Zajistit publicitu závěrečným zprávám ze zkoušek. S odstupem v řádu maximálně měsíců by měla být o každé zkoušce zveřejněna závěrečná zpráva shrnující výsledky a hlavní zjištění. Bude-li provázena názornými diagramy zpracovávajícími výsledky jednotlivých úloh, jistě nebude problém vzbudit zájem laické i učitelské veřejnosti o hlavní zjištění.

Zdůvodnění a aktuální stav: Má-li se kvalita státem organizovaných zkoušek dlouhodobě zlepšovat, je nutná reflexe založená na srozumitelných a každému dostupných informacích, které popíšou silné a slabé stránky konkrétního ročníku zkoušky a zařadí je i do dlouhodobého trendu z hlediska vývoje výsledků žáků. V tuto chvíli existují pro některé ze zkoušek závěrečné zprávy, mají ale někdy podobu neúplného a ryze odborného textu. O názorné zpracování maturitních dat se zatím pokusila pouze iniciativa Maturitní data – odtajněno v roce 2016. Výsledek vzbudil značný zájem, ačkoli nešlo o nákladné ani časově náročné zpracování. Proto by se podobná zpráva měla stát povinným doplňkem každého ročníku kterékoli státem organizované plošné zkoušky.

Oldřich Botlík, zakladatel iniciativy Maturitní data – odtajněno, řekl: „Cermat po celou dobu existence státní maturity a nyní i jednotných přijímaček cílevědomě usiluje o zachování své informační převahy, ačkoli informace získané díky zkouškám patří všem. V době, kdy se veřejnost o zkoušku intenzivně zajímá, ředitel Cermatu občas utrousí do médií nějakou dílčí informaci o výsledcích a své leckdy velmi svérázné interpretace. Případní oponenti výsledky neznají, a proto se ani nemůžou korektně ohradit. Pokračování tohoto stavu je neudržitelné.“

Tomáš Feřtek, odborný konzultant EDUin, řekl: „Navržená opatření se soustřeďují především na uživatelský komfort a nezabývají se nutnou obsahovou proměnou obou hlavních plošných zkoušek – přijímacích testů a státní maturity. Ať už si ale o potřebnosti proměny myslí zástupci různých názorových proudů cokoli, na těchto základních vylepšeních by se měli shodnout bez větších problémů.“ 

Bob Kartous, vedoucí komunikace EDUin, řekl: „Pokud stát opravdu chce uspokojit zájem veřej­nosti o plošné zkoušky, pak měla být částečně anonymizovaná data z letošních přijímaček na webu už dnes. Protože právě teď veřejnost zajímá, kolik žáků vyřešilo úlohu s traktorem nebo s cédéčky, případně kolik páťáků nedokončilo nesmyslně náročný test z matematiky. A v čem byli kluci úspěšnější než děvčata. Už za čtrnáct dní to bude většině lidí úplně jedno.“ 

Přečtěte si celý článek

Praha, 8. prosince – Z výběrového řízení na pozici ředitele Cermatu, organizace zodpovědné za přípravu, administraci a vyhodnocení přijímacích zkoušek na SŠ a společné části maturitních zkoušek, vzešla jako nová ředitelka Michaela Kleňhová. Podle rozhodnutí ministra Stanislava Štecha nahradí současného ředitele Jiřího Zíku v prosinci 2018. Do té doby bude působit v Cermatu v pozici náměstkyně.  Už během tohoto období by ale bylo vhodné, aby Cermat přistoupil k některým důležitým krokům. Přinášíme jejich přehled.

Co by měl udělat Cermat pod novým vedením:

  • Provést obsahovou revizi testů státních maturit a přijímacích zkoušek na SŠ. Z ohlasů veřejnosti a agregovaných výsledků úloh vyplývá, že se v testech opakovaně objevují problematické úlohy, u nichž není jasné, co a proč ověřují (epizeuxis).
  • Zadat autorům úloh, aby předem dodávali popis cílů úlohy a odůvodnění správných odpovědí. Toto zdůvodnění by mělo být po skončení testování veřejně dostupné.
  • Otevřít odbornou diskusi nad pojetím úloh v jednotlivých testech a nad jejich zaměřením. Zveřejnit seznam autorů, kteří se podílejí na přípravě katalogů požadavků k maturitním a přijímacím zkouškám. Stejně tak by měli být známi autoři úloh a sestavovatelé testů.
  • Změnit způsob hodnocení písemných prací z jazykových zkoušek kombinací hodnocení ve škole a nezávislého hodnocení v centru.
  • Zveřejňovat v plném rozsahu jak anonymizovaná data z maturitních a přijímacích zkoušek, tak přehledná a srozumitelná shrnutí pro laiky, včetně informací o řešení jednotlivých úloh.
  • Iniciovat v doporučeních ministerstvu školství analýzu dopadů přijímacích zkoušek a maturit na vzdělávání v ČR.
  • Iniciovat v doporučeních ministerstvu školství potřebné změny v legislativě, které umožní transformovat high – stakes zkoušky do podoby, která pozitivně ovlivní předchozí vzdělávání: od multiple choice testů k hodnocení dlouhodobé činnosti žáků (roční projekt a jeho obhajoba, vypracování písemné maturitní práce většího rozsahu, ověřování práce s informačními zdroji).

Bob Kartous, vedoucí komunikace EDUin, řekl: „Změna na pozici ředitele Cermat je příležitostí k tomu začít využívat významných zkoušek jako nejsilnějšího nástroje k rychlé transformaci vzdělávání ve školách. Zkoušky nastavují požadavky a podle toho školy přizpůsobují vzdělávání. K tomu je ale nutné v prvé řadě vědět, jaký dopad vlastně dosavadní maturitní a přijímací zkoušky ve vzdělávacím systému způsobují.“

Přečtěte si celý článek

Veřejná ochránkyně práv ve stanovisku pro Ministerstvo školství konstatuje, že podle názoru jejího úřadu byla v loňském maturitním testu logaritmická rovnice neoprávněně.

Praha, 31. srpna – Ministr školství Stanislav Štech nesouhlasí s veřejnou ochránkyní práv Annou Šabatovou, jejíž úřad dospěl k názoru, že zařazení logaritmické rovnice do maturit­ního testu na jaře 2016 (úloha 15) bylo v rozporu s § 73 školského zákona. Podle Šabatové ověřovala úloha dovednost, kterou žáci středních odborných škol povinně umět nemusejí.

Debatu o tom, zda RVP pro maturitní obory středních odborných škol uvádějí logaritmickou rovnici jako látku, která se má na školách učit a jejíž znalost pak může ověřovat maturitní test, odstartoval analytický materiál nazvaný Státní maturita porušuje zákon a poškozuje žáky i výuku ve školách. Ten loni po jarním kole maturit publikovala iniciativa Maturitní data – odtajněno. Konstatuje se v něm mimo jiné, že v RVP pro střední odborné školy se píše o znalostech logaritmů, ne o dovednosti řešit logaritmickou rovnici.

Záležitostí se zabýval Úřad veřejné ochránkyně práv na základě stížnosti, že úloha 15 znevýhodnila žáky středních odborných škol oproti gymnazistům. Následná debata Úřadu s Ministerstvem školství vyústila v konstatování ombudsmanky, že pro zařazení logaritmické rovnice do testu neexistuje v RVP SOŠ odpovídající podklad. Ministr Stanislav Štech oponoval v dopise zaslaném Anně Šabatové 14. srpna 2017 například slovy „… logaritmická funkce, popř. rovnice rozhodně nepatří k obtížným pasážím maturitního didaktického testu z mate­matiky (např. v testu z matematiky v jarním období 2017, v němž žáci dosáhli průměrné úspěšnosti 53,9 %, byla úspěšnost v jednoduché otevřené úloze č. 12 s logaritmickou rovnicí vysoce nadprůměrná, téměř 68 %).“ Tento argument nevypovídá vůbec nic o výsledcích negymnazistů v kritizovaném testu z jara 2016, ale především, podobně jako předchozí argumentace ministryně Valachové, se zcela míjí s podstatou problému. Kritika nesměřovala k otázce, zda se žáci mají učit řešit logaritmickou rovnici, ale upozornila na to, že stát není schopen udržet pořádek ani ve vlastních vzdělávacích dokumentech. Některé žáky pak zkouší u maturity z dovedností, které jejich učitelům neuložil vyučovat. Proto ombudsmanka Anna Šabatová požádala ministra Stanislava Štecha, aby zjednal nápravu. Ten má ale na věc odlišný názor.

Oldřich Botlík, iniciativa Maturitní data – odtajněno, řekl: „Předmětem debaty vůbec není to, jak obtížná byla pro průměrného žáka logaritmická rovnice v letošním maturitním testu – problém je z roku 2016. Není jím ani otázka, zda je důležité umět řešit logaritmické rovnice. Jde o to, zda dovednost řešit logaritmické rovnice obsahují všechny rámcové vzdělávací programy – a zda ji tedy může obsahovat maturitní katalog. Nebavíme se o užitečnosti logaritmické rovnice, ale o právním vědomí pracovníků Cermatu a Ministerstva školství. Stát musí dodržovat své vlastní zákony a předpisy také ve společné části maturitní zkoušky. Ombudsmanka upozornila, že to stát nedělá, ale zdá se, že ministru školství podstata problému stále uniká.“

 

 

 

 

 

 

 

Přečtěte si celý článek

Pokud mají data z plošných zkoušek sloužit ke kvalitnější veřejné debatě, bylo by vhodné, kdyby Cermat jasněji informoval o tom, která data a kde publikoval.

Praha, 29. srpna – Data z plošných zkoušek jsou dostupná na dvou úložištích. Na stránkách novamaturita.cz a cermat.cz. Opravujeme včerejší tvrzení, že Ministerstvo školství a Cermat nesplnilo slib. Data dostupná jsou, jen by veřejnosti napomohla zřetelnější navigace, kde je možné je najít.

Hlavní úložiště dat z plošných zkoušek lze nalézt na adrese https://vysledky.cermat.cz/. V levém menu si pak lze vybrat, která data vás zajímají. V nabídce jsou agregovaná data – tedy výsledky jednotlivých zkoušek, které můžete třídit podle předmětů, skupin oborů, ale i regionálně, podle krajů či škol.

Nově tu naleznete i možnost zobrazit anonymizovaná data z jarního termínu letošní maturity, a i když se to v titulku neříká, lze si v menu na této adrese zvolit i data z letošních jednotných přijímacích zkoušek. Anonymizovaná data ze starších ročníků maturity zatím na této adrese dostupná nejsou.

Druhým místem, kde lze najít maturitní data, je sekce Vybraná statistická data na stránce novamaturita.cz. Tady najdete především data z maturitní zkoušky v roce 2016. Statistiku alternativ odpovědí v didaktických testech, agregovaná data z hodnocení písemných prací z českého jazyka a literatury (2015 a 2016) a anonymizovaná data z písemných zkoušek z ČJL v jarním zkušebním období 2016. Jde o data, která byla zveřejněna poté, co o ně někteří zájemci požádali na základě zákona o svobodném přístupu k informacím.

Tomáš Feřtek, odborný konzultant EDUin, řekl: „Omlouváme se Ministerstvu školství i Cermatu za mylnou informaci. Upozorňujeme ale na fakt, že běžný návštěvník webových stránek prakticky nemá šanci publikovaná data dohledat. Zvláště na stránkách novamaturita.cz. Tady by pomohla jednoduchá ikona na hlavní stránce Cermatu, která by zájemce dovedla k hlavnímu úložišti dat, kam, jak předpokládáme, budou postupně doplňována i data z předešlých maturitních ročníků.“

Přečtěte si celý článek

Zástupci Ministerstva školství a Cermatu opakovaně uvedli, že anonymizovaná data z jednotných zkoušek budou zveřejněna na konci července. Nejsou ale k dispozici dodnes.

Praha, 28. srpna – Ministryně Kateřina Valachová i ředitel Cermatu Jiří Zíka uvedli, že data z jednotných přijímaček i z jarního kola státní maturity budou v anonymizované podobě zveřejněna na portálu novamaturita.cz. Tento slib není splněn, i když mu v cestě nestojí žádné právní ani technické překážky.

Ministerstvo školství uvedlo, že pokud jde o maturitní data, počítá s jejich zveřejňováním v anonymizované podobě k 31. červenci pro jarní kolo a k 1. listopadu pro podzimní kolo maturit. Přestože je již konec srpna, na stránkách novamaturita.cz nejsou tato data k dispozici. Navíc z ní nezákonně zmizela již zveřejněná data z maturitního testu z češtiny a z maturitních slohů (viz § 5 odst. 3 zákona o svobodném přístupu k informacím). Na tento termín, 31. červenec, také MŠMT nezákonně odkázalo žadatele o anonymizovaná data z jednotných přijímacích zkoušek (viz § 14 odst. 5 Infozákona).

Smyslem zveřejňování maturitních dat je umožnit veřejnosti posouzení, nakolik státní maturita opravdu ověřuje důležité znalosti a dovednosti, zda opravdu pomáhá zkvalitňovat vzdělávání. Případně kde a co by bylo možné v konstrukci státní maturity zlepšit. Tento nástroj se opakovaně osvědčil, jak dokázala veřejná debata okolo maturit v loňském i letošním roce.

Přesto letos Cermat nejen nezveřejnil slíbená anonymizovaná maturitní data, ale nezveřejnil ani výsledky všech testových úloh, aby bylo možné posoudit, co konkrétně žáci umějí a neumějí. Ministerstvo školství i sám ministr Stanislav Štech na toto pochybení nijak nereagovali a nezjednali nápravu.

Oldřich Botlík, iniciativa Maturitní data – odtajněno, řekl: „I v případě, že by byla data ve zmíněném termínu zveřejněna, je to pozdě pro ty, kteří je potřebují, aby mohli kvalifikovaně podat případné odvolání proti svým výsledkům. Ale vzhledem k tomu, že MŠMT nedodrželo ani tento termín, zdá se opravdu i pro příští léta nejrozumnější cestou žádat o všechny tyto informace cestou zákona o svobodném přístupu k informacím. A to opět hromadně jako v roce 2016. Věřit ministerským slibům se totiž nevyplácí – ministerstvo řízené politiky ČSSD včas reaguje hlavně na akce, které hrozí velkou veřejnou ostudou. Jinak nemá ani zábrany porušovat zákon.“ 

Přečtěte si celý článek

Argument Cermatu, že testy nelze zveřejňovat, protože jsou chráněny autorským zákonem, je mylný. Týká se to jak testů přijímacích zkoušek, tak maturitních testů.

Praha, 22. srpna – Spor Cermatu a Oldřicha Botlíka z iniciativy Maturitní data – odtajněno, zda jsou testová zadání chráněna autorským zákonem, vyřešil posudek, který si objednalo ministerstvo školství od Ministerstva kultury. Ten konstatuje, že testy jsou jako tzv. úřední dílo vyloučeny z ochrany podle autorského zákona. Cermat bude proto muset odstranit ze svých stránek nepravdivé tvrzení o autorskoprávní ochraně a v dalším ročníku přijímacích zkoušek na střední školy nic nebrání tomu, aby byly úlohy zveřejněny vždy hned po vyplnění testů, podobně jako je to už běžné u maturity.

Spor o to, zda test je, či není autorským dílem, vedl Oldřich Botlík s Cermatem od poloviny dubna, kdy na stránkách iniciativy Maturitní data – odtajněno zveřejnil testová zadání prvního kola přijímacích zkoušek na střední školy. Podal v té věci i podnět k ministerstvu školství, které si vyžádalo odborný posudek od Ministerstva kultury. Nejde o závazné rozhodnutí, takové by mohl vydat jen soud, ale ministerstvo školství konstatuje, že se tímto stanoviskem bude řídit.

V dopisu ministerstva školství stojí, že s Cermatem bude projednáno, aby i v případě přijímacích zkoušek zajistil „v následujícím období zveřejňování zadání jednotlivých souborů testů bez zbytečného odkladu po jejich zadání uchazečům ve školách v jednotlivých termínech stanovených MŠMT pro jednotnou zkoušku“.

Optimálním řešením by bylo – podobně jako v případě maturitních testů – zveřejnění do 17.00 dne, kdy byl test zadán. Okamžikem, kdy je testové zadání rozdáno žákům v učebně, totiž ztrácí charakter veřejně nepřístupné informace. Originál zadání však nelze žákovi vydat ve škole, kde zkoušku konal – musí zůstat součástí spisu kvůli případným reklamacím (například nečitelná místa). Žák, resp. jeho rodič, má právo do spisu kdykoli nahlížet, a dokonce má právo na pořízení kopie testu – to je však složitá procedura. Proto je důležité, aby testová zadání byla co nejdříve dostupná jak žákům, rodičům i odborné veřejnosti.

Oldřich Botlík, iniciativa Maturitní data – odtajněno, řekl: „Z hlediska veřejného zájmu je rozhodující, že Cermatu nesmí být ponechána ani teoretická možnost, aby případným neudělením souhlasu k užití mohl účinně bránit veřejné diskusi o pojetí libovolného testu, testové úlohy či o pojetí a správnosti klíčů správných řešení. Taková diskuse musí být naopak možná počínaje okamžikem, kdy byl test u zkoušky použit.“

Přečtěte si celý článek

Jak by mohlo a mělo vypadat optimální zveřejňování maturitních dat a výsledků.

Praha, 19. června – Ministerstvo školství slíbilo, že letos začne rutinně zveřejňovat anonymizovaná data ze státních maturit. Pro data z jarního kola počítá s termínem 31. července, z podzimního pak s 1. listopadem. Ač jde nesporně o správný záměr a pozitivní krok ve veřejné kontrole státních maturit, některé údaje mají letos naopak zpoždění. Proto EDUin klade ministerstvu školství další otázku, která souvisí se státními maturitami.

Otázka pátá: Proč v letošním roce dosud nebyly zveřejněny na webu výsledky všech úloh?

V loňském roce dostaly školy výsledky úloh všech maturitních testů k dispozici 16. května a veřejnosti byly dostupné na webu novamaturita.cz o pouhých šest dní později, 22. května. Na výzvu iniciativy Maturitní data – odtajněno si je totiž vyžádaly podle zákona o svobodném přístupu k informacím asi tři stovky dobrovolníků. Letos dostaly školy výsledky úloh 15. května, pro veřejnost ale nejsou dostupné ani šest týdnů po konání zkoušky. Možnost veřejného posouzení kvality úloh a výsledků maturitních testů je tím samozřejmě omezena. A také to vzbuzuje pochybnost, zda ministerstvo školství opravdu hodlá zveřejňovat data v takových termínech a takové podobě, aby to umožnilo kvalitnější debatu o vzdělávání a úloze plošných zkoušek, maturit a přijímaček.

Oldřich Botlík, iniciativa Maturitní data – odtajněno, řekl: „O data, která ministerstvo hodlá zveřejňovat až k 31. 7., může kdokoli požádat mnohem dříve. Podle zákona o svobodném přístupu k informacím mu ministerstvo musí data vydat, neboť existují zhruba od poloviny května – na jejich základě se počítají výsledky žáků. Domnívám se na základě stanoviska Úřadu pro ochranu osobních údajů, že data mohou (a mají) obsahovat údaj o pohlaví žáka a o široké skupině oborů, do níž patří jeho obor studia. Z údajů na portálu Cermatu je zřejmé, že mezi sledovanými skupinami oborů existují obrovské rozdíly ve výsledcích celých testů. Jejich studium po jednotlivých úlohách může přinést velmi hodnotné informace i učitelům.“

Tomáš Feřtek, odborný konzultant EDUin, řekl: „Pokud chceme umožnit veřejnosti, aby rozuměla, jakým směrem a proč se vyvíjí státní maturita, je třeba nezapomenout na každoroční veřejně přístupnou a srozumitelnou závěrečnou zprávu. Ta by měla být publikována nejpozději do konce každého kalendářního roku. Měla by pojmenovat aktuální stav a zároveň zařadit konkrétní ročník maturity do kontextu jejího vývoje od roku 2011. To, co je zatím dohledatelné na stránkách Cermatu, bohužel k takovému účelu sloužit nemůže.“

 

Přečtěte si celý článek