1. Vyhodnocujte podle cíle, ne podle dojmu
Ještě před otevřením přehledu odpovědí si připomeňte, co měl test ověřit. Cílem mohlo být rozpoznání základních pojmů, použití postupu v modelové situaci nebo samostatné vysvětlení souvislosti. Každý z těchto cílů vyžaduje jiný pohled na výsledek. U testu zaměřeného na porozumění může být důležitější způsob uvažování než rychlost; u procvičování může být naopak užitečné sledovat, zda se správná odpověď objevuje opakovaně.
Pomáhá rozdělit si cíl na několik pozorovatelných dovedností. Místo neurčitého „účastníci látce rozumějí“ si napište například „dokážou vybrat vhodný postup a vysvětlit proč“. Potom se ptejte, které úlohy tuto schopnost opravdu ověřují. Takové propojení brání tomu, aby se vyhodnocení řídilo jediným snadno dostupným číslem nebo očekáváním autora.
2. Nejdřív zkontrolujte podmínky a kvalitu dat
Než začnete porovnávat výsledky, ověřte, zda všichni účastníci dostali stejné pokyny a přibližně stejné podmínky. Rozdílný časový limit, chybějící část zadání, technická komplikace nebo přerušení mohou výsledek ovlivnit. Pokud někdo test vyplňoval na telefonu a jiný na počítači, zvažte, zda rozvržení a čitelnost nezměnily obtížnost úloh. Výsledek je třeba interpretovat s ohledem na to, jak vznikl.
Zkontrolujte také, zda přehled obsahuje všechny dokončené pokusy, zda se odpovědi správně přiřadily k otázkám a jestli nebyl test omylem odeslán vícekrát. U opakovaných pokusů si předem určete, jak s nimi naložíte: budete sledovat první výsledek, poslední pokus, nebo změnu mezi nimi? Každá volba odpovídá jinému účelu. Důležité je pravidlo stanovit před interpretací, ne až podle toho, které číslo vypadá příznivěji.
3. Celkové skóre je začátek, ne vysvětlení
Celkové skóre může rychle ukázat, zda skupina zvládla základní obsah, ale zakrývá rozdíly mezi oblastmi. Dva lidé mohou získat stejný počet bodů, přestože jeden chyboval v pojmech a druhý v praktickém postupu. Proto vedle celkového výsledku sledujte také výkon v jednotlivých tematických částech. Pokud je test delší, pomůže jednoduchý přehled: oblast, počet úloh, typické chyby a doporučený další krok.
Průměr skupiny nepopisuje každého účastníka a nemusí ukázat, jak jsou výsledky rozloženy. Když je to vhodné, podívejte se také na medián, rozsah nebo počet lidí v jednotlivých úrovních. Nepotřebujete složité statistické výpočty pro každý krátký kvíz. Stačí si všimnout, zda většina odpovědí leží blízko sebe, nebo zda se skupina rozdělila na několik výrazně odlišných částí. Takové rozložení může napovědět, zda je lepší společné opakování, nebo cílená podpora menší skupiny.
4. Sledujte úspěšnost jednotlivých otázek
Rozbor po položkách často přinese víc než samotné pořadí účastníků. Zaznamenejte, na které otázky odpověděla většina skupiny správně a kde se objevovalo více chybných variant. Pokud se chyba soustředí na jednu konkrétní položku, ověřte její formulaci, návaznost na výuku a přiměřenost obtížnosti. Vysoký počet chybných odpovědí nemusí automaticky dokazovat, že se lidé látku nenaučili.
U otázek s výběrem odpovědí sledujte, které chybné možnosti lidé volili. Jestliže mnoho účastníků vybralo stejnou alternativu, může jít o častou záměnu pojmů, ale také o věrohodně působící možnost, kterou zadání nedostatečně vylučuje. Naopak distraktor, který nikdo nezvolil, možná neodpovídá běžnému omylu a test nepřináší užitečnou informaci. U otevřené úlohy si všímejte, jaké části odpovědi se opakují, nejen zda se shodují se vzorovou větou.
Jednotlivou otázku neposuzujte izolovaně. Zvažte, zda odpovídá hlavnímu cíli, zda byla pro skupinu nová a zda se její řešení opíralo o učivo, které měli účastníci k dispozici. Pokud je test určen k procvičení, může být přínosná i položka, kterou mnoho lidí zpočátku nezvládlo, jestliže po ní následuje vysvětlení a možnost látku znovu použít.
5. Hledejte vzorce místo ukvapených závěrů
Jedna chyba bývá náhodná. Opakující se vzorec si zaslouží pozornost. Pokud lidé zaměňují stejné pojmy napříč několika otázkami, vraťte se k jejich rozdílu a připravte příklad, který jej ukáže v praxi. Když účastníci zvládají zapamatování, ale chybují při použití znalosti v nové situaci, může být potřeba více modelových úloh. Časté prázdné odpovědi nebo nedokončené testy mohou zase ukazovat na nejasné pokyny, příliš dlouhý rozsah nebo technické obtíže.
Užitečné je zaznamenat si několik konkrétních pozorování pro další lekci. Například: „Skupina pozná definici, ale neumí vybrat vhodný postup“ je akčnější než „průměr je nízký“. Při práci s výsledky jednotlivců se držte toho, co test skutečně měřil. Z jednoho krátkého testu nelze bezpečně vyvozovat celkovou schopnost, motivaci ani osobní vlastnosti člověka. Výsledky jsou vodítko pro další otázky, ne konečný soud.
6. Rozlište mezeru ve znalostech od nejasného zadání
Když účastník odpoví chybně, zkuste zjistit, co se mohlo stát. Rozuměl otázce? Měl potřebné informace? Vybral běžný omyl, nebo odpověď, která dává smysl při jiném výkladu věty? U slovních úloh může chybu způsobit neznámý termín, složitá větná stavba nebo příliš mnoho kroků v jednom zadání. Pokud máte možnost, požádejte několik lidí, aby vlastními slovy vysvětlili, jak otázku pochopili. Jejich popis často odhalí problém, který z tabulky bodů není patrný.
Test po skončení projděte také sami nebo s kolegou. Ověřte, zda každá položka má jasné řešení, zda neexistuje druhá obhajitelná odpověď a zda správnou volbu neprozrazuje nápověda v jiné části. Při podobné kontrole může pomoci i dřívější postup pro návrh kvalitního online testu, zejména část o srozumitelné formulaci a pilotním ověření. Pokud zjistíte chybu v zadání, upravte otázku před dalším použitím a při hodnocení současného pokusu ji zohledněte férově.
7. Připravte zpětnou vazbu, která vede dál
Užitečná zpětná vazba pojmenuje, co se povedlo, co je třeba doplnit a jak na to navázat. Místo obecného „špatně“ popište konkrétní rozdíl mezi správným postupem a častým omylem. U správné odpovědi můžete připomenout princip, který ji vysvětluje. Účastník tak získá informaci, kterou může použít při další podobné úloze, a ne jen potvrzení, že získal bod.
Načasování závisí na účelu testu. U průběžného procvičování může okamžité vysvětlení podpořit učení. U testu, který má ukázat samostatné řešení více úloh, může být vhodnější nejprve dokončit celý soubor a potom projít typické postupy. Pokud odpovědi vyhodnocuje člověk, snažte se reagovat v době, kdy si účastníci ještě pamatují své uvažování. Krátká konzultace nebo společný rozbor může vysvětlit více než samotná tabulka bodů.
Zpětnou vazbu přizpůsobte důležitosti úkolu. U malé kontrolní otázky může stačit jedna věta; u obsáhlejší práce má smysl jasná hodnoticí kritéria a komentář k jednotlivým částem. Kritéria sdělte předem. Účastníci pak vědí, za co se body udělují, a vy můžete odpovědi posuzovat konzistentněji. Pokud se výsledek týká významného rozhodnutí, nabídněte možnost ověřit nejasné hodnocení.
8. Převeďte zjištění na další krok ve výuce
Vyhodnocení je užitečné tehdy, když něco změní. Jestliže většina skupiny nerozumí jednomu principu, vraťte se k němu jiným způsobem: ukažte modelový příklad, nechte účastníky porovnat dva postupy nebo doplňte krátké cvičení. Když problém zasáhl jen několik lidí, připravte jim cílené opakování a ostatním nabídněte rozšiřující úkol. Tento postup šetří čas a lépe odpovídá tomu, co výsledky skutečně ukázaly.
Po úpravě výuky se můžete k tématu vrátit krátkou kontrolní otázkou nebo praktickým úkolem. Nepřebírejte pouze původní otázku, kterou si účastníci mohou pamatovat. Změňte kontext, čísla nebo příklad tak, aby bylo zřejmé, zda dokážou princip použít znovu. Vyhodnocení pak propojí přípravu testu, samotné učení i následné ověření místo toho, aby skončilo u zapsaného skóre.
9. Otevřené odpovědi hodnoťte podle předem známých kritérií
Odpovědi vlastními slovy mohou ukázat, jak účastník přemýšlí, ale vyžadují konzistentní hodnocení. Předem si napište, které prvky mají být v odpovědi obsaženy a zda lze získat část bodů. U složitější úlohy mohou kritéria oddělit správný postup, vysvětlení a závěr. Nečekejte na všechny odevzdané odpovědi, abyste podle jejich kvality dodatečně změnili hranici úspěchu.
Při hodnocení se zaměřte na obsah požadované dovednosti a nepřidávejte kritéria, která se zadáním nesouvisí. Pokud test ověřuje porozumění pojmu, drobná stylistická chyba nemusí být důvodem ke ztrátě bodu. Když je naopak cílem odborné vyjadřování, může být jazyková přesnost součástí rubriky. Krátká poznámka k tomu, proč byla přiznána část bodů, pomůže účastníkům porozumět hodnocení.
10. Opakované měření používejte uvážlivě
Porovnání výsledků v čase může ukázat, zda se dovednost posouvá, ale testy musí být srovnatelné. Pokud první sada obsahuje jednoduché otázky a druhá náročné scénáře, rozdíl ve skóre nemusí znamenat změnu znalostí. Zvažte podobné pokrytí témat, přiměřený rozsah a stejné pokyny. Při opakování ponechte dost prostoru pro nové příklady, aby výsledek neodrážel jen zapamatování konkrétních odpovědí.
Pokrok lze sledovat i jinak než známkou: zkracuje se čas potřebný k řešení, ubývá určitý typ chyby, nebo účastníci dokážou vysvětlit svůj postup přesněji? Vyberte si jen několik ukazatelů, které odpovídají cíli. Pravidelný a smysluplný návrat k látce je pro učení přínosnější než časté testování bez následné zpětné vazby.
11. Zachovejte férovost a chraňte výsledky
Před zveřejněním výsledků ujasněte, kdo je uvidí, k čemu budou sloužit a jak dlouho je potřebujete uchovávat. Shromažďujte pouze informace nezbytné pro výuku nebo školení a nesdílejte individuální skóre před skupinou bez důvodu a předchozího vysvětlení. Pokud se výsledky ukládají, pracujte s nimi podle pravidel organizace a upozorněte účastníky na způsob jejich použití.
Férovost znamená také umožnit lidem porozumět podmínkám: jak dlouho mají na test, zda mohou odpověď opravit, jak se boduje částečné řešení a co výsledek ovlivní. Zohledněte přístupnost textu, obrázků i ovládání. U důležitých rozhodnutí nenechávejte jeden online test rozhodovat sám; doplňte jej dalšími vhodnými důkazy, například praktickou ukázkou nebo rozhovorem.
12. Jednoduchý kontrolní seznam po dokončení testu
- Je jasné, jaký cíl měl test ověřit?
- Byly podmínky a pokyny pro účastníky srovnatelné?
- Ukazuje celkové skóre také rozdíly mezi tematickými oblastmi?
- Prověřil jsem položky s neobvykle vysokým počtem chybných odpovědí?
- Opakuje se určitý omyl napříč několika otázkami?
- Mohlo nejasné zadání nebo technická překážka ovlivnit výsledek?
- Jsou kritéria pro otevřené odpovědi předem stanovená?
- Vím, jakou konkrétní zpětnou vazbu účastník dostane?
- Jaký další krok ve výuce nebo školení z výsledků vyplývá?
- Jsou individuální výsledky chráněné a využité jen k oznámenému účelu?
Související články a archivní stránky
Propojení s cílem, otázkami a hodnocením začíná už při přípravě. Přečtěte si také průvodce návrhem kvalitního online testu. Pro historický kontext někdejšího webu jsou k dispozici archivní nápověda k tvorbě online testů a katalog šablon. Tyto stránky popisují archivní obsah; původní aplikace iTesting.cz již není v provozu.
Naplánujte další návrat k učivu
Výsledky testu mohou ukázat, které téma potřebuje další procvičení. Praktický přehled najdete v článku Krátké online testy a opakování učiva: jak plánovat průběžné procvičování, který popisuje krátké kontroly, opakování s odstupem a navazující kroky ve výuce.
Závěrem
Dobré vyhodnocení online testu nespočívá jen v součtu bodů. Vychází z cíle, zkoumá jednotlivé otázky, hledá opakující se vzorce a zohledňuje podmínky, za kterých lidé odpovídali. Když výsledky doplníte konkrétní zpětnou vazbou a navazujícím krokem ve výuce, promění se test v užitečný zdroj pro účastníky i lektora. Zachováte přitom férovost a nepřisoudíte číslům větší význam, než skutečně mají.