Spomocník Základní vzdělávání Skutečné možnosti využití daty řízeného školství
Odborný článek

Skutečné možnosti využití daty řízeného školství

12. 9. 2011 Základní vzdělávání Spomocník
Autor
Bořivoj Brdička
Tento článek je součastí seriálu: Analýza výukových výsledků

Anotace

3. díl seriálu zabývajícího se analýzou výukových výsledků, jež je věnován tomu, co si můžeme od počítačových systémů automatického hodnocení žáků slibovat a za jakých podmínek má smysl je zavádět.

Přestože z popisu současného způsobu zavádění systémů daty řízeného školství v USA v minulém díle mohl vzniknout dojem, že jejich nasazení může mít na výuku negativní vliv, nemusí tomu tak nutně být. O tom, že se v budoucnosti takové systémy prosadí, není pochyb. Podstatné je, jakým způsobem budou implementovány. Rizika jsou zřejmá.

Provádí-li se na státní úrovni plošné testování žáků, jehož cílem je hodnocení učitelů a celých škol (s hrozbou propuštění či zavření školy), jsou nutně výsledky takového testování určující pro veškerou výukovou činnost škol. To znamená, že testování se stává hlavním nástrojem řízení celého školství. Pokud existují legitimní výukové cíle, které nejsou testy ověřovány, je celkem jisté, že nebudou naplněny. Cílem technologiemi podporovaných systémů řízení výuky se pak stává pouze příprava na testy.

Jedním z aktuálních efektů zaváděné reformy ve Spojených státech je propouštění učitelů. Je sice částečně vyvoláno též krizí, ale navenek je prezentováno jako nutnost zlepšit výukové výsledky odstraněním neschopných učitelů (např. nejnověji viz 206 D.C. teachers fired for poor performance). Jak jsme si již ukázali, zavádění vzdělávacích technologií do škol má na vzniklou situaci určitý vliv. I když třeba právě ve Washingtonu používaný evaluační program učitelů IMPACT je založen (z 50%) na výsledcích plošného testování, jež je dodnes prováděno na papíře. Čtení a matematika jsou takto ověřovány ve 3. až 8. ročníku u všech žáků každý rok. Pokud některý učitel 2 roky po sobě nedokáže zajistit, aby se průměr jeho žáků během jeho působení zlepšil, dostane výpověď.

Chceme-li si udělat představu o tom, jakou roli může hrát daty řízené vzdělávání v procesu reformy škol, musíme vždy vycházet z výukových cílů, které jsou pro potřeby snadnějšího definování výukových aktivit a kontroly většinou rozpracovány do podoby standardů. Na první pohled je zřejmé, že splnění všech cílů nelze tradičním testem ověřit. Bez problémů lze testovat pouze 1. stupeň Bloomovy taxonomie vzdělávacích cílů – faktické znalosti (Bloomova taxonomie v digitálním světě, Bloomova taxonomie pro kreativní prostředí). Kvalitní test možná dokáže ověřit i více, ale v žádném případě ne vše. Čím vyšší úroveň myšlení má postihnout, tím komplikovanější je jeho příprava. Takové v dnešní době vysoce potřebné kompetence, jako je schopnost vyjadřovat se nebo spolupracovat, nelze tradičními testy (byť počítačovými) ověřovat vůbec.

Velká data získaná používáním systémů řízení výuky, jež mohou žáky vést k poznání značné části na fakta orientovaného učebního obsahu, poskytují o žácích mnohem komplexnější obraz. Ani ten sice není úplný, ale zahrnuje i takové informace, jako je úroveň vzájemné spolupráce nebo čas strávený plněním úkolů. Jedna výhoda oproti tradičnímu jednorázovému plošnému testování je mimořádně významná. Lze pomocí nich sledovat průběžný vývoj, takže je možné snadněji odhalit třeba i to, jaký pokrok dělají žáci pod vedením určitého učitele. Právě tento ukazatel (přidaná hodnota) může za určitých podmínek být jedním ze smysluplných indikátorů kvality učitelů. Na rozdíl od podobných evaluačních programů, jako je IMPACT, může být analyzováno mnohem více dat než pouhé jednorázové vyplnění testu jednou za rok, které je nutně zatíženo velkou chybou. Dříve, než se rozhodneme nějaký podobný systém zavádět, měli bychom důkladně zvážit, jaké jsou jeho možnosti i nedostatky.

Sbírat data popisující výsledky žáků jen proto, aby na jejich základě bylo možné hodnotit školy či učitele, je nejen drahé, ale navíc vysloveně kontraproduktivní. Vede ke snahám uměle ovlivňovat všechny sledované parametry podobným způsobem, jako americké hybridní školy připravují žáky pouze na složení plošných testů a zbylé výukové cíle téměř ignorují. Úplně jinak by ale zavedení takového systému dopadlo, kdyby primárním cílovou skupinou, jíž jsou výsledky určeny, byli samotní žáci a učitelé (jako v případě Khan Academy).

Dragan Gašević z Athabasca University shrnuje hlavní přínos systému umožňujícího komplexní analýzu činnosti žáků při výuce s podporou technologií takto (viz Citace):

  • Dovoluje získat přehled o tom, jak žáci pracují s výukovým obsahem.
  • Pomáhá identifikovat, které výukové materiály by se měly zdokonalit nebo nahradit.
  • Umožňuje zjistit, jak mezi sebou žáci interagují.
  • Poskytuje vodítko ke zlepšení komunikace s žáky.
  • Pomáhá identifikovat témata, s nimiž mají žáci problémy.
  • Pomáhá identifikovat žáky, kteří potřebují pomoc.

Jak výstižně konstatuje Martin Weller z britské Open University (viz Citace), je „velký rozdíl mezi analýzou dat pro studenta a o studentovi“. Naším ideálním cílem by mělo být, aby studující dostal relevantní informace pro své vlastní rozhodování a podporu učitele. To platí i pro nižší stupně škol s tím rozdílem, že role učitele je u každého věku mírně odlišná.

Přesně v tom okamžiku, kdy začneme shromažďovat a ukládat určitá osobní data žáků, je třeba řešit též s tím související etické problémy. I když v reálném životě se to běžně děje (třeba na Facebooku), je obtížně představitelné, že by data obsahující veškeré informace o výukové činnosti žáků měl k dispozici soukromý subjekt, jehož hlavním záměrem je generovat co nejvyšší zisk (třeba jako Wireless Generation v New Yorku). Eticky jedině přijatelný postup je ten, při němž zůstává i po záznamu osobních dat jejich majitelem ten, kdo je vygeneroval. Pokud pak tato data nějaká organizace zpracovává, musí to být v souladu se zájmy jejich vlastníků. Riziko toho, že mohou být zneužita, třeba i nadřízenými orgány, je velké a je třeba ho předem eliminovat. Žáci i učitelé by měli být se způsobem zpracování dat seznámeni.

Pokusím se na závěr shrnout, za jakých podmínek má smysl o zavedení systémů daty řízeného školství uvažovat:

  • U každého kurzu (modulu, lekce, předmětu), jehož výuka je s pomocí systému realizována, musí být předem přesně definováno, kterou část výukových cílů použitá analýza dat zahrnuje, i to, jak je prováděno hodnocení zbylých oblastí. Studijní plán musí dávat prostor k naplnění i těch cílů, které práce v systému řízené výuky nepostihuje.
  • Primárním příjemcem výsledků musí být žák (student), pak učitel a teprve nakonec při zajištění etických pravidel též nadřízené orgány.
  • Učitelé, kteří s takovým systémem pracují, musí být schopni jeho výhod efektivním způsobem využívat. Učit s podporou technologií znamená učit jinak než bez ní.
  • Je třeba přijmout rizika spojená s tím, že výkon role učitele začne být po přechodu na systém poskytující nepřetržitou zpětnou vazbu o činnosti žáků na tomto systému závislý.
  • Využití získaných dat byť i jen k částečnému hodnocení schopností učitele je mimořádně problematická záležitost. Nelze pracovat s absolutními výsledky, je třeba hledat přidanou hodnotu. Přitom je nutné eliminovat všechny vnější vlivy, které jsou v mnoha případech během zpracovávání dat neznámé.
  • Existuje mnoho vysloveně mimořádných učitelů, jejichž výukové metody mají vynikající výsledy, které takovýto automatizovaný systém nedokáže ocenit (např. Testem neověřitelná světově uznávaná na první pohled kvalitní výuka). Jeho nasazení může v takových výjimečných případech být zcela nevhodné.
  • Je třeba řešit poměrně složitou problematiku etiky zpracování osobních dat žáků.
  • Je třeba přijmout riziko toho, že se nám výsledky analýzy nemusí vždy líbit.

 

Literatura a použité zdroje

[1] – GAŠEVIĆ, Dragan. Semantic Technologies in Learning Environments. 2011. [cit. 2011-09-12]. Dostupný z WWW: [http://www.slideshare.net/dgasevic/semantic-technologies-in-learning-environments].
[2] – WELLER, Martin. 5 things I think about Learning Analytics. 2011. [cit. 2011-09-12]. Dostupný z WWW: [http://nogoodreason.typepad.co.uk/no_good_reason/2011/03/5-things-i-think-about-learning-analytics-.html].

Licence

Všechny články jsou publikovány pod licencí Creative Commons BY-NC-ND.

Hodnocení od uživatelů

Bořivoj Brdička
12. 9. 2011, 07:52
"nejpřesněji) hodnotím studenty podle toho, jak dobře si s kým "pokecám"
1. Přichází doba, kdy toto pokecání bude příliš drahé na to, aby se ho denně dostávalo každému žákovi. I když jsem, doufám, nevyvolal dojem, že se bez něj dá obejít!
2. Bohužel se tady nejedná jen o to, jak hodnotíte vy, ale i o to, jak budete vy hodnocen.

Váš komentář

Pro vložení komentáře je nutné se nejprve přihlásit.

Zařazení do seriálu:

Tento článek je zařazen do seriálu Analýza výukových výsledků.
Ostatní články seriálu:

Téma článku:

Informační a komunikační technologie