Hlavní regulátor společnosti Ofqual „signalizoval“ ministrům svou „úzkost“ z používání umělé inteligence v kurzech „rozšířeného psaní“ a zadal interní práci na tom, jak „uzavření“ rizika.
Sir Ian Bauckham byl dnes dotazován parlamentním výborem pro vzdělávání.
Zde je to, co potřebujete vědět…
1. AI není dost dobrá pro označení podrážky‚
Ofqual tento týden zveřejní výzkum o využití umělé inteligence při známkování.
Bauckham řekl poslancům, že „nevěříme, že AI je ještě připravena provést jediné známkování studentských prací“.
Bylo to proto, že stále dělá chyby a je těžké jej napadnout, dodal.
Ale řekl, že to může být použito k „zajištění kvality, odhalení například neočekávaných vzorů ve známkování zkoušejících a tak dále, ale ne k jedinému známkování“.
Bývalý hlavní regulátor Jo Saxton varoval v roce 2023 nechtěli „umožnit“ umělé inteligenci pouze známkování práce studentů.
2. Interní práce zadané na kurzech AI risk
Bauckham řekl, že „signalizoval mou úzkost“ ministerstvu školství ohledně používání AI podvádění v kvalifikacích s rozšířenou výukou psaní.
Řekl, že těchto kurzů je „relativně málo“, ale zdůraznil historii a úroveň angličtiny, kde 20 procent kvalifikace tvoří rozšířené psaní.
„Část hnací síly pro rozšířenou výuku psaní spočívá ve způsobu, jakým je navržen samotný obsah. To je záležitost DfE.“
Zadal však „významný kus práce interně v Ofqualu, abychom zjistili, do jaké míry je toto riziko v současnosti realizováno a jaké by mohly být možnosti v jakékoli reformě těchto kvalifikací, abychom toto riziko odstranili a ujistili se o integritě těchto kvalifikací“.
Dodal: „Nebyl bych transparentní, kdybych neřekl, že mě to znepokojuje, navštívil jsem řadu poskytovatelů po celé zemi, mluvil jsem s učiteli a řada z nich se mnou na toto téma upozornila.“
Bauckham uvedl, že existují některé způsoby, jak snížit riziko nesprávného postupu při práci v kurzu, jako je například zveřejnění, které „prověřuje rozsah, v jakém mohl kandidát přistupovat k AI“.
3. Pravděpodobnost, že budou kratší zkoušky, než méně zkoušek
Bauckham označil vládní závazek zkrátit v průměru o 10 procent zkouškového času za „rozumný, racionální… a také dosažitelný“.
Řekl, že ve většině případů by to s největší pravděpodobností znamenalo kratší zkoušky, ale zkoušek by mohlo být méně.
Ofqual má byl pod tlakem zveřejnit podrobné modelování, které formovalo politiku revize kurikula.
Po nátlaku Petera Swallowa, poslance za Bracknell, zda to zveřejní, Bauckham řekl, že důkazy byly „poskytovány pro účely tvorby ministerské politiky, takže bychom tyto informace běžně nezveřejňovali v rané fázi“.
Dodal, že budou konzultovat „jakékoli návrhy týkající se reformy GCSE a důkazy spojené s těmito návrhy budou v tomto okamžiku zveřejněny“.
4. Snažit se „zmírnit nadšení“ u digitálních zkoušek
Regulátor oznámil minulý měsíc že by to zkušebním komisím umožnilo zavést až dvě specifikace na obrazovce pro GCSE a kvalifikace na úrovni A s méně než 100 000 záznamy za rok.
Zkušební komise oznámily své vlastní plány absolvovat některé zkoušky na obrazovce, ale spoléhaly na schválení Ofqual.
Bauckham řekl, že v tomto prostoru bylo „významné pokrytí nadšení některých zkušebních komisí. Je to nadšení, které se snažíme mírnit.“
„Takže ano, mezi komunitou udělujících orgánů je nadšení, ale mým úkolem samozřejmě není jako regulátor dělat to, co (oni) po mně chtějí. Právě naopak, mým úkolem je chránit systém zkoušek v zájmu studentů.“
Řekl, že existují praktické obavy, zda mají školy dostatek notebooků nebo prodlužovacích kabelů pro nabíječky.
„Absolutně to potvrzuje, proč jsme to vzali do ruky, protože můj názor je, že nemůžeme dovolit, aby specifikace na obrazovce začaly saturovat trh způsobem, který je nekontrolovaný.“
Žádná kvalifikace nemůže být „experimentem“ a „umožní použití regulovaných kvalifikací ve školách pouze v případě, že dosáhneme velmi vysoké laťky spolehlivosti, pokud nebudou navrženy tak, aby nespravedlivě diskriminovaly studenty z méně zvýhodněného prostředí“.
5. Nepravdivé zkoumání, zda Pearson porušil pravidla na úrovni A v matematice
Bauckham co požádal o aktualizaci o přístupu Pearsona Edexcela k udělování matematiky na úrovni A v loňském roce, po stížnostech, že nahradil papír verzí, která postrádala množství obsahu, který žáci očekávali.
„Závěr, ke kterému jsme dospěli, byl, že zkouška, kterou jsme absolvovali společně – písemka 1, 2 a 3 – poskytla přesný údaj o dovednostech, znalostech a porozumění obsahu, takže známky, které jsme považovali za spolehlivé.
„Nicméně mě znepokojovala úzkost, která byla studentům způsobena, a tak jsem požádal svůj tým, aby se na to důkladně podíval a pokusil se rozhodnout, zda Pearson v nějakém smyslu v této oblasti nevyhověl nebo ne.
„Ten kus práce jsme ještě úplně nedokončili, ale až to uděláme, bude zveřejněno normálním způsobem.“
6. Boardům se nelíbilo nové Bauckhamovo „pokárání“
Loni Ofqual si udělil nové pravomoci veřejně „pokárat“ zkušební komise porušující pravidla kde není natolik závažné, že si vyžádají finanční postih.
Bauckham řekl, že dostali „velmi ostrou zpětnou vazbu“ od udělujících organizací, které řekly, „že by pro ně bylo skutečně velmi obtížné ji získat“.
„Dalo by to generálním ředitelům důvod k obtížným rozhovorům s jejich správními radami a v případě udělování akcií organizacím, které jsou komerčními subjekty, by to mohlo mít dopad na cenu akcií.
„Takže se jim to moc nelíbilo, což mi dalo jistotu, že by to mohlo být účinné.“
7. ‚Vítejte‘ rozhovor na nové desce pro BSL GCSE
Školní týden hlášeno jak navzdory nakladatelství Ofqual pravidla, kterými se řídí návrh dlouho očekávaného britského znakového jazyka GCSE, se zatím žádná zkušební komise nezavázala k jeho vytvoření.
Michael Hanton, zástupce hlavního regulátora, řekl, že nemají pravomoc přinutit zkušební komisi, aby nabídla kvalifikaci, ale „existuje příležitost, aby se udělující organizace stala uznávanou za nabízení GCSE v této konkrétní oblasti“.
„To je cesta, která je otevřená a uvítáme rozhovory o tom.“
