Provkonstruktion och bedömning med stöd av AI

Hör initiativtagaren till den här gruppen berätta om gruppens bakgrund och vilka samtal som blev.

Hur ett prov eller en bedömningsuppgift konstrueras har stor betydelse för vad elever faktiskt lär sig. Frågor, instruktioner och bedömningskriterier fungerar i praktiken som signaler till eleverna om vad som är viktigt i undervisningen. Trots detta är provkonstruktion ofta ett relativt ensamt arbete. En lärare planerar ett undervisningsområde, skapar ett prov och formulerar bedömningsanvisningar utan att nödvändigtvis diskutera dessa beslut särskilt mycket med kollegor.

Forskning om bedömning visar dock att kvaliteten på prov och uppgifter ofta förbättras när lärare utvecklar dem tillsammans. När flera professionella perspektiv möts blir det lättare att upptäcka otydligheter, obalanser eller svårigheter i uppgifterna. Det handlar i grunden om samma princip som i annan undervisningsutveckling: bra undervisning utvecklas sällan i isolation.

Bedömningens roll i lärandet

I den klassiska artikeln Inside the Black Box visar forskarna Paul Black och Dylan Wiliam att bedömning i klassrummet är en central del av undervisningen och kan ha stor påverkan på elevernas lärande. De beskriver hur information om elevers förståelse kan användas för att justera undervisningen och förbättra lärandet i realtid.

Deras genomgång av över 250 forskningsstudier visar att förbättrad formativ bedömning kan ge betydande lärandeeffekter. Samtidigt pekar de på ett viktigt problem: mycket av skolreformerna fokuserar på systemnivå – tester, styrning och mål – medan det som faktiskt sker i klassrummet ofta lämnas åt lärarna själva.

Det innebär att kvaliteten på undervisning och bedömning i hög grad beror på hur lärare planerar och utformar sitt arbete i vardagen.

Här blir kollegialt samarbete särskilt viktigt.

Att designa prov är en professionell process

Prov och bedömningsuppgifter fungerar i praktiken som en slags ritning över vad undervisningen värderar.

I forskning om provkonstruktion används ibland begreppet provspecifikation, vilket kan beskrivas som en plan eller modell för hur ett prov ska byggas upp. Den fungerar som ett stöd för att säkerställa att provet faktiskt mäter det sggb om undervisningen avsett att utveckla.

En sådan specifikation kan exempelvis innehålla:

  • vilket innehåll som ska testas
  • vilka kognitiva processer som ska prövas
  • vilka typer av frågor som ska användas
  • hur stor vikt olika delar av innehållet ska ha.

När lärare arbetar systematiskt med sådana modeller blir det också möjligt att skapa parallella prov, vilket kan vara viktigt både för rättvisa och för att minska risken för fusk eller läckta prov. Men kanske ännu viktigare är att processen gör lärarnas didaktiska beslut mer synliga – både för dem själva och för kollegor.

Varför kollegial provkonstruktion är viktig

När lärare diskuterar prov och bedömningsplaner tillsammans uppstår flera viktiga möjligheter.För det första blir det lättare att säkerställa att uppgifter verkligen mäter rätt saker. Forskning om testkonstruktion visar att kvaliteten på provfrågor är en central del av provets validitet – alltså i vilken utsträckning provet verkligen mäter den kunskap det är tänkt att mäta.

För det andra kan kollegial diskussion bidra till mer konsekventa bedömningar. Bedömningsanvisningar behöver vara tydliga och konkreta för att olika lärare ska kunna göra liknande bedömningar av samma elevprestation. När kriterier och exempel diskuteras gemensamt minskar risken för stora skillnader i bedömning. För det tredje skapar gemensam planering en möjlighet att diskutera vilka typer av kunskaper som egentligen prövas.

Vissa kunskaper kan mätas effektivt med flervalsfrågor, medan andra kräver mer öppna uppgifter där elever får formulera egna resonemang. Forskning visar till exempel att essäfrågor kan vara särskilt användbara när man vill pröva mer komplexa förmågor som att analysera, organisera och integrera idéer. Samtidigt har sådana uppgifter också begränsningar, bland annat när det gäller reliabilitet i bedömningen. Därför rekommenderar många forskare att olika typer av frågor kombineras i ett prov. Den typen av överväganden blir ofta tydligare när flera lärare diskuterar dem tillsammans.

AI som stöd för professionella samtal

De senaste åren har nya möjligheter uppstått genom AI-baserade verktyg.

I många diskussioner om AI i skolan ligger fokus på elevernas användning. Men tekniken kan också spela en roll i lärares professionella arbete. En möjlighet är att utveckla en gemensam AI-assistent för skolans pedagogiska utveckling.

En sådan bot skulle exempelvis kunna tränas på:

  • läroplanen och kursplanerna
  • styrdokument och kommentarmaterial
  • forskningsartiklar om bedömning
  • exempel på prov och bedömningsanvisningar från skolan.

När lärare diskuterar hur ett prov ska utformas skulle en sådan AI kunna fungera som ett slags digitalt bollplank.

Den skulle exempelvis kunna hjälpa till att:

  • kontrollera att uppgifter är kopplade till rätt kunskapskrav
  • föreslå alternativa formuleringar av frågor
  • visa exempel på liknande uppgifter från forskningslitteraturen
  • hjälpa till att formulera tydligare bedömningsanvisningar.

Det viktiga är att AI inte ersätter lärarnas professionella omdöme – utan stödjer det.

Från individuellt arbete till gemensam kunskapsutveckling

När provkonstruktion diskuteras kollegialt uppstår ofta en djupare diskussion om undervisningens innehåll.

Vilka begrepp är egentligen centrala i ett område?
Vilken typ av resonemang vill vi att eleverna ska kunna föra?
Vilka kunskaper är rimliga att förvänta sig efter detta arbetsområde?

I sådana samtal blir bedömning inte bara en fråga om betyg – utan ett sätt att utveckla undervisningen.

Detta ligger också nära den tanke som Sadler lyfter i sin forskning om formativ bedömning. För att elever ska kunna förbättra sina prestationer behöver de förstå vad som kännetecknar arbete av hög kvalitet och kunna jämföra sitt eget arbete med dessa standarder.

När lärare tillsammans formulerar tydliga kriterier och exempel blir det också lättare att göra dessa standarder synliga för eleverna.

En ny typ av kollegialt utvecklingsarbete

Många skolor har redan etablerade former för kollegialt lärande, exempelvis ämneslag eller pedagogiska utvecklingsgrupper. Att arbeta gemensamt med provdesign och bedömningsplaner kan vara en naturlig del av detta arbete. När sådana samtal kombineras med digitala verktyg – och kanske i framtiden även AI-assistenter som tränats på relevant forskning och styrdokument – kan de bli ännu mer kraftfulla. I bästa fall kan detta bidra till att flytta fokus från enskilda prov till något större: en gemensam förståelse för vad god undervisning och rättvis bedömning innebär.

Vill du läsa mer?

För den som vill fördjupa sig i forskning om provkonstruktion och bedömning kan följande texter vara en bra start:

Black & Wiliam (1998). Inside the Black Box: Raising Standards Through Classroom Assessment
En klassisk forskningsartikel som visar hur formativ bedömning i klassrummet kan förbättra elevers lärande.

Sadler (1989). Formative Assessment and the Design of Instructional Systems
En inflytelserik artikel om hur feedback och tydliga kvalitetskriterier hjälper elever att utveckla sin förmåga att bedöma och förbättra sitt eget arbete.

Haladyna, Downing & Rodriguez (2002). A Review of Multiple-Choice Item-Writing Guidelines for Classroom Assessment
En omfattande genomgång av forskningsbaserade riktlinjer för hur provfrågor kan konstrueras för att mäta kunskap på ett mer tillförlitligt sätt.f

Hör intiativtagaren Jacob berätta om gruppen och dess diskussioner

Om inget annat anges delas allt material under CC BY-NC-SA 4.0