Kursprovet i engelska 6 vårterminen 2017

Transkript

1 PROJEKTET NATIONELLA PROV I FRÄMMANDE SPRÅK Kursprovet i engelska 6 vårterminen 2017 Sofia Nilsson, Institutionen för pedagogik och specialpedagogik, Göteborgs universitet, Projektet Nationella prov i främmande språk (NAFS) 1. Inledning Denna rapport är en delredovisning inom ramen för en överenskommelse mellan Göteborgs universitet (Institutionen för pedagogik och specialpedagogik, projektet Nationella prov i främmande språk/nafs) och Skolverket att utveckla och konstruera nationella kursprov i engelska. Syftet med de nationella proven är i huvudsak att stödja en likvärdig och rättvis bedömning och betygssättning, och ge underlag för en analys av i vilken utsträckning kunskapskraven uppfylls på skolnivå, på huvudmannanivå och på nationell nivå. De nationella proven kan också bidra till att konkretisera kursplanerna och ämnesplanerna, och en ökad måluppfyllelse för eleverna. Rapporten avser det kursprov som gavs vårterminen 2017 för Engelska 6. Kursprovet är obligatoriskt som stöd för betygssättning i gymnasieskolan och gymnasial vuxenutbildning. Kursprovet utgår från ämnesplanens skrivningar. Rubriceringen av de olika delproven - Focus: Speaking (delprov A), Receptive Skills - Focus: Reading och Focus: Listening (delprov B), och Focus: Writing (delprov C) - anknyter till Europarådets ramverk för språkinlärning och språkbedömning, Gemensam europeisk referensram för språk: lärande, undervisning och bedömning med dess rubriceringar reception, interaktion och produktion. Rapporten är baserad på data från SCBs totalinsamling av provresultat och på den insamling av provresultat som projektet Nationella prov i främmande språk (NAFS) genomför. Ytterligare underlag har hämtats från den lärarenkät som hör till kursprovet samt från de elev- och lärarenkäter som använts vid utprövningen av de uppgifter som ingick i provet för Engelska 6 vårterminen Konstruktionsprocess för nationella prov i engelska 1 De nationella proven i engelska, samt övriga bedömningsstödjande material i engelska och moderna språk, utvecklas på uppdrag av Skolverket inom projektet Nationella prov i främmande språk vid Institutionen för pedagogik och specialpedagogik, Göteborgs universitet. Projektets hemsida innehåller information på fem språk: svenska, engelska, franska, tyska och spanska. Provmaterialen tas fram i nära samarbete med referensgrupper och bygger på ett antal grundläggande, forskningsbaserade principer. Projektets 1 Det inledande avsnittet om konstruktionsprocessen är skrivet av Gudrun Erickson, IPS/NAFS, 2016 GÖTEBORGS UNIVERSITET, Institutionen för pedagogik och specialpedagogik Projektet Nationella prov i främmande språk, webbplats:

2 medarbetare har till övervägande del en bakgrund som erfarna och legitimerade lärare i det aktuella språket/språken och flera är också engagerade i lokal skolutveckling, lärarutbildning, forskning, nationella projekt kring lärande, undervisning och bedömning, samt i omfattande internationella nätverk. Olika typer av referensgrupper medverkar under de skilda skedena av arbetet med provutveckling, allt från konstruktion av uppgifter till sammansättning av prov och rekommendation kring betygsgränser och bedömda elevexempel. Dessa grupper har en bred sammansättning med lärare på aktuella och intilliggande nivåer, inklusive personer med specialpedagogisk kompetens, lärarutbildare, personer med målspråket som förstaspråk samt forskare från skilda discipliner. Till detta kommer hundratals elever som medverkar i mindre, preliminära utprövningar samt i den stora utprövning som föregår alla skarpa prov. I den senare deltar per uppgift cirka 400 slumpvis valda elever i landet. I samband med utprövningar besvarar både eleverna och deras lärare enkäter om olika aspekter av uppgifternas funktionalitet. Dessa uppfattningar analyseras och vägs in i besluten om provens sammansättning. Provets betygsgränser och exempel per betygssteg tas fram i grupper om aktiva lärare och provutvecklare. Dessa lämnar på basis av styrdokument och erfarenhet förslag på poänggränser och nivårelaterade elevtexter och elevsamtal. Förslagen diskuteras och analyseras vidare i relation till data från utprövningarna samt föreläggs slutligen Skolverket, som är den instans som fastställer såväl själva provet som dess poänggränser och kommenterade nivåexempel. Utvecklingen av ett nationellt prov tar i regel runt två år och utgår från analyser av styrdokument, relevant forskning samt beprövad erfarenhet inom området. Likaså finns ett antal kvalitetsparametrar som är med i utvecklingsarbetet, hela vägen från initial konstruktion till sammansättning av ett skarpt prov och analys av utfall. Dessa handlar främst om följande: Innehåll, relevans och lämplighet i relation till läroplanen, ämnesplanen, forskning, aktuell målgrupp samt beprövad erfarenhet. Svårighetsgrad (faktisk respektive upplevd) i relation till kursplanen/ämnesplanen, inklusive kunskapskraven. Uppgifternas och provets mättekniska egenskaper, inklusive frågor om samstämmighet mellan bedömare. Eventuella tematiska aspekter. Aspekter av tid och tidsåtgång. Genus-, ålders- och identitetsrelaterade aspekter. Kultur- och livsstilsaspekter (etniska, politiska, religiösa och sociala). Etiska och värdegrundsrelaterade aspekter. Variation vad gäller innehåll och format. Provdelarnas inbördes relation, bl.a. vad gäller progression inom och mellan uppgifter. Likheter och skillnader i relation till tidigare prov. Reflektion av målspråksområdets bredd, såväl språkligt som kulturellt. Signaleffekter/Washback för lärande och undervisning. Utprövande elevers och lärares synpunkter på uppgifterna. De nationella proven är uppdelade i tre delprov, varav ett med två delar. Delproven har, såväl i input-material (teman och texter av skilda slag) som i uppgifter, fokus på de receptiva, produktiva och interaktiva förmågor som beskrivs i ämnesplanen för den aktuella kursen: 2 (12)

3 Delprov A: muntlig produktion och interaktion Delprov B: receptiv kompetens två delar: läs- och hörförståelse Delprov C: skriftig produktion och interaktion Strategisk kompetens och förmåga till anpassning av språket till syften, mottagare och situationer prövas integrerat inom ramen för de tre delproven, medan aspekter av kultur och interkulturalitet präglar val av material och teman för uppgifterna i proven. Svarsformaten varierar i proven, från ren produktion och interaktion i Delprov A och C till en blandning av constructed response (eleverna svarar genom att producera svaret på engelska, eller i enstaka fall i form av en sifferuppgift) eller selected response (eleverna väljer korrekt svarsalternativ, antingen bland ett antal svarsalternativ eller genom att matcha t.ex. en text med en rubrik). Balansen i Delprov B brukar vara ungefär hälften var av dessa båda övergripande svarsformat, detta för att eleverna ska få visa sina kunskaper på annat sätt än genom skrift. Utfallet av proven rapporteras av Skolverket och finns också beskrivet och diskuterat i diverse texter och presentationer av projektets medarbetare; dessa texter nås via projektets publikationssida. Eftersom proven omfattas av sekretess, kan inga konkreta exempel eller kommentarer kring de olika delarna av årets prov ges i detta forum. För ytterligare information om prov och bedömning i språk hänvisas till projektets publikationssida samt de exempel på provuppgifter som ges på projektets hemsida. 3. Provets sammansättning Sammansättningen av kursprovet för Engelska 6 har skett i enlighet med de kvalitetsparametrar och processer som finns beskrivna i föregående del av rapporten. Innehåll och teman utformas med hänsyn till ämnesplanen och är generellt av mer abstrakt och komplex karaktär och relaterar i högre grad till ämnen som rör samhällsfrågor, yrkesliv och studier, än till den personliga domänen. Delprov A Focus: Speaking Delprov A avser att pröva muntlig produktion och interaktion och ge eleven möjlighet att visa sin förmåga att formulera sig och kommunicera på engelska i tal. Uppgiften är utformad kring ett tema med utgångspunkt i de domäner och förmågor som exemplifieras i det centrala innehållet för kursen Engelska 6. Vårterminen 2017 innehöll delprov A två delar som båda utgick från olika aspekter av temat. I den första delen prövades produktion och interaktion och eleverna skulle, utifrån var sitt kort, presentera och informera om någon aspekt av temat och sedan samtala om dessa. I den andra delen var fokus på interaktion och uppgiften var att utifrån en given modell och med hjälp av stödfrågor och nyckelord resonera kring och belysa olika aspekter av temat i en gemensam diskussion. Delprov B Focus: Receptive Skills Delprov B avser att pröva reception avseende läsförståelse och hörförståelse och ge eleverna möjlighet att visa sin förståelse av talad och skriven engelska samt förmåga att tolka innehållet. 3 (12)

4 Vid sammansättningen av delprovet tas hänsyn till flera olika faktorer, t.ex. variation vad gäller innehåll och uppgiftsformat, elevernas uppfattning om uppgifterna, upplevd och faktisk svårighetsgrad, samt mättekniska kvalitéer som uppgiftens reliabilitet. Det finns en strävan att det både inom och mellan prov skall finnas representation från olika sammanhang och delar av världen där engelska används. Delprov B 1 Focus: Reading innehöll vårterminen 2017 fyra uppgifter av olika slag. Delprovet inleddes med en informativ text om ett experiment utformad som en s.k. multiple cloze, d.v.s. en text med medvetet valda luckor med svarsalternativ av flervalstyp. Denna typ av uppgift avser att pröva förmågan att uppfatta ett innehållsmässigt sammanhang, genom att man utifrån sammanhanget måste förstå vilket ord som saknas. Därefter följde en autentisk längre läsförståelsetext om en artist och en tidsperiod i amerikansk nutidshistoria. Uppgiften hade ett blandat svarsformat med både flervalsfrågor och frågor där eleverna formulerade egna svar. Denna typ av uppgift avser att pröva elevernas förmåga att läsa för att förstå detaljer (reading the lines) men också förmågan att förstå en text på ett djupare plan och dra slutsatser av det lästa (reading between the lines och beyond the lines). Som nummer tre låg en text av populärvetenskaplig karaktär om samverkan mellan djur och livsmiljö med ett antal medvetet valda luckor som vardera skall fyllas med ett ord. Denna typ av uppgift avser att pröva elevernas förmåga att vid läsningen skapa sammanhang i en text. Den sista uppgiften bestod av ett antal korta nyhetsnotiser där eleverna avgav svar genom att välja ett av fyra alternativ. Dessa texter har ett kondenserat och bitvis komplext språk och uppgiften avser pröva förståelse av såväl helhet som detaljer. Delprov B 2 Focus: Listening innehöll vårterminen 2017 tre uppgifter av olika slag och inleddes med en studioinspelad multiple matching, en uppgiftstyp som avser att pröva förmågan att uppfatta huvudinnehållet i ett antal sekvenser. En ambition är att de olika rösterna i inslagen ska representera olika slags engelska. Denna inledande uppgift utgör också ankaruppgift i årets prov, d.v.s. det är en uppgift som används i flera prov med syfte att kunna följa resultat över tid och bidra till stabilitet i provsystemet. Årets ankaruppgift användes i prov första gången vårterminen Den andra uppgiften var en autentisk intervju med två kvinnor om deras professionella roll och de utmaningar och skilda villkor som de verkar under. Intervjun, som eleverna fick lyssna till en gång, innehöll flera olika varianter av engelska. Uppgiften hade ett blandat svarsformat med både flervalsfrågor och frågor där eleverna formulerade egna svar. Den sista uppgiften var ett autentiskt, amerikanskt reportage av populärvetenskaplig, informerande karaktär som eleverna fick lyssna på två gånger. Även denna hade ett blandat svarsformat. Delprov C Focus: Writing Delprov C avser att pröva skriftlig produktion och interaktion och ge eleven möjlighet att visa sin förmåga att formulera sig och kommunicera på engelska i skrift. Delprovet handlar om att, utifrån en given uppgift, skriva en text med ett visst syfte och en viss mottagare där eleven uttrycker, utvecklar och diskuterar ett innehåll. Uppgiften är utformad kring ett tema med utgångspunkt i de domäner och förmågor som exemplifieras i det centrala innehållet för kursen Engelska 6. 4 (12)

5 I delprov C för Engelska 6 ingår ett förberedelsematerial, Preparation Material, och en förberedelselektion ska genomföras cirka en vecka före provtillfället. Syftet med förberedelsematerialet är att inspirera och ge uppslag så att eleven lättare skall kunna uttrycka sig kring både konkreta och abstrakta ämnesområden. Vårterminen 2017 erbjöd delprov C två möjliga ingångar till det övergripande temat. Eleverna kunde välja att skriva en diskuterande eller en argumenterande text. Oavsett ingång hade de tillgång till hjälp i form av diskussionsfrågor och stödpunkter. 4. Insamling Elevers resultat på proven samlas in på nationell nivå för att kunna följa upp och utvärdera kvaliteten i svensk skola, för forskning och för att kunna utveckla proven. Skolor som genomför det nationella provet i engelska 6 skall skicka in underlag till två insamlingar av resultat: Den ena insamlingen gäller rapportering av provresultat för samtliga elever i alla skolor. Insamlingen är en del av Sveriges officiella statistik och görs av Statistiska centralbyrån (SCB). Den andra insamlingen gäller ett urval av elevlösningar och resultat på uppgiftsnivå. Denna insamling görs av projektet Nationella prov i främmande språk. Projektets insamling syftar bl.a. till att kunna analysera utfall på delprovs-, uppgifts- och item-nivå och är ett led i kvalitetssäkringen och den kontinuerliga utvecklingsprocessen av kursproven i engelska. För vårterminen 2017 inkom cirka 850 resultatprofiler respektive cirka 300 hela provhäften, vilket medger kvalitativa och kvantitativa analyser av enskilda elevsvar och texter. Dessutom ombeds de lärare som genomför provet besvara en enkät. Information om lärarenkäten finns bl.a. i de bedömningsanvisningar som skickas ut i samband med provets genomförande. Resultatet på lärarenkäten redovisas också på projektets webbplats 5. Provresultat med kommentarer För vårterminen 2017 har ett sammanvägt provbetyg för det ordinarie provet i Engelska 6 inrapporterats till SCB för ca elever. Andelen elever som fick lägst provbetyget E var 97 procent. Elever vars föräldrar har en högre utbildningsnivå samt elever som läser högskoleförberedande utbildningar uppvisar bättre resultat. Män har något högre genomsnittlig provbetygspoäng än kvinnor. För mer information om SCBs redovisning av resultaten från vårens prov, se Skolverkets webbplats, fliken statistik och utvärdering. I tabell 1 nedan kan utläsas andelen elever som nått de olika betygsstegen och i tabell 2 betygsfördelningen på de olika delproven. 5 (12)

6 Tabell 1 Provbetyg Engelska 6: Antal elever i gymnasieskolan med provbetyg totalt och uppdelat på män och kvinnor samt fördelat på betygssteg F-A (data SCB) Antal elever med provbetyg Betygsfördelning (%) F E D C B A Genomsnittlig provbetygspoäng Totalt ,2 14,2 20,9 30,3 19,0 12,5 14,4 Kvinnor ,8 16,4 22,2 29,7 17,5 10,4 14,0 Män ,5 11,8 19,4 30,9 20,7 14,7 14,8 Tabell 2 Delprovsbetyg Engelska 6: Betygsfördelning på delprovsnivå (data SCB) Betygsfördelning (%) Delprov F E D C B A A 2,0 12,5 16,7 28,8 19,7 20,3 B 8,1 15,5 17,7 26,8 19,6 12,5 C 6,6 18,0 20,7 27,8 15,0 11,9 Liksom tidigare år presterar eleverna bäst på delprov A Focus: Speaking. Fler män än kvinnor fick betyget B och A på samtliga delprov, med störst skillnad för Delprov B Receptive Skills där 22,8 procent av männen fick B jämfört med 16,5 procent av kvinnorna, och 15,9 procent av männen fick A jämfört med 9,3 procent av kvinnorna. Även för betyget F är skillnaden mellan män och kvinnor störst för Delprov B. 10,5 procent av kvinnorna respektive 5,4 procent av männen har fått betyget F på det delprovet. Att män presterar bättre än kvinnor på kursprovet i engelska 6 har observerats tidigare och möjliga orsaker diskuteras bl.a. i rapporten En tillbakablick på de nationella proven i gymnasieskolan: Kursproven i engelska Projektet NAFS insamling av resultat från vårterminen 2017 visar vidare att uppgifterna i delprov B har fungerat som förväntat. Resultatet på ankaruppgiften är något högre än när uppgiften användes första gången 2014, vilket får analyseras vidare. Resultatinsamlingen visar också att den första uppgiften i delprov B 1 Focus: Reading är, precis som utprövningarna tidigare indikerat, den lättaste uppgiften och den bör ha gett eleverna den lugna ingång i provet som eftersträvas. Likaså är variationen i svårighetsgrad inom och mellan uppgifter god och varje uppgift inleds med någon eller några något enklare frågor, vilket också är önskvärt för elevernas motivation och upplevelse av progression. I delprov B 2 Focus: Listening är det den andra uppgiften, en intervju som eleverna får lyssna till en gång, som är den lättaste uppgiften, både enligt utprövningarna inför och resultatinsamlingen efter provet. Då uppgiften upplevdes som svårare än den faktiskt var, valdes istället som första uppgift en multiple matchning som eleverna uppfattade som lätt, och som inledningsvis innehöll några enklare frågor. 6 (12)

7 6. Enkätresultat med kommentarer Alla uppgifter som ingår i ett nationellt prov i engelska har granskats och kommenterats i flera olika led innan de används i prov. Dels ges elever och lärare möjlighet att ge sina åsikter om olika uppgifter i samband med mindre utprövningar under konstruktionsprocessen, dels besvarar både elever och lärare enkäter om uppgifterna i samband med den storskaliga utprövning som alla provuppgifter som ingår i ett nationellt prov i engelska genomgår. Dessutom granskas uppgifterna innehållsmässigt, språkligt och utformningsmässigt i de referensgrupper med aktiva lärare, modersmålstalare och språklig expertis och Skolverksrepresentanter som tar del av materialet på vägen fram till det färdiga provet. Synpunkter på materialet tas till vara i processens olika steg. Elevenkäter från utprövningar I den storskaliga utprövningen ombeds eleverna besvara en enkät med ett antal frågor i form av påståenden. De besvarar genom att ringa in 1-5 på en så kallad Likert-skala där 1 är positivt och 5 negativt. De ges också möjlighet att kommentera uppgifterna med egna ord, vilket många gör. De öppna kommentarerna rör allt från innehållet (t.ex. intressant/ ointressant) till upplevelsen (t.ex. roligt/svårt/nytt/bekant) till konkreta kommentarer om enskilda frågor. Dessa elevenkäter, också refererat till som test-taker feedback (TTF) används dels som underlag för provutveckling, dels som underlag vid urval av uppgifter och sammansättning av hela prov. Nedan följer en kort sammanfattning av informationen från de elevenkäter som genomförts i samband med de storskaliga utprövningar som varje uppgift genomgått innan den blivit aktuell som provuppgift. Ett kursprov sätts samman av uppgifter från olika utprövningsversioner och olika utprövningsår. För att kunna ge en bild av vad eleverna tyckt och tänkt om olika uppgifter läggs alternativ 1-3 (dvs. från det helt positiva till det neutrala alternativet) i Likert-skalan samman i redogörelsen nedan. De siffror som redovisas i procent är avrundade siffror. Delprov A Focus: Speaking Uppgiften togs emot väl av eleverna. Till exempel valde ca 85 procent av eleverna alternativ 1-3 på Likert-skalan vad gäller om det var en bra uppgift, om den var lätt och om den prövade något viktigt. Nedan följer några exempel på vad eleverna skrivit: Det var ett roligt tema som gick att diskutera. It was a very fun way of showing your ability to speak english. Although you might get stuck on specific words, but it was still a very fun. It was a little complicated but it went well. Delprov B Receptive Skills Uppgifterna har tagits emot väl av eleverna. Till exempel valde procent av eleverna alternativ 1-3 på Likert-skalan för de olika uppgifterna vad gäller om uppgiften var bra och om den prövade något viktigt. Eleverna upplever generellt hörförståelse som svårare än läsförståelse, vilket bl.a. kan antas ha att göra med att kraven på en automatiserad förmåga är högre i ett hörförståelseprov än vid läsförståelse. Det syns också i test-taker feedback där siffrorna för om uppgiften var lätt överlag är lägre för hörförståelseuppgifterna än för läsförståelseuppgifterna i detta prov. 7 (12)

8 I utprövningsdata finns små skillnader i elevernas upplevelse av den uppgift som de får lyssna på en gång och den som de får lyssna på två gånger. De tycker att uppgifterna är ungefär lika bra och tror att de klarade dem lika bra. Den skillnad som kan utläsas är att uppgift nummer två, som avlyssnades en gång, uppfattas som något lättare än uppgift nummer tre, som avlyssnades två gånger. Trots detta tycker eleverna som gjort uppgift tre att den ger en mer rättvis bild av deras förmåga än vad eleverna som gjort uppgift två tycker. Så här uttrycker sig några elever i elevenkäterna om uppgift två och tre: Delprov B 2 - uppgift två: I liked it. I thought it was interesting. The Indian dialect was hard to hear/understand and it went so fast. Delprov B 2 - uppgift tre: Det var väldigt intressant speciellt om historia om hur det var till hur det blev. This was a good assignment. It s important to understand the context of what you are hearing. It was hard, they speak too fast. Delprov C Focus: Writing Uppgiften togs emot väl av eleverna. Över 70 procent av eleverna valde alternativ 1-3 på Likert-skalan vad gäller t.ex. om det var en intressant uppgift, om den var lätt, om den prövade något viktigt, om förberedelsematerialet var användbart och om uppgiften gav en rättvis bild av deras förmåga. Nedan följer ett litet urval av elevernas kommentarer om uppgiften: This was a fun theme to write about. I think the task was interesting and useful, but it was difficult. Brett och aktuellt ämne lätt att skriva om. I think the topic was relevant and a great choice perfectly suited for youths. Den var ganska svår av den anledningen att --- inte är ett ämne många ungdomar pratar om Lärarröster från utprövningar och referensgruppsarbete Även lärare ombeds i den storskaliga utprövningen att besvara en enkät med ett antal frågor om uppgifterna, bl.a. om uppgiftens svårighet i relation till kursplanen. Samtliga uppgifter som ingår i kursprovet vårterminen 2017 togs emot positivt vid respektive utprövningstillfälle och en majoritet av lärarna ansåg att uppgifternas svårighetsgrad var lagom i relation till ämnesplanen för engelska 6. Lärarenkäter från kursprovet vårterminen lärare har besvarat årets lärarenkät. Antalet inkomna lärarenkäter har tyvärr sjunkit avsevärt under de senaste två åren. Så sent som 2014 inkom fyra gånger så många lärarenkäter drygt 800 stycken för engelska 6. Eftersom urvalet dessutom är självselekterat bör resultaten tolkas med försiktighet. En fullständig redovisning av de frågor i lärarenkäten som har bundna svarsalternativ finns att läsa på projektets webbplats. Nedan följer en kort sammanfattning av ett urval frågor. Siffrorna är avrundade till heltal. 8 (12)

9 Lärarna ombeds besvara ett antal frågor om provet som helhet och om de olika delproven, samt ges tillfälle att skriva fritt. Mellan 76 och 108 lärare har använt den möjligheten för att kommentera delproven. Kursprovet som helhet Kursproven i engelska är generellt uppskattade av lärare och utfallet för årets prov är i allt väsentligt i linje med tidigare år. Nedanstående två diagram beskriver hur provet som helhet tagits emot av de 208 lärare som besvarat enkäten. Figur 1 och 2 Provet som helhet (antal lärare) Provet som helhet är bra Provet som helhet är ett stöd för betygssättningen Instämmer helt Instämmer Instämmer Instämmer till stor del till viss del inte alls Inget svar Instämmer helt 17 Instämmer Instämmer Instämmer till stor del till viss del inte alls 2 11 Inget svar Lärarna ges också möjlighet att fritt lämna synpunkter på kursprovet. Kommentarerna i detta svarsfält utgörs av allt från konkreta förslag och redogörelser av hur man arbetar på skolan, till åsikter om provets svårighetsgrad eller utformning. Cirka en tredjedel av de lärare som skrivit öppna kommentarer är uttryckligen positiva till provet som helhet och menar bl.a. att innehållet i delproven är relevant i förhållande till ämnesplan och att provresultaten i många fall bekräftar lärarens egen bedömning. Lärare uttrycker också att provens texter och ämnesval är intressanta. Merparten av de lärare som framför negativa åsikter om proven kommenterar den tiogradiga skalan eller att sammanvägningsmodellen inte har samma bakomliggande principer som kursbetyget och att detta faktum kan vara svårt att förklara för elever. En handfull lärare kommenterar att efterarbetet av provet, såväl bedömning som rapportering av resultat, är betungande för lärare. Några uttrycker att de saknar den resultatsammanställning som tidigare fanns på baksidan av delprov B. Ett antal lärare lämnar konkreta förslag, till exempel införande av en svarsblankett, olika färger på häftena för engelska 5 och 6, att genomföra delprov B på två olika dagar, tillgång till Preparation Material vid provtillfället för delprov C, mer och nytt material på projektets hemsida och ämnesförslag för framtida prov. Delprov A Focus: Speaking Samtliga lärare anser att delprov A ger eleverna möjlighet eller viss möjlighet att visa sin förmåga att formulera sig och kommunicera på engelska i tal och 99 procent anser att uppgiften var mycket lämplig eller lämplig i relation till ämnesplanen. Närmare 70 procent av lärarna spelar in eleverna vid provtillfället, vilket kan underlätta sambedömning och bidra till en mer likvärdig bedömning. Andelen lärare som uppger att de spelar 9 (12)

10 in har ökat konstant de senaste åren. En majoritet av lärarna menar att de kommenterade exemplen på elevprestationer utgör ett mycket gott eller tämligen gott stöd vid bedömningen. De öppna kommentarerna till delprov A innehåller kommentarer till själva uppgiften och hur den fungerade. Lärare uttrycker att den fungerade väl, t.ex. Bra ämne som eleverna kunde utveckla, fördjupa och bredda. Passade de allra flesta eleverna temamässigt - alla hade något att säga om saken. Väldigt tydligt vad som förväntades av eleverna. Bra teman att diskutera och samtala kring, dagsaktuella och allmänmänskliga, tycker ett flertal elever i gruppen samt jag. Några lärare uttrycker också att temat fungerat mindre bra för deras elevgrupp: Svårt att utveckla och komma djupare i ämnet. Ämnesområdet för Speaking var svårt att utveckla för eleverna. Samtalen innehöll mycket repetition. Det var svårt att variera bl.a. ordförrådet. Många berättar vidare om hur man arbetar med delprovet på skolan, hur man organiserar sig och samarbetar, eller inte samarbetar, och vilka förutsättningar man som lärare får. En handfull lärare ger förslag på hur bedömningskommentarerna kan utvecklas eller förändras och några uttrycker att själva samtalen är ett bra stöd. Det framförs också önskemål om fler exempelsamtal samtidigt som några lärare nämner avvägningen mellan att vilja ha mycket stödmaterial och att faktiskt ha tid och möjlighet att sätta sig in i ett omfattande material. En lärare önskar att även exempel på prestationer som inte når betyget E skall illustreras. Eftersom samtal inte kan anonymiseras i samma grad som texter har det bedömts att prestationer som bedömts som F ej bör inkluderas i lärarmaterialet. Vid arbetet med att välja ut exempelsamtal finns dock sådana prestationer med för att referensgruppen skall få stöd att identifiera nivåerna. Delprov B Receptive Skills 99 procent av lärarna anser att delprov B 1 Focus: Reading helt eller till viss del ger ett tillförlitligt mått på deras elevers förståelse av skriven engelska samt deras förmåga att tolka innehållet och mellan 94 och 99 procent anser att de olika uppgifterna var mycket lämpliga eller lämpliga i relation till ämnesplanen. 91 procent av lärarna anser att delprov B 2 Focus: Listening helt eller till viss del ger ett tillförlitligt mått på deras elevers förståelse av skriven engelska samt deras förmåga att tolka innehållet och mellan 85 och 94 procent anser att de olika uppgifterna var mycket lämpliga eller lämpliga i relation till ämnesplanen. Så gott som samtliga anger att bedömningsanvisningarna till delprov B fungerat bra. De öppna kommentarerna till delprov B är av delvis olika karaktär. Dels framförs önskemål och förslag på utvecklingsområden, t.ex. digitala prov eller mer elevnära texter, dels kommentarer om själva uppgifternas innehåll och utformning samt hur man uppfattat elevernas reaktioner, t.ex. nervositet som en faktor vid hörförståelse. Den uppgift som kommenteras mest är uppgift nummer två i delprov B 2 Focus: Listening. Det är också den uppgift som lägst andel av lärarna (85 procent) anser mycket lämplig eller lämplig i relation till ämnesplanen. Det är en uppgift som där en av talarna talar med en indisk accent och som eleverna får lyssna till en gång. Ett antal lärare menar att man borde få lyssna till denna uppgift två gånger, att den är svår eller att accenten är ovan för eleverna: 10 (12)

11 Hörförståelsen upplevdes som svårt av eleverna p.g.a. av det användes många olika dialekter. Resultatet skiljde sig dock inte från ett gammalt NP som jag gjorde med samma elever tidigare. Någon lärare uttryckte en annan åsikt: Mycket positivt att det blev samtal med brytning på indiska och även något tyngre amerikansk brytning i lite högre tempo. Eleverna blir generellt inte utmanade i sin vardag då flertalet konsumerar underhållning som har en tydlig prägling av amerikansk engelska utan någon påtaglig brytning. Generellt kan sägas att uppgifter med vissa accenter över åren har genererat kommentarer från lärare, liksom uppgifter som enbart avlyssnas en gång. Centralt innehåll för kursen anger att reception på Engelska 6-nivå omfattar talat språk, även med social och dialektal färgning, och kunskapskravet för betyget E talar om att förstå huvudsakligt innehåll och uppfattar tydliga detaljer i talad engelska i relativt snabbt tempo. Utifrån detta har uppgiften bedömts lämplig och utprövningar har visat att uppgiften fungerar väl. Elever har i utprövningar uttryckt en upplevd svårighet som inte motsvarar den faktiska svårigheten. Resultatinsamlingen från provet visar också att detta är den lättaste uppgiften i hörförståelsen med ett antal frågor med en lösningsfrekvens (medelvärdet uttryckt i procent) runt.80 vilket är att betrakta som lätt. Delprov C Focus: Writing Samtliga lärare anser att delprov C ger eleverna möjlighet eller viss möjlighet att visa sin förmåga att formulera sig och kommunicera på engelska i skrift och 99 procent anser att uppgiften var mycket lämplig eller lämplig i relation till ämnesplanen. En majoritet av lärarna menar att de kommenterade exemplen på elevprestationer utgör ett mycket gott eller tämligen gott stöd vid bedömningen. De öppna kommentarerna till delprov C innehåller kommentarer till själva uppgiften och hur den fungerade. Många lärare tycks ha uppskattat temat: Mycket bra med Preparation Material och fina diskussioner man kan ha i klassen före Writing. Ämnet var väldigt bra. Mycket aktuellt. Kunde inte ha varit mer lämpligt temamässigt. Bra förberedelsematerial också. Bra teman att skriva kring, dagsaktuella och viktiga. Enstaka lärare har en avvikande åsikt: Ämne som eleverna var något trötta på tyvärr pga. debatten som förts om ---. Andra förekommande kommentarer rör önskemål om hur bedömningskommentarerna kan utvecklas eller förändras, t.ex. i form av punktlistor eller någon form av matris. Det framförs också enstaka önskemål om fler exempeltexter eller reflektioner kring nivån på texterna. Avslutningsvis uppger 97 procent av lärarna som besvarade enkäten att kursprovet som helhet ger resultat som till mycket stor eller ganska stor utsträckning stämmer överens med de egna bedömningarna av enskilda elevers kunskaper. 11 (12)

12 7. Avslutning Sammanfattningsvis är utfallet på kursprovet i Engelska 6 vårterminen 2017 det förväntade och ligger i linje med tidigare års prov. De uppgifter som ingår i provet har tagits emot väl av elever i utprövningar inför provet. Tyvärr har antalet besvarade lärarenkäter minskat drastiskt de senaste åren, och utfallet av dessa får därför tolkas med viss försiktighet. Då lärarenkäterna är en viktig del i utvecklingen av provet finns det anledning att hoppas att denna utveckling kan vändas. Trots dessa reservationer kan konstateras att svaren på årets enkät stämmer väl överens med tidigare år och att kursprovet som helhet har tagits emot väl av lärarna som upplever att provet utgör ett stöd för betygssättningen och att resultaten i stor utsträckning stämmer överens med de egna bedömningarna. 12 (12)