Mining and selecting texts for easy reading Katarina Mühlenbock DART, Drottning Silvias barn- och ungdomssjukhus, SU Institutionen för svenska språket, GU
Mining and selecting texts for easy reading (Användaranpassad hämtning av enkla texter)
Generellt 3-årigt projekt Angriper problemet med bristande läsförståelse hos elever i grundskolan Tvärvetenskapligt angreppssätt pedagogik, informationsteknik och språkvetenskap Utvärderar läsförståelse, ger pedagoger återkoppling i form av rekommendationer Finansieras av Wallenbergstiftelserna
Målsättning Att ta fram verktyg för att utvärdera individuell läsförståelse och -processer Att ge lärare underlag för bedömning av elevers läsförmåga Att utveckla nya och bättre läsbarhetsmått Att skapa en uppsättning digitala verktyg för textval grundat på elevens läsarprofil, automatisk textsummering, och omskrivning till enkel svenska
Testning Läromedelstexter I SV, SO och NO indelade i 7 resp. 4 svårighetsnivåer med hjälp av komplexitetsmåttet SVIT Testning I åk 4, 6 och 8 av elevers förståelse av texterna.
SVIT-modellen (Heimann Mühlenbock, 2013) Vokabulär Grammatisk komplexitet Idétäthet Intressegrad
Hypotes: SVIT-måtten kan användas för att nivåindela texterna Samla in text År 1 År 2 År 3 Analysera läsbarhet Samla SV SO läsbarhet NO Nivåindela in text Analysera Nivåindela Samla in text Analysera läsbarhet Nivåindela Åk 4 Linköping Åk 6 Uppsala Åk 8 Göteborg Åk 4 Linköping Åk 6 Uppsala Åk 8 Göteborg Åk 4 Linköping Åk 6 Uppsala Åk 8 Göteborg Testa elevernas läsförståelse och ordkunskap Analysera elevresultat med avseende på läsförståelse, förståelseprocesser, ordförståelse. Förkasta eller bekräfta hypotesen: korrelerar resultaten med nivåindelningen? Projektresultat SV Textbank SO NO Ge feedback till lärarna om individuella resultat Verktyg Utvärderingsdata Metod
Testprocedur SV-ämnet Alla elever läste tre nivåindelade texter (3 olika tillfällen) Text- och ordförståelse testades anonymt Lärarna fick återkoppling genom portal med lösenordsskyddad inloggning: www.ida.liu.se/projects/master/webapp2/login
Caroline Liberg, Uppsala Universitet Ett exempel på början av en lätt text för årskurs 6
L Ä S F Ö R S T Å E L S E Två huvudtyper av frågor: Lokala: lokalisera och återge explicit uttryckt textinnehåll dra enkla slutsatser Globala: integrera och tolka textinnehåll granska och värdera textinnehåll, språk och textelement
Caroline Liberg, Uppsala Universitet O R D F Ö R S T Å E L S E Generellt vardagligt ordförråd i texten som helhet
Femton typer av textförståelse * ordförståelse TEXTFÖRSTÅELSE Inledande responstext till lärarna: Eleven har läst en berättande text och svarat på flervalsfrågor om textinnehållet och ord som ingår i den typen av texter. Frågor där eleven själv har behövt formulera och skriva ett svar har således inte ingått i det här testet. Testet på textinnehållet prövar elevens förmåga att svara på dels så kallade lokala frågor, dels globala frågor. Svaren på de lokala frågorna går oftast att finna direkt i texten. Det kan röra att finna enskilda detaljer och dra mer enkla slutsatser där näraliggande aspekter i texten ska kopplas till varandra. De globala frågorna kräver å andra sidan en förmåga att kunna dels gå mer på djupet i texten, läsa mellan raderna och integrera aspekter från olika delar av texten, dels distansera sig från texten för att kunna granska textelement som bildspråk och metaforer och se tänkbart huvudbudskap. Ordtestet prövar elevens kunskap om hur många ord eleven känner till och om eleven kan olika betydelser av ett ord. I testet prövas kunskaper om informationsbärande ord, dvs. substantiv, verb, adjektiv och adverb.
Femton typer av textförståelse * ordförståelse Exempel på responstext till lärarna: Texten eleven läst har en enkel meningsbyggnad. Ordvariationen är låg och andelen svåra ord är mycket låg. När eleven läst den här texten uppvisar hon/han en läsarprofil där de mest framträdande dragen är att eleven endast klarar att svara rätt på ett fåtal frågor. Det gäller såväl de textbaserade som de tolkande och värderande frågorna. Eleven bearbetar därmed endast enstaka delar av texten och får med stor sannolikhet inget grepp om helheten i texten och hur olika aspekter i texten hänger samman. Eleven har stora luckor i sin ordkunskap. Begränsningar finns både vad gäller hur många ord eleven kan och olika betydelser av enskilda ord. Eleven har prövats på ord som är anpassade efter elevens ålder. Eleven har förmodligen svårigheter att förstå innehållet i en text som är anpassad för elevens ålder på grund av begränsningarna i ordkunskapen.
Femton typer av textförståelse * ordförståelse TEXTFÖRSTÅELSE Två huvudtyper av frågor: Lokala: lokalisera och återge explicit uttryckt textinnehåll dra enkla slutsatser Globala: integrera och tolka textinnehåll granska och värdera textinnehåll, språk och textelement U1 Udda 1 L Låg M - Medel H - Hög A - Avancerad U2 Udda 2
Pedagogiska rekommendationer TEXTFÖRSTÅELSE Responstext angående Pedagogiska rekommendationer Resultatet som eleven nått på frågor om textinnehållet och orden, tyder på att eleven har en mycket elementär läsförmåga för en text om det här ämnet och på den här svårighetsnivån. Förslag på pedagogiska insatser för en elev med den läsförmågan finner du under rubrikerna I och IIa i texten om pedagogiska rekommendationer. Den texten når du via en länk på hemsidan: http://www.ida.liu.se/projects/master/webapp/login
Frågeställningar Matchade nivåindelningarna elevernas textförståelse? Fanns det signifikanta skillnader i resultaten mellan skolorna och i så fall varför? Vad tyckte lärarna?
Resultat år 1 SV Över 4000 elever testade i 74 skolor i Linköping, Uppsala och Göteborg Nivåindelningen verkar stämma ganska bra, men för stort överlapp på mellannivåerna. Stark korrelation mellan hög textkomplexitet, indikerat genom SVIT, och läsförståelse hos de svagaste eleverna Signifikant korrelation mellan ordkunskap och läsförståelse i alla åldersgrupper Stora variationer mellan skolorna i Göteborg
Testningarna i Göteborg, åk 8 Skola 2014 SV-ämnet 2015 SO-ämnet Antal klasser Antal elever Läsförståelse % korrekt Antal klasser Antal elever Läsförståelse % korrekt Bergsjöskolan -? 77 62; 54 Brunnsboskolan - 3 77 71; 74 Guldhedsskolan - 3 64 85; 78 Hovåsskolan - 1 24 63; 84 Jättestensskolan 2? 42 72; 59; 57 - Kålltorpsskolan 2 41 88; 88; 87 - Kärraskolan -? 64 73; 81 Lundenskolan - 1 24 83; 63 Lövgärdesskolan 3 54 69; 66; 68 3 54 67; 62 Nordhemsskolan -? 44 94; 80 Nordlyckeskolan -? 128 77; 84 Nya Påvelundsskolan - 3 79 89; 84 Sannaskolan 2 39 76; 76 Toleredsskolan? 102 76; 78;76 2 36 76; 76 Torslandaskolan? 82 69; 74; 75 - Trulsegårdsskolan - 4 118 71;75 Totalt 321 828
Skolresultat testning i SV i Göteborg Siffror från Skolverket Skola Bakgrundsvariabler? Läsförståelse genomsnittl betygspoäng åk 9 Läsförståelse Åk 8 % rätt Andel svensk bakgrund Andel utländsk bakgrund födda i Sverige Andel utländsk bakgrund födda utomlands Lövgärdesskolan 12% 56% 32% 12,3 68 % Toleredsskolan 51% 27% 22% 12,4 75 % Jättestensskolan 56% 40% 4% 11,9 63 % Kålltorpsskolan 83% 6% 11% 15,1 87 % Torslandaskolan 91% 1% 8% 13,5 72 %
Vad har vi gjort hittills? Tagit fram totalt 14 texter för SV-ämnet, 8 texter vardera för SO och NO Graderat dem i olika läsbarhetsnivåer (7 i SV, 4 i SO och NO) Provat ut texterna på totalt c:a 7 000 elever SV 1 500 elever i 4:e klass i Linköping, 1 500 elever i 6:e klass i Uppsala och 300 elever i 8:e klass i Göteborg SO 1 500 elever i 4:e klass i Linköping, 1 500 elever i 6:e klass i Uppsala och 800 elever i 8:e klass i Göteborg Skapat webbaserat verktyg för att utveckla test administrera test utföra test räkna ut elevers resultat ge lärare återkoppling om elevernas resultat.
Katarina Mühlenbock, Göteborgs universitet Vad sker härnäst? Utprovning av texter från NO-ämnet under 2015/2016 Start så snart som möjligt I Göteborg hoppas vi att några klasser kan testas på texter från alla tre ämnena, alltså SV, SO och NO