Rapport från utvärdering av NTI-skolans vuxenutbildning 5-15 december 2011

TILLHANDAHÅLLARAVDEL NINGEN UPPFÖLJNING SENHETEN SID 1 (23) 2012-01-30XX UTBILDNING SINSPEKTÖR LENA KAE V 08-508 33 977 MEDBEDÖMARE SVANTE INGLE R REKTOR VUXENUTBILDNINGEN, KUNSKAPSCENTRUM NORDOST Rapport från utvärdering av NTI-skolans vuxenutbildning 5-15 december 2011 Rapporten ingår i ett utvärderingsprojekt i samarbete med KSL Box 22049, 104 22 Stockholm. Telefon 08-508 33 000. Fax 08-508 33 693 Besöksadress Hantverkargatan 3 A www.stockholm.se

2 INNEHÅLLSFÖRTECKNING INNEHÅLLSFÖRTECKNING... 2 UPPDRAG OCH GENOMFÖRANDE... 2 UPPDRAG OCH GENOMFÖRANDE... 3 OMRÅDEN SOM OMFATTAS AV UTVÄRDERINGEN... 4 BESKRIVNING AV ENHETEN... 5 SAMMANSTÄLLNING AV ENHETENS OLIKA VERKSAMHETERS STYRKOR, SVAGHETER OCH UTVECKLINGSOMRÅDEN... 9 Styrning, ledning och kvalitetsarbete... 9 Styrkor... 9 Svagheter... 10 Kunskaper, utveckling och lärande... 12 Styrkor... 12 Svagheter... 15 Bedömning och betygssättning... 16 Styrkor... 16 Svagheter... 17 Övrigt... 18 Områden att utveckla... 19 SAMMANFATTANDE ANALYS... 21 BILAGA: ORGANISATIONSSKISS...23

3 UPPDRAG OCH GENOMFÖRANDE Nedan beskrivs den metod som uppföljningsenheten i Stockholms stad tillämpar vid utvärderingsuppdrag 2011/12 i ett projekt rörande vuxenutbildning i samarbete med KSL för följande kommuner: Botkyrka, Nacka, Upplands Väsby, Tyresö, Sollentuna och KCNO (Danderyd, Täby, Vallentuna och Vaxholm). Uppföljningsenheten vid Stockholms stads utbildningsförvaltning utvärderar den pedagogiska verksamheten och främjar vuxnas lärande genom att granska måluppfyllelsen utifrån nationella styrdokument kontrollera efterlevnaden av nationella riktlinjer granska hur skolan utvärderar sin egen verksamhet ge rekommendationer om vad som bör förändras och utvecklas Vi genomför vårt uppdrag genom att läsa material som skolan ställer till förfogande och även material från andra källor (ex. från Skolverket) intervjua elever, personal och skolledning. Vid distansutbildning genomförs intervjuerna i regel per telefon. observera verksamheten och göra lektionsbesök. Vid distansutbildning granskas även lärportalen i viss utsträckning. I utvärderingen av NTI-skolans distansutbildning har vi även besökt Umeå som är basen för den verksamheten. Där återfinns cirka 80 lärare samt fyra skolledare som arbetar med distansutbildning för cirka 160 kommuner i hela landet. I första hand granskar vi måluppfyllelsen, det vill säga att vi bildar oss en så heltäckande bild som möjligt av hur målen i styrdokumenten tolkas och förverkligas på skolan. Vi gör detta utifrån en prioritering av mål från läroplanen och andra nationella styrdokument. Förutom detta granskar vi skolans förmåga att själv utvärdera sin kvalitet för att förbättra verksamheten. Hög kvalitet innebär enligt Skolverkets definition främst att verksamheten utmärks av att den väl: strävar mot och uppfyller nationella mål svarar mot nationella krav och riktlinjer uppfyller andra mål, krav och riktlinjer som är förenliga med de nationella (t.ex. skolplan, lokal arbetsplan och andra lokala planer) kännetecknas av en strävan till förnyelse och ständiga förbättringar utifrån de förutsättningar man har. 1 1 Från Skolverkets verktyg BRUK för kvalitetsarbete i förskola och skola, s 8.

4 OMRÅDEN SOM OMFATTAS AV UTVÄRDERINGEN Stockholms stads uppföljningsenhet granskar verksamheterna ur ett helhetsperspektiv. Utvärderingen fokuseras särskilt på nedanstående områden, men även andra områden kan kommenteras om det finns starka skäl till det. Styrning, ledning och kvalitetsarbete Detta område granskas utifrån läroplanen (Lpf 94), men även utifrån skollagen och förordning om kommunal vuxenutbildning samt utifrån forskningsresultat inom området. Beträffande ledarskap granskas inom detta område främst skolledningens arbete medan övrig personals, främst lärares, ledarskap granskas under Kunskaper, utveckling och lärande. Kunskaper, utveckling och lärande Detta område granskas främst utifrån mål och riktlinjer i läroplanen (Lpf 94). Dessutom utgår utvärderingen från tydligt bekräftade forskningsresultat med relevans för dessa mål och riktlinjer. Bedömning och betygssättning Detta område granskas främst utifrån mål och riktlinjer i läroplanen (Lpf 94), Skolverkets Allmänna råd om likvärdig bedömning och betygssättning och Handlingsplan för rättssäker och likvärdig betygssättning. Granskningen av bedömning och betygssättning sker på ett sådant sätt att det framgår att området i teori och praktik är nära kopplat till området Kunskaper, utveckling och lärande. I detta avseende utgår granskningen också från vissa allmänt accepterade forskningsresultat.

5 BESKRIVNING AV ENHETEN Företag /skola Planerat antal poäng innevarande halvår/antal studerande 2 Utbildningsinriktning Lokaler Personal inom skolan/företag et NTIskolan Distans; 66550 poäng/515 studerande Distans: allmänna ämnen Distans: Umeå Distans: 90 Klassrum: 40-50 studerande Klassrum: Yrkespaket med allmänna ämnen Klassrum: Medborgarplatsen Stockholm Klassrum: 5 Företag/skola NTI-skolan: - Distansutbildning - Klassrumsundervisning Utbildning NTI-skolans kärnverksamhet utgörs av distansutbildning i flertalet av de kurser som finns inom gymnasieskolans ämnen. Företaget har avtal med cirka 160 kommuner i landet som köper kommunal vuxenutbildning på distans av NTIskolan. Denna verksamhet bedrivs med Umeå som bas. Som komplement till distansutbildningen bedriver NTI-skolan sedan augusti 2011 klassrumsundervisning i yrkespaket för kommuner i stockholmsområdet: Butikssäljare 400 poäng/20 veckor, Ekonomiassistent och redovisning 600 poäng/30 veckor samt Grafisk form, 600 poäng/30 veckor. Dessa kurser bedrivs som klassrumsundervisning/närlärande i lokaler vid Medborgarplatsen i Stockholm. I Butikssäljarutbildningen ingår arbetsplatsförlagd utbildning tre dagar per vecka under hela utbildningen. I Ekonomi- och redovisningsassistent- 2 Antal poäng avser planerat antal verksamhetspoäng innevarande halvår och antal studerande avser antal personer som studerar den tiden från projektkommunerna, oavsett i vilken omfattning dessa personer studerar (deltid/heltid).

6 utbildningen ingår tio veckors arbetsplatsförlagd utbildning under den andra terminen. NTI-skolan bedriver även klassrumsundervisning i allmänna ämnen i Sollentuna, se rapport 17-21 oktober 2011. Studerande Distansundervisning: cirka 515 studerande från projektkommunerna Klassrumsundervisning, Medborgarplatsen: cirka 40 studerande Personal Distansundervisningen bedrivs av lärare som sitter i gemensamma lokaler i Umeå. Företaget har 80-90 lärare anställda där; antalet varierar lite beroende på vilka kurser som är mest efterfrågade under olika perioder. Därutöver finns fem administratörer och två programmerare på plats i Umeå. Lärarkåren har en låg medelålder, cirka 33 år. Varje distanslärare har 60-80 heltidsstuderande som läraren ansvarar för (kan motsvara 100-140 studerande på deltid). 66 procent av distanslärarna är behöriga. Klassrumsundervisningen vid Medborgarplatsen bedrivs huvudsakligen av tre lärare, varav två är behöriga. De studerande har även tillgång till den studie- och yrkesvägledare som har sitt rum i lokalerna. Verksamheten leds av en skolledare som finns på plats varje dag, se nedan Ledningsorganisation. Lokaler Distansundervisning: de studerande studerar hemma. Det finns tillgång till laborationslokaler i Mikael Elias Teoretiska Gymnasium. Lärarna finns i Umeå och sitter tillsammans med administratörer och programmerare på Backenvägen i Umeå i anslutning till NTI-gymnasiets lokaler. Alla arbetsrum ligger bredvid varandra på samma våningsplan med gemensamt personalrum i mitten. Klassrumsundervisning: de studerande har lokaler vid Medborgarplatsen i Stockholm och skolledarna har också sina rum där. Ledningsorganisation NTI-skolan ingår i koncernen AcadeMedia, verksamhet Gymnasial vuxenutbildning, se bifogad organisationsskiss 3. AcadeMedia har ansvaret för löne-, IT- och fastighetsfrågor och övriga frågor ansvarar varje verksamhet för. 3 Bilaga, Organisationsskiss över Gymnasial vuxenutbildning NTI-skolan

7 Gymnasial vuxenutbildning inom koncernen leds av en verksamhetschef med säte på Södermalm i Stockholm och vid sin sida i ledningskansliet har han en relativt nyinrättad tjänst som kvalitetskoordinator. I kanslilokalerna har företaget utöver kontorslokaler för den centrala administrationen ett stort boklager och bedriver försäljning och distribution av läromedel till olika delar av landet. Den gymnasiala vuxenutbildningen är indelad i olika enheter, Administration, Logistik och Marknad med lokaler i det centrala kansliet i Stockholm. Därutöver finns ytterligare en enhet, Pedagogik, där själva utbildningsverksamheten bedrivs. Inom enheten Pedagogik återfinns flera underavdelningar med sina respektive enhetschefer som ansvarar för olika delar av verksamheten: Distansutbildningen med 80-90 lärare leds av en tillförordnad platschef och fyra skolledare i Umeå. Innan tillsättningen av ny enhetschef har lösts där så ansvarar verksamhetschefen för gymnasial vuxenutbildning (med säte i Stockholm) även för distansutbildningen i Umeå. Fyra skolledare på plats i Umeå tillsammans med verksamhetschefen i Stockholm leder distansverksamheten. Verksamhetschefen besöker Umeå en gång per månad och har veckovisa telefonmöten. Närlärande (klassrumsundervisning) finns på följande orter: Närlärande i Göteborg Närlärande i Stockholm/Mälardalen (Didaktus) Närlärande nyetableringar (NTI i Stockholm/Medborgarplatsen, Östersund, Örebro, Falun, Borås, Malmö, Lund och Höganäs). Det är distansutbildningen och klassrumsundervisningen vid Medborgarplatsen i Stockholm som ingår i denna utvärdering. Ledningsgruppen för gymnasial vuxenutbildning utgörs av respektive enhetschef och tf platschef i Umeå och de träffas eller har telefonmöten varje månad. De skriver en verksamhetsrapport varje månad till verksamhetschefen där frågor om personalläge, ekonomi, marknadsföring och kvalitet tas upp. Enhetschefen för nyetableringar besöker sina enheter någon gång per månad och har nästan daglig kontakt med dem per telefon. Kontoret finns i lokalerna vid Medborgarplatsen. I lokalerna på de orter där klassrumsundervisning bedrivs har enhetscheferna anställt olika skolledare som på plats är ansvariga för de olika utbildningarna. Dessa skolledare har direkt personal- och verksamhetsansvar och rapporterar till enhetschefen. Enhetschefen har det övergripande ansvaret för personal, ekonomi och pedagogik. Personalgrupperingar och mötesstruktur Distansutbildningen: De fyra skolledarna i Umeå har telefonmöten med verksamhetschefen varje vecka och ofta har de telefonkontakt varje dag. Minst en gång per månad besöker verksamhetschefen Umeå.

8 Lärarna i Umeå är organiserade i nio arbetslag, huvudsakligen runt sina ämnen, och varje arbetslag leds av en arbetslagsordförande (ALO). Lärarna sitter huvudsakligen ämnesvis i sina arbetsrum. Arbetslagen träffas varannan vecka. ALO träffas som grupp varannan vecka, och en gång per månad är skolledarna med på de träffarna. Därutöver har man APT en gång varje månad. Samtliga möten protokollförs. Klassrumsundervisningen på Medborgarplatsen: Enhetschefen för nyetableringar, där bland annat Medborgarplatsen ingår, träffar sin skolledare och sin personal på Medborgarplatsen i ett möte några timmar varannan vecka. APT genomförs en gång per månad tillsammans med personal från Eductus som också ingår i AcadeMedia och som har lokaler tillsammans med NTI på Medborgarplatsen. Övrigt Basen i distansutbildningen utgörs av en egenutvecklad lärplattform. Kommunikationen med eleverna bedrivs huvudsakligen per mail. Utöver mail har företaget även telefonsupport där lärarna är tillgängliga kl 10-16. Telefonen används även för vissa övningar, främst i språk, och slutexaminationer i alla kurser. Laborationer genomförs oftast i laborationslokal under lärares ledning i skollokal i närheten av den studerandes hemort. Vissa kommuner godkänner fortfarande laborationer i hemmiljö med så kallade laborationslådor (gäller ej projektkommunerna). Ibland används även Skype i undervisningen. Lärplattformen kommer att ersättas av en ny plattform sommaren 2012. NTI-skolan har beviljats betygsrätt, men har ännu inte slutit avtal med någon kommun om att nyttja den rätten. Betygsrätten används idag för att utfärda betyg inom gymnasieutbildningar som säljs till olika företag. NTI-skolan säljer även kurslitteratur och distribuerar böcker från sitt boklager i Stockholm över hela landet.

9 SAMMANSTÄLLNING AV ENHETENS OLIKA VERKSAMHETERS STYRKOR, SVAGHETER OCH UTVECKLINGSOMRÅDEN Vårt uppdrag är att granska och utvärdera enhetens resultat. Med resultat menar vi enhetens förmåga att uppnå och sträva mot de nationella och kommunala målen samt efterleva de riktlinjer och krav som finns i styrdokumenten. Sammanställningen av styrkor, svagheter och utvecklingsområden som vi gör i detta avsnitt är avsedd att ge en översiktlig bild av vår bedömning av verksamheternas kvalitet. Vi vill dock framhålla, att det inte är möjligt att på ett kvantitativt sätt genom att jämföra sammanställningar i olika rapporter med varandra avgöra hur bra olika enheter är i förhållande till varandra. Det är inte antalet punkter under de olika rubrikerna som avgör det. Jämförelser måste baseras på noggrann läsning av texten vid punkterna. Styrning, ledning och kvalitetsarbete (Organisation, dokumentation, skolledningens pedagogiska ledarskap etc) Styrkor Vår utvärdering har visat att enheten har ett antal styrkor, bland annat dessa: NTI-skolan har en tydlig lednings- och mötesstruktur. Företaget NTI-skolan strävar efter att utveckla kvalitetsarbetet och har i år anställt en kvalitetskoordinator på heltid. Inom koncernen AcadeMedia vill man också lyfta kvalitetsfrågorna och man har där anställt en ny kvalitetschef som ska styra upp kvalitetsarbetet i koncernen. NTI-skolan har lagt upp en ny plan för sitt eget kvalitetsarbete som kommer att sjösättas i januari 2012. Hittills har fokus legat på att förse de olika kommunerna med efterfrågat underlag för deras kvalitetsarbete. Distansundervisningen: I samarbete med ett antal avtalsslutande kommuner har NTI-skolan tagit fram en handlingsplan för att åtgärda olika problem rörande exempelvis studieavbrott, IG-problematik, individuell studieplan. Handlingsplanen gäller distansundervisningen. Planen är framtagen av ledningen för företaget på basis av kritik från en beställande kommun. Handlingsplanen har diskuterats fram i samarbete mellan ledning, skolledare och distanslärare i Umeå och har gett gott resultat.

10 Den nyligen framtagna handlingsplanen, baserad på kritik från en beställande kommun, har lett till en intensifierad utveckling av kvalitetsarbetet och ett nyvaknat intresse för denna typ av arbete. Skolledarna har nu börjat följa upp utvecklingen av de olika resultaten varje månad och har sett att vidtagna åtgärder har börjat ge effekt, vilket har lett till att alla, både lärare och skolledare, nu är nyfikna på att följa resultatutvecklingen och se hur det går framöver. Organisationen av distansutbildningsverksamheten är välorganiserad med nio arbetslag baserade på lärarnas ämneskompetens. Arbetslagen leds av en arbetslagsordförande och har en välordnad mötesstruktur. De fyra skolledarna är väl kända bland personalen och upplevs av lärarna som väl insatta i verksamhetsfrågorna. De sitter hela tiden i närheten av lärarrummen och har sålunda stor tillgänglighet. Samtliga skolledare har arbetat som lärare på skolan tidigare, och en har genomgått rektorsutbildningen. Två skolledare genomgår rektorsutbildningen just nu och den fjärde ska börja hösten 2012. Klassrumsundervisningen på Medborgarplatsen: Företaget har väl sammanhållen verksamhet där och ansvarig skolledare samt enhetschef är väl kända av elever och lärare. Här finns således god potential till nära pedagogisk ledning av verksamheten. Verksamheten har en bra och välplanerad mötesstruktur. Svagheter Vår utvärdering har visat att enheten har ett antal svagheter, bland annat dessa: Den kommunalt ansvarige rektorn och dennes roll är inte känd vare sig bland lärare eller elever. Den kommunalt ansvarige rektorns roll är inte heller omnämnd i broschyrer eller på nätet. Årshjul eller liknande årsöversikt över kvalitetsarbetet saknas. NTI-skolan redovisar inte sin egen kvalitet systematiskt på ett samlat sätt, varken på företagsnivå eller enhetsnivå eller lokal arbetsplatsnivå. Enkätresultat och andra typer av resultat, till exempel betyg och avbrottsstatistik finns således inte redovisat på dessa nivåer. NTI-skolan sammanställer på begäran riktat underlag till cirka 20 kommuners kvalitetsredovisningar med uppgifter om statistik för betyg, avbrott och så vidare liksom beslut om kommande åtgärder för att förbättra verksamheten, men det finns ingen sammanställning över resultat från verksamheten totalt inom företaget. Enkätresultat och andra typer av resultat redovisas inte alltid samlat för elever och lärare och har således inte heller diskuterats och analyserats i samverkan med dem.

11 Någon form av arbetsplan baserad på enkätresultat och andra typer av resultat och framtagen i samarbete med lärare och elever finns inte på företagsnivå eller enhetsnivå. För distansundervisningen finns en handlingsplan som tagits fram av ledning och lärare gemensamt efter att kritik och krav på handlingsplan framförts av en beställande kommun. På Medborgarplatsen finns en lokal arbetsplan men den är inte baserad på olika typer av resultat och inte heller framtagen i samarbete med elever och personal. Det saknas mål och vision för hur det systematiska kvalitetsarbetet ska bedrivas centralt i företaget och vad den relativt nyanställde kvalitetskoordinatorn i företaget ska uppnå med sitt arbete. Distansutbildningen: Det sker inget systematiskt kvalitetsarbete på enheten med tydligt angivna uppföljningskriterier under angivna tidpunkter på året. Det sker ingen systematisk uppföljning av skolledarna av lärarnas feedback till eleverna på nätet, vilket skulle kunna vara en motsvarighet till lektionsbesök i klassrumsundervisningen. Skolan har inte haft någon enhetschef på plats sedan maj månad, varför olika provisoriska lösningar har fått tillämpas vilket har inneburit viss osäkerhet om hur verksamhetsansvaret ska hanteras på sikt. Tf platschef har lokal- och IT-ansvar men i övrigt inget samlat verksamhetsansvar. Istället har verksamhetschefen med ansvar för hela företaget gått in som tf enhetschef och leder verksamheten i Umeå från Stockholm. Klassrumsundervisningen vid Medborgarplatsen: Ansvarig skolledare lokalt på Medborgarplatsen saknar pedagogisk utbildning och erfarenhet men är ändå pedagogiskt ansvarig för den dagliga verksamheten. Enhetschefen som har pedagogisk utbildning och erfarenhet har ansvar för åtta enheter runt om i landet och kan endast agera som bollplank för den lokala skolledaren vid vissa tillfällen. Lärarna och eleverna tycker att de får mycket god hjälp av sin lokala skolledare som har haft många praktiska göromål och elevsociala frågor att ta itu med under denna nystartsperiod (utbildningen startade i augusti i år). Problemet är att en icke pedagogiskt utbildad skolledare har svårigheter att kunna leda just det dagliga pedagogiska arbetet, coacha och utmana lärarna och leda utvecklingen av själva undervisningen. Verksamheten har ännu inte hunnit utveckla några former för ett systematiskt kvalitetsarbete. Verksamheten är relativt nystartad och har bara funnits i några månader.

12 Systematisk uppföljning av lärarnas arbete genom lektionsbesök saknas idag. Kunskaper, utveckling och lärande (Betygsbaserade kunskapsresultat, lärande, distansundervisning, informations- och kommunikationsteknik, studerande i behov av särskilt stöd, validering, arbetsplatsförlagd utbildning etc) Andel studerande från projektkommunerna som uppnått minst betyget Godkänd inom NTI-skolan läsåret 2010/11 Skola/företag NTI-skolan Gymnasial vux 65% 87% 4 Riket, totalt Den höga andelen IG har föranlett en beställande kommun att gå in och kräva en särskild handlingsplan för att komma tillrätta med IG-problematiken. Vid genomgång av problemområdet har distansenheten lagt fram en omfattande handlingsplan som redan gett mycket gott resultat. Bland annat har man infört ökad telefonkontakt i inledningen av varje kurs och ökad uppföljning av eleverna. Eleverna får inte heller gå vidare med insändning av nya uppgifter innan man har haft kontakt med läraren för att reda ut problemen kring den uppgiften. Man strävar efter att försöka finna metoder som stärker relationen lärare-elev på nätet vilket man tror skulle stärka elevernas engagemang för studierna. Styrkor Vår utvärdering har visat att enheten har ett antal styrkor, bland annat dessa: NTI-skolan har en egen elevombudsman dit eleverna kan vända sig om de har synpunkter eller klagomål att framföra. Distansutbildningen: Eleverna uppskattar distansutbildningens form där man oberoende av tid och rum kan välja när man vill studera. Eleverna tycker att lärarna är kunniga. Lärarna ger oftast mycket snabb respons per mail. 4 Skolverkets statistik för kalenderåret 2010, Komvux-Studieresultat-Riksnivå, Tabell 2

13 Det finns goda möjligheter att nå lärarna per telefon för att få hjälp och förklaring till olika studieproblem. Vissa lärare arbetar även med användande av webb-kamera. Flera lärare ger omfattande och framåtsyftande respons på en uppgift. Eleverna menar att distansstudierna är välstrukturerade och att ett veckopensum omfattar en rimlig studievolym. I distansstudierna finns flera streamade föreläsningar och många länkar som hänvisar vidare till olika källor. Skolan har tagit fram en plan för att utveckla både antal och form för streamade föreläsningar på nätet. Idag finns cirka 80 föreläsningar på nätet och målet är att fördubbla det antalet nästa år. Skolan har organiserat kursforum på nätet för att ge kursdeltagarna möjlighet att kontakta varandra. Det pågår ett stort utvecklingsarbete vad gäller distansmetodik och det pågår ständigt en livlig pedagogisk diskussion. Lärarna sitter tillsammans ämnesvis kl 8-17 varje vardag och får sålunda goda tillfällen till att diskutera med varandra hur de ska kunna förbättra upplägget av olika uppgifter i kurserna och hur de ska bedöma olika elevsvar. Det finns vissa lärare som arbetar extra intensivt med att finna nya former för att engagera eleverna och skapa nya former för interaktivitet, till exempel genom att skriva inspirationsbrev varje vecka och tipsa om olika aktuella länkar, TV-program, tidningsartiklar och liknande. Det går snabbt att initiera och konkretisera förslag till förbättringar på nätet eftersom programmerarna sitter i samma lokal som lärarna. Laborationer: När en kommun kräver det så gör eleverna laborationer under lärares ledning i en lokal med laborationsutrustning. Detta gäller de flesta projektkommuner. Vissa andra kommuner accepterar laborationslådor i hemmiljö fortfarande. NTI-skolan rättar sig efter vad respektive kommun kräver. Skolinspektionen påpekade problem med bristande måluppfyllelse i samband med användande av laborationslådor hos olika utbildningsanordnare i Skolinspektionens rapport om vuxenutbildningen till Stockholms stad 2011. 5 Interaktivitet: I moderna språk finns telefonintervjuer med lärare inlagda med vissa intervall för att examinera muntliga färdigheter. Elevidentitet: Från och med 2012 kommer alla kurser att avslutas med ett kursprov i lokal där eleverna måste ha identifikationshandling med sig som ett led i att säkerställa elevens identitet. Idag förekommer muntligt betygssamtal per telefon i slutet av varje kurs där eleven får förklara vissa uppgifter i kursen. 5 Skolinspektionen, Beslut efter tillsyn av vuxenutbildningen i Stockholms kommun, 2011-10-17

14 I slutet av varje vecka måste eleven göra ett enkelt närvarotest för att visa att han/hon är aktiv studerande i kursen. De elever vi intervjuade tyckte att detta var en mycket bra uppföljning som sporrade och uppmanade dem att ta itu med studierna. NTI-skolan har en mycket bra uppföljningsmodell av de studerandes närvaro med en tydlig åtgärdsstege. Lärarna låter inte eleverna fortsätta med ny uppgift förrän föregående uppgift är avklarad. Denna nya procedur infördes i den nya handlingsplanen och har uppfattats som en av de förändringar som gett mycket positivt resultat vad gäller uppföljning av eleverna. I samband med införandet av Vux12 görs en genomgång av samtliga kurser och deras upplägg på nätet. Sommaren 2012 tas en ny lärplattform i bruk som innehåller bättre möjligheter till interkommunikation och uppföljning av eleverna. Den nya lärplattformen har utvecklats på basis av de erfarenheter som gjorts av distanslärarna i Umeå. Lärarna deltar i fortbildningsinsatser varje år, till exempel föreläsningar och gemensamma träffar med andra lärare i koncernen. Klassrumsundervisningen vid Medborgarplatsen: Det är mycket små elevgrupper i klassrumsundervisningen som gör att läraren har stora möjligheter att ge god hjälp och stöd till eleverna vilket uppskattas av eleverna. Eleverna har god kunskap om kursmål och betygskriterier, och det finns även skriftlig information om detta som delges handledarna på praktikplatserna. Eleverna uppskattar studieupplägget med mycket praktik i upplägget av utbildningen. De flesta lärarna försöker att variera undervisningen och ha god anknytning till målyrket. De flesta lärarna är behöriga och alla uppfattas som kunniga och mycket engagerade av eleverna. I Butikssäljarutbildningen har läraren varit med om att ta fram själva yrkespaketet och har även god kontakt med branschorganet Svensk Handel. Det finns god tillgång till studie- och yrkesvägledare i utbildningslokalerna.

15 Det finns god tillgång till hjälp av skolledarna för eleverna dit de vänder sig när de har olika typer av problem, till exempel kontakter med CSN. Svagheter Vår utvärdering har visat att enheten har ett antal svagheter, bland annat dessa: Distansutbildningen: Målbild för företagets utveckling av distansstudiemetodiken är inte tydlig och är inte dokumenterad i företagets dokumentation. Avbrottsfrekvensen är hög i distansstudier vilket visar att denna studieform inte är utvecklad för att passa alla elever. De flesta elever vi talat med har inte tillräcklig insikt i vad distansstudier innebär innan de har påbörjat studierna. Eleverna har således oftast inte fått någon kunnig person att tala med innan studierna som skulle kunna ge erforderlig information om distansstudierna som studieform och vilka krav som ställs på den studerande för att klara av denna typ av studier. Många elever har gjort ansökan direkt på nätet och har inte träffat någon studie- och yrkesvägledare. Någon speciell information eller kurs i studieteknik för alla studerande på nätet avpassad för distansstudier finns inte. Kommunerna kan köpa en veckolång introduktionskurs om de så önskar. Eleverna menar att det oftast är svårt att utveckla någon sorts nära relation till en lärare i distansstudier vilket innebär att allt hänger på den enskilde elevens motivation och förmåga att vara disciplinerad och intresserad av kursen. De upplever inte heller alltid att de får någon positiv coachning av läraren. Detta är en omständighet som också upptäckts av lärarna i Umeå. De har påbörjat ett utvecklingsarbete inom några kurser som innebär att en kurs alltid inleds med ett personligt telefonsamtal med ansvarig lärare och bilder på läraren så att någon form av personlig relation skapas på nätet. En del elever som vi talat med uppger att de inte får utförlig respons med kommentarer av läraren på insända uppgifter eller prov. Eleverna vill gärna ha tydligare och bättre feedback, gärna framåtsyftande, så de vet vad de ska förbättra till nästa gång. Några elever menar att de inte får tillräckligt snabb respons på en uppgift eller prov för att med hjälp av eventuell utförlig respons kunna förbättra sig till nästa uppgift eller prov. Interkommunikativ träning i moderna språk är inte tillräcklig för att uppfylla kursmålen. Oftast sker muntlig kommunikation med läraren per telefon endast vid några få tillfällen, ofta långt in i kursen, och då huvudsakligen som examination. En elev uppgav vid intervju

16 att han/hon hade studerat ett nybörjarspråk och efter 12 veckor inte haft någon muntlig kommunikation med läraren. Laborationsövningarna i laborationslokal sker väldigt koncentrerat under en dag och vissa elever menar att de skulle behöva mer lärarledd tid för detta. Det kommunikationsforum som skapats för eleverna används mycket sällan. Nätbaserad utbildning som medel för ökad individualisering används inte alltid i tillräcklig utsträckning. Till exempel används oftast inte den information som finns i den individuella studieplanen av läraren för att individualisera utbildningen för eleven mot vald yrkesinriktning. Telefonkontakt används inte av eleverna i den utsträckning som lärarna alltid skulle önska. Eleverna uppger ofta i telefonintervjuerna att de inte har behövt kontakta lärarna utan sätter en ära i att klara sig själva, även om de enligt lärarna skulle ha haft nytta av en dialog per telefon som stöd i studierna. Policyn för nätkommunikation är inte tydlig och policyn mot fusk och plagiat är inte känd av alla. I dokumentet Pedagogisk vision och metodik finns beskrivningar om förhållningssätt i olika frågor, men nätkommunikationspolicyn skulle kunna lyftas fram bättre och liksom policyn mot fusk och plagiat tydliggöras mera. Klassrumsundervisningen vid Medborgarplatsen: Ibland är det svårt att skapa en bra gruppdynamik eftersom grupperna är så små. Eleverna i Ekonomi och redovisningsassistent-gruppen anser att de får för lite lärarstöd för att kunna klara av att lösa vissa uppgifter. Dels skulle de vilja ha lite mer lektionstid och dels skulle de vilja ha mer tillgång till lärartid då de kan kontakta läraren för mer hjälp och stöd. Läraren undervisar på annan ort när han inte har lektioner i Stockholm vilket gör att eleverna tycker det kan vara svårt att nå honom på annan tid än lektionstid. Bedömning och betygssättning (Information och återkoppling till de studerande, arbetet för likvärdighet i bedömning och betygssättning etc) Styrkor Vår utvärdering har visat att enheten har ett antal styrkor, bland annat dessa:

17 Företaget NTI-skolan har påbörjat en satsning på utbildning av lärarna i formativ bedömning. Företaget NTI-skolan har utvecklat en modell för att följa upp IGeleverna särskilt noga. NTI-skolan har samlat alla lärare, både distanslärare och lärare från klassrums-/närlärande, till gemensamma studiedagar med fortbildning och erfarenhetsutbyte för att diskutera likvärdighet inom området bedömning och betygssättning. Eleverna känner väl till betygskriterierna i kurserna. Om eleverna har synpunkter på ett betyg kan till exempel elevombudsmannen ordna så att ytterligare en lärare går igenom underlaget och genomför en kompletterande bedömning, så kallad second opinion. I de kurser där arbetsplatsförlagd utbildning ingår (Butikssäljarutbildningen i klassrumsundervisningen på Medborgarplatsen) finns tydligt angivet vilka mål som ska bedömas på arbetsplatsen. Läraren besöker arbetsplatsen för att säkerställa att målen uppnås och för att diskutera bedömningen av elevens prestationer med handledaren. Svagheter Vår utvärdering har visat att enheten har ett antal svagheter, bland annat dessa: Systematisk jämförelse mellan satta betyg i olika ämnen och över tid saknas, varför likvärdighetsaspekten inte kan sägas vara utvecklad inom företaget. Detsamma gäller jämförelse mellan satta betyg och resultat på nationella prov. Sammanställningar har endast gjorts i några få kommuner (5 kommuner). Samverkan med lärare inom gymnasiet eller på andra enheter sker inte systematiskt. Distansutbildningen: Eleverna får inte alltid utförlig motivering och förklaring till de bedömningar som lärarna gör på inlämningsuppgifter och prov. Eleverna saknar ibland framåtsyftande bedömning som gör att de vet vad de ska förbättra för att höja sitt betyg på kommande inlämningsuppgifter och prov.

18 Alla lärare ger inte återkoppling så att eleverna får en tydlig koppling till hur de ligger till i bedömningen enligt betygskriterierna och vilka utvecklingsområden de har. Vissa lärare använder fortfarande sammanlagd genomsnittspoäng på alla prov som enda underlag vid betygssättning enligt elevintervju, vilket i så fall inte speglar betygssystemets utformning där olika kvaliteter ska bedömas enligt de kriterier som fastställts. I kurser där interkommunikation ingår, exempelvis moderna språk, finns begränsat underlag för läraren att kunna bedöma elevens progression och förmåga. Samma resonemang kan appliceras på laborativa ämnen. Distansutbildningen och klassrumsundervisningen på Medborgarplatsen: Pedagogiskt ansvariga skolledare diskuterar och utmanar inte lärarna i deras arbete med bedömning och betygssättning. Övrigt Andel studieavbrott per den 15/10 2011: Andel studieavbrott Skola/företag NTI-skolan Genomsnitt Stockholms län 22% 17% 6 18 % 7 Genomsnitt riket Kommentar: Andelen studieavbrott avser studerande inom gymnasial vuxenutbildning och påbyggnadsutbildning från samtliga projektkommuner. NTI-skolan ligger högre än genomsnittet när det gäller studieavbrott. Distansutbildningsformen som sådan brukar generellt ha större andel studieavbrott än klassrumsundervisning, vilket också dessa siffror tyder på. Företaget har på uppmaning av en beställande kommun analyserat avbrottssiffrorna och gjort en handlingsplan för att försöka komma tillrätta med såväl avbrott som IG-resultat, och man har påbörjat ett arbete med intensifierad uppföljning och ökad kontakt per telefon bland annat. 6 Skolverkets statistik för kalenderåret 2010, Komvux-Studieresultat-Länsnivå, Tabell 1 7 Skolverkets statistik för kalenderåret 2010, Komvux-Studieresultat-Länsnivå, Tabell 1

19 Områden att utveckla Vi bedömer att följande utvecklingsområden, som kan utgå från såväl svagheter som styrkor, men även från sådant som varken är att betrakta som styrkor eller svagheter, bör prioriteras: Systematiskt kvalitetsarbete Företaget NTI-skolan arbetar idag huvudsakligen med att förse beställande kommuner med det underlag de efterfrågar i sitt kvalitetsarbete. Vi menar att företaget även bör utveckla ett eget systematiskt kvalitetsarbete i samarbete med personal och elever för att själva kunna följa upp sin egen verksamhet, vilket företaget också håller på att utveckla och kommer att inleda i början av 2012. Pedagogiskt ledarskap NTI-skolan bör arbeta mer med att utmana lärarna i deras ledarskap i klassrummet, både i den undervisning som sker i lokal och virtuellt i distansundervisningen. Det är viktigt att detta sker av pedagogiskt utbildade ledare. Feedback till elever i distansutbildningen NTI-skolan har påbörjat ett arbete med fortbildning inom området formativ bedömning vilket dock ännu inte har fått fullt genomslag i lärarnas arbete gentemot eleverna. Vi menar att detta utvecklingsarbete bör intensifieras och att lärarnas arbete bör följas upp och stöttas ännu mera för att säkerställa att formativ bedömning som idé får ett större genomslag i responsen till eleverna. Detta gäller inte minst i distansutbildningen där responsen till eleverna är distansutbildningens kärna. Fortsatt metodutveckling inom distansutbildningen Många lärare arbetar mycket aktivt på att vidareutveckla metodiken inom distansutbildningen och många nya idéer är på gång, inte minst vad gäller försök att skapa en mer personlig relation till eleverna på olika sätt, vilket är ett mycket viktigt utvecklingsområde. Man arbetar också aktivt på att utnyttja mediet till att distribuera olika länkar och öka antalet streamade föreläsningar och att försöka finna nya vägar att utnyttja nätet som verktyg. Nätbaserad undervisning skulle också kunna användas mer för ökad individualisering av undervisningen. Även eleverna skulle kunna nyttjas mer som medspelare i utvecklingsarbetet.

20 Likvärdighet inom bedömning och betygssättning Företaget bör utveckla arbetet med ökad likvärdighet inom bedömning och betygssättning för att främja största möjliga rättvisa inom detta område. Arbetet bör ske både genom förbättrat systematiskt kvalitetsarbete men också genom ökat utbyte med andra enheter inom vuxenutbildningen och med gymnasieskolor.

21 Sammanfattande analys NTI-skolan har en mycket omfattande verksamhet inom vuxenutbildningen och bedriver distansutbildning på uppdrag av cirka 160 kommuner. Bas för denna verksamhet utgörs av enheten i Umeå där 80-90 lärare arbetar med distansutbildningen. Arbetet präglas av stor entusiasm och mycket utvecklingsarbete inom distansmetodiken sker där. De elever vi intervjuat per telefon är mycket nöjda med det stöd och den hjälp de får av lärarna, både per mail och per telefon. Distansutbildningen som utbildningsform är ännu i sin linda och mycket utvecklingsarbete återstår. Företaget har haft stor andel IG-elever och stor andel studieavbrott, men man har nu påbörjat ett intensivt arbete i enlighet med en handlingsplan för att förbättra detta och hittills har det arbetet gett ett gott resultat. Strävan att försöka bygga en mer personlig relation på nätet och att öka uppföljningsarbetet tror även vi är rätt väg att gå för att komma till rätta med en del av dessa problem, liksom förstärkt personlig studierådgivning före studierna. Fortfarande återstår mycket utvecklingsarbete inom denna studieform, till exempel inom området interaktivitet, inte minst då vad gäller moderna språk för att kursplanemålen ska kunna uppnås. Laborationer sker i laborationslokal i enlighet med respektive kommuns krav. Andelen streamade föreläsningar och länkar till olika fora ökar hela tiden, och en ny lärplattform med ökade möjligheter till interaktivitet och uppföljning ska tas i bruk sommaren 2012. Feedback till eleverna är ett nyckelområde inom distansutbildningen och där menar vi att NTI-skolan kan förbättra arbetet ytterligare, bland annat genom bättre systematisk uppföljning. Man strävar efter att införa formativ bedömning och har påbörjat det utvecklingsarbetet genom att genomföra fortbildning för alla lärare på det temat. Även likvärdighetsarbetet inom bedömning och betygssättning bör stärkas. Klassrumsundervisningen på Medborgarplatsen i några olika yrkespaket är helt nystartad och har bara cirka 50 elever i dagsläget. Den befinner sig huvudsakligen i ett uppbyggnadsskede men har goda kontakter inom sina yrkesområden och bör ha goda förutsättningar att bli en bra yrkesutbildning med väl tilltagen andel av arbetsplatsförlagd utbildning. Det systematiska kvalitetsarbetet bör byggas upp inom NTI-skolan, vilket företaget också står i begrepp att göra inför nästa år. Hittills har företaget huvudsakligen inriktat sig på att förse de beställande kommunerna med underlag för deras eget kvalitetsarbete, men nu ska man även inrikta sig på att följa upp den egna kvaliteten inom företaget vilket vi tror kan vara till gagn för ytterligare utveckling av verksamheten, inte minst om man lyckas engagera all personal och även elever i det arbetet.

22 Stockholm 2012-01-26 Lena Kaev Utbildningsinspektör Stockholms stad Medbedömare: Svante Ingler Rektor Vuxenutbildningen, Kunskapscentrum Nordost

23 Bilaga: Organisationsskiss AcadeMedia gymnasial vuxenutbildning Vuxenutbildning