Vad är kvalité i utbildning? Går det att mäta kvalité? 29 juni 2012

Transkript

1 Vad är kvalité i utbildning? Går det att mäta kvalité? 29 juni 2012 Ulf Fredriksson Avdelningen för internationell pedagogik Institutionen för pedagogik och didaktik Stockholms universitet 1

2 Vad är kvalité i utbildning? Går det att mäta kvalité? Vad är kvalité? Vad är kvalité i utbildning? Går det att mäta kvalité? 2

3 Vad är kvalité? Kvalité avser ett värde eller unikhet som ett subjekt eller objekt har i tid och rum, vare sig det gäller konstnärliga verk, produkter (vara, tjänst, person eller kapital) med mera. Kvantitet är ett slags egenskap som framträder i form av mängd eller storhet och är ofta mätbar. 3

4 Vad är kvalité? "en produkts (vara eller tjänst) förmåga att tillfredsställa kundens krav och helst överträffa dessa, möta kundernas framtida behov och förväntningar i miljön. "quality should be aimed at the needs of the customer, present and future Uppfyllande av ställda krav 4

5 Vad är kvalité? Kvalitetsdimensioner: Kvalitetsdimensionerna varierar en aning beroende på produkt och de kan också vara nedbrutna på olika nivåer. Exempel på sådana är: Pålitlighet/driftsäkerhet. Prestanda. Säkerhet. Lämplighet för användningsområdet. Servicevänlighet/underhållsbehov. Uppfyllelse av avtal (Leverans i tid, snabb reparation etc.). Miljöpåverkan. Skillnader (för och nackdelar) gentemot konkurrerande produkter. Kostnad (både inköp, drift och avveckling). Utseende. 5

6 Vad är kvalité? För en tjänst kan kvalitetsdimensionerna vara: Pålitlighet Trovärdighet Tillgänglighet Kommunikationsförmåga Tjänstvillighet Artighet Inlevelseförmåga Omgivning 6

7 Vad är kvalitet? Hur bra något är i förhållande till vad som är avsikten med föremålet / aktiviteten. Avsikten med en diskborste, en bil, en flygresa, etc. Kärnkvalité och andra kvalitéer. 7

8 Vad är kvalité i utbildning? Kvalité att uppnå uppställda mål Utbildningens mål Vad som anges som mål i läroplanen (intern kvalitet) Läroplanens text, hur läroplanen uppfattas, dold läroplan Vad som rimligen kan anses vara mål baserat på en analys av samhällets och/eller individens behov (extern kvalitet) 8

9 Vad är kvalité i utbildning? Två typer av kvalité: Technical effectiveness - kortsiktiga mål (kunskaper i skolämnen) Social effectiveness - långsiktiga mål (kunskaper för livet) 9

10 Vad är kvalité i utbildning? Kvalitet: två perspektiv: Hur man lär ( doing things right ) Vad man lär ( doing the right things ) 10

11 Vad är kvalité i utbildning? Kvalité ur olika perspektiv: lärare elever föräldrar näringsliv (arbetsgivare, framtida arbetskamrater) samhället (medborgare, skattebetalare, politiker) 11

12 Vad är kvalité i utbildning? Kvalité på olika nivåer: läraren, klassrummet skolan, skolledningen, skolklimat utbildningssystemet 12

13 Vad är kvalité i utbildning? Kvalité i olika delar av systemet: Förskolan Grundskolan / Folkeskolen Gymnasiet / Vidargaende skole Högskola / Universitet Vuxenutbildning Icke-formell utbildning Informell utbildning 13

14 Vad är kvalité i utbildning? Olika nivåer hänger samman: Klassrum skola utbildningssystem Förskola grundskola gymnasieskola högskola vuxenutbildning etc. 14

15 Vad är kvalité i utbildning? Kvalité i olika aktiviteter: undervisningsmetoder förhållningssätt skolledning Kontroll / utvärdering 15

16 Vad är kvalité i utbildning? Elevers färdigheter och kunskaper i traditionella skolämnen (matematik, naturkunskap, samhällskunskap, språk etc.). Elevers färdigheter i sådant som är en förutsättning för att inhämta kunskaper (läsning). Elevers färdigheter och kunskaper i sådant som inte direkt ingår i ett skolämne (nya färdigheter, framtidskunskaper, 21st century skills ). 16

17 21st century skills The Assessment and Teaching of 21st-Century Skills (ATC21S) WAYS OF THINKING Creativity and innovation Critical thinking, problem-solving, decision-making Learning to learn/metacognition (knowledge about cognitive processes) TOOLS FOR WORKING Information literacy Information and communication technology (ICT) literacy WAYS OF WORKING Communication Collaboration (teamwork) WAYS OF LIVING IN THE WORLD Citizenship local and global Life and career Personal and social responsibility including cultural awareness and competence 17

18 Vad är kvalité i utbildning? Defining Quality in Education (UNICEF, 2000) I. Quality Learners II. Quality Learning Environments III. Quality Content IV. Quality Processes V. Quality Outcomes 18

19 Vad är kvalité i utbildning? UNICEF I. Quality Learners Good health and nutrition. Early childhood psychosocial development experiences. Regular attendance for learning. Family support for learning. 19

20 Vad är kvalité i utbildning? UNICEF II. Quality Learning Environments Physical elements Quality of school facilities. Interaction between school infrastructure and other quality dimensions. Class size. Psychosocial elements Peaceful, safe environments, especially for girls. Teachers behaviours that affect safety. Effective school discipline policies. Inclusive environments. Non-violence. Service delivery Provision of health services. 20

21 Vad är kvalité i utbildning? UNICEF III. Quality Content Student-centred, non-discriminatory, standards-based curriculum structures. Uniqueness of local and national content. Literacy. Numeracy. Life skills. Peace education. 21

22 Vad är kvalité i utbildning? UNICEF IV. Quality Processes Teachers Professional learning for teachers. Teacher competence and school efficiency. On-going professional development. Continuing support for student-centred learning. Active, standards-based participation methods. Teacher feedback mechanisms. Teacher beliefs that all students can learn. Teachers working conditions. Supervision and support Administrative support and leadership. Student access to languages used at school. Using technologies to decrease rather than increase disparities. Diversity of processes and facilities. 22

23 Vad är kvalité i utbildning? UNICEF V. Quality Outcomes Achievement in literacy and numeracy. Using formative assessment to improve achievement outcomes. Outcomes sought by parents. Outcomes related to community participation, learner confidence and life-long learning. Experiential approaches to achieving desired outcomes. Health outcomes. Lifeskills and outcomes. 23

24 Vad är kvalité i utbildning? PISA (OECD, 2002): Länder med medelvärden över genomsnittet på lästestet låg också under genomsnittet för den betydelse som elevernas ekonomiska, sociala och kulturella bakgrund hade för deras resultat. Kvalité och likvärdighet är inte motstridiga mål för ett utbildningssystem. Liten differentiering mellan olika typer av skolor. En hög grad av självstyre på skolnivån. Att satsa resurser på skolan är viktigt, men att ökade resurser inte i sig är en garanti för att förbättra resultaten. Skolkultur: Skolor som utmärktes av höga förväntningar, lust att lära, fasta ordningsregler och goda relationer mellan lärare och elever. Fokus på elevprestationer. 24

25 Vad är kvalité i utbildning? PISA 2009 (OECD, 2010) Sammanhållna utbildningssystem. Stor frihet för skolor att utforma undervisning och elevutvärdering. Nationella test. Viktigare hur resurser används än dess storlek. Höga lärarlöner viktigare än små klasser. Skolor med ett gott skolklimat som inkluderar ordning och reda, ett positivt förhållningssätt bland lärarna och goda relationer mellan lärare och elever lyckas bra. 25

26 Vad är kvalité i utbildning? McKinsey-rapporten (Barber, & Mourshed, 2007): Lyckas få de allra duktigaste studenterna att bli lärare. De blivande lärarna rekryteras bland bästa tio procenten av eleverna i varje årskull. Lärare får stöd att utveckla sin undervisning. Lärare får tid för fortbildning och fortlöpande utvärdering av sitt arbete. Alla barn får den undervisning de behöver. Skolor måste genom fortlöpande utvärdering känna till vad som både är deras styrka och svaghet. System måste finnas som ser till att svaga elever får det stöd som de behöver. Resurser måste styras dit där de kan göra mest nytta 26

27 Vad är kvalité i utbildning? Vad behöver en lärare kunna? Kunskaper inom relevanta ämnesområden; Pedagogiska färdigheter, bl.a förmåga att kunna använda olika typer av undervisningsstrategier; Reflektion och förmåga till självkritik; Empati, och en respekt för andra människor; Organisatoriska färdigheter OECD Quality in Teaching (1994) 27

28 Vad är kvalité i utbildning? Vad behöver en lärare kunna? Organisera elevers möjligheter att lära. Följa och stödja elevers utveckling. Hantera mångfalden bland elever. Utveckla elevers vilja att lära. Arbeta tillsammans. Delta i arbete kring skolutveckling. Stödja föräldrars och närsamhällets engagemang för skolan. Använda modern teknologi i undervisningen. Hantera professionella uppgifter och etiska utmaningar. Sköta sin egen professionella utveckling. Perrenoud (1999) 28

29 Vad är kvalité i utbildning? Hattie (2009) Visible learning : 1. Den enskilde läraren har en avgörande betydelse för elevers prestationer. 2. Läraren visar ledarskap, inflytande, omsorg och känslomässigt engagemang i sin undervisning. 3. Läraren intresserar sig för vad enskilda elever tänker och förstår, och arbetar löpande för att ge varje elev feedback på lämplig nivå. Läraren förväntar sig framsteg inte bara av elever som har det lätt för sig utan även av elever med sämre förutsättningar. 4. Läraren är medveten om avsikten med undervisningen och vilka de konkreta målen är. Läraren lägger upp sin undervisning utifrån frågan vad händer i nästa steg? i syfte att minska avståndet mellan elevernas rådande kunskapsnivå och de målsättningar som finns. 5. Läraren situationsanpassar undervisningen och erbjuder eleverna en bred repertoar av metoder för att nå kunskap (experiment, innötning, återberätta för klassen, problemlösning etc.). Det centrala är att läraren synliggör för eleven vad avsikten med övningen är och vilka kriterierna för måluppfyllelse är. 6. Skolledaren medverkar till att skapa skolmiljöer där misstag välkomnas som ett lärotillfälle, där elever känner sig trygga att lära, lära om och utforska nytt. 29

30 Vad är kvalité i utbildning? Vad vi vet: fokus på prestationer / inlärning höga förväntningar samarbete / samförstånd bland personalen skolledning regelbunden utvärdering tillfälle att lära skolklimat situation i klassrummet 30

31 Vad är kvalité i utbildning? Ben Levin (2008) How to change 5000 schools : Focus on a few key student outcomes that matter most and are most understandable for the public and for educators. Put effort into building capacity for improvement (skill). Build motivation (will) by taking a positive approach. Work to increase public and political support for an effective, thoughtful, and sustained program of improvement. 31

32 En defintion av kvalitet i utbildning..qualitative dimensions means much more than the quality of education as customarily defined and judged by student learning achievements, in terms of traditional curriculum and standards. Quality (...) also pertains to the relevance of what is taught and learned - to how well its fits the present and future needs of the particular learners in question, given their particular circumstances and prospects. It also refers to significant changes in the educational system itself, in the nature of its inputs (students, teachers, facilities, equipment, and supplies); its objectives, curriculum and educational technologies; and its socioeconomic, cultural and political environment. (Coombs, 1985, s. 105) 32

33 Vad är kvalité i utbildning? Dagens trender: - nyckelkompetenser - baskunskaper (läsning, matematik) - värderingar (demokrati, interkulturalism, mänskliga rättigheter) - övergripande kunskaper / färdigheter - social kompetens - 21st century skills - omsorg 33

34 A framework for understanding education quality (UNESCO, 2005) Learner characteristics - Aptitude - Perseverance -School readiness -Prior knowledge -Barriers to learning - Economic and labour market conditions in the community - Socio-cultural and religious factors - (Aid strategies) Enabling inputs Teaching and learning - Learning time - Teaching methods - Assessment, feedback, incentives - Class size - Teaching and learning materials - Physical infrastructure and facilities - Human resources: teachers, principals, inspectors, supervisors, administrators - School governance - Educational knowledge and support infrastructure - Public resources available for education - Competitiveness of the teaching profession on the labour market - National governance and management strategies Context - Philosophical standpoint of teacher and learner - Peer effects Parental support - Time available for schooling and homework Outcomes - Literacy, numeracy and life skills - Creative and emotional skills - Values - Social benefits - National standards - Public expectations - Labour market demands - Globalization 34

35 Vad kan mätas i ett utbildningssystem Input Process Output Outcome kortsiktig Outcome långsiktig Resurser Pengar Lärare m.m vad som händer i skolan vad som kommer ut i form av antal ex. elever / studenter kunskaper i skolämnen kunskaper för livet 35

36 Input Hur mycket satsas på utbildning (pengar)? Offentligt (% av BNP, % av statsbudgeten, kostnad per elev) Privat Mänskliga resurser Lärares kunskaper 36

37 Process Vilka ämnen som eleverna har i skolan (antal timmar i olika ämnen) organisation metoder hur pengar används (fördelning mellan olika delar av utbildningssystemet, investeringar löpande kostnader, administration klassrumsundervisning, lärarlöner) 37

38 Output antal elever som går ut skolan (olika nivåer) andel av en årskull som genomför en viss utbilding (% av alla ungdomar som går på gymnasiet) dropouts 38

39 Outcome (kortsiktig) vad eleverna har lärt sig i olika ämnen nationella test internationella test (PISA, PIRLS, TIMSS) 39

40 Outcome (långsiktig) vad människor lärt som har varit viktigt för deras yrkesarbete, privatliv, deltagande i samhällslivet, i kulturlivet Svårt att undersöka IALS (International Adult Literacy Survey) , PIAAC (Programme for the International Assessment of Adult Competencies)

41 Går det att mäta kvalité? Begrepp Input = vad som satsas på utbildning Output = vad som kommer ut i form av antal examinerade elever / studenter Outcome = vad som elever / studenter har lärt (kortsiktigt/långsiktigt) Effektivitet = i vilken omfattning som avsedda mål uppnås (output, outcome) Produktivitet = relation mellan input och output/outcome 41

42 Går det att mäta kvalité? Hur kontrollerar man kvalitet Extern kontroll Tester (nationella, internationella) Inspektioner Intern kontroll Självutvärdering 42

43 Går det att mäta kvalité? Kvalitet: kontroll och/eller utveckling Kvalitetskontroll: inspektioner, nationella test - myndighetskontroll Kvalitetsutveckling: självutvärdering - egen aktivitetet på skolor Formativ och summativ utvärdering 43

44 Går det att mäta kvalité? Accountability Administrative accountability: olika myndigheter kontrollerar, straff och belöningar Consumer oriented accountability: information till föräldrar, fritt val av skola Improvement oriented internal school evaluation: skolors självärdering, åtgärder för att förbättra kvaliteten 44

45 Går det att mäta kvalité? Olika syften: Att utvärdera utbildningssystem. För att förbättra systemet och följa dess utveckling. Att utvärdera skolor. För skolutveckling. Avgöra behov av stöd. Att utvärdera skolklasser. För att avgöra behov av stöd. Att utvärdera lärare. För att avgöra behov av stöd. Att utvärdera elever. För att avgöra behov av stöd. För betygssättning. 45

46 Går det att mäta kvalité? Definiera vad vi menar med kvalité. - Elevers lärande i skolämnen - Elevers lärande av samarbete, innovation, kritiskt tänkande etc. - Skolans omsorg av eleverna. Elevers trivsel och trygghet. 46

47 Går det att mäta kvalité? Hitta lämpliga sätt att samla information om det som vi anser vara kvalité. - Kunskapstester - Betyg - Elevers uppfattningar och attityder - Lärares uppfattningar och attityder - Föräldrars uppfattningar och attityder. - Uppfattningar och attityder i allmänhet om skolan. 47

48 Går det att mäta kvalité? Att mäta någon eller några indikatorer och se dem som centrala för kvalitén som helhet, t.ex. elevers läsning i PISA. Att sammanställa flera olika indikatorer till en gemensam indikator (index, composite indicator ) och på så sätt få ett värde på kvalitén. 48

49 Går det att mäta kvalité? Ja och nej, men vad betyder det om vi säger nej. Alla aspekter av utbildningens kvalité kan inte mätas. Innebär det att vi inte ska försöka mäta några? Är allt lika viktigt? Utbildningens kvalité kan till viss del mätas, men vi måste vara klara över vad vi mäter. 49

50 Går det att mäta kvalité? Är elevers lärande ett resultat av Kultur i samhället och i olika grupper Individuella faktorer (ålder, kön m.m.) Familjefaktorer (föräldrars utbildning, inkomster, resurser i hemmet m.m.) Skolfaktorer (ramfaktorer, skola, lärarkaraktäristika, undervisningsmetoder) 50

51 Går det att mäta kvalité? Lärarkvalité Svårt att avgöra vad som är resultatet av undervisning eller av familjefaktorer Svårt att avgöra vad den enskilda läraren bidragit till i elevens lärande Rekonstruera en elevs skolhistoria Longitudinella studier 51

52 Går det att mäta kvalité? Kvalité och pengar: kostar kvalité? att kontrollera kvalité och relatera det till kostnader hänger kvalité ihop med hur mycket pengar som satsas mer pengar till utbildning kan leda till bättre utbildning - men behöver inte göra det hur används pengar 52

53 EU 16 INDICATORS (2002) Mathematics Reading Science ICT Foreign Languages Learning to learn Civics Drop out Completion of upper secondary education Participation in tertiary education Evaluation and steering of school education Parental participation Education and training of teachers Participation in preprimary education Number of studes per computer Educational expenditure per student

54 29 Indicators for Monitoring Progress and Performance in Education and Training (2006) Chapter I: Improving the Quality of Teachers and Trainers Indicator n 1 Age of teachers Indicator n 2 Number of young people Indicator n 3 Ratio of pupils to teaching staff Chapter II: Developing Skills for the Knowledge Society Indicator n 4 Completion of upper-secondary education Indicator n 5 Low-achieving students in reading literacy Indicator n 6-8 Performance in reading, mathematics and science Indicator n 9 Participation in education or training of initially low- qualified people Chapter III: Increasing Recruitment to Scientific and Technical Studies Indicator n 10 Enrolment in mathematics, science and technology Indicator n Graduates in mathematics, science and technology Chapter IV: Making Best Use of Resources Indicator n 14 Public expenditure on education Indicator n 15 Private expenditure on educational institutions Indicator n 16 Enterprise expenditure on continuing vocational training Indicator n Total expenditure on educational institutions per pupil/student Chapter V: Open Learning Environment, Social inclusion and Active citizenship Indicator n 19 Participation in lifelong learning Chapter VI: Making Learning Attractive Indicator n Participation in continuing vocational training Indicator n 22 Participation rates in education Indicator n 23 Early school leavers Chapter VII: Improving Foreign Language Learning Indicator n 24 Pupils learning foreign languages Indicator n 25 Number of foreign languages learned Chapter VIII: Mobility and Cooperation Indicator n 26 Mobility of teachers and trainers Indicator n Mobility of students and trainees Chapter IX: Ensuring Access to ICT for everyone 54

55 Composite Indicator on LLL /04 change, % EU ,0 110,6 10,6 1 Finland 198,3 226,2 14,1 2 Sweden 175,5 209,7 19,5 3 Slovenia 125,6 187,4 49,2 4 Denmark 145,4 180,3 24,0 5 UK 154,4 166,0 7,5 6 Ireland 147,1 149,9 2,0 7 Poland 108,6 138,4 27,5 8 Netherl. 132,8 133,1 0,2 9 France 118,4 130,6 10,3 10 Czech Rep. 134,6 128,7-4,4 11 Lithuania 94,7 126,8 33,9 12 Austria 117,8 124,9 6,0 13 Belgium 105,5 117,8 11,7 14 Slovakia 135,3 115,9-14,4 15 Latvia 86,0 103,6 20,5 55

56 /04 change, % EU ,0 110,6 10,6 16 Estonia 95,2 100,5 5,6 17 Germany 89,2 100,1 12,2 18 Greece 78,5 93,3 19,0 19 Cyprus 79,2 89,9 13,5 20 Hungary 80,7 89,1 10,4 21 Spain 85,2 83,2-2,3 22 Luxembourg 67,6 82,9 22,6 23 Italy 77,3 82,5 6,7 24 Portugal 55,0 67,4 22,5 25 Malta 55,1 58,5 6,1 56

57 European Commission: PROGRESS TOWARDS THE COMMON EUROPEAN OBJECTIVES IN EDUCATION AND TRAINING Making lifelong learning and mobility a reality 1. Participation in Lifelong learning 2. Mobility in Education Improving the quality and efficiency of education and training 1. School education 2. Vocational Education and Training 3. Higher Education 4. Education and employment the role of education and training in a context of economic downturn Promoting equity, social cohesion and active citizenship 1. Equity 2. Key competences 3. Gender inequalities 4. Migrants Enhancing creativity and Innovation, including entrepreneurship at all levels of education and training : Why creativity, innovation and entrepreneurship? 1. Creativity 2. Innovation 3. Graduates in Mathematics, Science and Technology 4. Entrepreneurship 57

58 European Commission: PROGRESS TOWARDS THE COMMON EUROPEAN OBJECTIVES IN EDUCATION AND TRAINING Key competences Reading, mathematics and science literacy Low achievers in basic skills: European benchmark 2020 Reading Mathematics Science Language and intercultural competences: early and lifelong learning The language skills of the adult population ICT competences for young people and adults Civic competences The IEA 2009 International Civic and Citizenship education Study (ICCS) Key findings of the European report of the ICCS 2009 study Impact of formal education on civic behaviour of adults 58

59 Slutord I En viktig del av lärarens yrkesroll är att arbeta för att ge eleverna en utbildning av hög kvalité. Kvalité är att uppnå läroplanens mål och/eller vad som kan antas vara samhällets/individens verkliga behov. 59

60 Slutord II Vilka kunskaper/färdigheter, värderingar och vilken omsorg behövs idag? Olika nivåer och olika delar inom utbildningssystemet hänger samman. Det finns en hel del kunskap om vad som ger kvalité i klassrummet och i skolan. 60

61 Slutord III Kvalité kan kontrolleras genom tester, inspektion och självutvärdering. Både kvalitetskontroll och kvalitetsutveckling behövs. Kvalitet kan till viss del mätas. Om man inte kan uttala sig om kvalitén på undervisningen, hur kan man då motivera att lärare ska ha god utbildning och hög lön? 61

62 Slutord IV För att kunna avgöra hur bra olika metoder och undervisningsformer är krävs longitudinella undersökningar. Kvalité kostar, men mer pengar ger inte automatiskt bättre kvalité. 62

63 63