Kvalitet i Validering En nordisk modell och en Nordisk studie 2015-2017
Bakgrund En generell modell for kvalitet i validering togs fram av en expertgrupp från Island, Norge, Sverige, Finland och Danmark 2012-2013. Stöd från Nordplus (www.nordplusonline.org/). En studie av kvalitetsarbete, baserat på den nordiska modellen, genomförs 2016 2017 Studien finansieras av NVL (Nordiskt nätverk för vuxnas lärande) www.nvl.org Forskare från Åbo universitet, FIN; Linköpings universitet, SE; och VIA University College, Århus DK
n nordiska kvalitetsmodellen 8 faktorer Uppföljning Informa[on Bedömning Kartläggning Individen i centrum Förutsä\ningar Dokumenta[on Vägledning Koordinering
Kvalitet i validering? The establishment of an environment and the implementa4on of policies, processes and assessment prac4ces that maximise individuals opportuni4es to fully and accurately demonstrate relevant knowledge, skills and competencies (Van Kleef, 2011) (Van Kleef, 2014, p. 208) - A\ skapa e\ sammanhang som maximerar individens möjligheter a\ på e\ rä\visande sä\ visa sina relevanta kunskaper, färdigheter och kompetenser
Sy<e och intressenter? Hur vi ser på kvalitet beror på sy?et med valideringen, sammanhanget, och vilka intressenter som finns. Kvalitet handlar inte bara om validitet och reliabilitet, utan handlar i mångt och mycket om en förhandling om mening. Målet med den specifika valideringsprocessen är central för a\ avgöra vad kvalitet är i e\ visst sammanhang, t.ex. Forma[v Summa[v Predik[v Transforma[v
Kvalitet två sidor av myntet Flexibilitet, individualisering, omdöme Standardisering, reliabilitet/[llförlitlighet, kunskapsmätning
Kvalitet på 3 nivåer i modellen Organisa4onskvalitet Helhetsperspek[v I organisa[onen Utvärdering och strävan eeer utveckling och förbä\ring Procedurkvalitet Ansvars- och rollfördelning Informa[on Administra[on Bedömningskvalitet Bedömningskriterier Bedömningsmetoder Dokumenta[on
n nordiska kvalitetsmodellen 8 faktorer Uppföljning Informa[on Bedömning Kartläggning Individen i centrum Förutsä\ningar Dokumenta[on Vägledning Koordinering
AC arbeta med modellen Modellen omfa\ar 8 kvalitetsfaktorer, och för varje faktor finns e\ antal mer konkreta kvalitetsindikatorer Modellen är dynamisk, och kvalitetssäkringen är tänkt a\ vara en återkommande process som präglas av dialog där förutsä\ningar, ru[ner, metoder etc. kon[nuerligt och systema[skt utvärderas och omvärderas Modellen och indikatorerna bör givetvis också ses över kon[nuerligt för a\ göra förbä\ringar
Exempel: InformaIon Informa[on om validering är en nyckelfaktor för a\ utveckla kvalitet i valideringsprocessen De\a omfa\ar informa[on såväl [ll poten[ella deltagare i validering som [ll intressenter och samarbetsparter, och även internt i valideringsorganisa[onen Informa[onen behöver svara på frågor om vem, vad, varför, hur, var och presenteras på e\ begripligt och [llgängligt sä\
nformation ur kan vi utveckla kvalitet? litetsindikatorer ma[onen är fyllig och anpassad [ll olika rupper internt och externt. förklaras vad validering är: at s in it for me? är tydligt vem validering är relevant för, och validering kan leda [ll för individen. äntningarna på deltagaren vad gäller tgång, arbetsinsats och procedurer är ga. ma[onen är [llgänglig på internet och I a former anpassade eeer målgruppen ma[onen är tydlig när det gäller vem som kontaktas för mer informa[on Är indikatorn relevant för dig eller i din organisa4on/ ins4tu4on/projekt? Förklara! Hur kan vi utveckla kvalitete förhållande 4ll denna indikat
Workshop I - Modellen Hur tycker du modellen speglar din erfarenhet av validering? Hur ser du på modellens delar, vad stämmer? Vad saknas? Kan modellen användas för förbärringsarbete?
Den nordiska studien Syeet med studien är: A\ iden[fiera om och hur kvalitetsmodellen kan användas för a\ stärka arbetet med kvalitet i valideringsprocessen. A\ iden[fiera faktorer i sammanhanget som kan påverka utvecklingen av kvalitet I validering.
Vad gjorde vi? En interak[v process samverkan mellan forskare och verksamma i validering Vi har samarbetat med 3 ins[tu[oner, en i varje land (alla med omfa\ande erfarenhet av yrkesutbildning och valideringsarbete) Vi mö\es för a\ utveckla en gemensam förståelse av kvalitetsmodellen Utvecklingsområden definierades inom respek[ve ins[tu[on Ins[tu[onerna har arbetat med kvalitetsutveckling baserat på modellen, inom de definierade utvecklingsområdena Vi har mö\s flera gånger för a\ diskutera erfarenheter och lärdomar så långt, och utvecklingsområdena har ibland justerats Vi har dokumenterat kvalitetsarbetet på olika sä\
Kvalitetsarbete i etablerad validering - vårt case Idé om kvalitet som innefa\ar Tid och resurser Kartläggning vik[g Grundlig validering där prak[ska arbetsuppgieer ingår Möjlighet a\ komple\era för anställningsbarhet Arbetsgivarperspek[vet vik[gt
Forts. Prioriterade områden Informa[on ([ll presum[va deltagare) Förutsä\ningar (kompetensutveckling för personalen) Kartläggning (speciellt för nyanlända med bristande kommunika[onsmöjlighet [språket] men poten[ellt yrkeskunnande a\ validera Uppföljning (utvärdering av processen)
Forts. Kartläggning Blev det mest relevanta utvecklingsområdet, i e\ skede när eeerfrågan på validering var låg (utdragen upphandlingsprocess hos Arbetsförmedlingen) Utvecklingsarbetet innebar kompetensutveckling i sig Kvalitetsmodellen fungerade bra som utgångspunkt för a\ få igång en utvecklingsprocess Det går a\ bortse från a\ modellen inte är helt harmoniserad med de na[onella/lokala förutsä\ningarna och ramarna Men en vidareutvecklad, na[onellt anpassad modell, skulle kunna underlä\a implementering av modellen
Några sammanfacande lärdomar Modellen är användbar för a\ utveckla kvalitet i olika valideringssammanhang De å\a faktorerna eller dimensionerna ger en helhetsbild av valideringsarbetet Användningen av kvalitetsmodellen underlä\ade samverkan och a\ kunna iden[fiera utvecklingsområden Användningen av modellen bidrog [ll a\ prak[kerna (ni som jobbar med validering) mo[verades a\ ak[vt utveckla kvaliteten
Forts. Det interak[va arbetssä\et sä\er valideringsarbetet i fokus Systema[sk dokumenta[on är vik[g för a\ [llvarata individens perspek[v Koordinering bidrar [ll a\ policy omsä\s i prak[k på e\ likvärdigt sä\ inom olika områden/branscher, inom den större ins[tu[onen Uppföljning kan även handla om a\ på organisatorisk nivå se över utbildningsprocesser kopplade [ll validering
Workshop II - Resultat Hur ser du på de presenterade resultaten från den nordiska studien? Vad kan överföras från resultaten 4ll din praxis? Finns det möjlighet 4ll förbärringar av valideringsarbetet där du verkar? Vad krävs?
Nedan följer bilder som inte visades på seminariet. Det är beskrivningar och indikatorer för de övriga faktorerna (förutom Informa[on) som inte är översa\a [ll svenska.
PrecondiIons Quality in Valida[on is to do with quality in rela[on to the framework and precondi[ons given for carrying through valida[on in the individual ins[tu[on Precondi[ons means the regulatory framework for the valida[on work, na[onal and local policies in the area, if valida[on ac[vi[es are funded, and how they are funded, how co-opera[on with other stakeholders is organized If valida[on is based on standards or competency criteria that are known, you cannot necessarily change the precondi[ons sesng the framework for valida[on prac[ce in the individual ins[tu[ons, but you can reflect on, how precondi[ons influence the quality of the valida[ons.
DocumentaIon Quality in valida[on is about how a valida[on process is documented internally in the ins[tu[on performing the valida[on in part or in full. Documenta[on of e.g. conversa[on, agreements, [me frames, etc. helps strengthening internal working procedures and coordina[on of the process, and it also helps suppor[ng the due process protec[on of the candidate.
Co-ordinaIon Coordina[on and collabora[on ensures that the valida[on prac[cian develops and uses methodology, makes evalua[ons and decisions in a professional environment. It ensures a high competency level, and thus supports that the rights of the individual are met and respected. Coordina[on ensures that individuals are treated equally, fair, and in accordance with rules and regula[ons.
Guidance Guidance is impera[ve for the benefit of the individual. A posi[ve and listening approach to guidance of the individual seeking recogni[on and valida[on is important. The guidance must support the individual through all processes of the valida[on, and guidance should be an integral part of all valida[on
Mapping The mapping documenta[on of the competencies of the individual is sort of a developing process. The methodologies used and the guidance a\ached to them seek to draw an exact and exhaus[ve picture of the competencies of the individual. The individual itself is responsible for the process, and results must be valid.
Assessment Assessment of an individual s learning outcomes acquired through non-formal and informal learning. The decision has legal status and impact on the further training and working life of the individual. The assessment is the outcome of the work with the other quality factors in the valida[on process. The quality of the assessment depends on quality, reliability, impar[ality, and high competency level among the valida[on staff.
Follow-up Follow-up is aimed at the individual applicant (the individual) and at development and improvements of the full valida[on process. If he or she wants, the individual has the right of complaint and a guiding follow-up on the result of the valida[on. As part of the quality assurance, the ins[tu[on and the valida[on professionals are under an obliga[on to make con[nuous evalua[ons and improvements.
recondi4ons ow to work with developing quality? ity indicators [on is carried out by well educated sionals lidation activities are funded Is this indicator relevant for you / in your organisa4on/ ins4tu4on/project? Explain How can we develo quality with referen this quality indicato pts and terms will be used, which are ally accepted and in accordance with lines and standards parent who the external olders in the process are, and what oles are. sments are based om standard a
ocumenta4on - administra4ve procedures ow to work with developing quality? ity indicators are administra[ve systems and dures tep in the validation process is ented entation is unambiguous and clear istra[ve procedures is evaluated Is this indicator relevant for you / in your organisa4on/ ins4tu4on/project? Explain How can we develo quality with referen this quality indicato ertificates must have the same as formal certificates or diplomas
o-ordina4on ow to work with developing quality? ity indicators is a coordinator for valida[on Is this indicator relevant for you / in your organisa4on/ ins4tu4on/project? Explain How can we develo quality with referen this quality indicato uals have one entry point for tions inator is supported and with clear gement references ina[on is transparent and is tent, and there is a clear distribu[on s is time and resources for teamwork lidation professionals/staff
uidance ow to work with developing quality? ity indicators idance helps having the etencies of the individual visualised nce is an integral part of all parts of the tions process uidance is listening, competent and tial idance is based om recognised ce methods uidance support the rights of the ual e.g. by informing about the laints system Is this indicator relevant for you / in your organisa4on/ ins4tu4on/project? Explain How can we develo quality with referen this quality indicato
apping ow to work with developing quality? ity indicators ividual is responsible for the process, but e and support is offered for the process full clarity with regard to what counts as nta4on nta4on standards are visible Is this indicator relevant for you / in your organiza4on/ ins4tu4on/project? Explain How can we develo quality with referen this quality indicato umenta4on process is targeted umenta4on process is dialogical y of methods are employed and reflect the encies of the applicant
ssessment ow to work with developing quality in validation? ty indicators le methods. ula[on //Relevant methods dual; subject area) standable and measurable a s. lence not equality of tences. ss. arency. ess. g the assessment as a learning s // define learning process Is this indicator relevant for you / in your organisa4on/ ins4tu4on/project? Explain How can we develop q with reference to this indicator?
ollow Up ow to work with developing quality? ity indicators ts are transferred to the candidate is an appeal system peal system works 4on leads to educa4on or work or explicitly formulated goals is a follow-up plan 4ons are carried out according to ized guidelines (e.g.european ines) rnal ernal e external resources in our pmental work Is this indicator relevant for you / in your organiza4on/ ins4tu4on/project? Explain How can we develop with reference to thi quality indicator?