Validering och Verifiering: Vad är det och hur bör det utföras? Kerstin Elvin EQUALIS användarmöte 18 april 2013



Relevanta dokument
Validering och Verifiering: Vad när och hur? Kerstin Elvin EQUALIS 26 mars 2015

Kvalitetssäkring i laboratoriediagnostik. Kerstin Elvin Allergi och Autoimmunitet; Laboratoriediagnostik Oktober 2016

Kvalitetssäkring och Validering Molekylära Metoder. Susanna Falklind Jerkérus Sektionen för Molekylär Diagnostik Karolinska Universitetslaboratoriet

Validering/verifiering av kvantitativa och. kvalitativa metoder - Vägledning. Tillämpningsområde: Laboratoriemedicin. Bild- och Funktionsmedicin

Torbjörn Kjerstadius Klinisk mikrobiologi Karolinska universitetslaboratoriet, Solna

Validering av kontroller. Equalis användarmöte Håkan Janson Klinisk mikrobiologi, Region Kronoberg

Verifiering av mätmetoder

Mätosäkerhet. Tillämpningsområde: Laboratoriemedicin. Bild- och Funktionsmedicin. %swedoc_nrdatumutgava_nr% SWEDAC DOC 05:3 Datum Utgåva 2

Metodutvärdering I. Metodutvärdering -validering. Metodutvärdering II. Metodutvärdering III

Validering grundläggande aspekter. Ulf Örnemark

SKandinavisk Utprövning av laboratorieutrustning för Primärvården. Elisabet Eriksson Boija, Equalis SKUP-koordinator i Sverige

Illustrerad noggrannhet

Åldersberoende beslutsgränser för D-dimer Maria Farm, ST-läkare

EQUALIS kvalitetsmål

Viktigt säkerhetsmeddelande

Quantiferon-TB Gold Plus

Vad säger den nya versionen av 15189? Jenny Lindkvist Ian Jones

Kalibrering. Lars Andersson. - Intertek reder ut begreppen. Technical Manager, Intertek

RF-CCP. Prov /C (förväntat positivt för P-RF och P-CCP):

Jämförelse mellan 5 patientnära D-Dimer metoder och standard metod på laboratoriet - erfarenhet från ett center

SKandinavisk Utprövning av laboratorieutrustning för Primärvården. Elisabet Eriksson Boija, Equalis SKUP-koordinator i Sverige

IGFBP-3 på IDS isys (NPU28268)

Kvalitetssäkring av metoder med externa kontroller

Differentiell psykologi

Ett år med ISO 15189: reaktioner från användare och tillsynsmyndighet

Vägledning för upprättande av. metodbeskrivning inom nuklearmedicin. Tillämpningsområde: Bild- och Funktionsmedicin. xxxxxx

Konsoliderad version av

Sören Andersson. Professor, prefekt, överläkare. Institutionen för medicinska vetenskaper Örebro universitet & Laboratoriemedicin, Region Örebro län

Internationella erfarenheter: Publicerade resultat kring cut off- värden för jordnöt

NO x -föreskriftens krav enligt NFS 2004:6 och SS-EN 14181

Åldersberoende beslutsgränser för D-dimer Maria Farm, Specialistläkare Klinisk Kemi Karolinska Universitetslaboratoriet

Differentiell psykologi

Styrelsens för ackreditering och teknisk kontroll författningssamling

Årsrapport Jan-Olof Hildén

Patientmedian. Equalis allmän kemi-möte tors 15 nov Peter Ridefelt, Klinisk kemi och farmakologi, Akademiska sjukhuset

Positiv direkt antiglobulintest (DAT)

PSYKISK SJUKDOM, SYMTOM OCH SCREENING I SMÅBARNSÅLDERN. Bruno Hägglöf Barn- och ungdomspsykiatri Klinisk vetenskap Umeå universitet

Förbättrad hanteringen av prov och svar från EQUALIS

Statistisk styrka Dimensioneringsberäkningar

Praktiskt kvalitetstänk på Labbet ur Bedömmarperspektivet. Per-Olof Forsberg, MD PhD

Handledarsida. Två remisser till arbetsprov

Viktig produktsäkerhetsinformation

Styrelsens för ackreditering och teknisk kontroll författningssamling

Statistik 1 för biologer, logopeder och psykologer

Kriterier och riktlinjer för evidensbaserad bedömning av mätinstrument

Kvalitativa undersökningar. uppskattning och kontroll av. osäkerhet inom Laboratoriemedicin

Högre kvalité och ökad patientsäkerhet på

Analytisk statistik. Tony Pansell, optiker Universitetslektor

Harmonisering av missbruksanalyser i urin

Celiaki- analyser och tolkning. EQUALIS användarmöte 2016 Kerstin Elvin

Immunhematologisk metodik, några aspekter Equalis provutskick. Jan-Olof Hildén 25 oktober 2017

Chlamydophila pneumoniaeantikroppar

Praktiskt kvalitetstänk på Labbet ur Bedömmarperspektivet. Per-Olof Forsberg, MD PhD Agenda

DNA-LCT C>T, Taqman alleldiskriminering, Malmö

Bestämning av en saltsyralösnings koncentration genom titrimetrisk analys

Equalis kvalitetssäkringsprogram 2018

Bestämning av en saltsyralösnings koncentration genom titrimetrisk analys

Året som gått. PK-INR D-dimer. Tomas Lindahl

Endokrinmöte Stockholm

Djup ventrombos patientnära diagnostik inom primärvården

1 (6) Årsrapport Projektet bygger. Resultat Den. drygt grund av så. och en med. för att redovisas.

Ackrediteringens omfattning

Harmonisering av Fosfatidyletanol (PEth) Expertgruppen Läkemedel/Toxikologi

EQUALIS kvalitetsmål

I PRIMÄRVÅRDENS BRUS Vad ska vi göra? Vad ska vi hitta? Vad är sjukdom? Om tester och andra hjälpmedel i den kliniska vardagen.

Arbetsdokument Nationella riktlinjer för rörelseorganens sjukdomar

Bild 1. Bild 2 Sammanfattning Statistik I. Bild 3 Hypotesprövning. Medicinsk statistik II

Ylva Hedeland Niclas Rollborn Anders Larsson. Analys av HbA1c metodjämförelse mellan några sjukhuslabb i Sverige

B-HbA1c på Roche Cobas, Helsingborg, Ängelholm, Kristianstad (NPU Kod 27300)

PTH. Göran Brattsand, Martin Carlsson,

Verifiering av analys av Summa nitrit- nitratkväve (NOX) med AutoAnalyzer 3. Ingrid Nygren

ANA utskick Olof Hultgren Ulla Larsson Örebro

Revision nationella kvalitetsmål glukos. Elisabet Eriksson Boija

Analys av D-dimer på patient med misstänkt HAMA

Familjär hyperkolesterolemi med NGS-analys

Utvärdering av faktorkänslighet vid byte till nytt APTT-reagens

ANSÖKAN OM ACKREDITERING SOM KONTROLLORGAN INOM OMRÅDET REGLERAD MÄTTEKNIK

Utvärdering av BD MAX enteric parasite panel på ett kliniskt laboratorie

Nationell Narkotikaharmonisering. Therese Hansson Expertgruppen Läkemedel och toxikologi Användarmöte mars 2018

Jämförelse av BDMax, Simplexa, direktodling och in-house PCR screening för MRSA detektion

INTRODUKTION Intern kontroll

Equalis kvalitetssäkringsprogram 2018

Analys av U-Graviditetstest med Instalert hcg

På gång inom Equalis. Anna Norling, Emilia Svala. tisdagen den 18 september 2018

Medicinsk statistik III Läkarprogrammet, Termin 5 VT 2016

FilmArray - helautomatiserad multiplex likvordiagnostik

ISO 17025:2018 Vad innebär det. Fredrik Arrhén

Årsrapport Egenmätarprojektet. ett samarbete mellan Svensk förening för sjuksköterskor i diabetesvård (SFSD) och Equalis

Ackrediteringens omfattning

Bilaga till Nationella rekommendationer för patientnära analyser

SOPA62 - Kunskapsproduktion i socialt arbete

Salivkortisol på Cobas E. Niclas Rollborn, laboratorieingenjör Yasir Al-saffar, laboratorieingenjör Mats Stridsberg, överläkare

Seroprevalens av borrelia i Kalmar län. Marcus Johansson Klinisk mikrobiologi Länssjukhuset Kalmar

Fosfatidyletanol (B-PEth) och andra markörer för överkonsumtion av alkohol. En jämförelse. (Bo Bjerre, docent, distriktsläkare)

Mätosäkerhet och jämförelse av. resultat mellan metoder, utrustning. och enheter inom Bild- och. Funktionsmedicin

I neutrofila celler så utgör calprotectin - 5 % av totala proteininnehållet - 60 % av proteininnehållet i cytoplasman

Sykehuset Namsos Postboks 453 Sentrum NO-7800 NAMSOS P-CKMB ( µg/l )

Sykehuset Namsos Postboks 453 Sentrum NO-7800 NAMSOS P-CKMB ( µg/l )

Lab-perspektiv på Lupusträsket. Maria Berndtsson, Karolinska Universitetslaboratoriet

Två innebörder av begreppet statistik. Grundläggande tankegångar i statistik. Vad är ett stickprov? Stickprov och urval

Transkript:

Validering och Verifiering: Vad är det och hur bör det utföras? Kerstin Elvin EQUALIS användarmöte 18 april 2013

Vad är det????? Validering Engelskans validate göra giltigt, bekräfta. Validering fastställer att man mäter det man har för avsikt att mäta Tillverkarens utvärdering av reagens / kit Verifiering Latinets verificare eller verus sant Verifiering bekräftar att metoden uppför sig på specificerat sätt Laboratoriet undersöker alltså om valideringen stämmer

Validering In Europe it is the statutory responsibility of the manufacturer to determine, describe and verify the performance of the measuring system (EU IVD Directive 98/79 {2})

Validering/Verifiering SWEDAC DOC 01:55 från 2011 Kravreferenser Standarder ISO/IEC 17025; 5.4.1, 2, 4 och 5 ISO 15189; 5.5.1 och 2

Validering/Verifiering Metoden ska motsvara kliniska verksamheternas krav Kvalmanualen Vilka är ansvariga Riktlinjer och rutiner Rapport alt. checklista m bilagor Arkiveras med primärdata Leverantörens validering ska finnas tillgängligt Protokoll skall vara godkända och signerade innan metoden tas i bruk

Validering Tillverkaren validerar Kit-bundna metoder och metoder utvecklade för speciellt instrument ex ImmunoCap allergi Tillverkaren/Laboratoriet Metod (vedertagen) som anpassas till instrument ex CCP, ELISA-robot Laboratoriet In-house metod utifrån publicerad vetenskaplig lit. Lab validerar/verifierar (väletablerad metod) ex. ELISA gliadin In-house metod Egenutvecklad Laboratoriet validerar ex. ELISA Anti-TNFa

Verifiering Precision Repeterbarhet (inomserie) Mellanliggande precision (total precision) Mätosäkerhet uppskattas Täcka rel mätområde minst 2 nivåer! Stabilitet Riktighet IRP EK Tre-lab Referensintervall Cut-off Friska blodgivare Diagnostisk sensitivitet och specificitet bör verifieras (prediktivt värde) Jämförelsemetod Dataöverföring

Clinical and Laboratory Standards Institute (EP15och EP5) (förut NCCLS) Precision Repeterbarhet (Inomserie) 3 replikat x 5 =15 (helst 5 x 5 =25! Khatami et al) Total precision (CV%) Minst 20 dagars analyser 2 aliquot för varje konc och 2 analyser/dag Prover sätts i olika ordning Minst 2 nivåer! Minst 30 dagar om endast 1 analys/dag

Measurement verification in the clinical laboratory: Zahra Khatami 1, Robert Hill2, Catherine Sturgeon3, Edward Kearney4, Peter Breadon5 Anders Kallner6 Repeterbarhet Minst två poolade patientprov Ingen störande hemolys, lipidemi eller annat enl leverantör Förvarande enl leverantör (helst kylförvarat) Utförande 5 replikat x 5 dagar =25 Analysis of variance (ANOVA).

Clinical and Laboratory Standards Institute (EP15och EP5) (förut NCCLS) Riktighet (Bias) Jämförelsemetod (EP15) Minst 20 prov inom det kliniskt intressanta mätområdet 20-200 vanligt (E Theodorsson 2012) Referensmaterial CRM=IRP EK Preparation fr tillverkaren Preparation tredje part Två koncentrationer Duplikat x 3-5

Diff Test - Reference Measurement verification in the clinical laboratory: Zahra Khatami 1, Robert Hill2, Catherine Sturgeon3, Edward Kearney4, Peter Breadon5 Anders Kallner6 Difference graph 2 1 Jämförelsematerial >20 patientprov inom relevant mätområde jämförs 0-1 -2-3 0 20 40 60 80-4 Mean of Test and Reference Diff +/- 1,96 s Mean bias Partition bias Regr

Riktighet referensmaterial Duplikat x 3-5 omgångar Medelvärde och Standarddeviation Estimera bias från förväntat värde Evaluera signifikans av skillnader med Student s t-test

Klinisk betydelse Med Sjukdom Utan Sjukdom Positivt test Sant positiva Falskt positiva Negativt test Falskt negativa Sant negativa PPV = Sant pos/tot pos NPV = Sant neg /Tot neg Sensitivitet Sant pos/ Tot sjukdom Specificitet Sant neg/ Tot Ej sjukdom

Exempel: Anti BP-180-ak (IgG) och BP-230-ak (IgG) ELISA verifiering Orsak till validering/verifiering Införande av ny metod för bestämning av antikroppar mot BP 180 och BP 230 med ELISA. Ansvar BMA: Anna-Britta Johansson Tekniskt ansvar: Ulf Sundin och Anders Wannberg Medicinskt ansvar: Kerstin Elvin

Validering/verifieringskrav Tillverkarens data Euroimmun tillhandahåller kommersiella ELISA-baserade kit för bestämning av antikroppar mot BP 180 och BP 230. Analyserna är validerade av Euroimmun 20 RU/ml bedöms positiva. I sin validering rapporterar Euroimmun BP 180 Sensitivitet: 90% Specificitet: 98%. BP 230 Sensitivitet: 57% Specificitet: 97% Verifieringsplan 1. Cut off nivå och specificitet för anti-bp 180 respektive anti-bp 230 skall verifieras genom analys av 60 friska blodgivare av båda könen i åldern 40-70 år. Krav: Cut-off skall överstiga 95:e percentilen för respektive analys vilket ger en specificitet på >95%. 2. Den kvalitativa överensstämmelsen mellan IFL BM och de nya ELISA-metoderna skall undersökas genom analys av prov positiva med IFL; 21 st prov positiva för IFL BM. Krav: Överenstämmelsen d.v.s. relativa sensitiviteten skall vara > 50% för respektive analys. 3. Patienter med annan blåsdermatos (pemfigus), positiva för anti-desmoglein 1 eller 3, skall vara negativa för anti-bp180 och 230. Krav: specificitet >95 4. Inom och mellanserievariation ska bedömas genom analys av låg och hög IK 5 i 6replikat vid 5 tillfällen

Utförande Resultat Andel negativa blodgivare för båda analyserna var 59/60 = 98% (specificitet 98%). En cut-off på 20 RU/mL motsvarade 98:e percentilen för BP180 och 99:e percentilen för BP 230. Relativ sensitivitet jämfört med IFL BM var 71% för BP 180 och 81% för BP 230 Samtliga patienter med annan blåsdermatos (pemfigus, n=8) var negativa för både BP 180 och BP 230 (specificitet 100%) Uppföljning 1. Inom- och mellanserievariation 2. Mätosäkerhet 3. Riktighet Ackreditering av metoden planeras då vi fått tillräcklig erfarenhet och kan bedöma variation, mätosäkerheten och riktighet.

Konklusioner I vår verifiering har Euroimmuns kit för analys av antikroppar mot BP 180 och BP 230 en hög specificitet (>95%) för bullös pemfigoid, och relativ sensitivitet ca 70-80% vid analys av BM positiva sera (IFL). BP 180 visade lägre relativ sensitivitet än tillverkarens sensitivitetsdata och BP230 högre än tillverkarens validering. Detta kan bero på att provurvalet skedde på basen av positiva IFL resultat. Verifieringresultaten betraktas som tillfredställande. Tillverkarens cut-off på 20 RU/mL kan användas. Analyserna implementerade i rutindrift fr.om. 100219

Inom- och mellanserievariation Totalt sträva efter 25 mätningar 5 replikat 5 analystillfällen

Riktighet IRP CDC, WHO, NIBSC ex ANA specificiteter Avsaknad tidigare krav verifiering av IK 2 ackr lab Jämförelsemetod EK EQUALIS Nequas Instand Tre-labjämförelse ex ECP, allergen, Anti-C1q

Variationskoefficienten: CV% Mätosäkerhet CV%= standardavvikelse x 100 medelvärde Uttrycker standardavvikelsen som procent av medelvärdet dvs hur många procent i genomsnitt avviker observationerna från medelvärdet. Över längre tid, olika BMA, temperaturer och batcher Helst minst ett år!

Ackrediteringens omfång

Tack!!!