Validitetsstudien Stockholm 11/ Kerstin Petersson

Transkript

1 Validitetsstudien Stockholm 11/ Kerstin Petersson

2 Syftet med studien Att undersöka intern validitet i Mödrahälsovårdsregistret Att undersöka eventuella systematiska fel i inmatning Att undersöka täckningsgrad för de ingående variablerna.

3 Bakgrund, registrering och volymer 1999 Mödrahälsovårdsregistret 2010 Byte av dataplattform till UCR Manuell inmatning vid 2 tillfällen (vid inskrivning inom MHV och efter avslutad graviditet) Ca 100 vårdgivare Ca 570 Barnmorskemott./MVC Ca 2000 enskilda användare födda barn % täckningsgrad i MHV-registret

4 Arbetsgrupp validitetsstudien Ingrid Mogren, professor i obstetrik & gynekologi, Umeå universitet (huvudansvarig f. studien) Ingrid Haglund, samordningsbarnmorska, Östersund Marie Lindkvist, PhD, statistiker, Umeå universitet Carin Nilses, PhD, Mhöl, Sundsvall Margareta Persson, PhD, Bm/lektor, Dalarnas högskola Kerstin Petersson, samordningsbarnmorska, Stockholm Yvonne Skogsdal, samordningsbarnmorska, Örebro

5 Metod Powerberäkning utfördes och stickprovsstorlek 900 journaler bedömdes adekvat 9 kvinnokliniker selekterades (VC tillstånd inhämtades) 100 konsekutiva patienter på respektive kvinnoklinik med förlossningstidpunkt från och med Registrering av journaluppgifter i upprättad Excelfil Registrering av journaldata utfördes av vidtalad person (sekreterare, sjuksköt, bm, lokalt IT-ansvarig, inhyrd personal) Totalt registrerades journaldata från 879 patienter 27 variabler (numeriska eller kategoriska)

6 . Metod Journaluppgifter överfördes till UCR i krypterad datafil UCR kompletterade journaldata med registerdata Journaluppgifter användes som gold standard Analyser av numeriska och kategoriska variabler i SPSS Analyser av täckningsgrad och överensstämmelse av journaldata och registerdata: Deskription av journaldata respektive registerdata (täckningsgrad) Korrelationsanalyser (Pearson s korrelationskoefficient, Cohens kappa)

7 Deltagarnas bakgrundskarakteristika Kvinnoklinik Antal % Ålder (år) Längd (cm) Vikt inskrivn (kg) BMI (kg/m2) Halmstad 96 10,9 29,9 165,9 67,7 24,6 Jönköping ,4 30,6 167,1 69,5 25,0 KS, Solna 96 10,9 31,9 166,2 68,7 24,9 SU, Göteborg 91 10,4 31,1 165,4 65,0 23,8 Sundsvall ,4 30,1 166,7 70,8 25,5 SöS, 98 11,1 31,6 167,2 67,2 24,0 Stockholm Umeå ,4 30,0 166,2 68,2 24,7 Örebro 99 11,3 29,8 165,5 67,1 24,5 Östersund 99 11,3 30,4 166,0 66,3 23,9 Total ,7 166,2 67,9 24,6 MHV-reg ,77 166,22 68,41 24,74

8 Variabel a Journaluppgift (J) Registeruppgift (R) Uppgifter både J och R i Identiska uppgifter J och R Korrelation b Antal tidigare förlossningar 877 (99,8) 868 (98,7) 866 (98,5) 840 (97,0) 0,974 (P) Audit genomförd a 802 (91,2) 860 (97,8) 788 (89,6) 691 (87,7) 0,480 (C) Audit genomförd (ja) a Audit antal poäng 643 (98,9) 771 (99,2) (96.6) 0,989 (P) Kvinnans längd 872 (99,2) 863 (98,2) 860 (97,8) 834 (97,0) 0,982 (P) Kvinnans vikt v. inskrivning 862 (98,1) 856 (97,4) 847 (96,4) 798 (94,2) 0,990 (P) Rökning vid inskrivning a 876 (99,7) 872 (99,2) 869 (98,9) 844 (97,1) 0,747 (C) Snusning vid inskrivning a 878 (99,9) 872 (99,2) 871 (99,1) 600 (68,9) 0,032 (C) Fött levande barn a 878 (99,9) 879 (100) 878 (99,9) 874 (99,5) 0,598 (C) Dateringsultraljud a 862 (98,1) 792 (90,1) 779 (88,6) 755 (96,9) 0,128 (C) Datum beräknad förlossning 871 (99,1) 875 (99,5) 868 (98,7) 696 (80,2) 0,799 (C) a Kategoriska variabler med svarsalternativen ja eller nej b P = Pearson s korrelationskoefficient (numerisk) b C = Cohen s kappa (ordinal)

9 Variabel a Journaluppgift (J) Registeruppgift (R) Uppgifter i både J och R Identiska uppgifter J och R Korrelation b KUB a d 780 (88,7) 792 (90,1) 700 (79,6) 655 (95,0) 0,888 (C) Andra trimester serumscreening 800 (91,0) 791 (90,0) 718 (81,7) 669 (93,2) 0,005 (C) a Fostervattenprov a 875 (99,5) 792 (90,1) 788 (89,6) 772 (98,0) 0,754 (C) Moderkaksprov a 875 (99,5) 791 (90,0) 787 (89,5) 778 (98,9) 0,176 (C) Antal barnmorskebesök 877 (99,8) 869 (98,9) 867 (98,6) 627 (71,3) 0,916 (P) 794 (91,2) c Rökning vid 32 grav.veckor a 858 (97,6) 877 (99,8) 856 (97,4) 849 (99,2) 0,864 (C) Snusning vid 32 grav.veckor a 832 (94,7) 877 (99,8) 830 (94,4) 826 (99,5) 0,712 (C) Kvinnans sist noterade vikt 777 (88,4) 844 (96,0) 760 (86,5) 706 (92,9) 0,989 (P) Glukosbelastning a 869 (98,9) 878 (99,9) 868 (98,7) 842 (97,0) 0,854 (C) OGTT utförd (ja) a 100 (11,4) 104 (11,8) 88 OGTT plasmaglukosvärde 48 (5,5) 97 (11,0) 46 (5,2) 34 (73,9) 0,902 (P) Datum förlossning 878 (99,8) 879 (100) 871 (99,1) 523 (60,0) 0,592 (C) Förlossningssätt 877 (99,8) 877 (99,8) 875 (99,5) 852 (97,4) 0,946 (C) Kejsarsnitt (akut/planerad) 115 (13,1) 128 (14,6) 110 (12,5) 102 (92,7) 0,841 (C) Börd 879 (100) 877 (99,8) 877 (99,8) 875 (99,8) 0,908 (C) Födelsevikt 870 (99,0) 876 (99,6) 868 (98,7) 813 (93,7) 0,989 (P) Kön 878 (99,9) 875 (99,5) 874 (99,4) 862 (98,6) 0,973 (C) a Kategoriska variabler med svarsalternativen ja eller nej, b P = Pearson s korrelationskoefficient (numerisk) b C = Cohen s kappa (ordinal) c Antal identiska träffar vid minus 1 till och med plus 1 besök d KUB = kombinerat ultraljud med biokemisk screening

10 Sammanfattning resultat Variablernas datakvalité (intern validitet) höll överlag en tillfredsställande och hög nivå avseende täckning (i relation till journaluppgifter) och korrekthet Några få variabler uppvisade bristande täckningsgrad och tveksam kvalité

11 Användarenkät 2012 Enkät skickades via mail till samtliga barnmorskor inom svensk Mödrahälsovård, januari 2012 (n 1864) Bakgrundskarakteristika: ålder, år i yrket Ingående variabler Programvara Användning av reg.data i verksamhetsuppföljning och kvalitetsutveckling Fritextfrågor, synpunkter på ev. förbättringsmöjligheter etc. Lickertskala (O = instämmer inte alls, 5= instämmer helt)

12 Resultat användarenkät Svarsfrekvens 54% (n=1003) En majoritet av Bm positiva till programvaran för registret, ser nyttan av register och uppfattar ingående variabler som relevanta Manuell registrering tidskrävande och stressande. Önskemål om direktöverföring av data från journal till register

13 Vad ledde validitetsstudien och användarenkäten till? Förändring i inmatningsfunktion En variabel borttagen Ett par frågor (variabler) omformulerade Förtydligande hjälptext Utökad landskoordinatorfunktion Utbildningsturné

14 Tack för att ni lyssnade!