Validitetsstudien - 2011 Stockholm 11/3 2013 Kerstin Petersson
Syftet med studien Att undersöka intern validitet i Mödrahälsovårdsregistret Att undersöka eventuella systematiska fel i inmatning Att undersöka täckningsgrad för de ingående variablerna.
Bakgrund, registrering och volymer 1999 Mödrahälsovårdsregistret 2010 Byte av dataplattform till UCR Manuell inmatning vid 2 tillfällen (vid inskrivning inom MHV och efter avslutad graviditet) Ca 100 vårdgivare Ca 570 Barnmorskemott./MVC Ca 2000 enskilda användare 2011-111 770 födda barn 2011-81 % täckningsgrad i MHV-registret
Arbetsgrupp validitetsstudien Ingrid Mogren, professor i obstetrik & gynekologi, Umeå universitet (huvudansvarig f. studien) Ingrid Haglund, samordningsbarnmorska, Östersund Marie Lindkvist, PhD, statistiker, Umeå universitet Carin Nilses, PhD, Mhöl, Sundsvall Margareta Persson, PhD, Bm/lektor, Dalarnas högskola Kerstin Petersson, samordningsbarnmorska, Stockholm Yvonne Skogsdal, samordningsbarnmorska, Örebro
Metod Powerberäkning utfördes och stickprovsstorlek 900 journaler bedömdes adekvat 9 kvinnokliniker selekterades (VC tillstånd inhämtades) 100 konsekutiva patienter på respektive kvinnoklinik med förlossningstidpunkt från och med 2011-04-01 Registrering av journaluppgifter i upprättad Excelfil Registrering av journaldata utfördes av vidtalad person (sekreterare, sjuksköt, bm, lokalt IT-ansvarig, inhyrd personal) Totalt registrerades journaldata från 879 patienter 27 variabler (numeriska eller kategoriska)
. Metod Journaluppgifter överfördes till UCR i krypterad datafil UCR kompletterade journaldata med registerdata Journaluppgifter användes som gold standard Analyser av numeriska och kategoriska variabler i SPSS Analyser av täckningsgrad och överensstämmelse av journaldata och registerdata: Deskription av journaldata respektive registerdata (täckningsgrad) Korrelationsanalyser (Pearson s korrelationskoefficient, Cohens kappa)
Deltagarnas bakgrundskarakteristika Kvinnoklinik Antal % Ålder (år) Längd (cm) Vikt inskrivn (kg) BMI (kg/m2) Halmstad 96 10,9 29,9 165,9 67,7 24,6 Jönköping 100 11,4 30,6 167,1 69,5 25,0 KS, Solna 96 10,9 31,9 166,2 68,7 24,9 SU, Göteborg 91 10,4 31,1 165,4 65,0 23,8 Sundsvall 100 11,4 30,1 166,7 70,8 25,5 SöS, 98 11,1 31,6 167,2 67,2 24,0 Stockholm Umeå 100 11,4 30,0 166,2 68,2 24,7 Örebro 99 11,3 29,8 165,5 67,1 24,5 Östersund 99 11,3 30,4 166,0 66,3 23,9 Total 879 100 30,7 166,2 67,9 24,6 MHV-reg 2011 89 313 30,77 166,22 68,41 24,74
Variabel a Journaluppgift (J) Registeruppgift (R) Uppgifter både J och R i Identiska uppgifter J och R Korrelation b Antal tidigare förlossningar 877 (99,8) 868 (98,7) 866 (98,5) 840 (97,0) 0,974 (P) Audit genomförd a 802 (91,2) 860 (97,8) 788 (89,6) 691 (87,7) 0,480 (C) Audit genomförd (ja) a 650 777 634 Audit antal poäng 643 (98,9) 771 (99,2) 621 600 (96.6) 0,989 (P) Kvinnans längd 872 (99,2) 863 (98,2) 860 (97,8) 834 (97,0) 0,982 (P) Kvinnans vikt v. inskrivning 862 (98,1) 856 (97,4) 847 (96,4) 798 (94,2) 0,990 (P) Rökning vid inskrivning a 876 (99,7) 872 (99,2) 869 (98,9) 844 (97,1) 0,747 (C) Snusning vid inskrivning a 878 (99,9) 872 (99,2) 871 (99,1) 600 (68,9) 0,032 (C) Fött levande barn a 878 (99,9) 879 (100) 878 (99,9) 874 (99,5) 0,598 (C) Dateringsultraljud a 862 (98,1) 792 (90,1) 779 (88,6) 755 (96,9) 0,128 (C) Datum beräknad förlossning 871 (99,1) 875 (99,5) 868 (98,7) 696 (80,2) 0,799 (C) a Kategoriska variabler med svarsalternativen ja eller nej b P = Pearson s korrelationskoefficient (numerisk) b C = Cohen s kappa (ordinal)
Variabel a Journaluppgift (J) Registeruppgift (R) Uppgifter i både J och R Identiska uppgifter J och R Korrelation b KUB a d 780 (88,7) 792 (90,1) 700 (79,6) 655 (95,0) 0,888 (C) Andra trimester serumscreening 800 (91,0) 791 (90,0) 718 (81,7) 669 (93,2) 0,005 (C) a Fostervattenprov a 875 (99,5) 792 (90,1) 788 (89,6) 772 (98,0) 0,754 (C) Moderkaksprov a 875 (99,5) 791 (90,0) 787 (89,5) 778 (98,9) 0,176 (C) Antal barnmorskebesök 877 (99,8) 869 (98,9) 867 (98,6) 627 (71,3) 0,916 (P) 794 (91,2) c Rökning vid 32 grav.veckor a 858 (97,6) 877 (99,8) 856 (97,4) 849 (99,2) 0,864 (C) Snusning vid 32 grav.veckor a 832 (94,7) 877 (99,8) 830 (94,4) 826 (99,5) 0,712 (C) Kvinnans sist noterade vikt 777 (88,4) 844 (96,0) 760 (86,5) 706 (92,9) 0,989 (P) Glukosbelastning a 869 (98,9) 878 (99,9) 868 (98,7) 842 (97,0) 0,854 (C) OGTT utförd (ja) a 100 (11,4) 104 (11,8) 88 OGTT plasmaglukosvärde 48 (5,5) 97 (11,0) 46 (5,2) 34 (73,9) 0,902 (P) Datum förlossning 878 (99,8) 879 (100) 871 (99,1) 523 (60,0) 0,592 (C) Förlossningssätt 877 (99,8) 877 (99,8) 875 (99,5) 852 (97,4) 0,946 (C) Kejsarsnitt (akut/planerad) 115 (13,1) 128 (14,6) 110 (12,5) 102 (92,7) 0,841 (C) Börd 879 (100) 877 (99,8) 877 (99,8) 875 (99,8) 0,908 (C) Födelsevikt 870 (99,0) 876 (99,6) 868 (98,7) 813 (93,7) 0,989 (P) Kön 878 (99,9) 875 (99,5) 874 (99,4) 862 (98,6) 0,973 (C) a Kategoriska variabler med svarsalternativen ja eller nej, b P = Pearson s korrelationskoefficient (numerisk) b C = Cohen s kappa (ordinal) c Antal identiska träffar vid minus 1 till och med plus 1 besök d KUB = kombinerat ultraljud med biokemisk screening
Sammanfattning resultat Variablernas datakvalité (intern validitet) höll överlag en tillfredsställande och hög nivå avseende täckning (i relation till journaluppgifter) och korrekthet Några få variabler uppvisade bristande täckningsgrad och tveksam kvalité
Användarenkät 2012 Enkät skickades via mail till samtliga barnmorskor inom svensk Mödrahälsovård, januari 2012 (n 1864) Bakgrundskarakteristika: ålder, år i yrket Ingående variabler Programvara Användning av reg.data i verksamhetsuppföljning och kvalitetsutveckling Fritextfrågor, synpunkter på ev. förbättringsmöjligheter etc. Lickertskala (O = instämmer inte alls, 5= instämmer helt)
Resultat användarenkät Svarsfrekvens 54% (n=1003) En majoritet av Bm positiva till programvaran för registret, ser nyttan av register och uppfattar ingående variabler som relevanta Manuell registrering tidskrävande och stressande. Önskemål om direktöverföring av data från journal till register
Vad ledde validitetsstudien och användarenkäten till? Förändring i inmatningsfunktion En variabel borttagen Ett par frågor (variabler) omformulerade Förtydligande hjälptext Utökad landskoordinatorfunktion Utbildningsturné
Tack för att ni lyssnade!