Differentiell psykologi

Transkript

1 Differentiell psykologi Tisdag 24 september 2013 Confirmatory Factor Analysis CFA

2 Dagens agenda Repetition: Sensitivitet och specificitet Övningsuppgift från idag Confirmatory Factor Analysis Utveckling av den klassiskta test-teorins prövning av intern struktur Från Eye-balling till hypotesprövning Generalizability theory Kritik mot CTT/TST och lösningen som GT erbjuder Grundpelarna i teorin utifrån ett exempel Item Response Theory Kritik mot CTT/TST och lösningar som IRT erbjuder Grundpelarna i teorin utifrån exempel Repetition och frågestund Inmailade frågor Petter Gustavsson 23 september

3 Övning: Diagnostisk studie av MDI Diagnos enligt referens-test (DSM IV) Ja (1) Nej (0) Diagnos Ja (1) enligt MDI Nej (0) Petter Gustavsson 23 september

4 Resultat Sant positivt värde= Falskt positivt värde= Falskt negativt värde= Sant negativt värde= Sensitivitet= Specificitet= Positivt prediktivt värde= % Negativt prediktivt värde = LR+= => Odds Det går sjuka på _ falskt alarm LR-= => Odds Det går friska på _missat fall Petter Gustavsson 23 september

6 Furr: kapitel 12 Confirmatory factor analysis Utveckling av den klassiskta test-teorins prövning av dimensionalitet. Tar fram evidens på intern struktur Används för att utvärdera mätmodeller Mätmodell = hur item relaterar till bakomliggande faktorer Prövar hypotesen att den hypotiserade mätmodellen passar data Signifikansprövning av en specificerad hypotes (istället för en relativt subjektiv sammanställning av den exploratoriska faktoranalysens resultat vad gäller antal faktorer, rotation, faktorladdningar, etc) Petter Gustavsson 23 september

7 Petter Gustavsson 23 september

8 Den klassiska teorins mätmodell Item/indikatorer reflekterar ett bakomliggande fenomen / en latent variabel Den samvariation vi ser i responsen på dessa item förklaras av att de indikerar variation i en och samma bakomliggande variabel (dimensionalitet) Den variation som inte är relaterad till den bakomliggande variabeln är unik för varje item Med den konfirmatoriska faktoranalysen kan vi göra en formell prövning av denna mätmodell. Petter Gustavsson 23 september

9 Arbetsgång 1: Definiera mätmodellen (specification of the measurement model) Hur många item/indikatorer har instrumentet Hur många faktorer antas ligga bakom svaren på dessa indikatorer Vilka item/indikatorer är konstruerade för att reflektera svar i vilken faktor Vad förväntar vi oss för typ av samband mellan faktorerna (eg är faktorerna okorrelerade eller ej) Petter Gustavsson 23 september

10 Arbetsgång (Exempel HADS) 1: Definiera mätmodellen (specification of the measurement model) Hur många item/indikatorer har instrumentet 14 Hur många faktorer antas ligga bakom svaren på dessa indikatorer 2 Vilka item/indikatorer är konstruerade för att reflektera svar i vilken faktor 7 indikatorer för ångest (1,3,5,7 osv) och 7 för depr (2,4,6,8 osv) Vad förväntar vi oss för typ av samband mellan faktorerna (eg är faktorerna okorrelerade eller ej) Ångest och depression förväntas vara positivt korrelerade Petter Gustavsson 23 september

11 Mätmodell för HADS Illustration Petter Gustavsson 23 september

12 Mätmodell för HADS 1: Definiera mätmodellen (specification of the measurement model) Hur många item/indikatorer har instrumentet 14 Hur många faktorer antas ligga bakom svaren på dessa indikatorer 2 Vilka item/indikatorer är konstruerade för att reflektera svar i vilken faktor 7 indikatorer för ångest (1,3,5,7osv) och 7 för depr (2,4,6,8 osv) Vad förväntar vi oss för typ av samband mellan faktorerna (eg är faktorerna okorrelerade eller ej) Ångest och depression förväntas vara positivt korrelerade Petter Gustavsson 23 september

13 Den klassiska teorins mätmodell Item/indikatorer reflekterar ett bakomliggande fenomen / en latent variabel Den samvariation vi ser i responsen på dessa item förklaras av att de indikerar variation i en och samma bakomliggande variabel (dimensionalitet) Den variation som inte är relaterad till den bakomliggande variabeln är unik för varje item Med den konfirmatoriska faktoranalysen kan vi göra en formell prövning av denna mätmodell. Petter Gustavsson 23 september

16 Arbetsgång 1: Definiera mätmodellen (specification of the measurement model) Hur många item/indikatorer har instrumentet Hur många faktorer antas ligga bakom svaren på dessa indikatorer Vilka item/indikatorer är konstruerade för att reflektera svar i vilken faktor Vad förväntar vi oss för typ av samband mellan faktorerna (eg är faktorerna okorrelerade eller ej) Alternativa mätmodeller kan också definieras och prövas statistiskt Petter Gustavsson 23 september

19 Arbetsgång 1: Definiera mätmodellen (specification of the measurement model) Hur många item/indikatorer har instrumentet Hur många faktorer antas ligga bakom svaren på dessa indikatorer Vilka item/indikatorer är konstruerade för att reflektera svar i vilken faktor Vad förväntar vi oss för typ av samband mellan faktorerna (eg är faktorerna okorrelerade eller ej) Alternativa mätmodeller kan också definieras och prövas statistiskt Petter Gustavsson 23 september

20 Arbetsgång 2: Estimera mätmodellen (computations) Utifrån kovarianser mellan alla item och varians för varje item (phase 1), och den definierade mätmodellen Estimera faktorladdningar och korrelationer mellan faktorer enligt mätmodellen (phase 2) utifrån att skillnader mellan de observerade kovarianserna/varianserna och de av modellen reproducerade kovarianserna/varianserna är så små som möjligt (phase 3) Beräkna hur bra den definierade mätmodellen passar data (phase 4) Tolka mätmodellens passform och estimerade laddningar/korrelationer. Petter Gustavsson 23 september

21 Arbetsgång (Exempel HADS) 2: Estimera mätmodellen (computations) Utifrån kovarianser mellan alla item och varians för varje item (phase 1), och den definierade mätmodellen Estimera faktorladdningar och korrelationer mellan faktorer enligt mätmodellen (phase 2) utifrån att skillnader mellan de observerade kovarianserna/varianserna och de av modellen reproducerade kovarianserna/varianserna är så små som möjligt (phase 3) Beräkna hur bra den definierade mätmodellen passar data (phase 4) Tolka mätmodellens passform och estimerade laddningar/korrelationer. Petter Gustavsson 23 september

23 Estimera faktorladdningar och korrelationer mellan faktorer enligt mätmodellen Petter Gustavsson 23 september

24 Estimera faktorladdningar och korrelationer mellan faktorer enligt mätmodellen Petter Gustavsson 23 september

26 Beräkna hur bra den definierade mätmodellen passar data Petter Gustavsson 23 september

27 Beräkna hur bra den definierade mätmodellen passar data Petter Gustavsson 23 september

29 Tolka mätmodellens passform och estimerade laddningar / korrelationer Petter Gustavsson 23 september

33 Andra mätmodellsjämförelser Petter Gustavsson 23 september

35 CFA och validitet Metoden utgör ett viktigt verktyg för att ta fram validietsevidens för intern struktur. Andra användningsområden inom validering: Associations with other variables MTMM Validitetskoefficienter (korrelation mellan test och kritierievariabel) Consequences of testing Test bias By the way, vid estimering av en CFA erhålls också information som kan användas för att estimera reliabilitet Petter Gustavsson 23 september

36 Några kommentar på bokens exempel Figur 12.4 b och 12.5 Petter Gustavsson 23 september

41 Mail: mobil/sms: www/ www/ www/