Concept: Deze pagina is nog niet beoordeeld door een statisticus. Gebruik haar als startpunt en leg belangrijke keuzes voor aan een statisticus.

Cohen's kappa

Meet de overeenstemming tussen twee beoordelaars of methoden die categorieën toekennen aan dezelfde patiënten, voorbij wat toeval zou geven.

Klinisch voorbeeld

Twee radiologen beoordelen onafhankelijk van elkaar dezelfde thoraxfoto's als normaal, afwijkend of onzeker.

Wanneer te gebruiken

Twee beoordelaars of methoden kennen categorieën toe aan dezelfde patiënten.
U wilt overeenstemming gecorrigeerd voor toeval.
De categorieën zijn geordend (gebruik gewogen kappa) of ongeordend (gebruik ongewogen kappa).

Aannames om te controleren

Dezelfde items door beide beoordelaars beoordeeld

Elke patiënt of foto wordt door beide beoordelaars beoordeeld, onafhankelijk van elkaar.

Wat te rapporteren

Kappa met 95%-BI
De kruistabel van beide beoordelaars
Het waargenomen percentage overeenstemming

Veelgemaakte fouten

Percentage overeenstemming is niet genoeg

Beoordelaars stemmen deels bij toeval overeen. Rapporteer kappa, niet alleen het percentage overeenstemming.

In uw software

# R
library(irr)
kappa2(d[, c("rater_1", "rater_2")])
# Geordende categorieën: gewogen kappa
# kappa2(d[, c("rater_1", "rater_2")], weight = "squared")

SPSS

CROSSTABS
  /TABLES=rater_1 BY rater_2
  /STATISTICS=KAPPA
  /CELLS=COUNT.

Bronnen

Een betrouwbaarheidsinterval voor kappa

De functie kappa2() geeft geen betrouwbaarheidsinterval. Een bootstrap-betrouwbaarheidsinterval is een mogelijkheid: herbemonster de patiënten (de paren beoordelingen), bereken kappa telkens opnieuw en neem de middelste 95%.