Ocena dokładności diagnozy

Ocena dokładno ci diagnozy
Rozkłady
statystyczne
parametru
diagnostycznego
zdrowi
TN
chorzy
TP
FP
FN
2003 © P. Strumiłło
granica
decyzyjna
Parametr
diagnostyczny
1
Ocena dokładno ci diagnozy
Diagnoza grupy pacjentów na chorych i zdrowych
Tablica pomyłek
Prawdziwy stan zdrowotny
pacjenci chorzy
Wynik
diagnozy
(klasyf.)
pacjenci zdrowi
pacjenci
chorzy
TP (ang. true-positive)
FP (ang. false-positive)
pacjenci
zdrowi
FN (ang. false-negative)
TN (ang. true-negative)
2
Miary dokładno ci diagnozy
Dokładno
TP
TN
+
(ang. accuracy) ACC =
TP + TN + FP + FN
Okre la liczb prawidłowo zdiagnozowanych
pacjentów (TP+TN) odniesion do liczby wszystkich
diagnozowanych pacjentów
Czuło
(ang. sensitivity)
TP
SE =
TP + FN
okre laj ca jak liczb pacjentów (TP), spo ród
pacjentów chorych (TP+FN) prawidłowo
zdiagnozowano jako chorych.
3
Miary dokładno ci diagnozy
Specyficzno
(ang. specifity):
TN
SP =
FP + TN
okre laj ca jaka liczba pacjentów (TN) spo ród
pacjentów zdrowych (FP+TN) została prawidłowo
zdiagnozowana jako pacjenci zdrowi
Fałszywy alarm
(ang. false alarm):
FP
FA = 1 − SP =
FP + TN
okre laj ca liczb fałszywie zdiagnozowanych
pacjentów zdrowych (liczb tzw. fałszywych alarmów)
odniesion do liczby pacjentów zdrowych (FP+TN)
4
Miary dokładno ci diagnozy
Dodatnia warto prognostyczna
(ang. positive predictivity value):
TP
PPV =
TP + FP
okre la jaka cz
(TP) spo ród pacjentów
zdiagnozowanych jako chorzy (TP+FP) rzeczywi cie
przechodzi chorob .
Ujemna warto prognostyczna
(ang. negative predictivity value):
TN
NPV =
FN + TN
okre la jaka cz
(TN) spo ród pacjentów
zdiagnozowanych jako zdrowi (FN+TN) jest faktycznie
zdrowa.
5
Miary dokładno ci diagnozy przykład:
Przykład: W hipotetycznej izbie przyj przyj to 100
pacjentów z podejrzeniem ataku serca. Lekarz
dy uruj cy, pracuj cy pod presj czasu spo ród tej
liczby pacjentów 30 zdiagnozował jako osoby z
zawałem serca, a reszt jako osoby z innymi, mniej
gro nymi dolegliwo ciami. Wszyscy pacjenci podlegali
dłu szej obserwacji medycznej w czasie której
jednoznacznie stwierdzono, e spo ród wszystkich
pacjentów tylko 25 miało zawał. Stwierdzono ponadto,
e spo ród 70 pacjentów, których odesłano do domu 6
przechodziło w istocie zawał serca.
6
Miary dokładno ci diagnozy przykład:
Tablica pomyłek wypełniona dla zadania przykładowego
Prawdziwy stan zdrowotny
atak serca
Wynik
diagnozy
inna
dolegliwo
atak serca
TP
FP
TP+FP
inna
dolegliwo
FN
TN
FN+TN
TP+FN
7
Miary dokładno ci diagnozy przykład:
Tablica pomyłek wypełniona dla zadania przykładowego
Prawdziwy stan zdrowotny
atak serca
Wynik
diagnozy
inna
dolegliwo
atak serca
TP=19
FP=11
TP+FP=30
inna
dolegliwo
FN=6
TN=64
FN+TN=70
TP+FN=25
8
Miary dokładno ci diagnozy przykład:
Dokładno :
Wyznacz miary dokładno ci
dla zadania przykładowego
Czuło :
Specyficzno :
Fałszywy alarm:
Dodatnia warto
Ujemna warto
prognostyczna:
prognostyczna:
9
Receiver Operator Characteristic
(ROC curve)
1
czuło
coraz lepszy test
0
fałszywy alarm
1
10