Il paradosso dei falsi positivi


Il paradosso dei falsi positivi è un fenomeno statistico dove un test altamente accurato produce più risultati errati che corretti quando la condizione cercata è molto rara nella popolazione.
Questo accade a causa della fallacia del tasso di base (base rate fallacy) per cui tendiamo a concentrarci sulla precisione del test ignorando quanto sia raro l'evento in generale.

Immaginiamo di testare una malattia rarissima che colpisce solo 1 persona su 1.000 (tasso di base dello 0,1%) in una città di 10.000 abitanti: 10 malati e 9.990 sani. Supponiamo che il Test abbia un'accuratezza del 99%, ovvero che sbaglia l'1% delle volte.
Se testiamo tutti i 10.000 cittadini:

  1. Sui 10 malati: Il test ne individua quasi certamente tutti (o 10 su 10).
  2. Sui 9.990 sani: Il test sbaglia l'1%. Quindi, produrrà circa 100 falsi positivi (1% di 9.990).
Il paradosso: Se risulti positivo, la probabilità di essere davvero malato è meno del 10% (10 malati reali su 110 positivi totali), nonostante il test sia "preciso al 99%".

Dunque

Il paradosso si risolve matematicamente applicando il Teorema di Bayes, che permette di aggiornare la probabilità di un evento man mano che si aggiungono nuove informazioni.
Dai dati

dobbiamo trovare la probabilità a posteriori \(p(M|P)\), ovvero la probabilità di essere malati dato che il test è positivo.
Dalla formula di Bayes $$p(M|P) = \frac{p(P|M) \cdot p(M)}{p(P)}$$ dove \(p(P)= p(P|M) \cdot p(M)+ p(P|S) \cdot p(S)\), probabilità totale di avere un test positivo, con: da cui $$p(P) = 0,00099 + 0,00999 = \mathbf{0,01098}$$ e quindi il risultato finale $$p(M|P) = \frac{0,00099}{0,01098} \approx 0,09016 \approx \mathbf{9\%}.$$
Questo accade perché i falsi positivi, generati dalla massa enorme di sani, "sommergono" i veri positivi, generati dalla piccolissima cerchia di malati.
Per questo motivo, in medicina, dopo un primo test positivo su una malattia rara si procede sempre con un secondo test di conferma basato su una tecnologia diversa.

Possiamo dare una visualizzazione bayesiana del paradosso dei falsi positivi considerando una popolazione di 1000 individui rappresentati da quadratini sul Canvas, colorati in base a:

Puoi osservare che:
%
%
%


Riferimenti sito/bibliografici