On the role of arbitration of discordant double readings of screening mammography: experience from two Italian programmes

Abstract

Purpose

The authors sought to assess the role of arbitration by a third reader of discordant double readings to reduce the rate of recalls to diagnostic assessment.

Materials and methods

A consecutive series of 7,660 double readings of screening examinations were considered. Discordant recalls were arbitrated by an expert reader (negative/positive). Diagnostic assessment was performed irrespective of arbitration results, and its outcome was used as reference standard for the study purpose. Assuming that negative arbitration would deny recall, its impact was assessed in terms of reduced recall rate and reduced cancer detection rate. Cost analysis of introducing arbitration was performed according to these results.

Results

Recalls at double reading were 528 (6.8%), of which 230 (43.5%) were concordant and 298 (56.5%) were discordant. The latter underwent arbitration, which was negative in 216 (72.4%) and positive in 82 (27.6%) cases, respectively. Overall, 49 cancers were detected (6.39‰ screened, 9.2% recalled): 43 cancers were detected among concordant (5.6‰ screened, 18.6% concordant) and six among discordant recalls (0.7‰ screened, 2.0% discordant). Six cancers were observed among arbitrated cases: five (6%) in positive and one (4.6‰) in negative arbitrations. Negative arbitration would have spared 216 assessment procedures (2.8% absolute, 40.9% relative reduction of recall rate) while missing one cancer case (0.13‰ absolute, 2.0% relative reduction of cancer detection rate). Arbitration cost was 74 euros, whereas 216 spared assessment procedures would have cost 14,558.4–23,346 eruos.

Conclusions

Arbitration is a cost-effective procedure that could be employed as a first measure to counterbalance excess recall rate observed in a double-reading scenario.

Riassunto

Obiettivo

Scopo di questo lavoro è verificare il ruolo dell’arbitrato delle doppie letture discordanti da parte di un terzo lettore nel ridurre il tasso di richiamo ad approfondimento diagnostico.

Materiali e metodi

Abbiamo considerato una serie consecutive di 7660 soggetti sottoposti a screening con doppia lettura. Le doppie letture discordanti sono state arbitrate da un terzo lettore esperto. L’approfondimento diagnostico è stato eseguito indipendentemente dall’arbitrato e il risultato dell’approfondimento ha costituito lo standard di riferimento ai fini dello studio. Ipotizzando che un arbitrato negativo neghi la necessità di approfondimento, l’impatto dell’arbitrato è stato valutato in termini di ridotto tasso di richiamo e di ridotto tasso diagnostico di carcinoma. È stata condotta una valutazione dei costi conseguente alla introduzione dell’arbitrato.

Risultati

I richiami alla doppia lettura sono stati 528 (6,8%) dei quali 230 (43,5%) concordanti e 298 (56,5%) discordanti. Questi ultimi sono stati sottoposti ad arbitrato, risultato rispettivamente negativo in 216 (72,4%) e positivo in 82 (27,6%). Complessivamente sono stati diagnosticati 49 carcinomi (6,39‰ tra soggetti esaminati, 9,2% tra soggetti richiamati): 43 carcinomi sono stati diagnosticati in richiami concordanti (5,6‰ tra soggetti esaminati, 18,6% tra richiami concordanti), 6 tra richiami discordanti (0,7‰ tra soggetti esaminati, 2,0% tra richiami discordanti). Sei carcinomi sono stati diagnosticati tra i casi arbitrati, 5 (6%) in arbitrati positivi e 1 (4,6‰) in arbitrati negativi. Un arbitrato negativo avrebbe risparmiato 216 procedure di approfondimento diagnostico (riduzione del tasso di richiamo: 2,8% assoluta, 40,9% relativa) e mancato la diagnosi di un carcinoma (riduzione del tasso diagnostico: 0,13‰ assoluta, 2,0% relativa). Il costo dell’arbitrato è stato pari a 74 euro mentre il costo di 216 procedure di approfondimento diagnostico risparmiato è pari a 14558,4-23346 euro.

Conclusioni

L’arbitrato è una procedura efficace e conveniente dal lato economico, che potrebbe essere impiegata correntemente quale prima misura di correzione ove si osservi un tasso di richiamo eccessivo, specie in scenari che impieghino la doppia lettura.