Debrief Reports to Expedite the Impact of Qualitative Research: Do They Accurately Capture Data from In-depth Interviews?

Abstract

“Debrief reports” (DRs) use structured forms to capture key concepts from in-depth interviews and focus group discussions. They are completed by interviewers and rapidly disseminated to key team members to facilitate identification of potential problems with study procedures, recruitment, or participant engagement and to inform critical adjustments, which can be especially pertinent in intervention studies. Their reliability and validity have yet to be formally evaluated. To assess the accuracy of DRs in capturing key content, raters analyzed a random sub-sample of 20 pairs of de-identified transcripts and their linked DRs from the VOICE-D trial. Analyses generally supported the accuracy of DRs; however, pertinent information from transcripts was occasionally missed or recorded with discrepancies or lack of detail. Longer transcripts and DR sections describing complex topic areas were more likely to involve discrepancies. Recommendations are offered for further research and optimizing the use of DRs.

Resumen

Los debrief reports (DR) son recursos emergentes, pero no examinados, que utilizan cuestionarios estructurados para capturar temas importantes, derivada de entrevistas en profundidad y discusiones de grupos focales. Se completan por los entrevistadores y son diseminados rápidamente a los miembros de investigación, para facilitar la identificación de problemas potenciales en cuanto al procedimiento de estudios, el proceso de reclutamiento, o el nivel de participación de los participantes, para que los investigadores puedan informarles de cambios critícales. Esto es útil para desarrollar estudios de intervenciones. Su fiabilidad y validez aún no han sido evaluadas formalmente. Para evaluar la precisión de los DRs en la captura de contenido clave, los evaluadores analizaron una sub-muestra de 20 pares de transcripciones sin identificadas y sus DR vinculados del ensayo VOICE-D. Los análisis generalmente apoyaron la precisión de los DRs, sin embargo, a veces la información pertinente de las transcripciones fue omitida, o escrita con errores, o escrita sin detalles. Las transcripciones más largas, y secciones de los DRs que describen áreas temáticas complejas, eran más probables de involucrar discrepancias. Se ofrecen recomendaciones para más investigación y para optimizar la implementación de los DRs.