Hendimiento diagnóstico de TORAXIA (Alumbra.ai™) para la detección de opacidades en vidrio esmerilado en radiografías de tórax de pacientes con sospecha de infección por COVID-19 del Hospital Universitario Fundación Santa Fe de Bogotá
Cargando...
Archivos
Fecha
Autores
Título de la revista
Publicado en
Publicado por
URL de la fuente
Enlace a contenidos multimedia
ISSN de la revista
Título del volumen
Resumen
La enfermedad infecciosa COVID-19 causada por el virus SARS-CoV-2 puede presentarse en formas leves, moderadas o graves y tiene síntomas parecidos a los de la gripe. La prueba de referencia actual para el diagnóstico de la COVID-19 es la RT-PCR, pero es cara y requiere infraestructura. Las radiografías de tórax están más disponibles y podrían utilizarse para el cribado, pero la interpretación de las radiografías para diagnosticar COVID-19 es un reto debido a la superposición de hallazgos. Por lo tanto, se propone el uso de algoritmos de inteligencia artificial (IA) como alternativa práctica para identificar la afectación pulmonar por COVID-19 en las radiografías de tórax. El objetivo de este estudio es evaluar el rendimiento diagnóstico del software TORAXIA para identificar opacidades en vidrio deslustrado, un rasgo característico de la COVID-19, en radiografías de tórax de pacientes con sospecha de COVID-19 en un hospital específico. Este texto describe un estudio realizado entre enero de 2020 y marzo de 2022 para evaluar el desempeño de una herramienta de diagnóstico basada en aprendizaje profundo llamada TORAXIA en el diagnóstico de neumonía por COVID-19 en pacientes con síntomas respiratorios. En el estudio se seleccionaron pacientes que acudieron al Servicio de Urgencias de la Fundación Santa Fe de Bogotá y se utilizó un muestreo no probabilístico para alcanzar el tamaño muestral deseado. Para el diagnóstico final se utilizaron dos estándares de oro: la prueba RCP-TR para la detección de COVID-19 y la presencia de neumonía en la tomografía computarizada de tórax. Las radiografías fueron evaluadas de forma independiente por lectores sin la ayuda de TORAXIA. El estudio evaluó el rendimiento del área bajo la curva, utilizando medidas como la sensibilidad, la especificidad, el valor predictivo positivo, el valor predictivo negativo y la precisión diagnóstica. En 249 pacientes que acudieron a un Servicio de Urgencias de Bogotá con síntomas respiratorios y sospecha de COVID-19. La mayoría de estos pacientes dieron positivo para la proteína C reactiva (PCR) y eran varones. Los pacientes con PCR positiva tendían a ser más jóvenes y habían experimentado síntomas durante menos días en comparación con los pacientes con PCR negativa. El estudio también comparó el rendimiento diagnóstico de la herramienta TORAXIA, que analiza las radiografías de tórax, con las tomografías computarizadas. El análisis mostró que la herramienta TORAXIA tenía un valor diagnóstico limitado, con un área bajo la curva (ABC) de 0,52. Cuando se estratificó el intervalo de tiempo entre la radiografía y la TC, la herramienta obtuvo mejores resultados en el intervalo de 6-12 horas. Además, el estudio comparó la herramienta TORAXIA con la PCR como referencia y no encontró diferencias significativas en el rendimiento. También se tuvo en cuenta la experiencia del lector, lo que reveló que la sensibilidad era mayor en los lectores menos experimentados. En general, la precisión diagnóstica de todos los lectores fue de 0,55, sin variaciones significativas en función de la experiencia. TORAXIA (Alumbra.ai TM), una herramienta basada en redes neurales para detectar opacidades en vidrio esmerilado en pacientes con COVID-19, mostró limitado rendimiento. En pacientes con síntomas superiores a 5 días, tuvo una sensibilidad del 67% y especificidad del 37%. El mejor desempeño se observó en un intervalo de 6 a 12 horas entre la radiografía y la tomografía. TORAXIA no superó a los radiólogos institucionales, quienes alcanzaron hasta un 86% de sensibilidad. Estos hallazgos sugieren que TORAXIA podría necesitar mayor desarrollo para ser tan efectiva como la evaluación radiológica en la detección de opacidades en vidrio esmerilado en radiografías de tórax de pacientes con sospecha de COVID-19.
Descripción
Abstract
This text discusses the infectious disease COVID-19 caused by the SARS-CoV-2 virus. It can present in mild, moderate, or severe forms and has flu-like symptoms. The current gold standard for COVID-19 diagnosis is RT-PCR testing, but it is expensive and requires infrastructure. Chest x-ray imaging is more widely available and could be used for screening, but the interpretation of radiographs to diagnose COVID-19 is challenging due to overlapping findings. Therefore, the use of artificial intelligence (AI) algorithms is proposed as a practical alternative to identify COVID-19 lung involvement on chest radiographs. The objective of this study is to evaluate the diagnostic performance of the TORAXIA software for identifying ground-glass opacities, a characteristic feature of COVID-19, on chest radiographs of suspected COVID-19 patients at a specific hospital.
Study conducted from January 2020 to March 2022 to evaluate the performance of a deep learning-based diagnostic tool called SDAC in diagnosing COVID-19 pneumonia in patients with respiratory symptoms. The study selected patients who visited the Emergency Department of the Fundación Santa Fe de Bogotá and used non-probability sampling to reach the desired sample size. Two gold standards were used for the final diagnosis: the RCP-TR test for COVID-19 detection and the presence of pneumonia on chest CT scans. Radiographs were independently assessed by readers without the assistance of TORAXIA. The study evaluated the performance of ROC curve using measures such as area under the curve, sensitivity, specificity, positive predictive value, negative predictive value, and diagnostic accuracy. A study was conducted on 249 patients who visited an Emergency Department in Bogotá with respiratory symptoms and suspected COVID-19. Most of these patients tested positive for C-reactive protein (CRP) and were male. The CRP-positive patients tended to be younger and had experienced symptoms for fewer days compared to the CRP-negative patients. The study also compared the diagnostic yield of the TORAXIA tool, which analyzes chest radiographs, with CT scans. The analysis showed that the TORAXIA tool had limited diagnostic value, with an area under the curve (ABC) of 0.52. When the time interval between X-ray and CT scan was stratified, the tool performed better in the 6–12-hour interval. Additionally, the study compared the TORAXIA tool with CRP as a reference and found no significant difference in performance. Reader experience was also considered, revealing that sensitivity was higher in less experienced readers. Overall, the diagnostic accuracy for all readers was 0.55, with no significant variation based on experience. TORAXIA (Alumbra.ai TM), a neural network-based tool to detect ground-glass opacities in patients with COVID-19, showed limited performance. In patients with symptoms longer than 5 days, it had a sensitivity of 67% and specificity of 37%. The best performance was observed at an interval of 6 to 12 hours between X-ray and CT scan. TORAXIA did not outperform institutional radiologists, who achieved up to 86% sensitivity. These findings suggest that TORAXIA may need further development to be as effective as radiological assessment in detecting ground-glass opacities on chest radiographs of patients with suspected COVID-19.
Palabras clave
Inteligencia artificial, Rayos x, Covid-19, Diagnóstico por imagen, Radiografía torácica, Curva ROC
