Des tags facteurs de confusion pour certaines images du membre supérieur analysées par CNN

Selon un article publié dans l’American Journal of Roentgenology (AJR), les réseaux de neurones convolutifs (CNN) formés pour identifier les anomalies sur les radiographies des membres supérieurs semblent perturbés par les annotations (tags) attachés aux images.

Trois entrées testées pour distinguer les images pathologiques

« Nous recommandons que de tels facteurs de confusion d'image potentiels soient collectés lorsque cela est possible lors de la conservation de l'ensemble de données, et que la couverture de ces tags soit envisagée lors de la formation du CNN », a écrit l'auteur correspondant, le Dr Paul H. Yi du Medical Intelligent Imaging Center de l'Université du Maryland à Baltimore (USA).

L'étude rétrospective du Dr Yi et de son équipe a évalué 40 561 radiographies musculo-squelettiques des membres supérieurs à partir de l'ensemble de données MURA de Stanford qui ont été utilisées pour former trois classificateurs DenseNet-121 CNN. Trois entrées ont été utilisées pour distinguer les radiographies normales des radiographies anormales : les images originales avec à la fois l'anatomie et les tags ; les images avec des tags de latéralité et/ou de technologue recouvertes par la suite d'une boîte noire ; les images où l'anatomie avait été supprimée et où il ne restait que des tags.

Des tags qui ne décrivent que partiellement la nature pathologique d'une image

Pour les radiographies originales, l'AUC était de 0,844, mettant fréquemment l'accent sur la latéralité et/ou les tags des technologues pour la prise de décision. La couverture de ces tags a augmenté l'AUC à 0,857 (p = 0,02) et a redirigé l'attention du réseau de neurones des tags vers les os. En utilisant les tags seuls, l'AUC était de 0,638, indiquant que les tags radiographiques sont associés à des examens anormaux.

« Bien que nous puissions en déduire que les tags sont associés à des catégories d'images normales et anormales, nous ne pouvons pas déterminer l'aspect spécifique de ces tags, ce qui a conduit à ce qu'ils soient des facteurs de confusion, » ont conclu les auteurs de cet article de l'AJR.