spectrumnews.org Traduction de "Concerns raised over autism prediction paper" - 11 août 2023 - Calli McMurray
Agrandissement : Illustration 1
Une étude sur l'apprentissage automatique qui prétend prédire les diagnostics d'autisme contient une méthodologie floue et un langage vague, selon les chercheurs qui ont exprimé leurs inquiétudes au sujet de l'article.
Le document décrit un algorithme qui peut distinguer les cerveaux des personnes autistes et non autistes avec une précision de près de 90 %, sur la base de données IRM provenant de l'échange de données d'imagerie cérébrale sur l'autisme. Cependant, il n'indique pas quelles variables ont été utilisées pour faire cette prédiction, explique Allison Jack, professeur adjoint de psychologie à l'université George Mason de Fairfax, en Virginie.
"Ils n'ont pas fourni de description que quiconque aurait pu utiliser pour reproduire leur modèle. Ce qu'ils faisaient n'était pas du tout clair", explique Allison Jack. "Qu'est-ce que ce modèle utilise pour faire la distinction entre le groupe des autistes et celui des non-autistes ? La précision des prédictions me semble également très élevée".
Dorothy Bishop, professeure émérite de neuropsychologie du développement à l'université d'Oxford, a fait part de ses préoccupations concernant l'article au début du mois dans un commentaire sur PubPeer, un site web où les scientifiques commentent les articles de recherche.
Mme Bishop a signalé un langage "plutôt vague" qui apparaît tout au long de l'article, notamment des phrases telles que "Un réseau sans échelle est appelé une connexion neuronale entre les neurones, car il change avec l'amélioration" et "l'autisme est l'un des troubles hétérogènes et psychologiques de la croissance".
D'autres termes utilisés dans l'article sont offensants et dépassés, selon Jack, comme le fait de décrire l'autisme comme une "maladie" et de faire référence au syndrome d'Asperger et au trouble envahissant du développement, qui ne sont plus des diagnostics à part entière.
Les chercheurs utilisent également les termes "validation" et "test" de manière interchangeable, alors qu'il s'agit de deux étapes distinctes dans la recherche sur l'apprentissage automatique, explique Martin Styner, professeur de psychiatrie et d'informatique à l'université de Caroline du Nord à Chapel Hill. "C'est assez élémentaire et n'importe quelle revue l'aurait signalé", ajoute-t-il. "Je doute donc que cet article ait fait l'objet d'un examen approfondi par les pairs."
En outre, les chercheurs n'ont pas inclus leur code dans l'article, ce qui est une pratique courante pour la recherche sur l'apprentissage automatique, explique M. Styner. "Si vous ne voyez pas votre code, je n'ai pas confiance en vos résultats."
Spectrum a contacté à deux reprises par courrier électronique le chercheur principal de l'étude, Muhammad Shuaib Qureshi, professeur adjoint d'informatique à l'université d'Asie centrale de Bichkek, au Kirghizstan, pour obtenir des commentaires, mais n'a pas eu de réponse.
Un autre chercheur de l'étude, Junaid Asghar, a vu deux autres articles critiqués par des chercheurs sur PubPeer : l'un pour l'utilisation d'expressions torturées telles que "bosom disease" au lieu de "breast cancer", et l'autre pour la duplication potentielle d'images. Asghar n'a pas non plus répondu à la demande de commentaire de Spectrum.
L'étude a été publiée le 10 juillet dans le Journal of Healthcare Engineering, un titre de Hindawi qui a été fermé le 2 mai, en même temps que trois autres titres, parce qu'ils étaient envahis par des usines à papier - des organisations qui vendent des documents de recherche frauduleux - selon une annonce de Hindawi.
Les articles soumis avant la fermeture peuvent encore être publiés si les auteurs le souhaitent, mais la revue est fermée aux nouvelles soumissions, selon un porte-parole de Wiley, la société mère de Hindawi. La revue faisait partie des 19 titres d'Hindawi retirés de l'index Web of Science de Clarivate en mars.
L'étude sur la prédiction de l'autisme a été publiée dans un numéro spécial intitulé "Advances in Feature Transformation based Medical Decision Support Systems for Health Informatics" (Avancées dans les systèmes d'aide à la décision médicale basés sur la transformation des caractéristiques pour l'informatique de santé). À ce jour, 23 des 90 articles de ce numéro ont été rétractés.
Selon un porte-parole, Wiley enquête actuellement sur l'article conformément aux directives du comité d'éthique de l'édition.
"Nous répondons aux préoccupations soulevées par ce numéro spécial et continuons à publier des rétractations, le cas échéant", a déclaré un porte-parole de Wiley dans un courriel adressé à Spectrum.
Wiley a rétracté plus de 500 articles et prévoit d'en rétracter 1 200 autres en raison de l'infiltration de l'usine à papier, qui a été largement orchestrée par des éditeurs invités "frauduleux" de numéros spéciaux, selon un billet de blog Scholarly Kitchen écrit par Jay Flynn, vice-président exécutif et directeur général de la recherche chez Wiley.
Les numéros spéciaux sont souvent la cible d'usines à papier, car des rédacteurs invités malveillants peuvent accepter en masse de faux articles, selon un rapport du Committee on Publishing Ethics (Comité de déontologie de l'édition). Guillaume Cabanac, professeur d'informatique à l'université de Toulouse (France), explique que certains éditeurs créent un grand nombre de numéros spéciaux afin de percevoir davantage de frais de traitement de la part des auteurs. "Cela ressemble à un système de Ponzi."
Le principal rédacteur invité du numéro spécial, Liaqat Ali, professeur adjoint d'ingénierie électrique à l'université des sciences et technologies de Bannu, au Pakistan, n'a pas répondu aux deux demandes de commentaires de Spectrum.
Malgré les inquiétudes de Bishop, "je ne pense pas qu'il s'agisse d'un problème trop grave pour les chercheurs sur l'autisme - je pense que les articles ne seraient pas repris par des universitaires sérieux", a déclaré Bishop à Spectrum dans un courriel. "Ils sont beaucoup trop vagues et dépassés, et ils sont publiés dans des revues qui ne sont pas très lues."
Jack est d'accord. Le Journal of Healthcare Engineering "n'est certainement pas l'un de ceux que je suis régulièrement pour mes recherches percutantes sur l'autisme", dit-elle.